Divergences entre annotations dans le projet Universal Dependencies et leur impact sur l'\'evaluation des performance d'\'etiquetage morpho-syntaxique (Evaluating Annotation Divergences in the UD Project)

Ce travail montre que la d{\'e}gradation des performances souvent observ{\'e}e lors de l{'}application d{'}un analyseur morpho-syntaxique {\`a} des donn{\'e}es hors domaine r{\'e}sulte souvent d{'}incoh{\'e}rences entre les annotations des ensembles de test et d{'}apprentissage. Nous montrons comment le principe de variation des annotations, introduit par Dickinson {\&} Meurers (2003) pour identifier automatiquement les erreurs d{'}annotation, peut {\^e}tre utilis{\'e} pour identifier ces incoh{\'e}rences et {\'e}valuer leur impact sur les performances des analyseurs morpho-syntaxiques.

PDF Abstract
No code implementations yet. Submit your code now

Tasks


Datasets


  Add Datasets introduced or used in this paper

Results from the Paper


  Submit results from this paper to get state-of-the-art GitHub badges and help the community compare results to other papers.

Methods


No methods listed for this paper. Add relevant methods here