Analyzing the CoNLL–X Shared Task from a sentence accuracy perspective

Por favor, use este identificador para citar o enlazar este ítem: http://hdl.handle.net/10045/22027
Información del item - Informació de l'item - Item information
Título: Analyzing the CoNLL–X Shared Task from a sentence accuracy perspective
Título alternativo: Analizando la CoNLL–X Shared Task con medidas basadas en precisión por frase
Autor/es: Ballesteros Martínez, Miguel | Herrera de la Cruz, Jesús | Francisco Gilmartín, Virginia | Gervás Gómez-Navarro, Pablo
Palabras clave: Análisis sintáctico de dependencias | CoNLL Shared Tasks | Precisión por frase | Dependency parsing | Sentence accuracy
Área/s de conocimiento: Lenguajes y Sistemas Informáticos
Fecha de publicación: mar-2012
Editor: Sociedad Española para el Procesamiento del Lenguaje Natural
Cita bibliográfica: BALLESTEROS, Miguel, et al. “Analyzing the CoNLL–X Shared Task from a sentence accuracy perspective”. Procesamiento del Lenguaje Natural. N. 48 (2012). ISSN 1135-5948, pp. 29-34
Resumen: Hoy en día, dada la relevancia de las CoNLL shared tasks para Análisis de Dependencias, las medidas más usadas son las que allí se computaron. Esas medidas, están basadas en calcular globalmente la precisión palabra por palabra (o token por token) para todo el conjunto de frases. En nuestra opinión el usuario final de un analizador de dependencias podría esperar una precisión local basada en evaluar la precisión frase a frase. En estos casos, unas medidas diferentes pueden añadir algo de información que podría ser relevante acerca de que analizador devuelve un mejor resultado. Es por ello que presentamos el estudio de este artículo con la intención de enriquecer la descripción del comportamiento de los analizadores de dependencias. | Nowadays, because of the relevance of the CoNLL shared tasks on Dependency Parsing, the most used evaluation measures are the ones computed in them. These measures, which are token–based, are computed globally for a whole big set of texts considering token by token. But a final user of a dependency parser would expect a high and stable accuracy for every parsed piece of text (usually one sentence). In this cases sentence–based measures add some information that could be relevant. This is why we developed the present study, which is addressed to get a richer description of the performance of dependency parsers.
Patrocinador/es: This research is funded by the Spanish Ministry of Education and Science (TIN2009-14659-C03-01 Project), Universidad Complutense de Madrid and Banco Santander Central Hispano (GR58/08 Research Group Grant).
URI: http://hdl.handle.net/10045/22027
ISSN: 1135-5948
Idioma: eng
Tipo: info:eu-repo/semantics/article
Revisión científica: si
Aparece en las colecciones:Procesamiento del Lenguaje Natural - Nº 48 (2012)

Archivos en este ítem:
Archivos en este ítem:
Archivo Descripción TamañoFormato 
ThumbnailPLN_48_03.pdf733,96 kBAdobe PDFAbrir Vista previa


Todos los documentos en RUA están protegidos por derechos de autor. Algunos derechos reservados.