Estimation de la qualit\'e d'un syst\`eme de reconnaissance de la parole pour une t\^ache de compr\'ehension (Quality estimation of a Speech Recognition System for a Spoken Language Understanding task)
Nous nous int{\'e}ressons {\`a} l{'}{\'e}valuation de la qualit{\'e} des syst{\`e}mes de reconnaissance de la parole {\'e}tant donn{\'e} une t{\^a}che de compr{\'e}hension. L{'}objectif de ce travail est de fournir un outil permettant la s{\'e}lection d{'}un syst{\`e}me de reconnaissance automatique de la parole le plus adapt{\'e} pour un syst{\`e}me de dialogue donn{\'e}. Nous comparons ici diff{\'e}rentes m{\'e}triques, notamment le WER, NE-WER et ATENE m{\'e}trique propos{\'e}e r{\'e}cemment pour l{'}{\'e}valuation des syst{\`e}mes de reconnaissance de la parole {\'e}tant donn{\'e} une t{\^a}che de reconnaissance d{'}entit{\'e}s nomm{\'e}es. Cette derni{\`e}re m{\'e}trique montrait une meilleure corr{\'e}lation avec les r{\'e}sultats de la t{\^a}che globale que toutes les autres m{\'e}triques test{\'e}es. Nos mesures indiquent une tr{\`e}s forte corr{\'e}lation avec la mesure ATENE et une moins forte avec le WER.
PDF Abstract
