RéponseComment concevoir une évaluation multilingue des modèles sans hiérarchiser les langues ?
Il faut construire des tâches pertinentes avec les locuteurs, documenter les variantes et comparer les conditions d’usage. Une traduction littérale de tests anglophones ne constitue pas toujours une évaluation équivalente.
RéférenceJoshi et al., The State and Fate of Linguistic Diversity and Inclusion in the NLP World (2020)
MÉRISPHÈRE · LES CHEMINS DU SAVOIR