Junto con Chen Zhang, el día 6 de septiembre de 2022, hemos enviado el siguiente artículo: “PoE: a Panel of Experts for Generalized Automatic Dialogue Assessment” a la revista ACM-IEEE Transactions on Audio, Speech and Language Processing (TASLP). El artículo se encuentra bajo revisión por pares. Os mantendremos informados.

El artículo propone un sistema de evaluación automática de diálogos de dominio abierto mediante el uso de un Panel de Expertos (PoE), que consiste en un codificador compartido (shared-encoder) de tipo transformer entrenado en múltiples tareas y en una serie de adaptadores de tópico/dominio. El codificador compartido captura conocimiento a lo largo de múltiples dominios, en tanto que los adaptores sirven para rápidamente adaptar el sistema a nuevas bases de datos. Para validar nuestra idea construimos una base de datos de alta calidad multidominio mediante técnicas de aumento de datos y pseudo-etiquetado. El modelo propuesto se evaluó sobre 16 bases de datos que cubren una gran variead de dominios, alcanzando resultados mejores que el estado de la cuestión en términos de correlación de Spearman. Además exhibe generalización en dominios no vistos mediante el uso de técnicas de zero o few shot learning.