El equipo de investigación de inteligencia artificial de Meta, la empresa matriz de Facebook, está trabajando en el desarrollo de lo que denomina un evaluador autodidacta para grandes modelos lingüísticos (LLM, por sus siglas en inglés) que podría ayudar a las empresas a reducir sus requisitos de tiempo y recursos humanos mientras desarrollan LLM personalizados. A principios de este mes, el equipo de investigación de inteligencia artificial del gigante de las redes sociales, denominado Meta FAIR, publicó un artículo sobre la tecnología, que afirma que estos evaluadores podrían ayudar a un LLM a crear sus propios datos de entrenamiento (datos sintéticos) para fines de evaluación. Por lo general, los modelos que se utilizan como evaluadores, conocidos como LLM-as-a-Judge, se entrenan con grandes cantidades de datos anotados por humanos, lo que es un asunto costoso, y los datos se vuelven obsoletos a medida que el modelo mejora, explicaron los investigadores en el artículo.