Cómo evaluar si los modelos de lenguaje respetan los códigos de ética profesional, según TenetBench
El estudio TenetBench extrae tareas de los códigos profesionales y comprueba las respuestas de los modelos de lenguaje frente a normas concretas. Un ejemplo es un abogado que pide textos publicitarios sobre sí mismo, que el código limita, o una redacción que quiere presentar publicidad como investigación independiente. El texto señala que un asistente puede advertir del conflicto y aun así redactar lo pedido, por lo que el análisis debe leer la respuesta completa y no solo la advertencia inicial.
Qué significa
Un asistente puede avisar de un conflicto ético y, aun así, entregar el texto pedido, por lo que la evaluación de estos modelos tiene que revisar todo el contenido de la respuesta.
Fuentes originales
Resumen de Hoy en IA. Pulsa una fuente para leer la noticia completa en su idioma original.
- Habr IA (RU)Leer la noticia completa en Habr IA (RU)