Viernes 6 de noviembre de 2026 ·
Claude sube de 21 a 27,3 puntos en una prueba de inferencia de engranajes al recibir una colección de casos
Útil para
El autor creó una prueba de 34 puntos en la que Claude debe deducir la solución a partir de una foto de un engranaje desgastado. En la primera versión obtuvo 21 puntos; tras leer una colección de casos pasados con errores repetidos, la media subió a 27,3. Mejoró en preguntar cuando faltan datos y en no confundir la orientación de las capas, pero siguió fallando en extraer por sí solo las pistas clave de la imagen. Según el autor, el modelo no sabe qué medir ni detecta sus propias suposiciones, y al encontrar contradicciones las justifica en lugar de revisar el método de medición.
Qué significa
Muestra que dar a un modelo el conocimiento tácito de un oficio, en forma de casos y procedimientos, mejora sus resultados técnicos, aunque no basta para que razone como un experto. Para quien diseña asistentes de IA para tareas técnicas, la clave es documentar qué mirar y cómo medirlo.
Fuentes originales
Resumen de Hoy en IA. Pulsa una fuente para leer la noticia completa en su idioma original.
- 生成AIタグが付けられた新着記事 - QiitaLeer la noticia completa en 生成AIタグが付けられた新着記事 - Qiita
También ese día
Todas las noticias de IA del viernes 6 de noviembre de 2026 ->