The most misunderstood graph in AI just got a major update
METR actualiza su gráfico de progreso de IA: los modelos siguen mejorando rápido, pero fallan en tareas que requieren juicio
El nuevo informe de METR confirma la mejora exponencial en tareas verificables, pero revela que la IA aún no iguala al humano en decisiones complejas.
La organización sin fines de lucro METR publicó una actualización de su famoso gráfico de horizonte temporal, que mide la capacidad de los modelos de inteligencia artificial para completar tareas. El informe confirma que la mejora en tareas «verificables» —aquellas donde se puede comprobar automáticamente si el resultado es correcto, como la programación o las matemáticas— sigue siendo exponencial: cada cuatro meses, la duración de las tareas que los modelos de frontera pueden resolver se duplica.
Sin embargo, el nuevo estudio incorpora tareas más abiertas y que requieren juicio, como diseñar evaluaciones para la propia IA o puntuar argumentos filosóficos. En estas áreas, los modelos avanzados, incluido Opus 5.5, aún no alcanzan el nivel de los expertos humanos. Según el reporte, ninguna de las evaluaciones diseñadas por la IA fue considerada útil por los empleados de METR, lo que sugiere que la automatización completa de la investigación y desarrollo sigue siendo un reto lejano.
Expertos como Sayash Kapoor de la Universidad de California en Berkeley señalan que, aunque es prometedor que se incluyan estas tareas difíciles de medir, aún falta mucho trabajo para entender cómo evolucionará la capacidad de juicio de la IA. Mientras tanto, el progreso en las tareas fáciles de verificar no muestra signos de desaceleración, lo que mantiene viva la discusión sobre el ritmo de desarrollo de la tecnología.
Qué significa para una pyme colombiana y cucuteña: No hay una acción técnica inmediata para su empresa, pero este informe le sirve para calibrar expectativas: la IA es excelente para automatizar procesos repetitivos y verificables (como generar código o analizar datos estructurados), pero aún no puede reemplazar a un humano en decisiones estratégicas, creativas o de alto juicio. Si está evaluando implementar agentes de IA, enfóquese en tareas con resultados medibles y mantenga supervisión humana en procesos complejos.
También lo cuentan: morningstar.com
#IA#METR#EstadosUnidos#SynergyaTech
Fuente: MIT Technology Review
Compartir
Si le sirvió, pásela. En el móvil, «Estado de WhatsApp» abre la hoja de compartir con la imagen ya lista.
Comentarios
Más de IA
Especialista desarrolla chatbot con IA para ayudar a agricultores a crear negocios de agroturismo
Su equipo de pruebas de IA podría estar encontrando el mismo ataque de inyección de instrucciones miles de veces
Estudio de Cambridge revela que un tercio de la cadena de suministro de la IA es invisible para los gobiernos
