Revista HUMANía

Anthropic ve cerca la automejora de la IA. Las garantías aún están por demostrar

TechCrunch

Leer en el medio original (se abre en una pestaña nueva)

Brazos robóticos ensamblan otros brazos mientras un supervisor duerme desenfocado en una silla con una carpeta sobre el regazo.Imagen creada con IA
Imagen creada con IA · Modelo: gpt-image-2.

La automejora de la IA entra en las previsiones de Anthropic: futuros modelos podrían situarla pronto ante una aceleración drástica de la investigación impulsada por IA. Lo recoge en la actualización de su documentación bursátil del 2 de noviembre. La precisión importa: la compañía no ha clasificado ninguno de sus modelos actuales por encima de ese umbral y sigue evaluando los datos.

Qué hay detrás de la automejora de la IA

La idea consiste en utilizar una generación de modelos para ayudar a construir la siguiente y acumular mejoras sucesivas. Anthropic explica que sus sistemas participan en el diseño, entrenamiento, pruebas y optimización de nuevos modelos.

Eso no equivale a demostrar que una IA pueda perfeccionarse indefinidamente, trabajar sin supervisión o decidir por sí misma qué debe construir. Confundir esas posibilidades con una capacidad ya acreditada convierte una previsión empresarial en un salto tecnológico por decreto.

Cuando la seguridad llega después

La advertencia más concreta del documento presentado ante la SEC es que las capacidades podrían avanzar más deprisa que las medidas para evaluarlas y protegerlas. Anthropic reconoce que ya ha detectado aceleraciones de su desarrollo después de producirse.

También afirma que no prevé poder utilizar Claude de forma segura para construir sucesivas generaciones de modelos completamente por su cuenta, sin supervisión o comprensión humana significativa, y estudia cambios en su política de seguridad.

El problema que plantea esa advertencia va más allá de cuánto mejora un modelo. Obliga a preguntar cuándo se detecta la mejora, cómo se mide y quién puede detener el proceso si los controles dejan de ser suficientes. Un cuadro de mandos que descubre la velocidad después de pasar la curva tiene cierto margen de perfeccionamiento.

Supervisar exige algo más que estar presente

Desde una perspectiva de control, mantener a una persona en el proceso solo resulta útil si dispone de información comprensible, tiempo para revisarla y autoridad para intervenir. Aprobar resultados que nadie puede evaluar a fondo sería una supervisión bastante decorativa.

Para valorar las garantías harían falta pruebas sobre su funcionamiento: criterios verificables, evaluaciones independientes y procedimientos claros ante resultados inesperados. Una declaración de intención permite conocer la postura de la empresa; comprobar su eficacia requiere algo más.

La mirada HUMANía

Conviene evitar tanto el apocalipsis por anticipado como el entusiasmo a crédito. La automejora de la IA merece atención, pero su proximidad debe juzgarse con evidencias.

El criterio que proponemos es sencillo: cuanto mayor sea la aceleración prometida, más exigente debe ser la demostración de control. Si la próxima generación ayuda a fabricar la siguiente, la seguridad también necesita avanzar entre generaciones. Preferiblemente antes de que llegue la nota de prensa.

Arriba