"Juegan con nuestras vidas", advierte un ingeniero de Anthropic y OpenAI al presentar su renuncia

Un ingeniero británico de Anthropic, que también trabajó en los últimos tres años para OpenAI -la creadora del popular ChatGPT- presentó su dimisión en las últimas horas porque dice que ambas compañías "no están actuando con responsabilidad" y están "jugando con nuestras vidas".

Jacob Coxon, ingeniero de software al que los medios identifican como uno de los desarrolladores de GPT-4o y GPT-4.5, aunque sin responsabilidades ejecutivas, aseguró en un hilo de su cuenta de X que las personas que están tras el desarrollo exponencial de la IA "creen que podrá matarnos a todos al final de esta década", porque "no hay otra actividad humana que suponga este nivel de amenaza".

Para el ingeniero, de 27 años, se está subestimando el poder de la tecnología, pero los proyectos de IA "serán pronto sistemas sobrehumanos que podrán jaquear cualquier cosa, revolucionar todos los ámbitos y ganar verdadero poder y recursos".

• Astra, el modelo 'superinteligente' de OpenAI y que superaría en capacidades a los seres humanos

El poder de la tecnología

En su opinión, hay una conciencia de esta realidad tanto en OpenAI como en Anthropic, pero ve una diferencia: los primeros "tal vez no han internalizado en profundidad los retos civilizacionales", mientras que los segundos los comprenden bien pero "están atrapados en la carrera por llegar primero", aun cuando en el caso más optimista se trate de llegar primero "para actuar con responsabilidad".

Coxon no ve otra salida que la coordinación entre los distintos proyectos de IA y de las empresas involucradas en ellos, pero siente que no se está produciendo y aboga entonces por "acciones costosas, como una prohibición temporal de mejorar las capacidades del modelo ('model capabilities'), y pide a los investigadores de la IA que reflexionen profundamente sobre la cuestión.

"¿Quieren potenciar un 'aprendizaje por refuerzo' (RL en la jerga técnica) superinteligente sin un entendimiento riguroso de su mente? -pregunta a sus colegas en la IA- ¿Van a bajar la cabeza porque 'total, ya está ocurriendo', o aprovechar este momento para abogar por condiciones diferentes?", concluye Coxon en un hilo que ha tenido ya una enorme repercusión mediática.

• La IA de OpenAI habría resuelto uno de los grandes enigmas de las matemáticas: el problema de Navier-Stokes

En esta línea, Evan Hubinger, investigador de Anthropic, replicó los comentarios a Coxon en X y matizó el discurso del ingeniero: "Jacob tiene razón aquí; realmente creemos con sinceridad que la IA podría matar a todos los humanos. Personalmente, pienso que es más del 10% dentro de la próxima década".

Pese a ello, Hubinger consideró que el riesgo de los modelos actuales es bajo, aunque lo preocupante es "la superinteligencia que surge del automejoramiento recursivo (...) que está ocurriendo más rápido de lo pensábamos".

• OpenAI reporta que agentes de inteligencia artificial hackearon por su cuenta una plataforma de programadores

Otras advertencias 

Coxon no ha sido el único investigador que se ha retirado del desarrollo de los modelos de IA en los últimos años tras advertir de los peligros de este desarrollo tecnológico.

Este es el caso de Geoffrey Hinton, ganador del Nobel de Física, que renunció en 2023 a su puesto en Google para poder criticar los riesgos de la IA sin las cortapisas corporativas.

También hay que mencionar la carta abierta que en 2024 exempleados de OpenAI mostraron su preocupación en una carta abierta donde destacaban su preocupación por el rápido desarrollo de la IA y la ausencia de leyes que protejan a los denunciantes.

• Inteligencia Artificial en los colegios de Ecuador: Profesores cambian los ensayos por debates en clase