Ex-empleado de alto rango de OpenAI afirma que la empresa detrás de ChatGPT prioriza los "productos brillantes" sobre la seguridad

Un 9️⃣ ex empleado de alto rango de OpenAI ha declarado que la empresa detrás de ChatGPT está priorizando los "productos brillantes" 9️⃣ sobre la seguridad, revelando que renunció después de que una desacuerdo sobre los objetivos clave alcanzara un "punto de ruptura".

Jan 9️⃣ Leike fue un destacado investigador de seguridad en OpenAI como codirector de la superalineación, garantizando que los sistemas de inteligencia 9️⃣ artificial potentes adhieran a los valores y objetivos humanos. Su intervención tiene lugar antes de una cumbre global de inteligencia 9️⃣ artificial en Seúl la próxima semana, donde políticos, expertos y ejecutivos de tecnología discutirán la supervisión de la tecnología.

Leike renunció 9️⃣ días después de que la empresa con sede en San Francisco lanzara su último modelo de IA, GPT-4o. Su partida 9️⃣ significa que dos figuras importantes de la seguridad de OpenAI han dejado este semana tras la renuncia de Ilya Sutskever, 9️⃣ codirector y cofundador de superalineación de OpenAI.

Leike detalló los motivos de su renuncia en un hilo de X publicado el 9️⃣ viernes, en el que escribió que la cultura de seguridad se había convertido en una prioridad menor.

"A lo largo de 9️⃣ los años, la cultura y los procesos de seguridad han pasado a un segundo plano frente a los productos llamativos", 9️⃣ escribió.

Consternación sobre la priorización de la seguridad en OpenAI

OpenAI fue fundada con el objetivo de garantizar que la inteligencia artificial 9️⃣ general, que describe como "sistemas de IA que son generalmente más inteligentes que los humanos", beneficie a toda la humanidad. 9️⃣ En sus publicaciones de X, Leike dijo que había estado en desacuerdo con los líderes de OpenAI sobre las prioridades 9️⃣ de la empresa durante algún tiempo, pero que el enfrentamiento había "llegado finalmente a un punto de ruptura".

Leike dijo que 9️⃣ OpenAI, que también ha desarrollado el generador de imágenes Dall-E y el generador de video Sora, debería estar invirtiendo más 9️⃣ recursos en problemas como la seguridad, el impacto social, la confidencialidad y la seguridad para su próxima generación de modelos.

"Estos 9️⃣ problemas son bastante difíciles de resolver, y estoy preocupado de que no estemos en un rumbo para llegar allí", escribió, 9️⃣ agregando que está resultando "cada vez más difícil" para su equipo realizar su investigación.

"Crear máquinas más inteligentes que los humanos 9️⃣ es una empresa inherentemente peligrosa. OpenAI está asumiendo una responsabilidad enorme en nombre de toda la humanidad", escribió Leike, agregando 9️⃣ que OpenAI "debe convertirse en una empresa de IA centrada en la seguridad".

Sam Altman, director ejecutivo de OpenAI, respondió al 9️⃣ hilo de Leike con una publicación en X en la que agradeció a su ex colega por sus contribuciones a 9️⃣ la cultura de seguridad de la empresa.

"Tiene razón, todavía tenemos mucho más por hacer; estamos comprometidos a hacerlo", escribió.

Sutskever, quien 9️⃣ también fue el jefe científico de OpenAI, escribió en su publicación de X anunciando su partida que confiaba en que 9️⃣ OpenAI "construirá AGI que sea segura y beneficiosa" bajo su actual liderazgo.

La advertencia de Leike se produjo cuando un panel 9️⃣ de expertos internacionales en IA publicó un informe inaugural sobre la seguridad de la IA, que