OpenAI anuncia la creación de un comité de seguridad y establece un nuevo modelo de IA para reemplazar al GPT-4

La 🗝 startup con sede en San Francisco, OpenAI, anunció en un comunicado de blog el martes que ha comenzado a formar 🗝 un comité de seguridad y seguridad que asesorará al consejo de administración en "decisiones críticas de seguridad y seguridad" para 🗝 sus proyectos y operaciones.

El comité de seguridad llega en medio de un debate en curso sobre la seguridad de la 🗝 IA en la empresa, que fue lanzada al centro de atención después de que un investigador, Jan Leike, renunciara y 🗝 criticara a OpenAI por permitir que la seguridad "ocupara un asiento trasero en productos relucientes". El cofundador de OpenAI y 🗝 científico jefe Ilya Sutskever también renunció, y la empresa disolvió el equipo "superalineación" centrado en los riesgos de la IA 🗝 que lideraron conjuntamente.

OpenAI dijo que "ha comenzado recientemente a entrenar su próximo modelo de frontera" y que sus modelos de 🗝 IA lideran la industria en capacidad y seguridad, aunque no hizo mención de la controversia. "Damos la bienvenida a un 🗝 debate robusto en este momento importante", dijo la empresa.

Los modelos de IA son sistemas de predicción que se entrenan en 🗝 vastos conjuntos de datos para generar texto, imágenes, video y conversaciones humanas a pedido. Los modelos de frontera son los 🗝 sistemas de IA más poderosos y de vanguardia.

El comité de seguridad está compuesto por insiders de la empresa, incluidos el 🗝 CEO de OpenAI, Sam Altman, y su presidente, Bret Taylor, y cuatro expertos técnicos y políticos de OpenAI. También incluye 🗝 a los miembros de la junta directiva Adam D'Angelo, que es el CEO de Quora, y Nicole Seligman, ex asesora 🗝 general de Sony.

La primera tarea del comité será evaluar y desarrollar aún más los procesos y medidas de seguridad de 🗝 OpenAI y presentar sus recomendaciones al consejo de administración en 90 días. La empresa dijo que luego publicará las recomendaciones 🗝 que está adoptando "de una manera consistente con la seguridad y la seguridad".