OpenAI anuncia la creación de un comité de seguridad y establece un nuevo modelo de IA para reemplazar al GPT-4

La ☀️ startup con sede en San Francisco, OpenAI, anunció en un comunicado de blog el martes que ha comenzado a formar ☀️ un comité de seguridad y seguridad que asesorará al consejo de administración en "decisiones críticas de seguridad y seguridad" para ☀️ sus proyectos y operaciones.

El comité de seguridad llega en medio de un debate en curso sobre la seguridad de la ☀️ IA en la empresa, que fue lanzada al centro de atención después de que un investigador, Jan Leike, renunciara y ☀️ criticara a OpenAI por permitir que la seguridad "ocupara un asiento trasero en productos relucientes". El cofundador de OpenAI y ☀️ científico jefe Ilya Sutskever también renunció, y la empresa disolvió el equipo "superalineación" centrado en los riesgos de la IA ☀️ que lideraron conjuntamente.

OpenAI dijo que "ha comenzado recientemente a entrenar su próximo modelo de frontera" y que sus modelos de ☀️ IA lideran la industria en capacidad y seguridad, aunque no hizo mención de la controversia. "Damos la bienvenida a un ☀️ debate robusto en este momento importante", dijo la empresa.

Los modelos de IA son sistemas de predicción que se entrenan en ☀️ vastos conjuntos de datos para generar texto, imágenes, video y conversaciones humanas a pedido. Los modelos de frontera son los ☀️ sistemas de IA más poderosos y de vanguardia.

El comité de seguridad está compuesto por insiders de la empresa, incluidos el ☀️ CEO de OpenAI, Sam Altman, y su presidente, Bret Taylor, y cuatro expertos técnicos y políticos de OpenAI. También incluye ☀️ a los miembros de la junta directiva Adam D'Angelo, que es el CEO de Quora, y Nicole Seligman, ex asesora ☀️ general de Sony.

La primera tarea del comité será evaluar y desarrollar aún más los procesos y medidas de seguridad de ☀️ OpenAI y presentar sus recomendaciones al consejo de administración en 90 días. La empresa dijo que luego publicará las recomendaciones ☀️ que está adoptando "de una manera consistente con la seguridad y la seguridad".