Nuestra Redes Sociales

TECNOLOGIA

Alerta futura: IA peligrosa-OpenAI y la AGI

Antes de los cuatro días de exilio del director ejecutivo de OpenAI, Sam Altman, varios investigadores escribieron una carta a la junta directiva advirtiendo sobre un poderoso descubrimiento de inteligencia artificial que, según dijeron, podría amenazar a la humanidad.

La carta, no reportada anteriormente, y el algoritmo de IA fueron desarrollos clave antes de que la junta destituyera a Altman, el ejemplo de la IA generativa. Antes de su regreso triunfal el martes por la noche, más de 700 empleados habían amenazado con renunciar y unirse al patrocinador Microsoft (MSFT.O), en solidaridad con su líder despedido.

Las fuentes citaron la carta como un factor entre una lista más larga de quejas de la junta que llevaron al despido de Altman, entre las que se encontraban preocupaciones sobre la comercialización de avances antes de comprender las consecuencias.

OpenAI, que declinó hacer comentarios, reconoció en un mensaje interno a su personal un proyecto llamado Q* y una carta a la junta antes de los eventos del fin de semana. Un portavoz de OpenAI dijo que el mensaje, enviado por la ejecutiva Mira Murati, alertó al personal sobre ciertas historias de los medios sin comentar sobre su exactitud.

Algunos en OpenAI creen que Q* (pronunciado Q-Star) podría ser un gran avance en la búsqueda de la startup de lo que se conoce como inteligencia artificial general (AGI). OpenAI define AGI como sistemas autónomos que superan a los humanos en la mayoría de las tareas económicamente valiosas.

Dados los vastos recursos informáticos, el nuevo modelo pudo resolver ciertos problemas matemáticos. Aunque solo realizaba matemáticas al nivel de los estudiantes de escuela primaria, superar esas pruebas hizo que los investigadores se sintieran muy optimistas sobre el éxito futuro de Q*.

Los investigadores consideran que las matemáticas son una frontera en el desarrollo de la IA generativa. Actualmente, la IA generativa es buena en escritura y traducción de idiomas al predecir estadísticamente la siguiente palabra, y las respuestas a la misma pregunta pueden variar ampliamente. Pero conquistar la capacidad de hacer matemáticas (donde solo hay una respuesta correcta) implica que la IA tendría mayores capacidades de razonamiento que se asemejarían a la inteligencia humana. Los investigadores de IA creen que esto podría aplicarse a investigaciones científicas novedosas.

A diferencia de una calculadora, que puede resolver un número limitado de operaciones, AGI puede generalizar, aprender y comprender.

En su carta a la junta, los investigadores señalaron la destreza y el peligro potencial de la IA. Los informáticos llevan mucho tiempo debatiendo sobre el peligro que suponen las máquinas muy inteligentes, si, por ejemplo, pudieran decidir que la destrucción de la humanidad era de su interés.

Estos también han señalado el trabajo de un equipo de «científicos de IA», cuya existencia confirmaron múltiples fuentes. El grupo, formado combinando equipos anteriores de «Code Gen» y

«Math Gen», estaba explorando cómo optimizar los modelos de IA existentes para mejorar su razonamiento y eventualmente realizar trabajo científico.

Altman lideró los esfuerzos para hacer de ChatGPT una de las aplicaciones de software de más rápido crecimiento en la historia, atrayendo la inversión y los recursos informáticos necesarios de Microsoft para acercarse a AGI.

Además de anunciar una serie de nuevas herramientas en una manifestación este mes, Altman bromeó la semana pasada en una cumbre de líderes mundiales en San Francisco diciendo que creía que se estaban vislumbrando importantes avances.

«Cuatro veces en la historia de OpenAI, la más reciente fue en las últimas dos semanas, he estado en la sala, cuando en cierto modo empujamos el velo de la ignorancia hacia atrás y la frontera del descubrimiento hacia adelante” y «Poder hacer eso es el honor profesional de mi vida», dijo en la cumbre de Cooperación Económica Asia-Pacífico.

Un día después, la junta despidió a Altman.

Escrito por: Serenelli Guido