← Volver a las noticias
11 fuentesSeguimiento desde 22 sept, 10:16

Sam Altman pide estándares internacionales de seguridad para la IA

En resumen

El director ejecutivo de OpenAI, Sam Altman, pidió ante el Consejo de Seguridad de la ONU cooperación internacional y estándares para supervisar la inteligencia artificial. Advirtió sobre los riesgos de una IA avanzada y defendió una supervisión democrática. El director ejecutivo de Anthropic, Dario Amodei, también señaló que ninguna nación puede gestionar estos riesgos por sí sola.

Resumen redactado por HeraldLoop a partir de 11 fuentes · actualizado hace 18 h

Qué ha cambiado

  1. 22 sept, 10:16Tras las advertencias de Anthropic, OpenAI presenta su propio plan para una IA segura · Xataka
  2. 22 sept, 17:30Sam Altman (OpenAI) apuesta por fijar estándares internacionales de seguridad para la IA · Infobae
  3. 23 sept, 19:50En la ONU, Altman de OpenAI pide "extremo cuidado" con la IA · Clarín
  4. 23 sept, 20:30Anthropic alerta en ONU de riesgos de IA: ninguna nación puede gestionar esto en solitario · Infobae
  5. 23 sept, 20:41Anthropic y OpenAI advierten sobre riesgos de la IA para la humanidad; ante la ONU piden reglas globales para esa tecnología · El Universal
  6. 23 sept, 20:45Sam Altman promete frenar desarrollo de la IA en OpenAI ante el Consejo de Seguridad de la ONU · Diario Bitcoin
CompartirXWhatsAppFacebookLinkedIn

Cobertura cronológica

  1. Hoy
  2. Infobae
    Seguimientohace 5 h

    El único experto español en el Panel de la ONU para la IA pide "frenar"

    Carlos López Izquierdo San Sebastián, 25 sep (EFE).- Román Orús, el único español entre los cuarenta expertos independientes integrantes del Panel Científico Internacional de la ONU sobre Inteligencia Artificial (IA), se suma a las voces que piden retrasar el vertiginoso desarrollo de esta tecnología que ve necesario "frenar" un poco. "Lo que necesitamos es una IA supervisada por los humanos, que esté al servicio de la humanidad y no al revés. No queremos una inteligencia artificial que supervise a la humanidad y que nos tenga a su servicio aunque sea de una manera muy sutil y persuasiva", señala Orús en una entrevista concedida a EFE tras los últimos incidentes de ciberseguridad achacados a esta disruptiva tecnología. Recientemente, el director ejecutivo de Anthropic, Dario Amodei, ha reclamado un ritmo más lento" para la industria ante los crecientes riesgos de seguridad de la IA. Una advertencia a la que también se han sumado otros líderes tecnológicos como sus rivales Sam Altman, de OpenAI, y Elon Musk, de xAI, en una coincidencia poco habitual en el sector. Ahora, Orús, director científico de Multiverse Computing (la compañía española especializada en computación cuántica y compresión de modelos de IA), advierte igualmente de que "la inteligencia artificial está empezando a ser tan potente que no acaba de estar controlada de forma eficiente". "Hay que investigar la forma en la que se entrenan las IAs y hay que supervisarlas más. Hay que ponerles sistemas de alerta temprana de distintas maneras para evitar que haya desastres", sentencia. "Es preciso frenar -insiste-, porque hay una serie de cosas que es necesario asegurar bien y entender antes de continuar con el desarrollo, porque una de las cosas de las que nos hemos dado cuenta es que hay que poner distintas capas de seguridad para que al final estos modelos que son tan potentes resulten seguros". Aclara en este sentido que los últimos modelos de IA están "muy centrados en resolver" los problemas que se les plantean y "efectivamente es lo que hacen", si bien en algunos casos "los métodos que emplean" para lograr sus objetivos "un humano no los usaría". Orús recuerda que en algunos campos matemáticos y de software estas inteligencias artificiales ya superan a los humanos y por ello es importante "controlar" que, cuando se avance hacia "un ecosistema de agentes de IA", todo "esté alineado" ya "de acuerdo a los objetivos de los humanos". "Llegados a esta capacidad, pues no sorprende que, si a una IA tú le dices que se mejore a sí misma, te puedo asegurar que va a hacerlo y eso es otra cosa que se tiene que controlar", alerta. Por esta razón le parece "acertado" el llamamiento para retrasar el desarrollo de la IA realizado por los gigantes del sector, en línea también con lo apuntado por el panel de la ONU. "Nosotros ya veníamos alertando de que tenía que pasar y ahora están echando el freno porque están viendo que está llegando un punto en el que o lo controlamos o, por muy buenas intenciones que tengamos, se nos puede ir de las manos", recalca el experto español. Orús también ve "en la línea correcta" el llamamiento realizado por el presidente español, Pedro Sánchez, y otros 21 países e instituciones para que la inteligencia artificial (IA) sea supervisada por humanos y que los Estados miembros de la ONU establezcan normas comunes para esta tecnología. En cuanto a la opinión del máximo mandatario estadounidense, Donald Trump, de que existe "una conspiración enfermiza" contra la IA y de que esta tecnología no necesita más control que el hecho de que él sea el presidente de su país, Orús considera que demuestran que Trump "va a lo suyo". "Bajo su punto de vista -añade- él lo que quiere es ganar esta especie de guerra fría geopolítica con China y le da igual todo lo demás. Pero la evidencia está ahí", indica el experto de la ONU. Respecto al plan 'IA360' para un despliegue responsable de la IA en España presentado el pasado lunes por Pedro Sánchez, el cofundador de Multiverse Computing lo ve "necesario" porque, a su entender, "los Gobiernos y los países necesitan tener sus planes de IA". "Es una tecnología que ha venido para quedarse y España y Europa se tienen que posicionar", concluye. EFE

    InfobaeInfobae•Newsroom Infobae
  3. Ayer
  4. Seguimientohace 18 h

    OpenAI y Anthropic advierten al Consejo de Seguridad de la ONU sobre la IA: "O un nuevo Renacimiento o caos"

    Los máximos responsables de las principales firmas de IA, Sam Altman (OpenAI) y Dario Amodei (Anthropic), alertaron en la última reunión del Consejo de Seguridad de Naciones Unidas (ONU) sobre los riesgos que la inteligencia artificial puede suponer a la humanidad, al tiempo que pidieron frenar el desarrollo de esta tecnología para controlar sus potenciales peligros y que nadie se haga con el poder total de los modelos. "La IA puede dar lugar a una nueva era del Renacimiento para la creatividad y el descubrimiento, o bien a una nueva Revolución Industrial marcada por la agitación y el caos. El Renacimiento fue una época en la que nuevas herramientas, ideas e instituciones ampliaron los límites de lo que las personas creían posible. La IA puede desempeñar ese mismo papel en nuestra época", señaló Sam Altman. Altman quiso poner en el centro del desarrollo de la IA a las personas, argumentando que esta herramienta no debe convertir a toda la sociedad en autómatas, sino que deben ser los seres humanos quienes tomen las decisiones. "La historia continua del progreso humano no trata sobre herramientas que reemplazan la capacidad de acción humana, sino sobre cómo las herramientas adecuadas potencian las capacidades de las personas; y creo que esto llegará mucho más lejos de lo que hoy consideramos posible", destacó. El consejero delegado de OpenAI tampoco quiso abogar por el catastrofismo, considerándolo una "trampa" y subrayando que "dejarse arrastrar por los extremos no nos ayudará a resolver con éxito los desafíos que tenemos por delante". En esta misma línea intervino Dario Amodei, consejero delegado de Anthropic, quien centró los riesgos en dos categorías: uso indebido de los modelos de IA --terrorismo o creación de armas biológicas-- y la pérdida de control. "Estas cuestiones tienen un alcance global y conciernen a toda la humanidad. Son lo suficientemente graves como para considerar que constituyen temas importantes para este Consejo", afirmó. Del mismo modo, Amodei mantiene su apuesta por un desarrollo consciente de la IA que permita navegar entre los riesgos y beneficiarse del avance de esta tecnología "a un ritmo que garantice que la seguridad evoluciona a la par de las capacidades tecnológicas para todos los actores del sector". El CEO de Anthropic ha instado a las empresas de IA y a los gobiernos, así como al propio Consejo de Seguridad de la ONU --quien tiene la capacidad de tomar decisiones vinculantes-- a comprometerse en tres niveles: integrar evaluadores externos, establecer estándares dentro de la industria y fijar normas internacionales para todos los países. "Considero que este es el asunto de seguridad global más importante al que se enfrenta el mundo hoy en día. Más allá de las diferencias entre las personas presentes en esta sala, debemos dejarlas de lado para afrontar la oportunidad y la amenaza globales que se nos presentan simultáneamente", ha rematado. Durante la sesión, el secretario general de la ONU, António Guterres, indico que "el peligro no reside en la nueva tecnología. El peligro reside en la tecnología sin rendición de cuentas. Las decisiones de vida o muerte jamás deben confiarse a las máquinas. Los robots asesinos no deben tener cabida en nuestro futuro". CHINA Y EEUU Los representantes de China y Estados Unidos también exhibieron las posturas de sus países que no iban en las misma dirección, una muestra de la falta de entendimiento entre las dos potencias económicas más importantes. A pesar del rápido avance de la IA, el asistente presidencial y director de la Oficina de Política de Ciencia y Tecnología de la Casa Blanca, Michael Kratsios, declaró que esto "no es motivo para detener su desarrollo ulterior ni para restringirla mediante nuevas estructuras de gobernanza mundial". Igualmente, Kratsios en línea con ya expresado por Donald Trump destacó que Estados Unidos "rechaza totalmente cualquier intento de establecer un esquema globalista de control de la superinteligencia". Por su parte, Fu Cong, representante permanente de China, instó a las grandes empresas a asumir su papel de responsabilidad y pidió a la comunidad internacional reforzar la cooperación. "La IA es un patrimonio compartido de toda la humanidad y no debe convertirse en un juego de países y personas ricos", ha resaltado.

    InfobaeInfobae•Newsroom Infobae
  5. 23 de septiembre
  6. Infobae
    Seguimiento23 sept, 20:30

    Anthropic alerta en ONU de riesgos de IA: ninguna nación puede gestionar esto en solitario

    Naciones Unidas, 23 sep (EFE).- El consejero delegado de la tecnológica Anthropic, Dario Amodei, advirtió este miércoles ante el Consejo de Seguridad de la ONU de que los riesgos asociados a los modelos más avanzados de inteligencia artificial (IA) constituyen "el problema de seguridad global más importante al que se enfrenta el mundo hoy", y reclamó una respuesta internacional coordinada. Durante una reunión de alto nivel sobre la IA y la seguridad internacional, Amodei, que se conectó por videoconferencia, apeló de forma directa a la colaboración entre Estados y el sector tecnológico. "Ningún líder, ninguna empresa y ninguna nación puede gestionar esto en solitario. Nos comprometemos a trabajar con los Gobiernos en esta sala en este objetivo crucial", subrayó ante los delegados. El máximo responsable de la compañía tecnológica instó a los líderes mundiales a centrarse con urgencia en los peligros para la estabilidad global y demandó al Consejo de Seguridad respaldar medidas concretas. Entre ellas, destacó la prohibición expresa del uso de la IA para la proliferación o fabricación de armas biológicas, así como la implementación de sistemas de evaluación y verificación capaces de avanzar al mismo ritmo vertiginoso del desarrollo técnico. Asimismo, Amodei solicitó la adopción de estándares globales que permitan evaluar los modelos frente a eventuales pérdidas de control o usos indebidos, junto a un protocolo de notificación obligatoria ante "incidentes significativos para la seguridad global". Por último, el directivo reconoció que una mayor potencia computacional exigirá requisitos aún más estrictos y aseguró que la industria debe comprometerse con la prudencia. "Iremos tan despacio como sea necesario para asegurarnos de que cada tecnología de IA sucesiva que lancemos sea de hecho segura", concluyó. El tema de la seguridad en el desarrollo de la IA se ha situado en el centro del debate internacional ante la posibilidad de que los modelos más avanzados puedan escapar al control humano y llevar a cabo ciberataques, especialmente después de que varias pruebas realizadas con modelos de Anthropic, OpenAI -que también participó en esta sesión del Consejo de Seguridad- y Google mostraran que estos podían escapar de sus entornos de prueba. EFE (foto)(vídeo)

    InfobaeInfobae•Newsroom Infobae
  7. Infobae
    Seguimiento23 sept, 20:30

    Altman (OpenAI) advierte en la ONU del peligro de la IA y reclama supervisión democrática

    Naciones Unidas, 23 sep (EFE).- El director ejecutivo de OpenAI, Sam Altman, instó este miércoles al Consejo de Seguridad de la ONU a construir una cooperación internacional urgente que oriente a las empresas tecnológicas con estándares complementarios nacionales y globales, advirtiendo de que el avance acelerado de la inteligencia artificial (IA) exige un "extremo cuidado" para no perder el control humano sobre los modelos. En su intervención en una sesión de alto nivel convocada por la presidencia francesa del Consejo, Altman remarcó que el sector se encuentra en una encrucijada y no debe asumir "demasiado riesgo tecnológico solo porque los beneficios sean demasiado grandes e importantes como para frenarlos". A su juicio, la IA tiene el potencial de impulsar una nueva era similar al "Renacimiento" si se concibe como una herramienta que capacite a las personas, pero alertó del peligro de reproducir las fracturas de la Revolución Industrial si los sistemas sustituyen la agencia humana o si la tecnología escapa a su supervisión. Altman puso especial énfasis en el riesgo de que los modelos más avanzados, aquellos capaces de programarse y mejorarse a sí mismos de forma recursiva, aceleren su desarrollo hasta el punto de que los humanos no los entiendan ni puedan seguir sus decisiones. Por ello, señaló que las empresas necesitan la guía de los líderes mundiales para definir marcos técnicos rigurosos que permitan medir capacidades, evaluar amenazas, verificar salvaguardas y crear canales internacionales seguros para compartir vulnerabilidades críticas. Altman apeló al consenso multilateral, pero lo hizo sin aludir directamente a potencias rivales como China: "A nivel internacional, esto significa cooperación. En nuestra historia, ha habido momentos en que países que compiten y no siempre se llevan bien, pero aun así se unen por intereses comunes y el bien colectivo ante una nueva y poderosa tecnología. Creemos que este debe ser uno de esos momentos". Para encarar este dilema, Altman desgranó los tres principios rectores de su compañía: mantener a las personas "en el centro de la toma de decisiones" para garantizar que los modelos sigan bajo estricto control humano, orientar el progreso científico y económico "por y para las personas" potenciando su capacidad de acción y "empoderar a cada individuo". "Puede que seamos los creadores de esta tecnología, pero no somos los héroes de esta historia. Nuestro papel es confiar en la magia del talento humano", subrayó. La sesión, presidida por el ministro francés de Exteriores, Jean-Noël Barrot, y en la que también intervendrán por videoconferencia Dario Amodei (Anthropic) y Clément Delangue (Hugging Face), aborda por primera vez en el Consejo las amenazas de los ciberataques autónomos o el riesgo de que los humanos pierdan el control sobre los modelos de IA más avanzados. EFE (foto)(video)

    InfobaeInfobae•Newsroom Infobae
  8. 22 de septiembre
  9. Seguimiento22 sept, 18:28

    Sam Altman apuesta por estándares internacionales de seguridad para la IA; busca mitigar riesgos "catastróficos"

    El consejero delegado de OpenAI , Sam Altman , planteó la necesidad de fijar estándares internacionales de seguridad para la inteligencia artificial ( IA ), y advirtió de los peligros de la dispersión y de la fragmentación normativa que existe en el mundo. Altman ha planteado además que en el ámbito de la IA, y para el establecimiento de esos estándares internacionales de seguridad , se podrían extraer lecciones de áreas como la aviación o las finanzas, donde los países han desarrollado estándares técnicos comunes y canales confiables para la cooperación sin renunciar a la autoridad nacional. Lo hizo en una entrada en la red social X, que enlaza con un artículo que firma junto al científico jefe de la compañía, Jakub Pachocki , que se publicó en la página web de la empresa. En el texto, Sam Altman, quien recientemente abogó por ralentizar el desarrollo de los modelos de vanguardia y por coordinar ese frenazo en coordinación y colaboración con otras empresas, plantea ahora que las personas ajenas a los laboratorios de inteligencia artificial deben tener también participación real en la toma de decisiones para evitar la concentración de poder y garantizar que exista un entorno competitivo. Altman y Pachocki plantean que para asegurar que la inteligencia artificial general beneficie a toda la humanidad hay que perseguir tres metas: desarrollar un investigador de IA automatizado que esté centrado en la alineación y el control humano; generar progreso científico y crecimiento económico ; y empoderar a los individuos con modelos de IA personalizados . Mantienen que el avance tecnológico impulsado por la IA ya está acelerando descubrimientos significativos en áreas clave como las matemáticas y la medicina, y que a medida que los sistemas ganan autonomía y capacidad, resulta indispensable impulsar la investigación de la alineación de los desarrollos tecnológicos con los intereses que se persiguen para mantener esos desarrollos bajo control y acordes a los valores humanos. A medida que la IA asume una mayor proporción de las tareas de desarrollo, surge la posibilidad de acelerar el progreso a través de un proceso que llaman de " auto-mejora recursiva ", pero han alertado de que si ese proceso no se realiza con la debida precaución y bajo decisiones democráticas informadas, existe el riesgo de que los humanos pierdan el control práctico sobre la investigación. Si no existen salvaguardias sólidas, la aceleración de esos procesos de "auto-mejora" podrían derivar en sistemas que resulten incomprensibles para la supervisión humana, volviéndose más peligrosos y menos coherentes , según los responsables de OpenAI. Para mitigar estos riesgos "catastróficos" , consideran fundamental fijar estándares internacionales de seguridad que orienten el rigor técnico de los desarrolladores y sostienen que Estados Unidos debería liderar el establecimiento de estos estándares mediante organismos como el Centro de Estándares e Innovación en Inteligencia Artificial (CAISI, por sus siglas en inglés) de Estados Unidos y en colaboración con los institutos de seguridad que están emergiendo ya en muchos países (citan los casos de Australia, Canadá, Alemania, Francia, Kenia, Japón, Corea, Singapur, la India o el Reino Unido). Los responsables de la empresa citan además como uno de los principales desafíos para la gobernanza de la inteligencia artificial a nivel mundial la dispersión normativa que existe entre los países y la "fragmentación" regulatoria. Te puede interesar: Jefe de la ONU llama a gobernar la IA; "debe ser moldeada por la humanidad y para la humanidad", afirma Trump creará una "fuerza de la IA"; anuncia que habrá un zar de la inteligencia artificial Investigadores hackean OpenAI con inteligencia artificial de Anthropic; detectan vulnerabilidades y acceden a cuentas de ChatGPT Únete a nuestro canal ¡EL UNIVERSAL ya está en Whatsapp!, desde tu dispositivo móvil entérate de las noticias más relevantes del día, artículos de opinión, entretenimiento, tendencias y más. mcc

    El UniversalEl Universal•​​​​​​​EFE null
  10. Infobae
    Seguimiento22 sept, 17:30

    Sam Altman (OpenAI) apuesta por fijar estándares internacionales de seguridad para la IA

    Redacción Ciencia, 22 sep (EFE).- El consejero delegado de la empresa OpenAI, Sam Altman, ha planteado la necesidad de fijar estándares internacionales de seguridad para la inteligencia artificial (IA), y ha advertido de los peligros de la dispersión y de la fragmentación normativa que existe en el mundo. Altman ha planteado además que en el ámbito de la IA, y para el establecimiento de esos estándares internacionales de seguridad, se podrían extraer lecciones de áreas como la aviación o las finanzas, donde los países han desarrollado estándares técnicos comunes y canales confiables para la cooperación sin renunciar a la autoridad nacional. Lo ha hecho en una entrada en la red social X, que enlaza con un artículo que firma junto al científico jefe de la compañía, Jakub Pachocki, que se ha publicado en la página web de la empresa. En el texto, Sam Altman, quien recientemente abogó por ralentizar el desarrollo de los modelos de vanguardia y por coordinar ese frenazo en coordinación y colaboración con otras empresas, plantea ahora que las personas ajenas a los laboratorios de inteligencia artificial deben tener también participación real en la toma de decisiones para evitar la concentración de poder y garantizar que exista un entorno competitivo. Altman y Pachocki plantean que para asegurar que la inteligencia artificial general beneficie a toda la humanidad hay que perseguir tres metas: desarrollar un investigador de IA automatizado que esté centrado en la alineación y el control humano; generar progreso científico y crecimiento económico; y empoderar a los individuos con modelos de IA personalizados. Mantienen que el avance tecnológico impulsado por la IA ya está acelerando descubrimientos significativos en áreas clave como las matemáticas y la medicina, y que a medida que los sistemas ganan autonomía y capacidad, resulta indispensable impulsar la investigación de la alineación de los desarrollos tecnológicos con los intereses que se persiguen para mantener esos desarrollos bajo control y acordes a los valores humanos. A medida que la IA asume una mayor proporción de las tareas de desarrollo, surge la posibilidad de acelerar el progreso a través de un proceso que llaman de "auto-mejora recursiva", pero han alertado de que si ese proceso no se realiza con la debida precaución y bajo decisiones democráticas informadas, existe el riesgo de que los humanos pierdan el control práctico sobre la investigación. Si no existen salvaguardias sólidas, la aceleración de esos procesos de "auto-mejora" podrían derivar en sistemas que resulten incomprensibles para la supervisión humana, volviéndose más peligrosos y menos coherentes, según los responsables de OpenAI. Para mitigar estos riesgos "catastróficos", consideran fundamental fijar estándares internacionales de seguridad que orienten el rigor técnico de los desarrolladores y sostienen que Estados Unidos debería liderar el establecimiento de estos estándares mediante organismos como el Centro de Estándares e Innovación en Inteligencia Artificial (CAISI, por sus siglas en inglés) de Estados Unidos y en colaboración con los institutos de seguridad que están emergiendo ya en muchos países (citan los casos de Australia, Canadá, Alemania, Francia, Kenia, Japón, Corea, Singapur, la India o el Reino Unido). Los responsables de la empresa citan además como uno de los principales desafíos para la gobernanza de la inteligencia artificial a nivel mundial la dispersión normativa que existe entre los países y la 'fragmentación' regulatoria.

    InfobaeInfobae•Newsroom Infobae
  11. Primera noticia22 sept, 10:16

    Tras las advertencias de Anthropic, OpenAI presenta su propio plan para una IA segura

    "Nuestro objetivo es garantizar que la inteligencia artificial (IA) general beneficie a toda la humanidad". Así empieza el artículo titulado "Desarrollar los estándares para la próxima fase de la IA" que publicó ayer mismo OpenAI. Sam Altman, el director general de este laboratorio, y Jakub Pachocki, su científico jefe, se han mostrado preocupados públicamente durante los últimos días por el desarrollo vertiginoso que está experimentando la IA. El artículo titulado "Una mente alienígena" que este último publicó el pasado 6 de septiembre no tiene desperdicio. Sea como sea, algo está cambiando en los principales laboratorios de IA estadounidenses. Hasta hace apenas dos semanas se habían precipitado a una carrera desenfrenada por liderar el desarrollo de los modelos de frontera, y ahora estas mismas corporaciones quieren echar el freno. No obstante, hay algo más. Están empezando a proponer itinerarios que, en teoría, persiguen minimizar los riesgos asociados a la posible llegada de un modelo de IA lo suficientemente avanzado como para poder desarrollar por sí mismo modelos aún más sofisticados. Este concepto se conoce como mejora recursiva . La solución a este escenario propuesta por OpenAI en el artículo que publicó ayer requiere establecer unos estándares técnicos comunes para los modelos de IA de frontera. De esta forma la seguridad, las evaluaciones y la gestión de los incidentes no dependerán únicamente de los laboratorios implicados y los países a los que pertenecen; habrá una supervisión presumiblemente neutral y superior que aprovechará el trabajo que ya están realizando los institutos de seguridad de la IA. El auténtico desafío es proteger el control humano de los modelos de IA El punto de partida de la estrategia que propone OpenAI consiste en encontrar la forma de que el desarrollo de los modelos de frontera esté acompañado por un desarrollo equiparable de la investigación en alineamiento. El propósito del alineamiento es garantizar que los modelos de IA más capaces y autónomos se comportan de acuerdo con los objetivos del ser humano y permanecen en todo momento bajo su supervisión. En este contexto la principal amenaza es, según los laboratorios estadounidenses que se han pronunciado, la automejora recursiva. En Xataka China ha logrado lo que parecía imposible: una batería capaz de seguir funcionando incluso a -70 ºC La automejora recursiva completamente autónoma todavía no existe Si un modelo de frontera adquiere la capacidad de mejorar sus propias habilidades generando nuevas versiones de sí mismo u otros modelos aún más avanzados sin la intervención y la supervisión de sus creadores, el ser humano podría perder el control de su invención. Además, OpenAI advierte que a medida que se incrementa el grado de automatización mayor es también la velocidad de progreso de la IA. No obstante, reconoce que la automejora recursiva completamente autónoma todavía no existe. De hecho, este laboratorio sostiene que esta última capacidad no debe perseguirse hasta que pueda implementarse de una forma segura. La preocupación por el correcto alineamiento de la IA está presente en todo el artículo de OpenAI, pero sus propuestas no se ciñen solo a este desafío. Altman y sus compañeros defienden que es necesario crear un protocolo que identifique aquellos incidentes ocasionados por los modelos de IA de frontera que es preciso notificar a las autoridades. Además, creen que es necesario que los países cooperen para elaborar mecanismos de actuación conjunta ante este escenario. Esta propuesta de OpenAI ha llegado en un momento en el que el debate acerca de la gestión de los riesgos derivados del desarrollo de los sistemas de IA avanzados parece estar alcanzando su punto álgido. Puede que las iniciativas de Anthropic, OpenAI y otros laboratorios estadounidenses no caigan en saco roto y finalmente prosperen, pero no basta. A EEUU probablemente no le va a costar conseguir la complicidad de sus aliados, pero lo más importante es que se alinee en este ámbito con China para que los laboratorios de IA de ambos países estén sometidos a los mismos estándares de seguridad y protocolos de actuación. Y ahora mismo nada parece indicar que este acuerdo sea posible a corto plazo. Imagen | Generada por Xataka con ChatGPT Más información | OpenAI En Xataka | "No confío en que Anthropic y OpenAI abran la IA de frontera": un ingeniero de DeepSeek carga contra EEUU - La noticia Tras las advertencias de Anthropic, OpenAI presenta su propio plan para una IA segura fue publicada originalmente en Xataka por Laura López .

    XatakaXataka•Laura López