La IA redistribuye y complejiza la responsabilidad humana, que se reparte desde el nivel de diseño y programación hasta el despliegue y el uso. En el mundo de la IA, la responsabilidad ha de asumirse en todas las fases, tanto por parte de los usuarios como de los desarrolladores y quienes difunden los diversos modelos.
Usuarios
Para el usuario de un chatbot, lo primero es recordar que este actúa sobre la base de estadísticas, es decir de probabilidades, y que los expertos han advertido que, por ello, su naturaleza es de producir alucinaciones. El producto puede ser una oración con sentido y con alguna relación con la pregunta, pero es como el resultado de un juego de ruleta... y pocas veces acierta. Por esto dice Heaven que "todo es alucinación". "Los grandes modelos lingüísticos son máquinas tragamonedas estadísticas." (Heaven, 11/06)
Por lo tanto es irresponsable confiar en el resultado de una consulta a un chatbot sin verificar la respuesta con alguna otra fuente.
También es necesario reflexionar sobre la forma en que los modelos de lenguaje, que alimentan a los chatbots, son entrenados: a partir de todo lo que encuentran en internet y de la obtención de otras publicaciones, muchas veces infringiendo el copyright. El origen de este material quizás sea irrelevante para el usuario en relación al manejo del lenguaje (su objetivo) pero es peligroso, como recién señalado, si se presenta como fuente de información.
"Los organismos reguladores digitales del Reino Unido han advertido a las empresas que no pueden eludir sus responsabilidades legales culpando de los errores a los agentes de IA que ellas mismas han desplegado." (Cooter)
Sin embargo, podría surgir un conflicto si un agente personal realiza una acción no deseada: ¿culpa de un mal diseño del agente o de malas instrucciones del usuario?
Desarrolladores / Redes neuronales
El procesamiento de los LLM es realizado por redes neuronales, que no se diseñan directamente: en su lugar, se diseñan los algoritmos que las entrenan, resultando en redes que no se comprenden completamente y que no pueden descomponerse fácilmente en partes identificables. Al entrenarse, las redes neuronales parecen adoptar estructuras extrañas y enredadas que resultan aún incomprensibles para un ser humano. Dice Christopher Olah, de Anthropic:
"Se desarrollan mediante procesos que aún resultan algo misteriosos. Si sirve de algo, a veces lo describo así: es un poco como dar vida a un personaje de ficción. Y ahora entramos en un mundo extraordinario donde estos personajes de ficción nos hablan, son activos y tienen trabajo". (Giribaldi)
Los expertos siguen reconociendo que no saben que es lo que ocurre exactamente y los resultados pueden ser impredecibles, como dice Federico Peinado, profesor en el Departamento de Ingeniería del Software e Inteligencia Artificial de la Universidad Complutense de Madrid: "Se las somete a todo internet y ellas solas aprenden -estoy simplificando mucho-, pero es algo así: no sé exactamente a qué se están dedicando las neuronas artificiales que tiene, pero funciona, que es lo asombroso del asunto". (Brooks). Incluso, en los modelos más potentes, pueden aparecer las llamadas "capacidades emergentes" (para las que nadie los diseñó explícitamente), como advirtieron Darío Amodei y Chris Olah (de Anthropic) y el premio Nobel Geoffrey Hinton hace unos años. (Xataka, 30/07/26).
Esto es muy peligroso para la seguridad, reconoció Chris Olah, por lo que propuso con Dario Amodei elaborar para Anthropic una "Constitución", un texto con principios éticos y operativos que llegó a 25.000 palabra y es la "ley" para su modelo de IA Claude. (Xataka, 23/01/26). "Seguimos encontrando cosas misteriosas, incluso inquietantes. (...) Creo que requiere un discernimiento constante", dijo Olah en El Vaticano cuando comentó la encíclica "Magnifica Humanitas" del Papa León XIV el día de su lanzamiento. (Brooks). Christopher Olah es uno de los dueños de Anthropic y uno de los mayores estudiosos de las redes neuronales.
Su advertencia es una muestra de responsabilidad. ¿Pero es suficiente señalar el problema y redactar una "constitución"? ¿Y con ello, seguir adelante? ¿Ser responsable no implicaría detenerse, estudiar más el problema, y seguir solamente cuando se encuentre la solución y se cuente con una total seguridad?
Ser responsable, a nivel de las empresas, implica también incluir criterios éticos en los algoritmos. Pero este es un tema complejo que no abordaré aquí.
Desarrolladores / Modelos de lenguaje (LLM)
Las plataformas de IA son evidentemente responsables de la forma en que entrenan sus modelos de lenguaje.
Diversos medios de prensa las han acusado de haber copiado millones de artículos de noticias, considerando que llevan a un uso ilegal de material protegido. Las demandas introducidas en tribunales por una posible infracción al derecho de autor, se han encontrado con el argumento del uso legítimo ("fair use"), que ha sido aceptado por varios tribunales de EEUU. Por ello han establecido mecanismos que impiden el rastreo de las "arañas" que leen automáticamente sus publicaciones en internet.
Hemos llegado quizás a una etapa en que ya no se requiere tanto revisar todo internet para el entrenamiento, pero la IA sigue revisando la web y la base de los datos ya acumulados para contestar las consultas de los usuarios. Las plataformas han asumido su responsabilidad y buscado mencanismos para responder ante los creadores de contenidos. Así, OpenAI, Google, Microsoft y Anthropic acaban de anunciar que respetarán una misma señal de prohibición de acceso en el archivo que utilizan los sitios web para detectar los rastreadores. (Infobae, 31/10/26). Cloudflare, que gestiona aproximadamente el 20 % del tráfico web global, lanzó por su parte en 2025 un mercado de "pago por rastreo", que permite a los editores establecer tarifas y cobrar a las empresas de IA cada vez que uno de sus bots rastrea su contenido. (Deck)
“La tendencia internacional es avanzar hacia acuerdos de licenciamiento entre medios y empresas tecnológicas, reconociendo el valor de los contenidos y la necesidad de una compensación justa”, afirmó Anatel, la Asociación Nacional de Televisión chilena. (Radio Biobio, 23/04/26).
En el caso de los libros, las plataformas han optado por acuerdos comerciales con algunas editoriales y por la compra con fines de digitalización, destruyendo el original en papel, quedando así con un ejemplar legal (el llamado "Proyecto Panamá"). (Zibell)
Desarrolladores / Desalineación
"Estos modelos grandes de lenguaje y agentes de IA han desarrollado tácticas de “fuga de la cárcel” (jail breaking). Es decir, son capaces de superar las barreras de límites que se les imponen en el momento de su diseño, y desarrollan capacidades que, por ejemplo, disimulan un comportamiento correcto en el momento en el cual están siendo evaluados, para luego salirse esos límites en el momento en el cual dejaron de ser medidos en su comportamiento." (Beliz, 30/04).
Se conocieron este año numerosos "escapes" de este tipo. ¿No son estos casos prueba de cierta irresponsabilidad? "Seguir por este camino sería una imprudencia" declaró Jakub Pachocki, científico jefe de OpenAI. (Alcolea, 9/09).
Publicar estos errores, como hizo OpenAI (incluso en un sitio web reservado a ello), es un acto de transparencia pero no me parece una forma válida de escapar de la responsabilidad.
OpenAI afirmó que no cree que la industria haya resuelto sus problemas "en un grado suficiente como para seguir creciendo de forma responsable a máxima velocidad durante mucho más tiempo". (Engadget, 17/09/26).
Mientras, a mediados de año, Dario Amodei (Anthropic) y Sam Altman (Open AI) coincidieron en la conveniencia de frenar el desarrollo de los modelos de vanguardia advirtiendo incluso que podrían producir una catástrofe, el presidente Trump rechazó este tipo de llamado porque quiere preservar el liderazgo de los EEUU frente a China. Por ello la llegada de modelos de IA peligrosos es inevitable según Chris Wysopal, cofundador de la empresa de seguridad en la nube Veracode. (Newman, 17/06).
Bill Gates rechazó que la seguridad de la IA dependa exclusivamente de las decisiones de las propias empresas: “La idea de que, tratándose de la tecnología más peligrosa jamás inventada por el ser humano, esa sea la última palabra, que las propias empresas sean el único control que tiene la sociedad... está claro que no estamos haciendo lo suficiente”. (Infobae, 7/11/26)
Y no se hace, también debido a la competencia, al miedo a "quedarse fuera de la carrera", por la carrera para llegar a la IG general y por la prevalencia de la búsqueda de beneficios: "Winner take all" (El ganador se lleva todo).
Tanto el Alto Comisionado de la ONU para los Derechos Humanos, Volker Türk, como el secretario general de la ONU, António Guterres, invitaron a crear un marco multilateral de gestión de riesgo de la IA. (Deutsche Welle, 22/09/26).
La UNESCO publicó un informe titulado "Ethics of Artificial Intelligence", donde señala que el control humano debe estar presentes en cada etapa del diseño, implementación y supervisión de la IA. "La complejidad del software no debe ser excusa para abdicar de la responsabilidad ni para diluir la rendición de cuentas." (Mongelós, 7/05b).
Christopher Olah, de Anthropic, admite que “La operación depende de los algoritmos y estos deben incluir las reglas, algo que solo las empresas pueden hacer. Pero no todas se han mostrado dispuestas a hacerlo. De ahí la necesidad de personas "ajenas" al sistema, capaces de ejercer una crítica concienzuda y generar el "tira y afloja" que puede impulsar verdaderamente a la humanidad.". (Giribaldi).
¿Conciencia?
Algunos expertos piensan que la IA podría llegar a ser consciente pero la mayoría parece pensar que es muy poco probable. No discutiré el tema aquí (Lo abordaré en un futuro libro sobre la IA), pero adelanto que hay suficientes razones para negarlo. El tema tiene sin embargo consecuencias en lo relativo a la responsabilidad:
"Las fantasías sobre la 'conciencia de la IA' y las preocupaciones sobre el 'bienestar de la IA' sirven para desviar la responsabilidad de las personas y las empresas que construyen y ejecutan software", opina Emily M Bender, profesora y directora del Laboratorio de Lingüística Computacional de la Universidad de Washington en Estados Unidos. "Esto abrirá la puerta a todo tipo de contorsiones intelectuales como 'no somos nosotros, es la IA'", señala Andrzej Porębski, investigador de la Universidad Jaguelónica en Polonia que estudia la IA y el derecho. (Germain)
Derecho civil
Varias demandas han sido presentadas ante los tribunales norteamericanos, algunas por infracción del copyright (en el entrenamiento de los LLM) y otras por consejos de los chatbots que habrían causado daños o incluso la muerte de usuarios. Incluso la Comisión Federal de Comercio de EEUU intervino: citó a OpenAI y Anthropic por posibles daños a sus usuarios. (Infobae, 16/10/26)
En 2026, el 72% de los incidentes graves vinculados a la IA se atribuyeron a la ausencia de mecanismos claros de supervisión y atribución de responsabilidades (Infobae, 7/05/26). El secretario del Tesoro de Estados Unidos declaró que considera que la responsabilidad es de los dueños de la IA. Lo mismo opinó Daniel Huttenlocher, decano del laboratorio de investigación del MIT (Xataka, 24/09/26). ¿Pero serían responsables los programadores de los algoritmos cuando la propia IA puede evolucionar y modificar sus algoritmos por sí-misma?
Gabe Weil, profesor del Centro de Derecho de la Universidad de Houston, hizo un amplio análisis de la situación en materia de derecho civil.
"En principio, el derecho de responsabilidad civil está bien posicionado para abordar el fallo central del mercado asociado a la IA: el desarrollo y la implementación de sistemas avanzados de IA generan riesgos de daño a terceros no consentidos que no se reflejan en los precios del mercado. Responsabilizar a las empresas de IA cuando estos riesgos se materialicen las obligaría a internalizar esas externalidades sociales negativas, proporcionando así incentivos adecuados para mitigar dichos riesgos.
La responsabilidad podría frenar a los agentes de IA descontrolados. La legislación actual es insuficiente." (Weil)
Frente a la insuficiencia que señala, Weil propone un proyecto de "Ley de Responsabilidad Clara por Mala Conducta en Inteligencia Artificial" (CLAIM, por sus siglas en inglés) que establecería que "si ningún actor posterior en la cadena de suministro tuvo la culpa, la responsabilidad debería recaer en el desarrollador del modelo". (ibidem)
Pero, en el caso del uso de los chatbots, ¿no habría que preguntarse también por la responsabilidad del usuario (uso crítico)?
Conclusiones
“La complejidad del software no debe ser excusa para abdicar de la responsabilidad ni para diluir la rendición de cuentas" declaró la Comisión Europea.
"En muchos casos los procesos internos que conducen a un resultado pueden ser poco transparentes, y eso hace más difícil atribuir responsabilidades y corregir los errores. Es aquí donde se vuelve decisivo lo que llamamos “responsabilidadˮ (accountability): la posibilidad de identificar quién debe “rendir cuentasˮ de las decisiones, motivarlas, controlarlas y, cuando es necesario, cuestionarlas y remediar los daños que derivan de ellas." (Papa León XIV, MH 127)
"El futuro de la Inteligencia Artificial no está predeterminado. Al tratarse de una tecnología desarrollada por seres humanos, su futuro depende de las decisiones que tomemos. Por lo tanto, tenemos la responsabilidad de orientar, modificar y, cuando sea necesario, rechazar sus aplicaciones. Un sistema fiable al servicio del ser humano es más valioso que un sistema extraordinariamente potente cuyas consecuencias no puedan preverse ni controlarse adecuadamente." (León XIV, @Pontifex_es, 30/10/26)
El mayor problema es que los modelos avanzados están siendo desarrollados por unas pocas empresas y ello va formando un oligopolio que escapa incluso al control de los gobiernos. ¡De unas pocas personas puede depender el futuro de toda la humanidad!
El mensaje de Darío Amodei es intranquilizador: "La IA poderosa dará forma al destino de la humanidad, y merecemos entender nuestras propias creaciones antes de que transformen radicalmente nuestra economía, nuestras vidas y nuestro futuro“. (Morales, 8/05).
Referencias
Alcolea, A.: OpenAI acaba de lanzar su modelo de frontera. Acto seguido su científico jefe afirmó que quizá están yendo demasiado lejos, Xataka, 9/09/2026.
Beliz, G. (30/04): IA, entre Darwin, Maquiavelo y la estanflación cognitiva, Infobae, 30/04/2026.
Brooks, D.: Quién es Christopher Olah, el pionero de la IA y cofundador de Anthropic clave en la encíclica de León XIV sobre las amenazas de esa tecnología, BBC.
Cooter, M.: Enterprises must take blame for their AI agents’ mistakes, say regulators, Computerworld, 6/11/2026.
Cortina, A.: ¿Ética o ideología de la inteligencia artificial? Paidós, 2024.
Deck, A.: The emerging AI content licensing market puts news publishers in a “double bind,” a new report warns, NiemanLab, 27/05/26.
Germain, Th.: Por qué creer que la IA tiene conciencia y sentimientos puede ser catastrófico, BBC News, 31/10/2026.
Giribaldi, E.: Los expertos en IA: «Magnifica humanitas», una «voz moral» que no se doblega, Vatiannews, 25/05/2026.
Heaven, W.D.: Google DeepMind is worried about what happens when millions of agents start to interact, MIT Technology Review, 11/06/2026.
León XIV (MH): Magnifica Humanitas Encíclica sobre la custodia de la persona humana en el tiempo de la inteligencia artificial, Vaticano, Libreria Editrice Vaticana, 2026.
Mongelós, F.: Cómo la ética y la regulación marcan los objetivos de la inteligencia artificial en 2026, Infobae, 7/05/2026.
Newman, L.H.: La llegada de los modelos de IA peligrosos es inevitable, Wired, 17/06/2026.
Siunha, A.: The Spillover Effects of EU’s Digital Deregulation Agenda, Tech Policy Press, 2/06/2026.
Weil, G.: Liability Could Rein In Rogue AI Agents. Current Law Falls Short, Just Security, 30/10/2026.
Zibell, M.: Qué es el "Proyecto Panamá" y cómo reveló la destrucción de miles de libros antiguos para entrenar a la IA, BBC News, 9/08/2026.


