“Usaron mi cara con inteligencia artificial”: el punto ciego en Chile y las iniciativas que buscan regular esta práctica

Influencers, músicos, actores y políticos han estado expuestos a la suplantación de su rostro o voz —a través de inteligencia artificial— marcando un hito y nuevos problemas para el reguardo de la privacidad y los datos personales. En Chile, estos casos son cada vez más frecuentes y, por ahora, no hay una regulación específica que regule esta práctica. Fast Check CL te explica cómo lo está abordando el mundo, sus alcances en nuestro país y los proyectos en el Congreso que buscan ponerle un freno.

Influencers, músicos, actores y políticos han estado expuestos a la suplantación de su rostro o voz —a través de inteligencia artificial— marcando un hito y nuevos problemas para el reguardo de la privacidad y los datos personales. En Chile, estos casos son cada vez más frecuentes y, por ahora, no hay una normativa específica que regule esta práctica. Fast Check CL te explica cómo lo está abordando el mundo, sus alcances en nuestro país y los proyectos en el Congreso que buscan ponerle un freno.


Por Fast Check CL

Ya no son casos aislados que puedan merecer exclusivas en matinales. Son hechos reiterados y cada vez más frecuentes en Chile y el mundo. Quizás, el que acaparó toda la atención en el último tiempo —por su sensibilidad—, fue la situación de los alumnos del Colegio Saint George que crearon imágenes desnudas de sus compañeras con inteligencia artificial (IA).

La denuncia provocó: que los apoderados demandaran al establecimiento y, al mismo tiempo, develara algunas luces de una nueva forma de ciber acoso. La suplantación de la imagen —sea el rostro o la voz— y la generación de deepfakes, están a la orden del día: «Usaron mi cara con inteligencia artificial», es la frase que hoy asedia la privacidad de las personas.

Entre otros afectados por esta práctica hay: influencers, actores, políticos y artistas musicales; desde Morgan Freeman, pasando por el Presidente Gabriel Boric, hasta María Fernanda «Mafe» Bertero, quien resultó víctima de un deepfake, donde su cara es superpuesta en imágenes y videos pornográficos que circulan en distintas plataformas de mensajería.

¿Hay penas asociadas a esta práctica? ¿Cuál es la discusión en Chile? ¿Qué puedes hacer si utilizan tu imagen para este tipo de contenido? Fast Check CL aborda todas interrogantes que hoy se discuten en la opinión pública.

¿Qué es un deepfake?

Según el portal especializado Seon, un deepfake es un tipo de contenido generado digitalmente, como video, imagen o audio, que imita la apariencia y el sonido de una persona. Estos «medios sintéticos» son tan convincentes en su simulación de lo real que pueden engañar tanto a personas como a algoritmos.

¿Cómo funciona un deepfake?

En la actualidad, gracias al avance en inteligencia artificial y aprendizaje automático, han surgido nuevos paquetes de software que incluyen avatares. Un avatar, de acuerdo a la Real Academia Española (RAE), es la representación gráfica de la identidad virtual.

Asimismo —recoge la empresa especializada en este ámbito, Sensity—, estos avatares son representaciones visuales de rostros humanos generados por IA, capaces de hablar con una voz humana y de parecerse a personas reales.

Los avatares de IA, conocidos también como humanos digitales, combinan tecnología avanzada de texto a voz con gráficos fotorrealistas y algoritmos de aprendizaje especializados. Estos sistemas utilizan grandes cantidades de datos de audio y video para crear representaciones realistas de humanos, que pueden interactuar en tiempo real con los usuarios.

Para el año 2020, un estudio elaborado por Deeptrace, actual Sensity, arrojó que los videos deepfake se duplicaban cada 6 meses, aproximadamente.

¿Qué se está haciendo en el mundo?

La aproximación más cercana a la regulación de deepfakes y la suplantación de rostro o voces, es la discusión que se desarrolla en la Comisión Europea, en base al aumento de imágenes de abusos sexuales infantiles, generadas por inteligencia artificial. En Bruselas actualizaron los lineamientos vigentes desde 2011.

De esta manera, el pasado 13 de marzo, el Parlamento Europeo aprobó por amplia mayoría la Ley de Inteligencia Artificial, la cual viene a establecer cierta protección a derechos de privacidad, al mismo tiempo que fomenta la innovación.

¿Qué dice la ley?

Conforme a los pilares más relevantes que establece la ley, esta guarda ciertas obligaciones para los sistemas de Inteligencia Artificial, según su nivel de riesgo potencial y su impacto en la seguridad. En ese sentido, la legislación establece cuatro riesgos:

  1. Mínimo (por ej. Videojuegos, filtro de spam)
  2. Limitado (por ej. Chatbox, Deep Fake)
  3. Alto (uso de IA en educación, transporte, salud, seguridad y aplicación de la ley)
  4. Inaceptable (por ej. puntuación social)

De esta manera, en el numeral 134 de la ley, quedó estipulado «que los usuarios que utilicen estos sistemas para crear o manipular imágenes, audio o video que parezcan auténticos (deepfakes) deben etiquetar claramente el contenido como artificial».

¿Hay penalización?

En Reino Unido, de acuerdo a la BBC, desde octubre de 2023 que se considera delito compartir pornografía deepfake. No obstante, por ahora, generar este tipo de contenido no es ilegal en el citado país. Por esta razón es que en abril de 2024, un proyecto de ley ingresado busca penalizar su generación, incluso si no es compartido.

Otro caso es el de Australia, donde el Fiscal General, Mark Dreyfus, presentó al Parlamento un proyecto de ley para enmendar el Código Penal. Esta iniciativa propone penalizar la distribución de contenido deepfake —sexualmente explícito, sin consentimiento— con una pena máxima de seis años de cárcel. Por lo demás, contempla delitos agravados para los reincidentes y los creadores de dicho contenido.

Fiscal General, Mark Dreyfus.

El panorama en Chile

En el caso de nuestro país, cuando se utiliza la suplantación con Inteligencia Artificial (IA) o deepfakes en perjuicio de una persona —para fines publicitarios o de contenido sexual sin su consentimiento— es importante considerar la legislación vigente en la materia y las disposiciones que ésta nos puede entregar.

Para conocerlo a cabalidad, Fast Check CL conversó con Danielle Zaror —abogada e investigadora en el Centro de Derecho Informático (CEDI) de la Facultad de Derecho de la Universidad de Chile— y Lucía Camacho, abogada y coordinadora de políticas públicas de Derechos Digitales.

Una legislación insuficiente

«En Chile no hay una regulación específica que se aplique a la creación de imágenes que tengan por resultado la suplantación de una persona en un contexto determinado», explica Zaror.

Danielle Zaror.

A lo anterior, la investigadora del CEDI agrega: «En principio, hay que saber que no siempre esas creaciones serán reprochables al punto de ser reprimidas como un delito y, en ese sentido, cualquier regulación debería tener en vista que hay casos menos graves y otros más graves. En los casos menos graves, sería posible aplicar las reglas que existen en Chile sobre la protección de la propia imagen que ancla su resguardo en el derecho».

«Hay casos donde el agravio es tan grande, ya sea porque hay menores de edad involucrados o porque las imágenes se han viralizado a tantas personas y lugares que el daño a la integridad psíquica sólo puede ser reparable sancionando como delito la actividad relacionada con la suplantación», afirma Zaror.

En Chile no hay jurisprudencia sobre el asunto, hace poco tiempo la cantante Denise Rosentahl fue víctima de esta suplantación y presentó una denuncia, hace poco supimos de unos alumnos que hicieron lo mismo con imágenes de una compañeras y las acciones que las familias presentaron aún están en curso”, puntualiza Danielle Zaror.

En tanto, Lucía Camacho complementa que «cuando vemos que la persona está viendo su imagen suplantada, donde ve su rostro en videos que no son suyos, su voz en audios que no ha grabado o que no reconoce como suyos, también se configura el delito de suplantación de la propia identidad».

Lucía Camacho.

«Pero, ¿qué pasa? La regulación chilena tiene este delito de suplantación de identidad, pero no es uno que al día de hoy permita responder a los retos que trae consigo el deepfake, las tecnologías de inteligencia artificial, que permiten generar de manera verosímil atributos de personalidad de alguien más, como puede ser su voz o imagen», sostiene Camacho.

«Este no es solo un problema de la regulación en Chile. En la región, por ahora, no contamos con regulaciones que nos permitan hacer frente a los retos que traen los deepfakes. Estamos hablando de gente que vio su rostro, de una mujer que está participando en política y vio su rostro en contenido sexual. Este tipo de problemas que, según el contexto y a quien busquen suplantar, tienen una connotación más o menos gravosa. Porque en lo que describo, la mujer aludida también puede ser víctima de violencia de género. Hay varios fenómenos delictivos que se van superponiendo entre sí, y eso lo complejiza», concluye Camacho.

¿Qué se discute hoy en el Congreso?

Este año, en el mes de mayo, el Gobierno presentó al Congreso Nacional un proyecto de ley para regular la Inteligencia Artificial. Concretamente, la iniciativa —empujada por la ministra de Ciencia, Aisén Etcheverry— propone clasificar los sistemas de IA en cuatro categorías según el nivel de riesgo que representen para las personas, la sociedad y los derechos fundamentales.

Inspirados en el modelo europeo, la propuesta define categorías como «inaceptable» para herramientas que puedan vulnerar la dignidad humana, como deepfakes sexuales involucrando a menores; «alto riesgo» para aplicaciones que puedan afectar la salud, seguridad o derechos fundamentales; «riesgo limitado», donde se encuentran aplicaciones de Inteligencia Artificial que no representan riesgos significativos de manipulación; y «sin riesgo evidente», que es aquella que recomienda películas o canciones basándose en las preferencias del usuario.

¿Qué dice sobre los deepfakes?

En el proyecto de ley se considera como «riesgo inaceptable» prácticas con alto potencial de manipulación de personas, así como el uso de sistemas de categorización biométrica, salvo para fines terapéuticos autorizados con consentimiento informado y autorización sanitaria correspondiente.

Adicionalmente, también se prohíben sistemas de calificación social genérica y sistemas de IA que empleen técnicas de facial scraping para la extracción no selectiva de imágenes faciales, donde quedaría incluido la creación de deepfakes de contenido sexual que vulnere a niños, niñas y adolescentes.

Aisén Etcheverry, ministra de Ciencia.

La iniciativa del Congreso y la suplantación de la voz

El diputado Alejandro Bernales (PL), el 17 julio de 2023, presentó un proyecto de ley que moderniza el delito de usurpación de identidad en el contexto de uso de inteligencia artificial, innovando en lo que refiere a la capacidad de la IA para imitar o replicar la voz, pero también incluyendo la suplantación visual.

Por lo anterior, es que la iniciativa sustituye el artículo 214 del Código Penal:

  • Artículo actual: El que usurpare el nombre de otro será castigado con presidio menor en su grado mínimo, sin perjuicio de la pena que pudiere corresponderle a consecuencia del daño que en su fama o intereses ocasionare a la persona cuyo nombre ha usurpado.
  • Artículo del proyecto: El que usurpare la identidad física o virtual de otro, mediante la simulación nominativa, visual, auditiva o el uso de datos personales, será castigado con presidio menor en su grado mínimo, sin perjuicio de la pena que pudiere corresponderle a consecuencia del daño que en su fama o intereses ocasionare a la persona cuya identidad ha usurpado.

De acuerdo al estado del boletín, el proyecto se encuentra en primer trámite constitucional, en la Comisión de Constitución, siendo el 25 de julio del año 2023, el último movimiento en su tramitación.

Fast Check CL es un medio de comunicación, que depende de sus suscriptores para financiar el equipo de trabajo que hizo este artículo. Sin ti este proyecto finalizará en 2025. Puedes ser suscriptor/a y ayudarnos a combatir la desinformación en Chile por solo 1.500 al mes. 

Te puede interesar:

Los Ríos

Testimonios detallan cómo exfuncionario del GORE de Los Ríos vendió madera fiscal a un precio siete veces menor que su valor real

La Fiscalía de Los Ríos solicitó cinco años de presidio menor en su grado máximo, una multa superior a los $8 millones y la inhabilitación absoluta para ejercer cargos públicos contra Ernesto Espinoza Navarrete, exjefe de la División de Fomento e Industria del GORE de Los Ríos, acusado de fraude al Fisco por la venta irregular de madera fiscal. Según la investigación y una querella del Consejo de Defensa del Estado, Espinoza habría autorizado la tala y venta de 34 árboles pertenecientes al GORE a un particular por $2,1 millones, pese a que su valor real superaba los $17,8 millones. Testimonios recogidos en la investigación -a los que accedió Fast Check CL- describen cómo el exfuncionario habría negociado y recibido el dinero en efectivo, sin documentación ni registro institucional.

Estafa

Se hacía pasar por ministro de la Corte Suprema: así engañaron a funcionarios del Poder Judicial para suplantarlos y pedir dinero

La Corporación Administrativa del Poder Judicial presentó una querella por estafa frustrada, usurpación de cargo público y fraude informático tras llamadas en las que un desconocido se hizo pasar por un ministro de la Corte Suprema. El impostor pidió correos y números institucionales para «enviar un PDF reservado» y luego intervino las cuentas de WhatsApp de los funcionarios, desde donde solicitó dinero a sus contactos.

Posible infracción a la Ley: actual concejal de Peralillo obtuvo contratos en su propio municipio cuando era funcionario

Antes de asumir como concejal RN en Peralillo, Jaime Eduardo Gutiérrez Flores se adjudicó contratos de prestación de servicios con la misma municipalidad en la que trabajaba como funcionario y donde su hermana es funcionaria de planta. Según registros públicos revisados por Fast Check CL, mientras mantenía vínculo laboral con el municipio también obtuvo millonarios contratos a través del portal Mercado Público. Su última adjudicación podría constituir una vulneración al artículo 35 quáter de la Ley de Compras Públicas, que prohíbe contratar a funcionarios del propio organismo o a parientes de estos hasta el segundo grado de consanguinidad o afinidad.

El personaje que canta en el jingle de Jeanette Jara es ‘Il Nene de Oro’, cantante condenado por tráfico de drogas: #Falso

Tras el lanzamiento del jingle oficial de la campaña de Jeannette Jara, comenzó a circular la versión de que el tema habría sido interpretado por Jesús Ortiz, conocido artísticamente como Nene de Oro, quien fue detenido en 2024 durante un operativo de la PDI por tráfico de armas y drogas en Estación Central. Sin embargo, esto es #Falso: el mánager de Ortiz confirmó a Fast Check CL que no mantienen ningún vínculo con campañas políticas, y desde el comando de la candidata precisaron que la voz pertenece al rapero Seo2, exintegrante del grupo Makiza.

Últimos chequeos:

(Video) “Submarino ruso en el caribe”: #Engañoso

En redes ha circulado un video de un supuesto submarino ruso en aguas venezolanas. Fast Check CL califica el contenido de #Engañoso. Si bien el metraje muestra a un vehículo militar náutico en el caribe, este data de hace más de un año y se grabó en Cuba.

“Miles de judíos salieron a las calles de Nueva York (…) a protestar contra Trump mientras gritaban los sionistas nunca fueron judíos”: #Engañoso

Se viralizó un video que muestra a miles de judíos ortodoxos protestando en las calles de Nueva York, esto supuestamente contra el presidente de Estados Unidos, Donald Trump. Sin embargo, Fast Check CL califica el contenido como #Engañoso. Si bien el video exhibe a miles de judíos protestando, el motivo principal de la aglomeración fue un cambio en las reglas del servicio militar israelí, no el presidente de EE.UU.

El personaje que canta en el jingle de Jeanette Jara es ‘Il Nene de Oro’, cantante condenado por tráfico de drogas: #Falso

Tras el lanzamiento del jingle oficial de la campaña de Jeannette Jara, comenzó a circular la versión de que el tema habría sido interpretado por Jesús Ortiz, conocido artísticamente como Nene de Oro, quien fue detenido en 2024 durante un operativo de la PDI por tráfico de armas y drogas en Estación Central. Sin embargo, esto es #Falso: el mánager de Ortiz confirmó a Fast Check CL que no mantienen ningún vínculo con campañas políticas, y desde el comando de la candidata precisaron que la voz pertenece al rapero Seo2, exintegrante del grupo Makiza.

El personaje que canta en el jingle de Jeanette Jara es ‘Il Nene de Oro’, cantante condenado por tráfico de drogas: #Falso

Tras el lanzamiento del jingle oficial de la campaña de Jeannette Jara, comenzó a circular la versión de que el tema habría sido interpretado por Jesús Ortiz, conocido artísticamente como Nene de Oro, quien fue detenido en 2024 durante un operativo de la PDI por tráfico de armas y drogas en Estación Central. Sin embargo, esto es #Falso: el mánager de Ortiz confirmó a Fast Check CL que no mantienen ningún vínculo con campañas políticas, y desde el comando de la candidata precisaron que la voz pertenece al rapero Seo2, exintegrante del grupo Makiza.

“Hacen referencia a una condena que tuvo que cumplir Jara por el mal uso de recursos públicos cuando fue Core”: #Falso

Un video en TikTok asegura que Jeannette Jara fue condenada por el mal uso de fondos públicos mientras fue consejera regional de La Araucanía. Sin embargo, esto es completamente #Falso. La desinformación —que ya circuló un mes atrás—, confunde a la actual candidata presidencial con una exCore de La Araucanía que fue formalizada por dicho delito en 2013. Por lo demás, Jeannette Jara nunca se desempeñó en dicho cargo y desde su comando desmintieron la información.

(Video) “Parisi se adelanta a la segunda vuelta y da su apoyo a Jeannette Jara”: ‘Yo no voy a dejar que el cuico gane y vamos a ir en masa… Jara gana’: #Engañoso

Un video viral muestra a Franco Parisi diciendo: «Yo no voy a dejar que el cuico gane y vamos a ir en masa… Jara gana», dando supuestamente su apoyo a la candidata oficialista para una eventual segunda vuelta. Sin embargo, esto es #Engañoso, ya que si bien menciona dicha frase, la hace en referencia al pensamiento de los votantes —es decir, tercera persona—, no a su opción personal.

“Miles de judíos salieron a las calles de Nueva York (…) a protestar contra Trump mientras gritaban los sionistas nunca fueron judíos”: #Engañoso

Se viralizó un video que muestra a miles de judíos ortodoxos protestando en las calles de Nueva York, esto supuestamente contra el presidente de Estados Unidos, Donald Trump. Sin embargo, Fast Check CL califica el contenido como #Engañoso. Si bien el video exhibe a miles de judíos protestando, el motivo principal de la aglomeración fue un cambio en las reglas del servicio militar israelí, no el presidente de EE.UU.