Ir al contenido principal
OpenAI

1 de mayo de 2024

Seguridad

Operación «Zero Zeno»: actividad de influencia vinculada a Israel

OpenAI bloqueó cuentas vinculadas a una operación de origen israelí de la que no se había informado antes y que denominamos «Zero Zeno». Usaba IA para generar contenido contra Hamás, Catar y el BJP, y a favor de Israel y la Histadrut.

Cargando…

Este estudio de caso se publicó originalmente en el informe de mayo de 2024⁠(se abre en una ventana nueva) de OpenAI.

Actor

Bloqueamos un grupo de cuentas operadas desde Israel que se utilizaban para generar y editar contenido destinado a una operación de influencia presente en X, Facebook, Instagram, sitios web y YouTube. La red estaba operada por STOIC, una empresa israelí de gestión de campañas políticas. En honor al fundador de la escuela filosófica estoica y para reflejar los bajos niveles de interacción que consiguió la red, la hemos denominado «Zero Zeno».

Comportamiento

Esta operación se dirigió a audiencias de Canadá, Estados Unidos e Israel con contenido en inglés y hebreo. A principios de mayo, comenzó a dirigirse a audiencias de la India con contenido en inglés. También parece que se estaba preparando para llevar a cabo una campaña de influencia dirigida a audiencias de Ghana.

La operación utilizó nuestros modelos para generar artículos web y comentarios en redes sociales que después se publicaron en varias plataformas, especialmente Instagram, Facebook y X.

Comentarios en inglés generados por esta red y publicados en Instagram. Tanto la publicación original como las respuestas fueron generadas por esta campaña.

Comentarios en inglés generados por esta red y publicados en Instagram. Tanto la publicación original como las respuestas fueron generadas por esta campaña.

La operación también utilizó nuestros modelos para crear identidades ficticias y biografías para redes sociales a partir de variables como la edad, el género y la ubicación, y para investigar a personas de Israel que habían publicado comentarios sobre el sindicato israelí Histadrut. Nuestros modelos se negaron a proporcionar información personal en respuesta a estas instrucciones.

El contenido generado por esta red se publicó en varias plataformas de redes sociales. Una investigación de fuentes abiertas del Laboratorio de Investigación Forense Digital del Atlantic Council⁠(se abre en una ventana nueva) identificó parte de su contenido en Facebook, Instagram y X; cuando se desactivaron esas cuentas, la operación adquirió otras nuevas. Otro contenido apareció en cuatro sitios web que se hacían pasar por grupos activistas centrados en el conflicto de Gaza y en cuestiones más amplias sobre las relaciones entre personas de fe judía y musulmana: uc4canada.com, the-good-samaritan.com, ufnews.io y nonagenda.com.

En algunos casos, detectamos cuentas falsas de esta operación que comentaban publicaciones en redes sociales realizadas por la propia operación, probablemente para dar la impresión de que la audiencia interactuaba con ellas.

Publicación en X de una cuenta asociada a la actividad que identificó por primera vez el DFRLab, junto con sus respuestas. Todas las respuestas de esta imagen fueron generadas por esta campaña.

Publicación en X de una cuenta asociada a la actividad que identificó por primera vez el DFRLab, junto con sus respuestas. Todas las respuestas de esta imagen fueron generadas por esta campaña.

Muchas de las cuentas de redes sociales que publicaron contenido de esta red utilizaban fotos de perfil que parecen haberse creado mediante un tipo anterior de inteligencia artificial: las redes generativas antagónicas (GAN). Estas imágenes pueden descargarse fácilmente de internet. Pese a la facilidad con la que pueden crearse estas imágenes, identificamos varias cuentas de redes sociales de esta red que utilizaban la misma foto. En ocasiones, dos o más cuentas con la misma foto de perfil respondían a una misma publicación en redes sociales.

Fotos de perfil de cuentas de X que publicaron comentarios generados por esta red. La imagen presenta indicios visuales compatibles con la generación mediante redes generativas antagónicas (GAN).

Fotos de perfil de cuentas de X que publicaron comentarios generados por esta red. La imagen presenta indicios visuales compatibles con la generación mediante redes generativas antagónicas (GAN).

Contenido

Esta operación se dividía en varias campañas temáticas, la mayoría relacionadas de forma indirecta con el conflicto de Gaza y con la cuestión más amplia de las relaciones entre personas de fe judía y musulmana. En mayo, interrumpimos una actividad centrada en las elecciones de la India menos de 24 horas después de que comenzara.

Una investigación de fuentes abiertas publicada en febrero⁠(se abre en una ventana nueva) describió cómo esta red criticaba a la agencia de la ONU para los refugiados de Palestina, UNRWA. El informe de marzo del DFRLab⁠(se abre en una ventana nueva) destacó contenido centrado en Canadá que criticaba a quienes las publicaciones de la campaña describían allí como «islamistas radicales». Otro grupo se centró en universidades de Estados Unidos y acusó a los manifestantes propalestinos de promover el antisemitismo y el terrorismo. Un cuarto grupo se centró en Catar y presentó sus inversiones en Estados Unidos como una amenaza para el estilo de vida estadounidense. Un quinto grupo generó publicaciones en hebreo para redes sociales. Estas publicaciones solían elogiar a la organización sindical Histadrut y a sus dirigentes. Por último, en mayo, la red comenzó a generar comentarios centrados en la India que criticaban al partido gobernante BJP y elogiaban al partido opositor Congreso.

En ocasiones, la red parece haber cambiado la temática de sus cuentas; por ejemplo, algunas que antes habían publicado sobre Canadá pasaron a centrarse en Estados Unidos, la India o la Histadrut, o en varios de estos temas.

Tres comentarios en X de una cuenta que publicó reiteradamente contenido generado por esta campaña, del 1 al 4 de mayo de 2024. La primera publicación (abajo) parece haber sido un intento de crear una identidad ficticia. La segunda publicación se centra en Canadá e incluye una publicación de la principal cuenta de esta red dirigida a ese país. La tercera se centra en la India.

Tres comentarios en X de una cuenta que publicó reiteradamente contenido generado por esta campaña, del 1 al 4 de mayo de 2024. La primera publicación (abajo) parece haber sido un intento de crear una identidad ficticia. La segunda se centra en Canadá e incluye una publicación de la principal cuenta de esta red dirigida a ese país. La tercera se centra en la India.

Parte del contenido creado por esta red se publicó en redes sociales como respuesta a figuras destacadas de Occidente de ambos lados del espectro político. Por lo general, estas respuestas no guardaban relación alguna con la publicación original. Por ejemplo, se publicó un comentario sobre cómo Catar estaba «comprando» Estados Unidos en respuesta a una publicación sobre las preferencias musicales del expresidente Trump.

Arriba, publicación de Laura Ingraham sobre las preferencias musicales del presidente Trump. Abajo, publicación que contiene un comentario generado por esta red. Obsérvese la diferencia en las cifras de interacción entre la publicación original y la respuesta.

Arriba, publicación de Laura Ingraham sobre las preferencias musicales del presidente Trump. Abajo, publicación que contiene un comentario generado por esta red. Obsérvese la diferencia en las cifras de interacción entre la publicación original y la respuesta.

Evaluación del impacto

La actividad de Zero Zeno parece haber generado poca o ninguna interacción, salvo la procedente de sus propias cuentas no auténticas. (Meta y X ya han desactivado muchas cuentas, por lo que las cifras actuales de interacción podrían no mostrar la situación completa).

Si aplicamos la escala Breakout⁠(se abre en una ventana nueva) para evaluar el impacto de las operaciones de influencia, que las puntúa del 1 (mínimo) al 6 (máximo), consideraríamos que esta es una operación de categoría 2, caracterizada por publicar en varias plataformas y sitios web, pero sin pruebas de que personas ajenas a la red hayan amplificado su contenido de forma significativa.

Canal de YouTube asociado a la campaña de esta operación dirigida a Canadá. A 25 de abril de 2024, había publicado un vídeo que no había recibido ninguna visualización.

Canal de YouTube asociado a la campaña de esta operación dirigida a Canadá. A 25 de abril de 2024, había publicado un vídeo que no había recibido ninguna visualización.

Indicadores

Identificamos los siguientes dominios como asociados a las campañas de Zero Zeno.

  • nonagenda.com

  • the-good-samaritan.com

  • uc4canada.com

  • ufnews.io