Pasar al contenido principal
OpenAI

1 de mayo de 2024

Seguridad

Operación “Zero Zeno”: actividad de influencia vinculada a Israel

OpenAI bloqueó cuentas vinculadas a una operación de origen israelí no denunciada anteriormente, a la que llamamos “Zero Zeno”, que usaba IA para generar contenido contra Hamás, Catar y el BJP, y a favor de Israel y la Histadrut.

Cargando...

Este estudio de caso se publicó originalmente en el informe de OpenAI de mayo de 2024⁠(se abre en una nueva ventana).

Responsable

Bloqueamos un grupo de cuentas operadas desde Israel que se utilizaban para generar y editar contenido destinado a una operación de influencia que abarcaba X, Facebook, Instagram, sitios web y YouTube. La red era operada por STOIC, una empresa israelí de gestión de campañas políticas. En honor al fundador de la escuela filosófica estoica y como reflejo de los bajos niveles de interacción que consiguió la red, la apodamos “Zero Zeno”.

Comportamiento

Esta operación se dirigió a públicos de Canadá, Estados Unidos e Israel con contenido en inglés y hebreo. A principios de mayo, comenzó a dirigirse al público de la India con contenido en inglés. También parece que se preparaba para ejecutar una campaña de operaciones de influencia dirigida al público de Ghana.

La operación usó nuestros modelos para generar artículos web y comentarios en redes sociales que luego se publicaron en varias plataformas, en especial Instagram, Facebook y X.

Comentarios en inglés generados por esta red y publicados en Instagram. Tanto la publicación original como las respuestas fueron generadas por esta campaña.

Comentarios en inglés generados por esta red y publicados en Instagram. Tanto la publicación original como las respuestas fueron generadas por esta campaña.

La operación también usó nuestros modelos para crear identidades ficticias y biografías para redes sociales a partir de variables como la edad, el género y la ubicación, y para investigar a personas de Israel que comentaban públicamente sobre el sindicato israelí Histadrut. Nuestros modelos se negaron a proporcionar información personal en respuesta a estas instrucciones.

El contenido generado por esta red se publicó en varias plataformas de redes sociales. Una investigación de fuentes abiertas del Laboratorio de Investigación Forense Digital del Atlantic Council⁠(se abre en una nueva ventana) identificó parte de su contenido en Facebook, Instagram y X. Cuando se deshabilitaron esas cuentas, la operación adquirió otras nuevas. También apareció contenido en cuatro sitios web que se hacían pasar por grupos activistas centrados en el conflicto de Gaza y en cuestiones más amplias sobre las relaciones entre personas de fe judía y musulmana: uc4canada.com, the-good-samaritan.com, ufnews.io y nonagenda.com.

En algunos casos, identificamos cuentas falsas de esta operación que comentaban publicaciones en redes sociales hechas por la propia operación, probablemente para dar la impresión de que el público interactuaba con ellas.

Publicación en X de una cuenta asociada con la actividad que el DFRLab identificó por primera vez, junto con sus respuestas. Todas las respuestas de esta imagen fueron generadas por esta campaña.

Publicación en X de una cuenta asociada con la actividad que el DFRLab identificó por primera vez, junto con sus respuestas. Todas las respuestas de esta imagen fueron generadas por esta campaña.

Muchas de las cuentas de redes sociales que publicaron contenido de esta red usaban fotos de perfil aparentemente creadas con un tipo anterior de inteligencia artificial: redes generativas antagónicas (GAN). Estas imágenes pueden descargarse fácilmente de internet. A pesar de la facilidad para crear estas imágenes, identificamos varias cuentas de redes sociales de esta red que usaban la misma foto. En ocasiones, dos o más cuentas con la misma foto de perfil respondían a una misma publicación en redes sociales.

Fotos de perfil de cuentas de X que publicaron comentarios generados por esta red. La imagen presenta indicios visuales compatibles con la generación mediante redes generativas antagónicas (GAN).

Fotos de perfil de cuentas de X que publicaron comentarios generados por esta red. La imagen presenta indicios visuales compatibles con la generación mediante redes generativas antagónicas (GAN).

Contenido

Esta operación se dividía en varias campañas temáticas, la mayoría relacionadas de forma indirecta con el conflicto de Gaza y la cuestión más amplia de las relaciones entre personas de fe judía y musulmana. En mayo, interrumpimos una actividad centrada en las elecciones de la India menos de 24 horas después de que comenzara.

Una investigación de fuentes abiertas de febrero⁠(se abre en una nueva ventana) describió cómo esta red criticaba a la Agencia de Naciones Unidas para los Refugiados de Palestina, UNRWA. El informe de marzo del DFRLab⁠(se abre en una nueva ventana) destacó contenido centrado en Canadá que criticaba a quienes las publicaciones de la campaña describían como “islamistas radicales” en ese país. Otro grupo se centró en universidades de Estados Unidos y acusó a los manifestantes propalestinos de promover el antisemitismo y el terrorismo. Un cuarto grupo se centró en Catar y presentó sus inversiones en Estados Unidos como una amenaza para el estilo de vida estadounidense. Un quinto grupo generó publicaciones en hebreo para redes sociales. Por lo general, estas elogiaban a la organización sindical Histadrut y a sus dirigentes. Por último, en mayo, la red comenzó a generar comentarios centrados en la India que criticaban al partido gobernante BJP y elogiaban al partido opositor Congreso.

En ocasiones, la red parece haber cambiado el tema de sus cuentas; por ejemplo, algunas que antes publicaban sobre Canadá pasaron a centrarse en Estados Unidos, la India o la Histadrut, o en más de uno de estos temas.

Tres comentarios en X de una cuenta que publicó repetidamente contenido generado por esta campaña, del 1 al 4 de mayo de 2024. La primera publicación (abajo) parece haber sido un intento de construir una identidad ficticia. La segunda publicación se centra en Canadá e incluye una publicación de la principal cuenta de esta red dirigida a ese país. La tercera se centra en la India.

Tres comentarios en X de una cuenta que publicó repetidamente contenido generado por esta campaña, del 1 al 4 de mayo de 2024. La primera publicación (abajo) parece haber sido un intento de construir una identidad ficticia. La segunda se centra en Canadá e incluye una publicación de la principal cuenta de esta red dirigida a ese país. La tercera se centra en la India.

Parte del contenido creado por esta red se publicó en redes sociales como respuesta a figuras occidentales destacadas de ambos lados del espectro político. Por lo general, estas respuestas no tenían relación con la publicación original. Por ejemplo, se publicó un comentario sobre cómo Catar estaba “comprando” Estados Unidos en respuesta a una publicación sobre las preferencias musicales del expresidente Trump.

Arriba, publicación de Laura Ingraham sobre las preferencias musicales del presidente Trump. Abajo, publicación con un comentario generado por esta red. Observa la diferencia en las cifras de interacción entre la publicación original y la respuesta.

Arriba, publicación de Laura Ingraham sobre las preferencias musicales del presidente Trump. Abajo, publicación con un comentario generado por esta red. Observa la diferencia en las cifras de interacción entre la publicación original y la respuesta.

Evaluación del impacto

La actividad de Zero Zeno parece haber conseguido poca o ninguna interacción, salvo la de sus propias cuentas no auténticas. (Meta y X ya deshabilitaron muchas cuentas, por lo que las cifras actuales de interacción podrían no mostrar el panorama completo).

Si usamos la Escala de Propagación⁠(se abre en una nueva ventana) para evaluar el impacto de las operaciones de influencia, que las califica del 1 (más bajo) al 6 (más alto), consideraríamos que esta es una operación de categoría 2, caracterizada por publicar en varias plataformas y sitios web, pero sin pruebas de una amplificación significativa por parte de personas ajenas a la red.

Canal de YouTube asociado con la campaña de esta operación dirigida a Canadá. Al 25 de abril de 2024, había publicado un video que no había recibido ninguna visualización.

Canal de YouTube asociado con la campaña de esta operación dirigida a Canadá. Al 25 de abril de 2024, había publicado un video que no había recibido ninguna visualización.

Indicadores

Identificamos los siguientes dominios como asociados con las campañas de Zero Zeno.

  • nonagenda.com

  • the-good-samaritan.com

  • uc4canada.com

  • ufnews.io