Hopp til hovedinnhold
OpenAI

1. juni 2025

Sikkerhet

Operasjon «VAGue Focus»: Sosial manipulering og påvirkningsaktivitet

OpenAI utestengte kontoer som brukte KI til sosial manipulering, undersøkelser om overvåkning og påvirkningsaktivitet rettet mot kritikere.

Laster inn …

Denne casestudien ble opprinnelig publisert i OpenAIs rapport fra juni 2025⁠(åpnes i et nytt vindu).

Aktør

Vi utestengte et lite nettverk av ChatGPT‑kontoer som brukte modellene våre til å generere innlegg på sosiale medier, analysere datasett og oversette e-poster og meldinger som lignet forsøk på sosial manipulering, fra kinesisk til engelsk. Kontoene ga modellene våre instrukser på kinesisk og var for det meste aktive i arbeidstiden i Fastlands-Kina.

De genererte meldinger som angivelig kom fra ansatte i tre virksomheter med geopolitisk fokus: «Focus Lens News», «BrightWave Media Europe» og «Visionary Advisory Group» (VAG). I tillegg genererte ChatGPT‑kontoene tekst som samsvarte med innlegg og profiltekster på X-kontoer knyttet til disse tre virksomhetene. I andre sammenhenger beskrev trusselaktørene disse virksomhetene som skalkeskjul for etterretningsinnhenting og -analyse. Med utgangspunkt i disse navnene har vi kalt operasjonen «VAGue Focus».

Atferd

Operasjonen brukte ChatGPT som støtte innen fire hovedområder. For det første brukte kontoene hovedsakelig modellene våre til å generere innlegg på sosiale medier og profiltekster for nettidentiteter som så ut til å inngå i en skjult påvirkningsoperasjon. Innleggene ble spredt av X-kontoer som utga seg for å tilhøre journalister og geopolitiske analytikere.

Innlegg generert av denne trusselaktøren med ChatGPT og publisert fra en X-konto som jevnlig publiserte aktørens innhold.

Innlegg generert av denne trusselaktøren med ChatGPT og publisert fra en X-konto som jevnlig publiserte aktørens innhold.

For det andre bearbeidet og oversatte kontoene korrespondanse til en amerikansk senator om nominasjonen av en embetsperson i administrasjonen. Vi kan ikke uavhengig bekrefte om noe av korrespondansen ble sendt.

For det tredje stilte kontoene en rekke grunnleggende spørsmål om verktøy for angrep på og utnyttelse av datanettverk. Modellene våre ga bare generelle forklaringer på verktøyenes bruksområder og funksjoner. Disse spørsmålene var mindre avanserte enn spørsmålene fra cyberaktørene vi beskriver senere i rapporten, og tyder på et lavt kompetansenivå.

Til slutt ba brukerne jevnlig om oversettelser fra kinesisk til engelsk av meldinger som så ut til å være utformet for å komme i kontakt med, og etter hvert hente ut informasjon fra, ukjente samtalepartnere. Noen av disse meldingene ble publisert på sosiale medier som svar til journalister og forskere. Andre lignet direktemeldinger og dukket ikke opp i nettsøk.

Uoppfordret henvendelse til en forsker via en offentlig melding på X, fra en konto knyttet til denne operasjonen.

Uoppfordret henvendelse til en forsker via en offentlig melding på X, fra en konto knyttet til denne operasjonen.

Generert innhold

Nettverkets hovedmål så ut til å være å samle inn etterretningsinformasjon ved å utgi seg for å være fagpersoner basert i Europa eller Tyrkia. I innholdet de genererte og publiserte på nettet, beskrev operatørene «Focus Lens News» som en uavhengig, europeiskbasert virksomhet med analyse og rapportering som spesialfelt. Operatørene hevdet imidlertid også at denne profileringen i realiteten var et skalkeskjul for innhenting, analyse og formidling av etterretningsinformasjon.

Ifølge nettstedet det ble lenket til i profiltekster på sosiale medier, holder Visionary Advisory Group til i Tyrkia og spesialiserer seg på profesjonell geopolitisk rådgivning. Operatørene brukte modellene våre til å oversette instrukser fra kinesisk til engelsk der det ble hevdet at VAG Group ønsket informasjon om USAs økonomiske politikk og finanspolitikk, og var villig til å betale 2 000 amerikanske dollar i timen for et intervju. De oversatte også tilbud om betaling for graderte dokumenter.

VAG Groups nettsted finnes på tyrkisk og engelsk. På «Kontakt oss»-siden i den engelske versjonen er de kinesiske tegnene for «kontakt oss» (聯絡) synlige i menyen. Dette var den eneste kinesiske teksten på hele domenet.

Skjermbilde av VAG Groups «Kontakt oss»-side, der de kinesiske tegnene for «kontakt oss» (聯絡) er synlige i nedtrekksmenyen.

Skjermbilde av VAG Groups «Kontakt oss»-side, der de kinesiske tegnene for «kontakt oss» (聯絡) er synlige i nedtrekksmenyen.

Noe av nettverkets innhold lignet markedsføringsmateriell for mer omfattende påvirkningsoperasjoner. Ifølge påstandene, som vi ikke kan bekrefte uavhengig, brukte operasjonen maskinlæring, naturlig språkbehandling og automatisert dataskraping til å identifisere innflytelsesrike stemmer og temaer på sosiale medier.

Effekt

Kontoene på sosiale medier som var knyttet til denne aktiviteten, fikk lite autentisk engasjement på nettet. Bare X-kontoen til Focus Lens News hadde et betydelig antall følgere, med 17 000. Kontoen ble imidlertid opprettet i november 2014 under et annet navn, publiserte innlegg i tre dager og var deretter taus frem til midten av 2024. Dette er typisk for kontoer som er blitt kompromittert og tatt i bruk til nye formål, og følgertallet bør derfor tolkes med varsomhet.

Med utgangspunkt i Breakout-skalaen⁠(åpnes i et nytt vindu), som måler effekten av påvirkningsoperasjoner, vil vi plassere den offentlig synlige delen av operasjonen i nedre del av kategori 2: aktivitet på flere plattformer, men få tegn til at ekte personer fanget opp eller delte innholdet i særlig omfang. Det finnes ikke tilstrekkelig dokumentasjon til å vurdere effekten av operasjonens sosiale manipulering og øvrige skjulte aktivitet.