Zamezení podvodné činnosti zločinecké skupiny z Kambodže
OpenAI zamezila v činnosti skupiny podvodníků z Kambodže, která používala ChatGPT na pomoc s investičními, romantickými a hazardními podvody a s vydáváním se za jiné osoby.
Úvod
Začátkem letošního roku jsme narušili organizaci podvodníků z Kambodže, která používala ChatGPT na pomoc s investičními, romantickými a hazardními podvody i podvody založenými na vydávání se za příslušníky policejních orgánů. Tuto činnost jsme začali vyšetřovat na základě podnětu od kolegů z WhatsAppu a od té doby jsme s partnery v odvětví a příslušnými orgány sdíleli další signály hrozeb.
Tato operace dokládá důležitou skutečnost o moderních podvodných sítích: organizované zločinecké skupiny se málokdy omezují na jediný typ podvodu. Naopak, oportunisticky využijí každý příběh, identit a taktiku, o kterém usoudí, že jim nejlépe pomůže oklamat oběti. Při vyšetřování běžně pozorujeme, že aktéři přecházejí mezi různými typy podvodů nebo v rámci jediné operace kombinují několik podvodných technik.
Někteří uživatelé v síti také vytvářeli obsah, který naznačoval vazby na obchodování s lidmi a nucení k trestní činnosti. Tato zjištění odpovídají rozsáhlým veřejně dostupným zprávám(otevře se v novém okně), které popisují(otevře se v novém okně) organizované zločinecké skupiny v jihovýchodní Asii. Ty nabírají pracovníky pod příslibem legálního zaměstnání, ale následně je uvězní v systému dluhového nevolnictví a donucování. Ačkoli nemůžeme nezávisle zjistit okolnosti každého zapojeného jednotlivce, tato činnost připomíná, že lidé páchající podvody mohou být sami oběťmi vykořisťování.
Aktér
Zablokovali jsme koordinovanou síť účtů ChatGPT, která s velkou pravděpodobností pocházela z Kambodže a pravděpodobně působila v Poipetu nebo jeho okolí. Toto město v provincii Banteay Meanchey veřejně dostupné zprávy(otevře se v novém okně) opakovaně(otevře se v novém okně) spojují(otevře se v novém okně) s komplexy pro internetové podvody a operacemi zaměřenými na obchodování s lidmi.
Síť využívala naše modely k vytváření a provozování falešných online identit, generování a překládání zpráv zasílaných zamýšleným obětem podvodů, tvorbě propagačního obsahu pro podvodná schémata a podpoře každodenního provozu.
Stejně jako u předchozích(otevře se v novém okně) podvodných sítí, které jsme narušili, využívala část uživatelů ChatGPT také k administrativní práci. Patřilo k ní vypracovávání interních oznámení, překlad zpráv mezi zaměstnanci a dokumentování záležitostí, které patrně souvisely s náborem, imigračním statusem, pracovními podmínkami a pracovní kázní.
Chování
Síť souběžně provozovala několik typů podvodů a často kombinovala prvky různých schémat. Operátoři například využívali seznamovací identity k získání důvěry a následně nabízeli podvodné investiční příležitosti spojené s kryptoměnami a spotovým obchodováním se zlatem. Jiní uživatelé vedli pod smyšlenými identitami dlouhé romantické konverzace, vydávali se za zástupce online hazardních platforem nabízejících falešné bonusy a výhry nebo za orgány činné v trestním řízení a tvrdili obětem, že musejí zaplatit pokuty za spáchání závažných trestných činů.
Přestože se jednotlivé příběhy lišily, uživatelé napříč sítí soustavně vykazovali stejný základní vzorec klamavého chování. Vytvářeli a provozovali například falešné seznamovací profily, smyšlené investiční poradce a podvodné identity příslušníků policejních složek. Vytvářeli také obrázky padělaných dokumentů, například cestovních pasů, právních oznámení, potvrzení o nákupu akcií a rozhraní hazardních platforem.
Jak jsme zdůraznili v(otevře se v novém okně) předchozích(otevře se v novém okně) zprávách(otevře se v novém okně), podvodníci se při komunikaci s cíli řídili obvyklým vzorcem, který označujeme jako navázání kontaktu, vyvolání emocí a vylákání peněz.
Navázání kontaktu: Síť používala ChatGPT k překládání a generování konverzací s cíli na komunikačních platformách, jako jsou WhatsApp a Telegram. Podvodníci také vytvářeli obsah pro sociální sítě a vyhledávali materiály pro seznamovací profily, jimiž podporovali své falešné identity.
Vyvolání emocí: Zprávy podvodníků často využívaly emocionální nátlak a techniky budování důvěry. Patřily k nim přísliby zaručených výnosů a „bezrizikových“ investic, romantická vyjádření, pokyny k utajení konverzace a naléhavé výzvy k rychlému jednání, než vyprší platnost smyšlených bonusů.
Vylákání peněz: Podvodníci obětem nařizovali, aby vložily peníze pro odemknutí údajných odměn, zaplatily aktivační poplatky či smyšlené pokuty a následně jako doklad o platbě poskytly snímky převodů nebo údaje o účtu.

Falešné rozhraní pro obchodování s kryptoměnami, které pomocí ChatGPT vytvořil jeden z podvodníků v síti.

Obrázek vytvořený pomocí AI, který jeden z podvodníků v síti použil k propagaci falešné investiční příležitosti.
Známky obchodování s lidmi
Vedle podvodů někteří uživatelé vytvářeli obsah naznačující zapojení do dalších činností porušujících naše zásady, které odhalujeme a kterým zamezujeme, například do obchodování s lidmi nebo nucené práce. Patřila k tomu tvorba inzerátů na sociálních sítích nabízejících v Poipetu práci „operátora chatu“ s příslibem letenek, ubytování, stravy, víz a pracovních povolení.
Další činnost zřejmě souvisela se správou pracovníků uvnitř skupiny. Uživatelé vedli záznamy o dluzích zaměstnanců, srážkách ze mzdy, kázeňských pokutách a splátkách půjček a překládali diskuse o imigračním statusu, pracovních povoleních, překročení platnosti víz a náborových pobídkách.
Některé konverzace také zmiňovaly údajné zadržování, pokusy o útěk a možnou trestní odpovědnost lidí, kteří se stali oběťmi obchodování s lidmi a byli nuceni pracovat v podvodných operacích. Ačkoli nám tyto konverzace neumožňují určit situaci konkrétních jednotlivců, odpovídají rozsáhlým veřejně dostupným zprávám(otevře se v novém okně), které popisují(otevře se v novém okně) činnost organizovaných zločineckých skupin v jihovýchodní Asii.


Obrázky vytvořené pomocí AI, které podvodníci ze sítě používali na sociálních sítích k inzerování pracovních míst v Kambodži. Začernění přidala společnost OpenAI.
Dopad
Zablokovali jsme účty ChatGPT spojené s touto operací, sdíleli relevantní ukazatele s partnery v odvětví a příslušnými úřady a podnikli kroky, které těmto aktérům ztíží opětovný přístup k našim produktům a službám.
Celkový rozsah finančních ztrát spojených s touto sítí není znám, ale podle vlastní komunikace podvodníků mohla operace oslovit stovky potenciálních obětí prostřednictvím několika typů podvodů. Konverzace uživatelů zmiňovaly jednotlivé oběti, které přišly o tisíce dolarů, tato tvrzení však nedokážeme nezávisle ověřit.
V širším pohledu tento případ potvrzuje dva trendy. Zaprvé mohou být organizované podvodné sítě velmi diverzifikované a provozovat několik podvodných schémat současně, místo aby se úzce zaměřovaly na jediný typ podvodu. Zadruhé bývají hranice mezi internetovými podvody, organizovaným zločinem a obchodováním s lidmi často nejasné. Účinné zamezení proto vyžaduje zaměřit se nejen na podvodnou činnost namířenou proti obětem, ale také na zločinecké organizace, které ji řídí a profitují z ní.