arXiv‑Studie: LLMs skalieren Romance‑Baiting‑Betrug und übertreffen Menschen bei der Compliance
Ein arXiv-Preprint berichtet, dass große Sprachmodelle weit verbreitet in Romance-Baiting-Operationen eingesetzt werden und dass LLM-basierte Agenten in kontrollierten Studien eine höhere Compliance als menschliche Betreiber erzielten. Das Papier warnt, dass Automatisierung und schwache Sicherheitsfilter eine rasche Skalierung von Romance- und Anlagebetrügereien ermöglichen könnten.
Ein arXiv-Preprint vom Dezember präsentiert experimentelle und beobachtende Belege dafür, dass Large‑Language‑Models bereits in Romance‑Betrugs‑ und Anlagebetrugs‑Operationen eingebettet sind und Gesprächsaufgaben automatisieren, die Vertrauen aufbauen und die Gefügigkeit von Opfern fördern. In kontrollierten Versuchen, die die Autoren beschreiben, erzeugten LLM‑basierte Agenten Nachrichten und Dialogstrategien, die im Vergleich zu menschlichen Operatoren messbare Zunahmen der Opfernachgiebigkeit zur Folge hatten, während eingesetzte Sicherheitsfilter häufig versagten, überzeugende, betrügerische Dialoge zu kennzeichnen. Die Forschenden verbinden diese Ergebnisse mit Feldanalysen von Aktivitäten in Betrugsforen und Werkzeug‑Ökosystemen, um zu zeigen, wie LLMs die Arbeitsintensität reduzieren, die Reichweite beschleunigen und die angewandten Social‑Engineering‑Techniken über Gerichtsbarkeiten hinweg diversifizieren. Das Papier betont, dass ohne substanzielle Verbesserungen bei Modellsicherheitskontrollen, Detektionssystemen und Plattform‑Governance die Automatisierung das Ausmaß und die Geschwindigkeit von Romance‑ und Krypto‑Anlagebetrügereien dramatisch erhöhen könnte. Die Autoren empfehlen mehrschichtige Abwehrmaßnahmen, darunter robuste Inhaltsklassifizierung, Herkunftsnachverfolgung, Nutzeraufklärung und koordinierte Reaktionen von Strafverfolgung und Industrie, um die operativen Vorteile, die LLMs böswilligen Akteuren bieten, abzuschwächen.