Wenn KI-Modelle zum Angriffsziel werden

enzozo AdobeStock 97576807
Bild: ©enzozo/stock.adobe.com

Zur Münchner Sicherheitskonferenz (13. bis 15. Februar) hat die Google Threat Intelligence Group (GTIG) einen Bericht veröffentlicht, mit dem die Verfasser die Debatte um KI-gestützte Bedrohungen auf eine operative Ebene ziehen. Ihre zentrale Beobachtung: Staatliche Akteure nutzen generative KI bereits heute systematisch für Cyberaufklärung, Social Engineering und wirtschaftlich relevante Spionage.

Neu sei dabei weniger die Technik als das Angriffsziel, so die GTIG. Mit sogenannten Model-Extraction-Angriffen oder ‚Distillation Attacks‘ gerieten erstmals KI-Modelle selbst ins Visier – eine Form von Diebstahl geistigen Eigentums, die insbesondere für Industrie, Mittelstand und technologiegetriebene Unternehmen relevant sei. Die Verfasser des Berichts betonen zudem, dass gleichzeitig durch KI-gestütztes ‚Rapport-Building Phishing‘ viele klassische Warnsignale verschwinden.

Sie ordnen die Ergebnisse des Berichts wie folgt ein: KI senkt Kosten, beschleunigt Angriffe und erschwert die Erkennung. Die GTIG möchte damit die sicherheitspolitischen Debatten in München ergänzen.

Hier eine Zusammenfassung der Inhalte:

Zunahme von Model-Extraktion-Angriffen oder ‚Distillation Attacks‘: Im vergangenen Jahr identifizierten GTIG und Google DeepMind Bedrohungsakteure, die versuchten, Model-Extraktion-Angriffe oder Distillation Attacks auf generative KI-Produkte durchzuführen, um Einblicke in die Schlussfolgerungen und Gedankengänge eines Modells zu gewinnen. Diese Angriffe gehen von globalen Unternehmen und akademischen Forschern aus, die versuchen, firmeneigene Logik zu klonen. Als häufiges Ziel der Angreifer nennt die GTIG etwa die Fähigkeit der Google-KI Gemini, logisches Denken zu entwickeln.

Bedrohungsakteure nutzen KI während des gesamten Angriffslebenszyklus, insbesondere zur Aufklärung für Social Engineering: Wie die GTIG weiter mitteilt, verwenden von Regierungen unterstützte Angreifer KI weiterhin zum Coden und Scripten, um Informationen über potenzielle Opfer zu sammeln, um öffentlich bekannte Schwachstellen zu erforschen und für Aktivitäten nach der Kompromittierung. Zu den jüngsten Bedrohungen dieser Art, die von der GTIG beobachtet wurden, gehören:

Der vom iranischen Staat unterstützte Akteur APT42 nutzte GenAI-Modelle zur Unterstützung der Aufklärung und gezieltes Social Engineering. APT42 missbraucht KI, um nach offiziellen E-Mails bestimmter Organisationen zu suchen und potenzielle Geschäftspartner auszuspionieren, um einen glaubwürdigen Vorwand zu schaffen.

Der von der nordkoreanischen Regierung unterstützte Akteur UNC2970 konzentriert sich in seinen Kampagnen konsequent auf Angriffe auf Verteidigungsunternehmen und gibt sich dabei als Personalvermittler aus. Die Gruppe nutzte Gemini, um Open-Source-Intelligence (OSINT) zu synthetisieren und Profile von hochrangigen Zielen zu erstellen, um die Kampagnenplanung und Aufklärung zu unterstützen.

Stetiges Wachstum KI-integrierter Malware: Wie bereits in der GTIG-Analyse vom November 2025 beobachtete das Team auch weiterhin, dass Bedrohungsakteure mit KI experimentierten, um neue Fähigkeiten in Malware-Familien zu implementieren. Dies umfasste Malware-Proben, die unter dem Namen HONESTCUE verfolgt wurden und die API von Gemini nutzten, um die Funktionsgenerierung auszulagern, um die herkömmliche netzwerkbasierte Erkennung und statische Analyse zu umgehen.

Neue KI-generierte Phishing-Kits: Die GTIG beobachtete ebenfalls, dass Bedrohungsakteure konventionelle KI-Fähigkeiten in ihre Cyber-Einbruchstechnik integrieren. Die Security-Experten identifizierten etwa ein Coinbait-Phishing-Kit, dessen Erstellung wahrscheinlich durch KI-Codegenerierungstools beschleunigt wurde und das sich als große Kryptowährungsbörse ausgab, um Zugangsdaten zu sammeln.

Wachsender Markt für KI-Dienste zur Unterstützung bösartiger Aktivitäten: Beobachtungen von GTIG in englisch- und russischsprachigen Untergrundforen deuten auf ein anhaltendes Interesse an KI-gestützten Tools und Diensten hin. Allerdings fällt es den Bedrohungsakteuren schwer, eigene Modelle zu entwickeln, weshalb sie stattdessen auf bestehende, ausgereifte KI-Modelle zurückgreifen. Ein Großteil dieser Aktivitäten belegt den Cybersecurity-Spezialisten zufolge die steigende Nachfrage nach gehackten oder gestohlenen API-Schlüsseln. Sie verweisen hier etwa auf ein Untergrund-Toolkit namens ‚Xanthorox‘. Dieses wird als maßgeschneiderte KI zur autonomen Codegenerierung von Malware und zur Entwicklung von Phishing-Kampagnen angepriesen. Die Untersuchung der GTIG ergab jedoch, dass Xanthorox aus mehreren KI-Produkten von kommerziellen und Dritt-Anbietern bestand.



  • Weniger Daten für geringere Emissionen

    Weniger Daten für geringere Emissionen

    Weltweit entstehen 6,4Mio.t CO2 durch den Speicherbetrieb in Rechenzentren. Dabei werden viele der gespeicherten Daten gar nicht mehr gebraucht – es handelt sich um sogenannte Dark Data.

    mehr lesen: Weniger Daten für geringere Emissionen

  • Cosmo Consult startet Geschäftsbereich ’Business Design’

    Cosmo Consult startet Geschäftsbereich ’Business Design’

    Seit April hat die Cosmo Consult-Gruppe einen neuen Geschäftsbereich gestartet. In diesem sollen Beratungsleistungen für Digitalisierungsprojekte gebündelt werden.

    mehr lesen: Cosmo Consult startet Geschäftsbereich ’Business Design’

  • Neuer Vertriebsleiter bei Creaform

    Neuer Vertriebsleiter bei Creaform

    Pierre Tanguy übernimmt bei Creaform die Vertriebsleitung für die DACH-Region und folgt damit auf Stefan Hoheisel.

    mehr lesen: Neuer Vertriebsleiter bei Creaform

  • Anzeige
    Retarus beschleunigt Datenaustausch in der Produktion

    Retarus beschleunigt Datenaustausch in der Produktion

    Die Digitalisierungs- und Automatisierungslösungen von Retarus ermöglichen effiziente Abläufe ohne manuellen Aufwand oder Kompromisse bei der Datensouveränität

    mehr lesen: Retarus beschleunigt Datenaustausch in der Produktion

  • Intralogistik und Produktion zusammenbringen

    Intralogistik und Produktion zusammenbringen

    Im Projekt BaSynaos wollen Synaos und das DFKI den Datenaustausch zwischen Assets aus der Produktion und der Logistik ermöglichen. Dabei greifen die Forschungspartner auf das im Vorgängerprojekt BaSys 4.0 entwickelte…

    mehr lesen: Intralogistik und Produktion zusammenbringen

  • Investitionen in Werkzeugmaschinen sinken

    Investitionen in Werkzeugmaschinen sinken

    Der Maschinenmarkt für Antriebe könnte bis 2030 jährlich um knapp 3 Prozent schrumpfen, Umsätze mit Werkzeugmaschinen für elektrische Antriebe wachsen hingegen mit mehr 10 Prozent. Dies prognostiziert die Unternehmensberatung McKinsey…

    mehr lesen: Investitionen in Werkzeugmaschinen sinken

  • IAB-Arbeitsmarktbarometer bei 102,4 Punkten

    IAB-Arbeitsmarktbarometer bei 102,4 Punkten

    Mit 102,4 Punkten verzeichnet das IAB-Arbeitsmarktbarometer den höchsten Stand seit Mai 2019. Das Risiko negativer Effekte durch die aktuelle Infektionslage bleibt jedoch bestehen.

    mehr lesen: IAB-Arbeitsmarktbarometer bei 102,4 Punkten

  • Ressourcenschonender 3D-Druck

    Ressourcenschonender 3D-Druck

    Im Projekt ’BioMe’ wollen die Projektpartner die Anwendung von additiver Fertigung im Automobilbau nachhaltiger gestalten.

    mehr lesen: Ressourcenschonender 3D-Druck

  • Geschäftsklimaindex steigt leicht an

    Geschäftsklimaindex steigt leicht an

    Im aktuellen Ifo-Geschäftsklimaindex beurteilen die Unternehmen ihre aktuelle Geschäftslage etwas besser als im März. Der Indexwert ist im 0,2 Punkte gestiegen.

    mehr lesen: Geschäftsklimaindex steigt leicht an

  • Siemens und Microsoft treten Open Industry 4.0 Alliance bei

    Siemens und Microsoft treten Open Industry 4.0 Alliance bei

    Die Open Industry 4.0 Alliance begrüßt zwei neue Mitglieder. Siemens und Microsoft sind dem Konsortium beigetreten.

    mehr lesen: Siemens und Microsoft treten Open Industry 4.0 Alliance bei

  • SAP-Cloudgeschäft nimmt Fahrt auf

    SAP-Cloudgeschäft nimmt Fahrt auf

    SAP hat im ersten Quartal positives zu vermelden. Das Cloud-Neugeschäft verzeichnete den schnellsten Anstieg seit 5 Jahren – die mit dem Kernprodukt S4/Hana erzielten Erlöse stiegen im Vergleich zum Vorjahr…

    mehr lesen: SAP-Cloudgeschäft nimmt Fahrt auf

  • Dateneingabe- und Pflege größte Herausforderung

    Dateneingabe- und Pflege größte Herausforderung

    In der Kurzstudie ’Variantenmanagement und Kundenbeziehungsmanagement’ zeigt der VDMA Software und Digitalisierung auf, in welchen Bereichen noch Optimierungspotenzial liegt.

    mehr lesen: Dateneingabe- und Pflege größte Herausforderung