Wenn KI-Modelle zum Angriffsziel werden

enzozo AdobeStock 97576807
Bild: ©enzozo/stock.adobe.com

Zur Münchner Sicherheitskonferenz (13. bis 15. Februar) hat die Google Threat Intelligence Group (GTIG) einen Bericht veröffentlicht, mit dem die Verfasser die Debatte um KI-gestützte Bedrohungen auf eine operative Ebene ziehen. Ihre zentrale Beobachtung: Staatliche Akteure nutzen generative KI bereits heute systematisch für Cyberaufklärung, Social Engineering und wirtschaftlich relevante Spionage.

Neu sei dabei weniger die Technik als das Angriffsziel, so die GTIG. Mit sogenannten Model-Extraction-Angriffen oder ‚Distillation Attacks‘ gerieten erstmals KI-Modelle selbst ins Visier – eine Form von Diebstahl geistigen Eigentums, die insbesondere für Industrie, Mittelstand und technologiegetriebene Unternehmen relevant sei. Die Verfasser des Berichts betonen zudem, dass gleichzeitig durch KI-gestütztes ‚Rapport-Building Phishing‘ viele klassische Warnsignale verschwinden.

Sie ordnen die Ergebnisse des Berichts wie folgt ein: KI senkt Kosten, beschleunigt Angriffe und erschwert die Erkennung. Die GTIG möchte damit die sicherheitspolitischen Debatten in München ergänzen.

Hier eine Zusammenfassung der Inhalte:

Zunahme von Model-Extraktion-Angriffen oder ‚Distillation Attacks‘: Im vergangenen Jahr identifizierten GTIG und Google DeepMind Bedrohungsakteure, die versuchten, Model-Extraktion-Angriffe oder Distillation Attacks auf generative KI-Produkte durchzuführen, um Einblicke in die Schlussfolgerungen und Gedankengänge eines Modells zu gewinnen. Diese Angriffe gehen von globalen Unternehmen und akademischen Forschern aus, die versuchen, firmeneigene Logik zu klonen. Als häufiges Ziel der Angreifer nennt die GTIG etwa die Fähigkeit der Google-KI Gemini, logisches Denken zu entwickeln.

Bedrohungsakteure nutzen KI während des gesamten Angriffslebenszyklus, insbesondere zur Aufklärung für Social Engineering: Wie die GTIG weiter mitteilt, verwenden von Regierungen unterstützte Angreifer KI weiterhin zum Coden und Scripten, um Informationen über potenzielle Opfer zu sammeln, um öffentlich bekannte Schwachstellen zu erforschen und für Aktivitäten nach der Kompromittierung. Zu den jüngsten Bedrohungen dieser Art, die von der GTIG beobachtet wurden, gehören:

Der vom iranischen Staat unterstützte Akteur APT42 nutzte GenAI-Modelle zur Unterstützung der Aufklärung und gezieltes Social Engineering. APT42 missbraucht KI, um nach offiziellen E-Mails bestimmter Organisationen zu suchen und potenzielle Geschäftspartner auszuspionieren, um einen glaubwürdigen Vorwand zu schaffen.

Der von der nordkoreanischen Regierung unterstützte Akteur UNC2970 konzentriert sich in seinen Kampagnen konsequent auf Angriffe auf Verteidigungsunternehmen und gibt sich dabei als Personalvermittler aus. Die Gruppe nutzte Gemini, um Open-Source-Intelligence (OSINT) zu synthetisieren und Profile von hochrangigen Zielen zu erstellen, um die Kampagnenplanung und Aufklärung zu unterstützen.

Stetiges Wachstum KI-integrierter Malware: Wie bereits in der GTIG-Analyse vom November 2025 beobachtete das Team auch weiterhin, dass Bedrohungsakteure mit KI experimentierten, um neue Fähigkeiten in Malware-Familien zu implementieren. Dies umfasste Malware-Proben, die unter dem Namen HONESTCUE verfolgt wurden und die API von Gemini nutzten, um die Funktionsgenerierung auszulagern, um die herkömmliche netzwerkbasierte Erkennung und statische Analyse zu umgehen.

Neue KI-generierte Phishing-Kits: Die GTIG beobachtete ebenfalls, dass Bedrohungsakteure konventionelle KI-Fähigkeiten in ihre Cyber-Einbruchstechnik integrieren. Die Security-Experten identifizierten etwa ein Coinbait-Phishing-Kit, dessen Erstellung wahrscheinlich durch KI-Codegenerierungstools beschleunigt wurde und das sich als große Kryptowährungsbörse ausgab, um Zugangsdaten zu sammeln.

Wachsender Markt für KI-Dienste zur Unterstützung bösartiger Aktivitäten: Beobachtungen von GTIG in englisch- und russischsprachigen Untergrundforen deuten auf ein anhaltendes Interesse an KI-gestützten Tools und Diensten hin. Allerdings fällt es den Bedrohungsakteuren schwer, eigene Modelle zu entwickeln, weshalb sie stattdessen auf bestehende, ausgereifte KI-Modelle zurückgreifen. Ein Großteil dieser Aktivitäten belegt den Cybersecurity-Spezialisten zufolge die steigende Nachfrage nach gehackten oder gestohlenen API-Schlüsseln. Sie verweisen hier etwa auf ein Untergrund-Toolkit namens ‚Xanthorox‘. Dieses wird als maßgeschneiderte KI zur autonomen Codegenerierung von Malware und zur Entwicklung von Phishing-Kampagnen angepriesen. Die Untersuchung der GTIG ergab jedoch, dass Xanthorox aus mehreren KI-Produkten von kommerziellen und Dritt-Anbietern bestand.



  • Q.Ant und IMS Chips rüsten Halbleiterfertigung für zukünftige Anforderugen

    Q.Ant und IMS Chips rüsten Halbleiterfertigung für zukünftige Anforderugen

    Q.Ant, ein Spezialist für photonisches Rechnen, baut am Institut für Mikroelektronik Stuttgart IMS Chips eine Pilotlinie für photonische KI-Prozessoren auf.

    mehr lesen: Q.Ant und IMS Chips rüsten Halbleiterfertigung für zukünftige Anforderugen

  • AMS.Solution macht Umsatzplus

    AMS.Solution macht Umsatzplus

    AMS.Solution verzeichnet für das Geschäftsjahr 2024 einen Umsatz in Deutschland in Höhe von 27,7Mio.€. Dies ist zwar eine Steigerung um 3,5 Prozent.

    mehr lesen: AMS.Solution macht Umsatzplus

  • Maschinenbauexporte verringern sich 2024

    Maschinenbauexporte verringern sich 2024

    Die USA und China bleiben 2024 Spitzenreiter im Exportranking des Maschinenbaus. Insgesamt sind die Ausfuhren um nominal 5 Prozent auf knapp 200 Milliarden Euro gesunken.

    mehr lesen: Maschinenbauexporte verringern sich 2024

  • Anzeige
    Retarus beschleunigt Datenaustausch in der Produktion

    Retarus beschleunigt Datenaustausch in der Produktion

    Die Digitalisierungs- und Automatisierungslösungen von Retarus ermöglichen effiziente Abläufe ohne manuellen Aufwand oder Kompromisse bei der Datensouveränität

    mehr lesen: Retarus beschleunigt Datenaustausch in der Produktion

  • Materialflüsse im Stress,
Fachmesse im Aufwind

    Materialflüsse im Stress, Fachmesse im Aufwind

    Die Logimat 2025 belegt mit mehr als 120.000 Quadratmetern Ausstellungsfläche erneut alle zehn Hallen des Stuttgarter Messegeländes. Vom 11. bis 13. März geben Global Player, mittelständische Unternehmen sowie Startups auf…

    mehr lesen: Materialflüsse im Stress, Fachmesse im Aufwind

  • Neuer CEO für BE-terna

    Neuer CEO für BE-terna

    Zum 28. Februar 2025 tritt Gerald Pichler als CEO von BE-terna zurück. Wie das Unternehmen mitteilt, wird ab 1. März 2025 Blaž Strle die Position übernehmen.

    mehr lesen: Neuer CEO für BE-terna

  • IDTA und Federtec kooperieren

    IDTA und Federtec kooperieren

    Die Industrial Digital Twin Association (IDTA), die Standards für digitale Zwillinge für die gesamte Industrie entwickelt, und der Verein Federtec, Repräsentant von Unternehmen im Bereich Fluidtechnik, mechanische Kraftübertragung und Automatisierung…

    mehr lesen: IDTA und Federtec kooperieren

  • Igus, Schaeffler und Siemens für den Hermes Award nominiert

    Igus, Schaeffler und Siemens für den Hermes Award nominiert

    Unter der Leitung von Prof. Dr. Holger Hanselka, Präsident der Fraunhofer-Gesellschaft, hat eine unabhängige Jury, besetzt mit Expertinnen und Experten aus Politik, Wirtschaft, Forschung und Medien, drei Unternehmen (nachstehend in…

    mehr lesen: Igus, Schaeffler und Siemens für den Hermes Award nominiert

  • THM stellt Reifegradmodell DigiTamm vor

    THM stellt Reifegradmodell DigiTamm vor

    Mit dem Reifegradmodell DigiTamm (Digital Transformation Assessment Maturity Model) stellt die Technischen Hochschule Mittelhessen (THM), Mitglied des Vereins SEF Smart Electronic Factory, ein Instrument zur systematischen Erfassung des Digitalisierungsgrades in…

    mehr lesen: THM stellt Reifegradmodell DigiTamm vor

  • Lagerabläufe KI-gestützt optimieren

    Lagerabläufe KI-gestützt optimieren

    Auf der Logimat in Stuttgart zeigt PSI vom 11. bis 13. März 2025 (Stand D41, Halle 4), wie Software Logistikprozesse unterstützt.

    mehr lesen: Lagerabläufe KI-gestützt optimieren

  • Eine B2B-Plattfform für Extended Reality und das Metaverse

    Eine B2B-Plattfform für Extended Reality und das Metaverse

    Die XR Expo am 8. und 9. Mai ist ein B2B-Tech-Event für Extended Reality (XR) in Stuttgart.

    mehr lesen: Eine B2B-Plattfform für Extended Reality und das Metaverse

  • Drohne versorgt Langlauf-Event Jizerská 50 mit Mobilfunk

    Drohne versorgt Langlauf-Event Jizerská 50 mit Mobilfunk

    Die Deutsche Telekom hat erstmals eine Drohne zur Mobilfunkversorgung in einem kommerziellen Live-Netz eingesetzt: Von 2,3 Kilometern Höhe aus sorgte ein unbemanntes Luftfahrzeug (UAV) beim Isergebirgslauf ‚Jizerská 50‘ mit integrierter…

    mehr lesen: Drohne versorgt Langlauf-Event Jizerská 50 mit Mobilfunk