Wenn KI-Modelle zum Angriffsziel werden

enzozo AdobeStock 97576807
Bild: ©enzozo/stock.adobe.com

Zur Münchner Sicherheitskonferenz (13. bis 15. Februar) hat die Google Threat Intelligence Group (GTIG) einen Bericht veröffentlicht, mit dem die Verfasser die Debatte um KI-gestützte Bedrohungen auf eine operative Ebene ziehen. Ihre zentrale Beobachtung: Staatliche Akteure nutzen generative KI bereits heute systematisch für Cyberaufklärung, Social Engineering und wirtschaftlich relevante Spionage.

Neu sei dabei weniger die Technik als das Angriffsziel, so die GTIG. Mit sogenannten Model-Extraction-Angriffen oder ‚Distillation Attacks‘ gerieten erstmals KI-Modelle selbst ins Visier – eine Form von Diebstahl geistigen Eigentums, die insbesondere für Industrie, Mittelstand und technologiegetriebene Unternehmen relevant sei. Die Verfasser des Berichts betonen zudem, dass gleichzeitig durch KI-gestütztes ‚Rapport-Building Phishing‘ viele klassische Warnsignale verschwinden.

Sie ordnen die Ergebnisse des Berichts wie folgt ein: KI senkt Kosten, beschleunigt Angriffe und erschwert die Erkennung. Die GTIG möchte damit die sicherheitspolitischen Debatten in München ergänzen.

Hier eine Zusammenfassung der Inhalte:

Zunahme von Model-Extraktion-Angriffen oder ‚Distillation Attacks‘: Im vergangenen Jahr identifizierten GTIG und Google DeepMind Bedrohungsakteure, die versuchten, Model-Extraktion-Angriffe oder Distillation Attacks auf generative KI-Produkte durchzuführen, um Einblicke in die Schlussfolgerungen und Gedankengänge eines Modells zu gewinnen. Diese Angriffe gehen von globalen Unternehmen und akademischen Forschern aus, die versuchen, firmeneigene Logik zu klonen. Als häufiges Ziel der Angreifer nennt die GTIG etwa die Fähigkeit der Google-KI Gemini, logisches Denken zu entwickeln.

Bedrohungsakteure nutzen KI während des gesamten Angriffslebenszyklus, insbesondere zur Aufklärung für Social Engineering: Wie die GTIG weiter mitteilt, verwenden von Regierungen unterstützte Angreifer KI weiterhin zum Coden und Scripten, um Informationen über potenzielle Opfer zu sammeln, um öffentlich bekannte Schwachstellen zu erforschen und für Aktivitäten nach der Kompromittierung. Zu den jüngsten Bedrohungen dieser Art, die von der GTIG beobachtet wurden, gehören:

Der vom iranischen Staat unterstützte Akteur APT42 nutzte GenAI-Modelle zur Unterstützung der Aufklärung und gezieltes Social Engineering. APT42 missbraucht KI, um nach offiziellen E-Mails bestimmter Organisationen zu suchen und potenzielle Geschäftspartner auszuspionieren, um einen glaubwürdigen Vorwand zu schaffen.

Der von der nordkoreanischen Regierung unterstützte Akteur UNC2970 konzentriert sich in seinen Kampagnen konsequent auf Angriffe auf Verteidigungsunternehmen und gibt sich dabei als Personalvermittler aus. Die Gruppe nutzte Gemini, um Open-Source-Intelligence (OSINT) zu synthetisieren und Profile von hochrangigen Zielen zu erstellen, um die Kampagnenplanung und Aufklärung zu unterstützen.

Stetiges Wachstum KI-integrierter Malware: Wie bereits in der GTIG-Analyse vom November 2025 beobachtete das Team auch weiterhin, dass Bedrohungsakteure mit KI experimentierten, um neue Fähigkeiten in Malware-Familien zu implementieren. Dies umfasste Malware-Proben, die unter dem Namen HONESTCUE verfolgt wurden und die API von Gemini nutzten, um die Funktionsgenerierung auszulagern, um die herkömmliche netzwerkbasierte Erkennung und statische Analyse zu umgehen.

Neue KI-generierte Phishing-Kits: Die GTIG beobachtete ebenfalls, dass Bedrohungsakteure konventionelle KI-Fähigkeiten in ihre Cyber-Einbruchstechnik integrieren. Die Security-Experten identifizierten etwa ein Coinbait-Phishing-Kit, dessen Erstellung wahrscheinlich durch KI-Codegenerierungstools beschleunigt wurde und das sich als große Kryptowährungsbörse ausgab, um Zugangsdaten zu sammeln.

Wachsender Markt für KI-Dienste zur Unterstützung bösartiger Aktivitäten: Beobachtungen von GTIG in englisch- und russischsprachigen Untergrundforen deuten auf ein anhaltendes Interesse an KI-gestützten Tools und Diensten hin. Allerdings fällt es den Bedrohungsakteuren schwer, eigene Modelle zu entwickeln, weshalb sie stattdessen auf bestehende, ausgereifte KI-Modelle zurückgreifen. Ein Großteil dieser Aktivitäten belegt den Cybersecurity-Spezialisten zufolge die steigende Nachfrage nach gehackten oder gestohlenen API-Schlüsseln. Sie verweisen hier etwa auf ein Untergrund-Toolkit namens ‚Xanthorox‘. Dieses wird als maßgeschneiderte KI zur autonomen Codegenerierung von Malware und zur Entwicklung von Phishing-Kampagnen angepriesen. Die Untersuchung der GTIG ergab jedoch, dass Xanthorox aus mehreren KI-Produkten von kommerziellen und Dritt-Anbietern bestand.



  • China will 1 Billion Yuan in die Robotik- und Hightech-Industrie investieren

    China will 1 Billion Yuan in die Robotik- und Hightech-Industrie investieren

    Die Staatliche Kommission für Entwicklung und Reform Chinas hat angekündigt, einen öffentlich geförderten Wagniskapitalfonds für Robotik, künstliche Intelligenz und Spitzeninnovationen einzurichten.

    mehr lesen: China will 1 Billion Yuan in die Robotik- und Hightech-Industrie investieren

  • Wenn der Clever-Hans-Effekt zuschlägt

    Wenn der Clever-Hans-Effekt zuschlägt

    KI-Modelle wie GPT, Llama oder Clipdienen dienen oft als Ausgangsbasis für spezialisierte KI-Modelle, die in der Wissenschaft, Industrie und nicht zuletzt in der medizinischen Diagnostik eingesetzt werden.

    mehr lesen: Wenn der Clever-Hans-Effekt zuschlägt

  • AMA-Mitglieder mit verhaltenem Optimismus für 2025

    AMA-Mitglieder mit verhaltenem Optimismus für 2025

    Der AMA Verband für Sensorik und Messtechnik hat seine Mitglieder Anfang des Jahres zur wirtschaftlichen Entwicklung 2024 befragt.

    mehr lesen: AMA-Mitglieder mit verhaltenem Optimismus für 2025

  • Anzeige
    Retarus beschleunigt Datenaustausch in der Produktion

    Retarus beschleunigt Datenaustausch in der Produktion

    Die Digitalisierungs- und Automatisierungslösungen von Retarus ermöglichen effiziente Abläufe ohne manuellen Aufwand oder Kompromisse bei der Datensouveränität

    mehr lesen: Retarus beschleunigt Datenaustausch in der Produktion

  • BSI als EUCC-Zertifizierungsstelle notifiziert

    BSI als EUCC-Zertifizierungsstelle notifiziert

    Das Bundesamt für Sicherheit in der Informationstechnik (BSI) wurde als alleinige staatliche Zertifizierungsstelle gemäß der Verordnung (EU) 2019/881 (Cybersercurity Act, CSA) bei der Europäischen Kommission (EU-KOM) notifiziert.

    mehr lesen: BSI als EUCC-Zertifizierungsstelle notifiziert

  • Logicalis, Siticom und Orange Networks unter einem Dach

    Logicalis, Siticom und Orange Networks unter einem Dach

    Unter dem Motto ‚One Logicalis‘ firmieren die Logicalis-Tochterunternehmen Siticom und Orange Networks künftig ebenfalls als Logicalis – unter gemeinsamer Führung mit der Logicalis GmbH.

    mehr lesen: Logicalis, Siticom und Orange Networks unter einem Dach

  • Konjunktur-Dämpfer für Intralogistikbranche

    Konjunktur-Dämpfer für Intralogistikbranche

    Im vergangenen Jahr konnten die Hersteller von Fördertechnik und Intralogistik aus Deutschland den konjunkturellen Herausforderungen trotzen.

    mehr lesen: Konjunktur-Dämpfer für Intralogistikbranche

  • Kooperation von Dürr und Grob

    Kooperation von Dürr und Grob

    Dürr und Grob setzen ihre strategische Kooperation im Bereich Produktionstechnologie für Batteriezellen fort. Der dritte Gründungspartner, der Maschinenbauer Manz, ist ausgestiegen.

    mehr lesen: Kooperation von Dürr und Grob

  • Wo Deutschland Exportweltmeister ist

    Wo Deutschland Exportweltmeister ist

    Bestimmte Medikamente, chemische Halbstoffe, optische Mikroskope: Bei all diesen Waren ist Deutschland besonders stark und dominant im Export.

    mehr lesen: Wo Deutschland Exportweltmeister ist

  • Jan Stoces wird Chief Growth Officer bei Aimtec

    Jan Stoces wird Chief Growth Officer bei Aimtec

    Der Digitalisierungsspezialist Aimtec mit Hauptsitz in Pilsen, Tschechische Republik, will seine Präsenz weiter ausbauen.

    mehr lesen: Jan Stoces wird Chief Growth Officer bei Aimtec

  • Flüssigkeitskühlung oder Luftkühlung fürs Rechenzentrum?

    Flüssigkeitskühlung oder Luftkühlung fürs Rechenzentrum?

    Nach Angaben der Internationalen Energieagentur wird sich der Stromverbrauch in Rechenzentren bis 2026 im Vergleich zu 2022 verdoppeln, wobei etwa 40 Prozent des Energiebedarfs auf die Kühlung entfallen.

    mehr lesen: Flüssigkeitskühlung oder Luftkühlung fürs Rechenzentrum?

  • Anexpo 2025 in Warschau

    Anexpo 2025 in Warschau

    Vom 16. bis 18. Juni 2025 stellt Anexpo in Warschau die industriellen Automatisierung in den Mittelpunkt. Zur 4. Ausgabe, organisiert von Automa.Net, werden 300 Delegierte und 150 Unternehmen aus 40…

    mehr lesen: Anexpo 2025 in Warschau