Wenn KI-Modelle zum Angriffsziel werden

0:000:00

enzozo AdobeStock 97576807
Bild: ©enzozo/stock.adobe.com

Zur Münchner Sicherheitskonferenz (13. bis 15. Februar) hat die Google Threat Intelligence Group (GTIG) einen Bericht veröffentlicht, mit dem die Verfasser die Debatte um KI-gestützte Bedrohungen auf eine operative Ebene ziehen. Ihre zentrale Beobachtung: Staatliche Akteure nutzen generative KI bereits heute systematisch für Cyberaufklärung, Social Engineering und wirtschaftlich relevante Spionage.

Neu sei dabei weniger die Technik als das Angriffsziel, so die GTIG. Mit sogenannten Model-Extraction-Angriffen oder ‚Distillation Attacks‘ gerieten erstmals KI-Modelle selbst ins Visier – eine Form von Diebstahl geistigen Eigentums, die insbesondere für Industrie, Mittelstand und technologiegetriebene Unternehmen relevant sei. Die Verfasser des Berichts betonen zudem, dass gleichzeitig durch KI-gestütztes ‚Rapport-Building Phishing‘ viele klassische Warnsignale verschwinden.

Sie ordnen die Ergebnisse des Berichts wie folgt ein: KI senkt Kosten, beschleunigt Angriffe und erschwert die Erkennung. Die GTIG möchte damit die sicherheitspolitischen Debatten in München ergänzen.

Hier eine Zusammenfassung der Inhalte:

Zunahme von Model-Extraktion-Angriffen oder ‚Distillation Attacks‘: Im vergangenen Jahr identifizierten GTIG und Google DeepMind Bedrohungsakteure, die versuchten, Model-Extraktion-Angriffe oder Distillation Attacks auf generative KI-Produkte durchzuführen, um Einblicke in die Schlussfolgerungen und Gedankengänge eines Modells zu gewinnen. Diese Angriffe gehen von globalen Unternehmen und akademischen Forschern aus, die versuchen, firmeneigene Logik zu klonen. Als häufiges Ziel der Angreifer nennt die GTIG etwa die Fähigkeit der Google-KI Gemini, logisches Denken zu entwickeln.

Bedrohungsakteure nutzen KI während des gesamten Angriffslebenszyklus, insbesondere zur Aufklärung für Social Engineering: Wie die GTIG weiter mitteilt, verwenden von Regierungen unterstützte Angreifer KI weiterhin zum Coden und Scripten, um Informationen über potenzielle Opfer zu sammeln, um öffentlich bekannte Schwachstellen zu erforschen und für Aktivitäten nach der Kompromittierung. Zu den jüngsten Bedrohungen dieser Art, die von der GTIG beobachtet wurden, gehören:

Der vom iranischen Staat unterstützte Akteur APT42 nutzte GenAI-Modelle zur Unterstützung der Aufklärung und gezieltes Social Engineering. APT42 missbraucht KI, um nach offiziellen E-Mails bestimmter Organisationen zu suchen und potenzielle Geschäftspartner auszuspionieren, um einen glaubwürdigen Vorwand zu schaffen.

Der von der nordkoreanischen Regierung unterstützte Akteur UNC2970 konzentriert sich in seinen Kampagnen konsequent auf Angriffe auf Verteidigungsunternehmen und gibt sich dabei als Personalvermittler aus. Die Gruppe nutzte Gemini, um Open-Source-Intelligence (OSINT) zu synthetisieren und Profile von hochrangigen Zielen zu erstellen, um die Kampagnenplanung und Aufklärung zu unterstützen.

Stetiges Wachstum KI-integrierter Malware: Wie bereits in der GTIG-Analyse vom November 2025 beobachtete das Team auch weiterhin, dass Bedrohungsakteure mit KI experimentierten, um neue Fähigkeiten in Malware-Familien zu implementieren. Dies umfasste Malware-Proben, die unter dem Namen HONESTCUE verfolgt wurden und die API von Gemini nutzten, um die Funktionsgenerierung auszulagern, um die herkömmliche netzwerkbasierte Erkennung und statische Analyse zu umgehen.

Neue KI-generierte Phishing-Kits: Die GTIG beobachtete ebenfalls, dass Bedrohungsakteure konventionelle KI-Fähigkeiten in ihre Cyber-Einbruchstechnik integrieren. Die Security-Experten identifizierten etwa ein Coinbait-Phishing-Kit, dessen Erstellung wahrscheinlich durch KI-Codegenerierungstools beschleunigt wurde und das sich als große Kryptowährungsbörse ausgab, um Zugangsdaten zu sammeln.

Wachsender Markt für KI-Dienste zur Unterstützung bösartiger Aktivitäten: Beobachtungen von GTIG in englisch- und russischsprachigen Untergrundforen deuten auf ein anhaltendes Interesse an KI-gestützten Tools und Diensten hin. Allerdings fällt es den Bedrohungsakteuren schwer, eigene Modelle zu entwickeln, weshalb sie stattdessen auf bestehende, ausgereifte KI-Modelle zurückgreifen. Ein Großteil dieser Aktivitäten belegt den Cybersecurity-Spezialisten zufolge die steigende Nachfrage nach gehackten oder gestohlenen API-Schlüsseln. Sie verweisen hier etwa auf ein Untergrund-Toolkit namens ‚Xanthorox‘. Dieses wird als maßgeschneiderte KI zur autonomen Codegenerierung von Malware und zur Entwicklung von Phishing-Kampagnen angepriesen. Die Untersuchung der GTIG ergab jedoch, dass Xanthorox aus mehreren KI-Produkten von kommerziellen und Dritt-Anbietern bestand.



  • GBTEC und Proalpha arbeiten zusammen

    GBTEC und Proalpha arbeiten zusammen

    GBTEC und Proalpha haben angekündigt, zukünftig in den Bereichen Process Mining und Business Intelligence zusammenzuarbeiten. Kunden sollen so einen Mehrwert bei der digitalen Transformation erhalten.

    mehr lesen: GBTEC und Proalpha arbeiten zusammen

  • Mehr Schadprogramme, mehr Digitalisierung

    Mehr Schadprogramme, mehr Digitalisierung

    Mehr als eine Milliarde Schadprogramme verzeichnet das Bundesamt für Sicherheit in der Informationstechnik im aktuellen Lagebericht. Und auch die Corona-Pandemie wirkt sich auf die aktuelle Sicherheitslage aus.

    mehr lesen: Mehr Schadprogramme, mehr Digitalisierung

  • Zwischen digitaler Transformation und steigender Komplexität

    Zwischen digitaler Transformation und steigender Komplexität

    CIOs setzen auf Automatisierung und KI, um wachsende Kluft zwischen begrenzten IT-Ressourcen und steigender Cloud-Komplexität zu überbrücken. Dies geht aus einer Studie von Dynatrace hervor.

    mehr lesen: Zwischen digitaler Transformation und steigender Komplexität

  • Aktuelle Lage verbessert, Erwartungen gehen zurück

    Aktuelle Lage verbessert, Erwartungen gehen zurück

    Die Erwartungen an die wirtschaftliche Entwicklung gehen laut aktueller ZEW-Zahlen im Oktober zurück. Die Einschätzung der aktuellen konjunkturellen Lage hat sich jedoch erneut verbessert.

    mehr lesen: Aktuelle Lage verbessert, Erwartungen gehen zurück

  • Neues Trio an der MPDV-Spitze

    Neues Trio an der MPDV-Spitze

    Die MPDV hat seit Oktober drei neue Geschäftsführer. Nathalie Kletti, Thorsten Strebel und Jürgen Petzel stehen an der Spitze des Unternehmens.

    mehr lesen: Neues Trio an der MPDV-Spitze

  • Beschäftigtensituation im Maschinenbau bleibt angespannt

    Beschäftigtensituation im Maschinenbau bleibt angespannt

    Die Beschäftigtensituation im Maschinen- und Anlagenbau bleibt weiter angespannt. Im August ging die Zahl der Beschäftigten im Vergleich zum Vormonat um weitere 2.165 auf 1,025 Millionen zurück. Damit sind fast…

    mehr lesen: Beschäftigtensituation im Maschinenbau bleibt angespannt

  • Flexibel und sicher

    Flexibel und sicher

    Helmholz erweitert sein Portfolio an Industrieroutern. Die bewährten REX-Geräte sind ab sofort auch mit zusätzlicher WAN (Wide Area Network)-Schnittstelle und Fallback-Mechanismus erhältlich.

    mehr lesen: Flexibel und sicher

  • Tower Factory wird Teil von Fuji Europe

    Tower Factory wird Teil von Fuji Europe

    Die Fuji Europe Corparation hat Tower-Factory, einen Anbieter von Lagerlogistiksystemen, übernommen. Kunden von Fuji Europe sollen dadurch Lösungen erhalten, die den gesamten Materialfluss abdecken.

    mehr lesen: Tower Factory wird Teil von Fuji Europe

  • Bereits mehr als 1.200 Teilnehmer für TeDo Webinare

    Bereits mehr als 1.200 Teilnehmer für TeDo Webinare

    Für die Webinare des TeDo Verlags, die im Rahmen des Herbstes der Innovationen durchgeführt werden, haben sich bereits weit über 1.200 Teilnehmer angemeldet. Das SPS-Magazin, die IT&Production, die Robotik und…

    mehr lesen: Bereits mehr als 1.200 Teilnehmer für TeDo Webinare

  • Neuer VDMA-Präsident gewählt

    Neuer VDMA-Präsident gewählt

    Der VDMA hat mit Karl Haeusgen einen neuen Präsidenten. Im Rahmen der Mitgliederversammlung wurde der Vorstandsvorsitzende von Hawe Hydraulik als Nachfolger von Carl Martin Welcker bestimmt. Auch der Verband VDMA…

    mehr lesen: Neuer VDMA-Präsident gewählt

  • Instandhaltung zwischen Kostendruck und digitalem Wandel

    Instandhaltung zwischen Kostendruck und digitalem Wandel

    Maindays 2020 Instandhaltung zwischen Kostendruck und digitalem Wandel Unter dem Motto ‘Instandhaltung zwischen Kostendruck und digitalem Wandel‘ findet die 21. Jahrestagung MainDays vom 24. bis zum 25. November in Potsdam…

    mehr lesen: Instandhaltung zwischen Kostendruck und digitalem Wandel

  • Kurzarbeit geht weiter zurück

    Kurzarbeit geht weiter zurück

    Im September ist die Zahl der Beschäftigten, die in Kurzarbeit sind, weiter zurückgegangen. Das Ifo-Institut schätzt die Zahl der Kurzarbeiter aktuell auf 3,7 Millionen Menschen.

    mehr lesen: Kurzarbeit geht weiter zurück