Wenn KI-Modelle zum Angriffsziel werden

enzozo AdobeStock 97576807
Bild: ©enzozo/stock.adobe.com

Zur Münchner Sicherheitskonferenz (13. bis 15. Februar) hat die Google Threat Intelligence Group (GTIG) einen Bericht veröffentlicht, mit dem die Verfasser die Debatte um KI-gestützte Bedrohungen auf eine operative Ebene ziehen. Ihre zentrale Beobachtung: Staatliche Akteure nutzen generative KI bereits heute systematisch für Cyberaufklärung, Social Engineering und wirtschaftlich relevante Spionage.

Neu sei dabei weniger die Technik als das Angriffsziel, so die GTIG. Mit sogenannten Model-Extraction-Angriffen oder ‚Distillation Attacks‘ gerieten erstmals KI-Modelle selbst ins Visier – eine Form von Diebstahl geistigen Eigentums, die insbesondere für Industrie, Mittelstand und technologiegetriebene Unternehmen relevant sei. Die Verfasser des Berichts betonen zudem, dass gleichzeitig durch KI-gestütztes ‚Rapport-Building Phishing‘ viele klassische Warnsignale verschwinden.

Sie ordnen die Ergebnisse des Berichts wie folgt ein: KI senkt Kosten, beschleunigt Angriffe und erschwert die Erkennung. Die GTIG möchte damit die sicherheitspolitischen Debatten in München ergänzen.

Hier eine Zusammenfassung der Inhalte:

Zunahme von Model-Extraktion-Angriffen oder ‚Distillation Attacks‘: Im vergangenen Jahr identifizierten GTIG und Google DeepMind Bedrohungsakteure, die versuchten, Model-Extraktion-Angriffe oder Distillation Attacks auf generative KI-Produkte durchzuführen, um Einblicke in die Schlussfolgerungen und Gedankengänge eines Modells zu gewinnen. Diese Angriffe gehen von globalen Unternehmen und akademischen Forschern aus, die versuchen, firmeneigene Logik zu klonen. Als häufiges Ziel der Angreifer nennt die GTIG etwa die Fähigkeit der Google-KI Gemini, logisches Denken zu entwickeln.

Bedrohungsakteure nutzen KI während des gesamten Angriffslebenszyklus, insbesondere zur Aufklärung für Social Engineering: Wie die GTIG weiter mitteilt, verwenden von Regierungen unterstützte Angreifer KI weiterhin zum Coden und Scripten, um Informationen über potenzielle Opfer zu sammeln, um öffentlich bekannte Schwachstellen zu erforschen und für Aktivitäten nach der Kompromittierung. Zu den jüngsten Bedrohungen dieser Art, die von der GTIG beobachtet wurden, gehören:

Der vom iranischen Staat unterstützte Akteur APT42 nutzte GenAI-Modelle zur Unterstützung der Aufklärung und gezieltes Social Engineering. APT42 missbraucht KI, um nach offiziellen E-Mails bestimmter Organisationen zu suchen und potenzielle Geschäftspartner auszuspionieren, um einen glaubwürdigen Vorwand zu schaffen.

Der von der nordkoreanischen Regierung unterstützte Akteur UNC2970 konzentriert sich in seinen Kampagnen konsequent auf Angriffe auf Verteidigungsunternehmen und gibt sich dabei als Personalvermittler aus. Die Gruppe nutzte Gemini, um Open-Source-Intelligence (OSINT) zu synthetisieren und Profile von hochrangigen Zielen zu erstellen, um die Kampagnenplanung und Aufklärung zu unterstützen.

Stetiges Wachstum KI-integrierter Malware: Wie bereits in der GTIG-Analyse vom November 2025 beobachtete das Team auch weiterhin, dass Bedrohungsakteure mit KI experimentierten, um neue Fähigkeiten in Malware-Familien zu implementieren. Dies umfasste Malware-Proben, die unter dem Namen HONESTCUE verfolgt wurden und die API von Gemini nutzten, um die Funktionsgenerierung auszulagern, um die herkömmliche netzwerkbasierte Erkennung und statische Analyse zu umgehen.

Neue KI-generierte Phishing-Kits: Die GTIG beobachtete ebenfalls, dass Bedrohungsakteure konventionelle KI-Fähigkeiten in ihre Cyber-Einbruchstechnik integrieren. Die Security-Experten identifizierten etwa ein Coinbait-Phishing-Kit, dessen Erstellung wahrscheinlich durch KI-Codegenerierungstools beschleunigt wurde und das sich als große Kryptowährungsbörse ausgab, um Zugangsdaten zu sammeln.

Wachsender Markt für KI-Dienste zur Unterstützung bösartiger Aktivitäten: Beobachtungen von GTIG in englisch- und russischsprachigen Untergrundforen deuten auf ein anhaltendes Interesse an KI-gestützten Tools und Diensten hin. Allerdings fällt es den Bedrohungsakteuren schwer, eigene Modelle zu entwickeln, weshalb sie stattdessen auf bestehende, ausgereifte KI-Modelle zurückgreifen. Ein Großteil dieser Aktivitäten belegt den Cybersecurity-Spezialisten zufolge die steigende Nachfrage nach gehackten oder gestohlenen API-Schlüsseln. Sie verweisen hier etwa auf ein Untergrund-Toolkit namens ‚Xanthorox‘. Dieses wird als maßgeschneiderte KI zur autonomen Codegenerierung von Malware und zur Entwicklung von Phishing-Kampagnen angepriesen. Die Untersuchung der GTIG ergab jedoch, dass Xanthorox aus mehreren KI-Produkten von kommerziellen und Dritt-Anbietern bestand.



  • Produzenten mit Montage als Teilnehmer gesucht

    Produzenten mit Montage als Teilnehmer gesucht

    Forschende am IPH-Institut für Integrierte Produktion Hannover entwickeln eine Methode, um die Nachhaltigkeit von Automatisierungssystemen zu bewerten und solche Systeme einzuführen. Produzierende Unternehmen können sich am Projekt beteiligen.

    mehr lesen: Produzenten mit Montage als Teilnehmer gesucht

  • Tochterunternehmen Onoff verschmilzt mit SpiraTec

    Tochterunternehmen Onoff verschmilzt mit SpiraTec

    Die Onoff GmbH, eine hundertprozentige Tochterfirma der SpiraTec AG, ist mit der Muttergesellschaft verschmolzen. Die Kombination der Ressourcen, des Knowhows und der Teams soll die Grundlage für die zukünftigen Expansionspläne…

    mehr lesen: Tochterunternehmen Onoff verschmilzt mit SpiraTec

  • Neues Forschungszentrum für die kognitive Produktion entsteht

    Neues Forschungszentrum für die kognitive Produktion entsteht

    Das Fraunhofer-Institut für Werkzeugmaschinen und Umformtechnik IWU hat den Bau des neuen Forschungszentrums begonnen. Im Neubau soll dann an Systemen im Sinn einer kognitiven Produktion geforscht werden. Konkreter ist damit…

    mehr lesen: Neues Forschungszentrum für die kognitive Produktion entsteht

  • 86 Prozent finden DSGVO-Umsetzung schwierig

    86 Prozent finden DSGVO-Umsetzung schwierig

    Für 86 Prozent der Firmen ist es sehr herausfordernd, die DSGVO umzusetzen, ergab eine Umfrage von Piwik Pro. Doch dass Konformität und ihre Marketingaktivitäten vereinbar seien, gaben 90 Prozent der…

    mehr lesen: 86 Prozent finden DSGVO-Umsetzung schwierig

  • SuperOffice-CEO Jentoft geht nach 18 Jahren

    SuperOffice-CEO Jentoft geht nach 18 Jahren

    Der CRM-Softwareanbieter SuperOffice hat Lars Engbork zum neuen CEO ernannt. Er übernimmt die Leitung von Gisle Jentoft, der das norwegische Unternehmen 18 Jahre lang geführt hat. Seit 2020 hält der…

    mehr lesen: SuperOffice-CEO Jentoft geht nach 18 Jahren

  • Transferprojekt vermittelt Blockchain-Wissen für KMU

    Transferprojekt vermittelt Blockchain-Wissen für KMU

    Im neu gestarteten Projekt DUH-IT sollen KMU aus Dortmund, Unna und Hamm den Einsatz von Blockchain-Technologie in der Lieferkettengestaltung erkunden. So wollen das Fraunhofer IML und die TU Dortmund die…

    mehr lesen: Transferprojekt vermittelt Blockchain-Wissen für KMU

  • Maschinenausfuhren gehen zurück

    Maschinenausfuhren gehen zurück

    Der deutsche Maschinen- und Anlagenbau hat im ersten Quartal 2024 nominal 4,6 Prozent weniger als im Vorjahr exportiert, meldet der Branchenverband VDMA. Die Exporte nach China sinken weiter, das Wachstum…

    mehr lesen: Maschinenausfuhren gehen zurück

  • All About Automation in Heilbronn vorüber

    All About Automation in Heilbronn vorüber

    Das Messekonzept der All About Automation: überschaubar, praxisnah und regional. Damit ist Veranstalterin Easyfairs erfolgreich, die dritte Ausgabe der Automatisierungsschau in Heilbronn verzeichnete rund 30 Prozent mehr Aussteller und 40…

    mehr lesen: All About Automation in Heilbronn vorüber

  • Instandhaltung und Field Service mit SAP-Software abwickeln

    Instandhaltung und Field Service mit SAP-Software abwickeln

    Der 28. Jahreskongress SAP EAM 2024 findet am 20. und 21. Juni in Berlin statt. Auch dieses Mal stehen auf der unabhängigen Konferenz Neuigkeiten und Herausforderungen rund um SAP-softwaregestütztes Instandhaltungsmanagement…

    mehr lesen: Instandhaltung und Field Service mit SAP-Software abwickeln

  • AI Act nimmt letzte Hürde

    AI Act nimmt letzte Hürde

    Die Mitgliedsstaaten der EU wollen am 21. Mai 2024 im Ministerrat den AI Act beschließen. In der Verordnung werden Systeme mit künstlicher Intelligenz nach Risikoklassen unterteilt und reguliert. Bitkom-Präsident Dr.…

    mehr lesen: AI Act nimmt letzte Hürde

  • Decide4ECO nutzt Manufacturing-X für nachhaltige Produktentwicklung

    Decide4ECO nutzt Manufacturing-X für nachhaltige Produktentwicklung

    Im Rahmen der Initiative Manufacturing-X fördert das Bundesministerium für Wirtschaft und Klimaschutz (BMWK) das Konsortialprojekt Decide4Eco mit 7,3Mio.€. Das Projekt beschäftigt sich mit der Frage, wie Produkte nachhaltiger entwickelt und…

    mehr lesen: Decide4ECO nutzt Manufacturing-X für nachhaltige Produktentwicklung

  • Forschungsbeirat Industrie 4.0 stellt Engineering-Roadmap vor

    Forschungsbeirat Industrie 4.0 stellt Engineering-Roadmap vor

    Der Forschungsbeirat Industrie 4.0 stellt mit seiner Engineering-Roadmap und den darin enthaltenen Themenblöcken einen Rahmen für konkrete Forschungsschwerpunkte der nächsten zehn Jahre vor. Im Mittelpunkt stehen vier Hauptthemen.

    mehr lesen: Forschungsbeirat Industrie 4.0 stellt Engineering-Roadmap vor