Wenn KI-Modelle zum Angriffsziel werden

enzozo AdobeStock 97576807
Bild: ©enzozo/stock.adobe.com

Zur Münchner Sicherheitskonferenz (13. bis 15. Februar) hat die Google Threat Intelligence Group (GTIG) einen Bericht veröffentlicht, mit dem die Verfasser die Debatte um KI-gestützte Bedrohungen auf eine operative Ebene ziehen. Ihre zentrale Beobachtung: Staatliche Akteure nutzen generative KI bereits heute systematisch für Cyberaufklärung, Social Engineering und wirtschaftlich relevante Spionage.

Neu sei dabei weniger die Technik als das Angriffsziel, so die GTIG. Mit sogenannten Model-Extraction-Angriffen oder ‚Distillation Attacks‘ gerieten erstmals KI-Modelle selbst ins Visier – eine Form von Diebstahl geistigen Eigentums, die insbesondere für Industrie, Mittelstand und technologiegetriebene Unternehmen relevant sei. Die Verfasser des Berichts betonen zudem, dass gleichzeitig durch KI-gestütztes ‚Rapport-Building Phishing‘ viele klassische Warnsignale verschwinden.

Sie ordnen die Ergebnisse des Berichts wie folgt ein: KI senkt Kosten, beschleunigt Angriffe und erschwert die Erkennung. Die GTIG möchte damit die sicherheitspolitischen Debatten in München ergänzen.

Hier eine Zusammenfassung der Inhalte:

Zunahme von Model-Extraktion-Angriffen oder ‚Distillation Attacks‘: Im vergangenen Jahr identifizierten GTIG und Google DeepMind Bedrohungsakteure, die versuchten, Model-Extraktion-Angriffe oder Distillation Attacks auf generative KI-Produkte durchzuführen, um Einblicke in die Schlussfolgerungen und Gedankengänge eines Modells zu gewinnen. Diese Angriffe gehen von globalen Unternehmen und akademischen Forschern aus, die versuchen, firmeneigene Logik zu klonen. Als häufiges Ziel der Angreifer nennt die GTIG etwa die Fähigkeit der Google-KI Gemini, logisches Denken zu entwickeln.

Bedrohungsakteure nutzen KI während des gesamten Angriffslebenszyklus, insbesondere zur Aufklärung für Social Engineering: Wie die GTIG weiter mitteilt, verwenden von Regierungen unterstützte Angreifer KI weiterhin zum Coden und Scripten, um Informationen über potenzielle Opfer zu sammeln, um öffentlich bekannte Schwachstellen zu erforschen und für Aktivitäten nach der Kompromittierung. Zu den jüngsten Bedrohungen dieser Art, die von der GTIG beobachtet wurden, gehören:

Der vom iranischen Staat unterstützte Akteur APT42 nutzte GenAI-Modelle zur Unterstützung der Aufklärung und gezieltes Social Engineering. APT42 missbraucht KI, um nach offiziellen E-Mails bestimmter Organisationen zu suchen und potenzielle Geschäftspartner auszuspionieren, um einen glaubwürdigen Vorwand zu schaffen.

Der von der nordkoreanischen Regierung unterstützte Akteur UNC2970 konzentriert sich in seinen Kampagnen konsequent auf Angriffe auf Verteidigungsunternehmen und gibt sich dabei als Personalvermittler aus. Die Gruppe nutzte Gemini, um Open-Source-Intelligence (OSINT) zu synthetisieren und Profile von hochrangigen Zielen zu erstellen, um die Kampagnenplanung und Aufklärung zu unterstützen.

Stetiges Wachstum KI-integrierter Malware: Wie bereits in der GTIG-Analyse vom November 2025 beobachtete das Team auch weiterhin, dass Bedrohungsakteure mit KI experimentierten, um neue Fähigkeiten in Malware-Familien zu implementieren. Dies umfasste Malware-Proben, die unter dem Namen HONESTCUE verfolgt wurden und die API von Gemini nutzten, um die Funktionsgenerierung auszulagern, um die herkömmliche netzwerkbasierte Erkennung und statische Analyse zu umgehen.

Neue KI-generierte Phishing-Kits: Die GTIG beobachtete ebenfalls, dass Bedrohungsakteure konventionelle KI-Fähigkeiten in ihre Cyber-Einbruchstechnik integrieren. Die Security-Experten identifizierten etwa ein Coinbait-Phishing-Kit, dessen Erstellung wahrscheinlich durch KI-Codegenerierungstools beschleunigt wurde und das sich als große Kryptowährungsbörse ausgab, um Zugangsdaten zu sammeln.

Wachsender Markt für KI-Dienste zur Unterstützung bösartiger Aktivitäten: Beobachtungen von GTIG in englisch- und russischsprachigen Untergrundforen deuten auf ein anhaltendes Interesse an KI-gestützten Tools und Diensten hin. Allerdings fällt es den Bedrohungsakteuren schwer, eigene Modelle zu entwickeln, weshalb sie stattdessen auf bestehende, ausgereifte KI-Modelle zurückgreifen. Ein Großteil dieser Aktivitäten belegt den Cybersecurity-Spezialisten zufolge die steigende Nachfrage nach gehackten oder gestohlenen API-Schlüsseln. Sie verweisen hier etwa auf ein Untergrund-Toolkit namens ‚Xanthorox‘. Dieses wird als maßgeschneiderte KI zur autonomen Codegenerierung von Malware und zur Entwicklung von Phishing-Kampagnen angepriesen. Die Untersuchung der GTIG ergab jedoch, dass Xanthorox aus mehreren KI-Produkten von kommerziellen und Dritt-Anbietern bestand.



  • Sonja Pierer übernimmt bei Intel Deutschland

    Sonja Pierer übernimmt bei Intel Deutschland

    Sonja Pierer ist neue Geschäftsführerin von Intel in Deutschland. Die 46-Jährige folgt in dieser Position auf Christin Eisenschmid.

    mehr lesen: Sonja Pierer übernimmt bei Intel Deutschland

  • Marktanteile industrieller Netzwerk-Standards 2024

    Marktanteile industrieller Netzwerk-Standards 2024

    Die Firma HMS Networks hat ihre diesjährige Marktanalyse zu industriellen Kommunikationsstandards veröffentlicht.

    mehr lesen: Marktanteile industrieller Netzwerk-Standards 2024

  • Sabine Scheunert übernimmt Eurocentral-Geschäftsleitung

    Sabine Scheunert übernimmt Eurocentral-Geschäftsleitung

    Dassault Systèmes ernennt Sabine Scheunert zur Vorsitzenden der Geschäftsleitung in Eurocentral. Die Managerin verfügt über jahrzehntelange Erfahrung in der Automobil- und Technologiebranche und war u.a. für Mercedes-Benz tätig.

    mehr lesen: Sabine Scheunert übernimmt Eurocentral-Geschäftsleitung

  • Ifo-Geschäftsklimaindex fällt um 1,3 Punkte

    Ifo-Geschäftsklimaindex fällt um 1,3 Punkte

    Pessimistischere Erwartungen der Unternehmen sorgen dafür, dass der Ifo-Geschäftsklimaindex im Juni unter dem Vormonatswert bleibt. Nach drei Anstiegen in Folge zeigt sich auch die Industrie im Juni wieder skeptischer.

    mehr lesen: Ifo-Geschäftsklimaindex fällt um 1,3 Punkte

  • Wibu-Systems eröffnet Niederlassung in Südkorea

    Wibu-Systems eröffnet Niederlassung in Südkorea

    Mit einer neuen Tochtergesellschaft in Südkorea geht das Karlsruher Unternehmen Wibu-Systems einen strategischen Schritt zur Erschließung des südkoreanischen Hightech-Marktes sowie der dortigen Wirtschaft.

    mehr lesen: Wibu-Systems eröffnet Niederlassung in Südkorea

  • Quantencomputing für effizientere E-Autos

    Quantencomputing für effizientere E-Autos

    Die BMW Group, Nvidia und Classiq wollen gemeinsam mechatronische Systeme optimieren. Das gemeinsame Ziel: den Einsatz von Quantencomputern in der Automobilbranche zu fördern.

    mehr lesen: Quantencomputing für effizientere E-Autos

  • 8,8Mrd.€ für die AWS-Cloud-Infrastruktur in Deutschland

    8,8Mrd.€ für die AWS-Cloud-Infrastruktur in Deutschland

    Kürzlich hat AWS Investitionen in Höhe von 7,8Mrd,€ in die AWS European Sovereign Cloud angekündigt, deren erste Rechenzentren in Brandenburg entstehen sollen. Nun legt der Cloud-Anbieter nochmals 10Mrd.€ nach.

    mehr lesen: 8,8Mrd.€ für die AWS-Cloud-Infrastruktur in Deutschland

  • Ungeplante Stillstände kosten 147.000€ pro Stunde

    Ungeplante Stillstände kosten 147.000€ pro Stunde

    Zwar erhöhen Firmen mittels Wartung die Verfügbarkeit ihrer Anlagen. Laut einer Studie von ABB kommt es bei der Mehrheit der Befragten monatlich jedoch zu mindestens einem ungeplanten Stillstand.

    mehr lesen: Ungeplante Stillstände kosten 147.000€ pro Stunde

  • Ein Robotik-Netzwerk für die Spitzenforschung

    Ein Robotik-Netzwerk für die Spitzenforschung

    Das Robotics Institute Germany (RIG) soll als zentrale Anlaufstelle für Robotik in Deutschland fungieren. Die Beteiligten, darunter Universitäten und Forschungseinrichtungen, haben sich fünf strategische Ziele gesetzt.

    mehr lesen: Ein Robotik-Netzwerk für die Spitzenforschung

  • Mit künstlicher Intelligenz gegen Maschinenstillstände

    Mit künstlicher Intelligenz gegen Maschinenstillstände

    Ein Forschungsteam vom Fraunhofer IPA hat zusammen mit Partnern aus der Industrie eine Methode entwickelt, wie künstliche Intelligenz in die Instandhaltung integriert werden kann. Erkennt die KI einen Fehler, werden…

    mehr lesen: Mit künstlicher Intelligenz gegen Maschinenstillstände

  • Das Auto mit Kopfbewegungen steuern

    Das Auto mit Kopfbewegungen steuern

    Arrow Electronics und Nvidia haben gemeinsam ein KI-basiertes Lenksystem für das semi-autonome SAM Car erarbeitet. Die Steuerung erfolgt per Gesichtserkennung.

    mehr lesen: Das Auto mit Kopfbewegungen steuern

  • Der AI Act im Überblick

    Der AI Act im Überblick

    Die Europäische Union (EU) hat mit dem AI Act ein transnationales Regelwerk für einen sicheren und vertrauenswürdigen Einsatz von KI verabschiedet. Was genau in der Verordnung ausgeführt ist, welche Chancen…

    mehr lesen: Der AI Act im Überblick