Wenn KI-Modelle zum Angriffsziel werden

enzozo AdobeStock 97576807
Bild: ©enzozo/stock.adobe.com

Zur Münchner Sicherheitskonferenz (13. bis 15. Februar) hat die Google Threat Intelligence Group (GTIG) einen Bericht veröffentlicht, mit dem die Verfasser die Debatte um KI-gestützte Bedrohungen auf eine operative Ebene ziehen. Ihre zentrale Beobachtung: Staatliche Akteure nutzen generative KI bereits heute systematisch für Cyberaufklärung, Social Engineering und wirtschaftlich relevante Spionage.

Neu sei dabei weniger die Technik als das Angriffsziel, so die GTIG. Mit sogenannten Model-Extraction-Angriffen oder ‚Distillation Attacks‘ gerieten erstmals KI-Modelle selbst ins Visier – eine Form von Diebstahl geistigen Eigentums, die insbesondere für Industrie, Mittelstand und technologiegetriebene Unternehmen relevant sei. Die Verfasser des Berichts betonen zudem, dass gleichzeitig durch KI-gestütztes ‚Rapport-Building Phishing‘ viele klassische Warnsignale verschwinden.

Sie ordnen die Ergebnisse des Berichts wie folgt ein: KI senkt Kosten, beschleunigt Angriffe und erschwert die Erkennung. Die GTIG möchte damit die sicherheitspolitischen Debatten in München ergänzen.

Hier eine Zusammenfassung der Inhalte:

Zunahme von Model-Extraktion-Angriffen oder ‚Distillation Attacks‘: Im vergangenen Jahr identifizierten GTIG und Google DeepMind Bedrohungsakteure, die versuchten, Model-Extraktion-Angriffe oder Distillation Attacks auf generative KI-Produkte durchzuführen, um Einblicke in die Schlussfolgerungen und Gedankengänge eines Modells zu gewinnen. Diese Angriffe gehen von globalen Unternehmen und akademischen Forschern aus, die versuchen, firmeneigene Logik zu klonen. Als häufiges Ziel der Angreifer nennt die GTIG etwa die Fähigkeit der Google-KI Gemini, logisches Denken zu entwickeln.

Bedrohungsakteure nutzen KI während des gesamten Angriffslebenszyklus, insbesondere zur Aufklärung für Social Engineering: Wie die GTIG weiter mitteilt, verwenden von Regierungen unterstützte Angreifer KI weiterhin zum Coden und Scripten, um Informationen über potenzielle Opfer zu sammeln, um öffentlich bekannte Schwachstellen zu erforschen und für Aktivitäten nach der Kompromittierung. Zu den jüngsten Bedrohungen dieser Art, die von der GTIG beobachtet wurden, gehören:

Der vom iranischen Staat unterstützte Akteur APT42 nutzte GenAI-Modelle zur Unterstützung der Aufklärung und gezieltes Social Engineering. APT42 missbraucht KI, um nach offiziellen E-Mails bestimmter Organisationen zu suchen und potenzielle Geschäftspartner auszuspionieren, um einen glaubwürdigen Vorwand zu schaffen.

Der von der nordkoreanischen Regierung unterstützte Akteur UNC2970 konzentriert sich in seinen Kampagnen konsequent auf Angriffe auf Verteidigungsunternehmen und gibt sich dabei als Personalvermittler aus. Die Gruppe nutzte Gemini, um Open-Source-Intelligence (OSINT) zu synthetisieren und Profile von hochrangigen Zielen zu erstellen, um die Kampagnenplanung und Aufklärung zu unterstützen.

Stetiges Wachstum KI-integrierter Malware: Wie bereits in der GTIG-Analyse vom November 2025 beobachtete das Team auch weiterhin, dass Bedrohungsakteure mit KI experimentierten, um neue Fähigkeiten in Malware-Familien zu implementieren. Dies umfasste Malware-Proben, die unter dem Namen HONESTCUE verfolgt wurden und die API von Gemini nutzten, um die Funktionsgenerierung auszulagern, um die herkömmliche netzwerkbasierte Erkennung und statische Analyse zu umgehen.

Neue KI-generierte Phishing-Kits: Die GTIG beobachtete ebenfalls, dass Bedrohungsakteure konventionelle KI-Fähigkeiten in ihre Cyber-Einbruchstechnik integrieren. Die Security-Experten identifizierten etwa ein Coinbait-Phishing-Kit, dessen Erstellung wahrscheinlich durch KI-Codegenerierungstools beschleunigt wurde und das sich als große Kryptowährungsbörse ausgab, um Zugangsdaten zu sammeln.

Wachsender Markt für KI-Dienste zur Unterstützung bösartiger Aktivitäten: Beobachtungen von GTIG in englisch- und russischsprachigen Untergrundforen deuten auf ein anhaltendes Interesse an KI-gestützten Tools und Diensten hin. Allerdings fällt es den Bedrohungsakteuren schwer, eigene Modelle zu entwickeln, weshalb sie stattdessen auf bestehende, ausgereifte KI-Modelle zurückgreifen. Ein Großteil dieser Aktivitäten belegt den Cybersecurity-Spezialisten zufolge die steigende Nachfrage nach gehackten oder gestohlenen API-Schlüsseln. Sie verweisen hier etwa auf ein Untergrund-Toolkit namens ‚Xanthorox‘. Dieses wird als maßgeschneiderte KI zur autonomen Codegenerierung von Malware und zur Entwicklung von Phishing-Kampagnen angepriesen. Die Untersuchung der GTIG ergab jedoch, dass Xanthorox aus mehreren KI-Produkten von kommerziellen und Dritt-Anbietern bestand.



  • Förderung online berechnen

    Förderung online berechnen

    Zu Beginn des Jahres ist das Forschungszulagengesetz in Kraft getreten, um den Bereich Forschung und Entwicklung zu stärken. Mit einem Online-Tool können sich interessierte Unternehmen die voraussichtliche Fördersumme berechnen.

    mehr lesen: Förderung online berechnen

  • Smarte Lieferketten, Seewege und das IoT im Visier

    Smarte Lieferketten, Seewege und das IoT im Visier

    Am Montag stellt der TÜV Rheinland seine Cybersecurity Trends 2020 vor. Demnach könnten sich Cyberangriffe zunehmend auf persönliche Sicherheit sowie die Stabilität der Gesellschaft auswirken. Auch smarte Lieferketten stehen dabei…

    mehr lesen: Smarte Lieferketten, Seewege und das IoT im Visier

  • Ohne Überraschungen ins neue Jahr

    Ohne Überraschungen ins neue Jahr

    Der Auftragseingang im Maschinen- und Anlagenbau lag im Jahr 2019 um neun Prozent unter dem Vorjahreswert. Auch zum Jahresende verfehlten die Bestellungen das Vorjahresniveau.

    mehr lesen: Ohne Überraschungen ins neue Jahr

  • Anzeige
    Retarus beschleunigt Datenaustausch in der Produktion

    Retarus beschleunigt Datenaustausch in der Produktion

    Die Digitalisierungs- und Automatisierungslösungen von Retarus ermöglichen effiziente Abläufe ohne manuellen Aufwand oder Kompromisse bei der Datensouveränität

    mehr lesen: Retarus beschleunigt Datenaustausch in der Produktion

  • Raphael Binder übernimmt Geschäftsleitung von Syslogic

    Raphael Binder übernimmt Geschäftsleitung von Syslogic

    Wechsel an der Spitze von Syslogic. Raphael Binder hat zum 1. Januar die Geschäftsleitung der Embedded-Spezialistin übernommen.

    mehr lesen: Raphael Binder übernimmt Geschäftsleitung von Syslogic

  • SAP verlängert Support für Business Suite

    SAP verlängert Support für Business Suite

    SAP verlängert den Support für seine Business Suite um zwei Jahre bis Ende 2027. Zudem sagt der Softwarekonzern die Wartung für SAP S/4HANA bis 2040 zu.

    mehr lesen: SAP verlängert Support für Business Suite

  • Wechsel in der Geschäftsführung bei Balluff

    Wechsel in der Geschäftsführung bei Balluff

    Frank Paul Nonnenmann hat Anfang Februar Michael Unger als Geschäftsführer beim Sensor- und Automatisierungsspezialisten Balluff abgelöst.

    mehr lesen: Wechsel in der Geschäftsführung bei Balluff

  • Ethik ist wichtig, ethische Richtlinien aber noch selten

    Ethik ist wichtig, ethische Richtlinien aber noch selten

    Ethische Grundsätze gewinnen im Zusammenhang mit künstlicher Intelligenz (KI) immer mehr an Bedeutung. Wie aus einer Studie der Management und Technologieberatung BearingPoint hervorgeht, stecken entsprechende Richtlinien noch in den Kinderschuhen.

    mehr lesen: Ethik ist wichtig, ethische Richtlinien aber noch selten

  • Deutsche Messe schreibt Hermes Award aus

    Deutsche Messe schreibt Hermes Award aus

    Noch bis zum 19. Februar können sich alle Unternehmen und Institutionen, die auf der Hannover Messe ausstellen oder sich in anderer Weise inhaltlich beteiligen, um den Hermes Award bewerben.  

    mehr lesen: Deutsche Messe schreibt Hermes Award aus

  • Mitbestimmung in Zeiten der digitalen Transformation

    Mitbestimmung in Zeiten der digitalen Transformation

    Seit 100 Jahren gibt es das Betriebsrätegesetz. Zu diesem Jubiläum und vor dem Hintergrund der digitalen Transformation spricht sich die IG Metall für Modernisierung der Mitbestimmung aus.

    mehr lesen: Mitbestimmung in Zeiten der digitalen Transformation

  • Siemens: Umsatz leicht über Vorjahr

    Siemens: Umsatz leicht über Vorjahr

    Siemens hat seine Umsatzerlöse im ersten Geschäftsquartal um 1% auf 20,3Mrd.€ gesteigert. Der Gewinn lag nach Steuern bei 1,1Mrd.€ (-3% gegenüber Vorjahr).

    mehr lesen: Siemens: Umsatz leicht über Vorjahr

  • Peter Körte leitet Strategieabteilung bei Siemens

    Peter Körte leitet Strategieabteilung bei Siemens

    Die Siemens AG hat Peter Körte zum neuen Strategiechef ernannt. Der Konzern will damit seinen Fokus auf das industrielle Internet der Dinge richten.

    mehr lesen: Peter Körte leitet Strategieabteilung bei Siemens