Wenn KI-Modelle zum Angriffsziel werden

0:000:00

enzozo AdobeStock 97576807
Bild: ©enzozo/stock.adobe.com

Zur Münchner Sicherheitskonferenz (13. bis 15. Februar) hat die Google Threat Intelligence Group (GTIG) einen Bericht veröffentlicht, mit dem die Verfasser die Debatte um KI-gestützte Bedrohungen auf eine operative Ebene ziehen. Ihre zentrale Beobachtung: Staatliche Akteure nutzen generative KI bereits heute systematisch für Cyberaufklärung, Social Engineering und wirtschaftlich relevante Spionage.

Neu sei dabei weniger die Technik als das Angriffsziel, so die GTIG. Mit sogenannten Model-Extraction-Angriffen oder ‚Distillation Attacks‘ gerieten erstmals KI-Modelle selbst ins Visier – eine Form von Diebstahl geistigen Eigentums, die insbesondere für Industrie, Mittelstand und technologiegetriebene Unternehmen relevant sei. Die Verfasser des Berichts betonen zudem, dass gleichzeitig durch KI-gestütztes ‚Rapport-Building Phishing‘ viele klassische Warnsignale verschwinden.

Sie ordnen die Ergebnisse des Berichts wie folgt ein: KI senkt Kosten, beschleunigt Angriffe und erschwert die Erkennung. Die GTIG möchte damit die sicherheitspolitischen Debatten in München ergänzen.

Hier eine Zusammenfassung der Inhalte:

Zunahme von Model-Extraktion-Angriffen oder ‚Distillation Attacks‘: Im vergangenen Jahr identifizierten GTIG und Google DeepMind Bedrohungsakteure, die versuchten, Model-Extraktion-Angriffe oder Distillation Attacks auf generative KI-Produkte durchzuführen, um Einblicke in die Schlussfolgerungen und Gedankengänge eines Modells zu gewinnen. Diese Angriffe gehen von globalen Unternehmen und akademischen Forschern aus, die versuchen, firmeneigene Logik zu klonen. Als häufiges Ziel der Angreifer nennt die GTIG etwa die Fähigkeit der Google-KI Gemini, logisches Denken zu entwickeln.

Bedrohungsakteure nutzen KI während des gesamten Angriffslebenszyklus, insbesondere zur Aufklärung für Social Engineering: Wie die GTIG weiter mitteilt, verwenden von Regierungen unterstützte Angreifer KI weiterhin zum Coden und Scripten, um Informationen über potenzielle Opfer zu sammeln, um öffentlich bekannte Schwachstellen zu erforschen und für Aktivitäten nach der Kompromittierung. Zu den jüngsten Bedrohungen dieser Art, die von der GTIG beobachtet wurden, gehören:

Der vom iranischen Staat unterstützte Akteur APT42 nutzte GenAI-Modelle zur Unterstützung der Aufklärung und gezieltes Social Engineering. APT42 missbraucht KI, um nach offiziellen E-Mails bestimmter Organisationen zu suchen und potenzielle Geschäftspartner auszuspionieren, um einen glaubwürdigen Vorwand zu schaffen.

Der von der nordkoreanischen Regierung unterstützte Akteur UNC2970 konzentriert sich in seinen Kampagnen konsequent auf Angriffe auf Verteidigungsunternehmen und gibt sich dabei als Personalvermittler aus. Die Gruppe nutzte Gemini, um Open-Source-Intelligence (OSINT) zu synthetisieren und Profile von hochrangigen Zielen zu erstellen, um die Kampagnenplanung und Aufklärung zu unterstützen.

Stetiges Wachstum KI-integrierter Malware: Wie bereits in der GTIG-Analyse vom November 2025 beobachtete das Team auch weiterhin, dass Bedrohungsakteure mit KI experimentierten, um neue Fähigkeiten in Malware-Familien zu implementieren. Dies umfasste Malware-Proben, die unter dem Namen HONESTCUE verfolgt wurden und die API von Gemini nutzten, um die Funktionsgenerierung auszulagern, um die herkömmliche netzwerkbasierte Erkennung und statische Analyse zu umgehen.

Neue KI-generierte Phishing-Kits: Die GTIG beobachtete ebenfalls, dass Bedrohungsakteure konventionelle KI-Fähigkeiten in ihre Cyber-Einbruchstechnik integrieren. Die Security-Experten identifizierten etwa ein Coinbait-Phishing-Kit, dessen Erstellung wahrscheinlich durch KI-Codegenerierungstools beschleunigt wurde und das sich als große Kryptowährungsbörse ausgab, um Zugangsdaten zu sammeln.

Wachsender Markt für KI-Dienste zur Unterstützung bösartiger Aktivitäten: Beobachtungen von GTIG in englisch- und russischsprachigen Untergrundforen deuten auf ein anhaltendes Interesse an KI-gestützten Tools und Diensten hin. Allerdings fällt es den Bedrohungsakteuren schwer, eigene Modelle zu entwickeln, weshalb sie stattdessen auf bestehende, ausgereifte KI-Modelle zurückgreifen. Ein Großteil dieser Aktivitäten belegt den Cybersecurity-Spezialisten zufolge die steigende Nachfrage nach gehackten oder gestohlenen API-Schlüsseln. Sie verweisen hier etwa auf ein Untergrund-Toolkit namens ‚Xanthorox‘. Dieses wird als maßgeschneiderte KI zur autonomen Codegenerierung von Malware und zur Entwicklung von Phishing-Kampagnen angepriesen. Die Untersuchung der GTIG ergab jedoch, dass Xanthorox aus mehreren KI-Produkten von kommerziellen und Dritt-Anbietern bestand.



  • Inlandsorders wieder im Plus

    Inlandsorders wieder im Plus

    Der Maschinen- und Anlagenbau in Deutschland erholt sich schrittweise von den Folgen der Corona-Krise. Nach dem saisonalen Rückschlag im August zeigte der Auftragseingang im September 2020 wieder ein positives Bild.

    mehr lesen: Inlandsorders wieder im Plus

  • Mit ‘Sammi‘ Fremdkörper in Lebensmitteln aufspüren

    Mit ‘Sammi‘ Fremdkörper in Lebensmitteln aufspüren

    Fremdkörper in Lebensmittel können für Konsumenten gefährlich werden. Die etablierten Röntgenverfahren erkennen vor allem Metalle – Glas, Kunststoff und Holz stellen hingegen eine Herausforderung dar. Der Prototyp ‘Sammi‘ soll diese…

    mehr lesen: Mit ‘Sammi‘ Fremdkörper in Lebensmitteln aufspüren

  • Jens-Peter Hess neuer Geschäftsführer bei Centric Deutschland

    Jens-Peter Hess neuer Geschäftsführer bei Centric Deutschland

    Mit Jens-Peter Hess hat der SAP-Spezialist Centric einen neuen Geschäftsführer. Er wird das Unternehmen gemeinsam mit Steven Wernike leiten.

    mehr lesen: Jens-Peter Hess neuer Geschäftsführer bei Centric Deutschland

  • Ingenieurarbeitsmarkt gerät zunehmend unter Druck

    Ingenieurarbeitsmarkt gerät zunehmend unter Druck

    Die Corona-Krise hinterlässt auch auf dem Ingenieurarbeitsmarkt Spuren. Das zeigen die Zahlen für das 3. Quartal aus dem aktuellen Ingenieurmonitor, den der VDI mit dem Institut der deutschen Wirtschaft (IW)…

    mehr lesen: Ingenieurarbeitsmarkt gerät zunehmend unter Druck

  • Keine FMB in diesem Jahr

    Keine FMB in diesem Jahr

    Vom 4. bis zum 6. November sollte in Bad Salzuflen die FMB – Zuliefermesse für den Maschinenbau über die Bühne gehen. Durch die aktuelle Pandemie-Lage haben die Veranstalter die Messe…

    mehr lesen: Keine FMB in diesem Jahr

  • Arbeitsmarktbarometer im Oktober stabil

    Arbeitsmarktbarometer im Oktober stabil

    Mit einem leichten Anstieg um 0,1 Punkte gegenüber dem Vormonat zeigt sich das IAB-Arbeitsmarktbarometer im Oktober stabil.

    mehr lesen: Arbeitsmarktbarometer im Oktober stabil

  • Verkaufszahlen von Servicerobotern steigen weltweit um 32 Prozent

    Verkaufszahlen von Servicerobotern steigen weltweit um 32 Prozent

    Der Markt für Serviceroboter erfährt durch die Covid-19-Pandemie einen Schub. So prognostiziert die International Fedaration of Robotics, dass sich der Umsatz mit in diesem Bereich bis 2022 mehr als verdoppeln…

    mehr lesen: Verkaufszahlen von Servicerobotern steigen weltweit um 32 Prozent

  • Deutsche Wirtschaft wieder etwas skeptischer

    Deutsche Wirtschaft wieder etwas skeptischer

    Erstmals nach fünf Anstiegen in Folge ist der Ifo-Geschäftsklima-Index im Oktober wieder gesunken. Im Verarbeitenden Gewerbe liegt der Geschäftsklimaindikator allerdings erstmals seit Juni 2019 wieder im positiven Bereich.

    mehr lesen: Deutsche Wirtschaft wieder etwas skeptischer

  • Kontron-Standorte gründen europäischen EMS/ODM-Verbund

    Kontron-Standorte gründen europäischen EMS/ODM-Verbund

    Die europäischen Produktionsstandorte des Embedded-Spezialisten Kontron sollen zu einem EMS/ODM-Verbund zusammengeschlossen werden.

    mehr lesen: Kontron-Standorte gründen europäischen EMS/ODM-Verbund

  • Partnerschaft zwischen Siemens und Log.Go.Motion

    Partnerschaft zwischen Siemens und Log.Go.Motion

    Im Rahmen einer Partnerschaft vertreibt Siemens zukünftig die Lösung Moby.Check des Digitalisierungsspezialisten Log.Go.Motion.

    mehr lesen: Partnerschaft zwischen Siemens und Log.Go.Motion

  • SAP legt Quartalszahlen vor und passt Jahresziele an

    SAP legt Quartalszahlen vor und passt Jahresziele an

    Der Softwarekonzern SAP hat seine Zahlen für das dritte Quartal 2020 veröffentlicht. Demnach erzielte der Softwarekonzern weniger Umsatz als noch im Vorjahresquartal. Das Cloudgeschäft legte hingegen zu.

    mehr lesen: SAP legt Quartalszahlen vor und passt Jahresziele an

  • Dr. Marianne Janik übernimmt bei Microsoft Deutschland

    Dr. Marianne Janik übernimmt bei Microsoft Deutschland

    Zum 1. November wird Dr. Marianne Janik die Leitung von Microsoft Deutschland von Sabine Bendiek übernehmen, die zu SAP wechseln wird.

    mehr lesen: Dr. Marianne Janik übernimmt bei Microsoft Deutschland