Defizite bei Governance und Proxy-Systemen

Ein dritter Risikobereich betrifft Lücken in der Governance. Während klassische Softwarekomponenten oft etablierten Prozessen für Versionskontrolle und Release-Zyklen folgen, fehlen solche Strukturen bei vielen KI-Modellen. Zwischen Anwendung und Modell geschaltete Proxys wie das Model Context Protocol übernehmen zentrale Funktionen, können aber selbst ein Angriffsvektor sein. Ohne eine Software Bill of Materials (AI?SBOM) oder gleichwertige Kontrollmechanismen riskieren Unternehmen den Einsatz veralteter oder kompromittierter Proxy-Komponenten. Nach Einschätzung von VicOne macht dies eine strikte Versionskontrolle und die Nutzung signierter Modelle zwingend erforderlich.

Manipulation des Modellverhaltens

Als viertes Risiko beschreibt VicOne die Möglichkeit, das Verhalten von GenAI-Modellen gezielt zu manipulieren. Angriffe wie der sogenannte Imprompter-Ansatz nutzen Schwächen in den Sicherheitsbegrenzungen, um bösartige Anweisungen in harmlos wirkenden Prompts einzubetten. Tests zeigten Erfolgsquoten von bis zu 80 Prozent beim Abgriff vertraulicher Daten. Auf Fahrzeugsysteme übertragen könnten Angriffe dieser Art dazu führen, dass falsche Navigationsanweisungen ausgegeben oder private Sprachinteraktionen unbemerkt aufgezeichnet werden. Auch andere unautorisierte Aktionen in Infotainment-Systemen sind denkbar.

Empfohlene Maßnahmen für Hersteller

VicOne empfiehlt Fahrzeugherstellern, GenAI-Modelle wie klassische Lieferantenkomponenten zu behandeln und sie in die bestehende Sicherheits-Governance einzubinden. Dazu gehört aus Sicht des Unternehmens der Aufbau einer Software Bill of Materials für jedes Modell, das detaillierte Informationen zu Herkunft, Trainingsverlauf, Risikoklassen und bekannten Schwachstellen enthält. Ebenso sollten verpflichtende Sicherheitsaudits, Penetrationstests und Prüfungen auf Manipulation durch externe Red Teams erfolgen. Ergänzend wird empfohlen, die Modelle in ein zentrales Risiko- und Transparenzmanagement einzubinden, um jederzeit einen Überblick über eingesetzte Versionen und Systeme zu behalten.

Seiten: 1 2 3



  • Nadine Böllner wird Teil der Docufy-Geschäftsführung

    Nadine Böllner wird Teil der Docufy-Geschäftsführung

    Mit der Berufung von Nadine Böllner zur kaufmännischen Geschäftsführerin steht zukünftig ein Führungstrio an der Spitze des Softwareanbieters Docufy.

    mehr lesen: Nadine Böllner wird Teil der Docufy-Geschäftsführung

  • Mehr Speicher für Sicherheitskameras

    Mehr Speicher für Sicherheitskameras

    Western Digital kündigt die WD Purple Ultra Endurance MicroSD-Karte mit 96-Layer-3D-Nand-Technologie für Sicherheits- und Edge-Speicherkameras an und erweitert sein Festplattenportfolio mit der WD Purple 14TB für den Überwachungsbereich.

    mehr lesen: Mehr Speicher für Sicherheitskameras

  • Hanna Hennig wird Siemens-CIO

    Hanna Hennig wird Siemens-CIO

    Siemens bekommt zum Jahreswechsel eine neue IT-Chefin. Hanna Hennig, die von Osram zum Technologiekonzern stößt, soll dann das Amt von Helmuth Ludwig übernehmen.

    mehr lesen: Hanna Hennig wird Siemens-CIO

  • Anzeige
    Retarus beschleunigt Datenaustausch in der Produktion

    Retarus beschleunigt Datenaustausch in der Produktion

    Die Digitalisierungs- und Automatisierungslösungen von Retarus ermöglichen effiziente Abläufe ohne manuellen Aufwand oder Kompromisse bei der Datensouveränität

    mehr lesen: Retarus beschleunigt Datenaustausch in der Produktion

  • Bosch kündigt Technologiesprung an

    Bosch kündigt Technologiesprung an

    Neue Mikrochips aus Siliziumkarbid (SiC) sollen nach Angaben des Herstellers Bosch für einen Technologiesprung in der Elektromobilität sorgen. „Für Autofahrer bedeutet das sechs Prozent mehr Reichweite“, teilte Bosch-Geschäftsführer Harald Kröger…

    mehr lesen: Bosch kündigt Technologiesprung an

  • Gefasoft eröffnet neuen Firmensitz

    Gefasoft eröffnet neuen Firmensitz

    In Regensburg ist die neue Firmenzentrale von Gefasoft offiziell eingeweiht worden.

    mehr lesen: Gefasoft eröffnet neuen Firmensitz

  • 4. Verpackungstag

    4. Verpackungstag

    Auf dem 4. Verpackungstag in Marktheidenfeld am 6. November werden die neuesten Trends für Verpackungsmaschinen vorgestellt. Das Networking-Event der Verpackungstechnik findet diesmal im globalen Headquarter für Machine Solutions von Schneider…

    mehr lesen: 4. Verpackungstag

  • Microsoft und Nvidia arbeiten zusammen

    Microsoft und Nvidia arbeiten zusammen

    Die beiden IT-Konzerne Nvidia und Microsoft kooperieren mit dem Ziel, Edge Computing intelligenter und schneller zu machen. Das gab Nvidia-CEO Jensen Huang im Rahmen des Mobile World Congress in Las…

    mehr lesen: Microsoft und Nvidia arbeiten zusammen

  • Smarte Daten nutzen

    Smarte Daten nutzen

    Die Managementberatung T.A. Cook lädt vom 5. bis zum 6. Dezember zum Fachforum ‚Smart Data und Data Analytics in Instandhaltung und Technik‘ nach Berlin ein.

    mehr lesen: Smarte Daten nutzen

  • Erlöse mit Abo-Modellen wachsen

    Erlöse mit Abo-Modellen wachsen

    Weltweit hat die Subscription Economy in den vergangenen sieben Jahren zugelegt, um mehr als 350 Prozent. Im aktuellen Subscription Economy Index von Zuora wartet besonders die fertigende Industrie mit steigenden…

    mehr lesen: Erlöse mit Abo-Modellen wachsen

  • Unternehmen passen ihre Strategie an

    Unternehmen passen ihre Strategie an

    Autonomes Entscheiden Der Weg zur vollständigen Digitalisierung erfordert für viele Unternehmen den Einsatz von künstlicher Intelligenz (KI), maschinellem Lernen (ML) und einer autonomen Plattform. Fast 60 Prozent der Befragten, deren…

    mehr lesen: Unternehmen passen ihre Strategie an

  • Software AG steigert Quartalsumsatz und -gewinn

    Software AG steigert Quartalsumsatz und -gewinn

    Im dritten Geschäftsquartal hat die Software AG bei Umsatz und Gewinn zugelegt. Der Gesamtumsatz wuchs um 7 Prozent, der Gewinn um 15 Prozent.

    mehr lesen: Software AG steigert Quartalsumsatz und -gewinn