Neue Jailbreaking-Technik verleitet LLMs zu schädlichen Inhalten

Das Unit 42-Team von Palo Alto Networks hat eine neue Jailbreaking-Technik namens Deceptive Delight entdeckt. Wie der Cybersicherheitsspezialist mitteilt, lassen sich damit die Sicherheitsvorkehrungen von acht hochmodernen LLMs (Large Language Models) umgehen, um schädliche Inhalte zu generieren. Demnach bettet der Ansatz schädliche Themen in harmlose Erzählungen ein. Dadurch werden die LLMs dazu verleitet, schädliche Inhalte zu generieren, während sie sich auf scheinbar unkritische Details fokussieren.

Die Technik erzielt in Tests mit Open-Source- und proprietären KI-Modellen eine Erfolgsquote von 65 Prozent. Dies übertrifft deutlich die Erfolgsquote von 5,8 Prozent, die bei direkten Angriffen ohne Jailbreaking-Techniken erzielt wird.

Die Untersuchung zeigt erhebliche Schwachstellen in den KI-Systemen und verdeutlicht nach Ansicht der Experten, wie dringend erforderlich verbesserte Sicherheitsmaßnahmen sind, um den Missbrauch von Generativer KI (Gen AI) zu verhindern.

Palo Alto Networks hat seine Erkenntnisse mit der Cyber Threat Alliance (CTA) geteilt. CTA-Mitglieder nutzen diese, um entsprechende Schutzmaßnahmen schnellstmöglich zu implementieren und Bedrohungsakteure systematisch in ihren Vorhaben zu stören.



  • MES zwischen On-Premise und Cloud-Betrieb

    MES zwischen On-Premise und Cloud-Betrieb

    Der MES-Anbieter Proxia Software kapselt Funktionen seiner Software, um Anwendern mehr Flexibilität beim Cloud-Betrieb ihres Produktionssteuerungssystems zu ermöglichen. Eine Datenvorverarbeitung im sogenannten Fog Layer soll durch eine geringere Anzahl an…

    mehr lesen: MES zwischen On-Premise und Cloud-Betrieb

  • Zwei Neuzugänge bei Igel

    Zwei Neuzugänge bei Igel

    Christiane Ohlgart und Kris Hamner verstärken das Management-Team von Igel. Ohlgart wird als neue Finanzchefin und Hamner als neuer Personalchef zum Executive Team in San Francisco stoßen.

    mehr lesen: Zwei Neuzugänge bei Igel

  • Einheitliche Standards für die Industrie 4.0

    Einheitliche Standards für die Industrie 4.0

    In dem vom Bundesministerium für Wirtschaft und Energie geförderten Forschungsprojekt InterOpera wollen Forscherinnen und Forscher zusammen mit der Industrie einheitliche Methoden zur Umsetzung der Verwaltungsschale in der Praxis erarbeiten.

    mehr lesen: Einheitliche Standards für die Industrie 4.0

  • BSI fordert den Crashtest für Cyber-Sicherheit

    BSI fordert den Crashtest für Cyber-Sicherheit

    In seinem Branchenbild Automotive spricht sich das Bundesamt für Sicherheit in der Informationstechnik dafür aus, auch die Cybersicherheit in der Lieferkette der Automobilbauer bzw. in einem frühen Entwicklungsstadium in den…

    mehr lesen: BSI fordert den Crashtest für Cyber-Sicherheit

  • Schnittstellen validieren in regulierten Industrien

    Schnittstellen validieren in regulierten Industrien

    Die Richtlinie VDI/VDE 3516 Blatt 6 ‚Validierung im GxP-Umfeld – Validierung von Schnittstellen‘ ist im August 2021 erschienen. Sie lässt sich zur Validierung von Schnittstellen zwischen computergestützten Systemen im regulierten…

    mehr lesen: Schnittstellen validieren in regulierten Industrien

  • Motek 2021: Montagetechnik-Messe mit echten Menschen

    Motek 2021: Montagetechnik-Messe mit echten Menschen

    Fachbesucher der industriellen Automatisierungsbranche treffen sich vom 5. bis 8. Oktober auf dem Messeduo Motek/Bondexpo in Stuttgart. Beide Messen sollen als Präsenzmesse stattfinden.

    mehr lesen: Motek 2021: Montagetechnik-Messe mit echten Menschen

  • Materialmangel der Industrie verschärft sich

    Materialmangel der Industrie verschärft sich

    Der Materialmangel in der deutschen Industrie hat sich weiter verschärft. 69,2 Prozent der Industriefirmen in Deutschland klagten im August laut einer Umfrage des Ifo Instituts über Engpässe und Probleme bei…

    mehr lesen: Materialmangel der Industrie verschärft sich

  • T-Systems und Google arbeiten an souveräner Cloud

    T-Systems und Google arbeiten an souveräner Cloud

    Gemeinsam wollen T-Systems und Google Cloud ab Mitte 2022 eine souveräne Cloud für Deutschland zur Verfügung stellen. Der Betrieb der Cloud unterliegt dabei der Kontrolle von T-Systems.

    mehr lesen: T-Systems und Google arbeiten an souveräner Cloud

  • Open Industry 4.0 Alliance und Packaging Valley arbeiten zusammen

    Open Industry 4.0 Alliance und Packaging Valley arbeiten zusammen

    Open Industry 4.0 Alliance und Packaging Valley wollen gemeinsam die herstellerübergreifende Integration in der Verpackungsindustrie realisieren. Die Schwerpunkte der Zusammenarbeit liegen auf Master Data Management, Plant Analytics und Predictive Maintenance.

    mehr lesen: Open Industry 4.0 Alliance und Packaging Valley arbeiten zusammen

  • Pepperl+Fuchs übernimmt Aava

    Pepperl+Fuchs übernimmt Aava

    Das finnische Unternehmen Aava gehört ab sofort zur Pepperl+Fuchs-Gruppe. Das Unternehmen bietet u.a. Tablet Computer für die Industrie ab.

    mehr lesen: Pepperl+Fuchs übernimmt Aava

  • Manufacturing Execution-Systeme im Vergleich

    Manufacturing Execution-Systeme im Vergleich

    Der vom Trovarit Competence Center MES in Zusammenarbeit mit dem Fraunhofer Institut Produktionstechnik und Automatisierung (IPA) und dem VDI herausgegebene ’Aachener Marktspiegel Business Software – MES/Fertigungssteuerung 2021/2022‘, untersucht das Angebot…

    mehr lesen: Manufacturing Execution-Systeme im Vergleich

  • Weniger Kurzarbeit im August

    Weniger Kurzarbeit im August

    In Deutschland waren im August nach Angaben des Ifo Instituts 688.000 Menschen in Kurzarbeit, ein deutlicher Rückgang im Vergleich zum Vormonat. Die Lieferengpässe in der Industrie hatten demnach kaum Auswirkungen…

    mehr lesen: Weniger Kurzarbeit im August