DFKI optimiert Systementwicklung mit hybrider KI und menschlichem Feedback

Robotersysteme können mithilfe von hybriden KI-Methoden und basierend auf menschlichem Feedback, das z.B. durch EEG-Messungen gewonnen wird, maßgeschneidert entwickelt und im laufenden Betrieb kontinuierlich angepasst werden.
Robotersysteme können mithilfe von hybriden KI-Methoden und basierend auf menschlichem Feedback, das z.B. durch EEG-Messungen gewonnen wird, maßgeschneidert entwickelt und im laufenden Betrieb kontinuierlich angepasst werden. – Bild: DFKI / Meltem Fischer

Die jüngsten Entwicklungen in der Robotik lassen die Vision von Robotern, die als persönliche Assistenten und Interaktionspartner für den Menschen komplexe Aufgaben übernehmen, näher rücken. Forschende des Deutschen Forschungszentrums für Künstliche Intelligenz (DFKI) in Bremen haben im Rahmen des vom Bundesministerium für Bildung und Forschung (BMBF) geförderten Projekts M-Rock einen wichtigen Schritt in diese Richtung getan. Mit Ansätzen, die auf hybriden KI-Methoden und menschlichem Feedback basieren, ist es gelungen, die Sicherheit und Adaptivität des Roboterverhaltens deutlich zu erhöhen.

Als Teil der X-Rock-Entwicklungen am DFKI Robotics Innovation Center baut M-Rock auf den Ergebnissen der Projekte D-Rock und Q-Rock auf. Ziel ist es, Menschen ohne Fachkenntnisse in die Lage zu versetzen, maßgeschneiderte Roboter für ihre Anwendungen zu entwickeln.

Menschliches Feedback in die Systementwicklung integriert

Während in D-Rock der Aufbau einer Datenbank modularer Roboterkomponenten im Vordergrund stand, ermöglicht der in Q-Rock entwickelte Ansatz die automatische Abbildung komplexer Hard- und Softwarestrukturen auf konkretes Roboterverhalten mittels hybrider KI-Verfahren wie maschinellem Lernen und strukturellem Schlussfolgern. M-Rock erweitert diesen Ansatz durch die Integration von menschlichem Feedback, um das Verhalten nicht nur softwareseitig an die individuellen Anforderungen des Benutzenden anzupassen, sondern auch eine nachträgliche Optimierung hinsichtlich des Verhaltens und der Hardwareauswahl zu ermöglichen. Dies ermöglicht eine kontinuierliche Anpassung von Robotern im laufenden Betrieb und ist zudem ein Werkzeug zur Personalisierung von Roboterdesign und -verhalten.

Eine zentrale Neuerung von M-Rock ist die Kombination von explizitem Feedback, etwa in Form von Skalenbewertungen, mit implizitem Feedback wie Hirn- und Muskelaktivität (EEG- und EMG-Daten) zur automatischen Anpassung eines Roboters an die individuellen Anforderungen und Präferenzen des interagierenden Menschen. Um die Rolle des menschlichen Feedbacks zu untersuchen, führten die Bremer Forschenden vier Studien durch. Dazu zeichneten sie die EEG-Daten von Versuchspersonen auf, die einmal Fehler im kontinuierlichen Roboterverhalten und einmal in menschlichem Verhalten beobachteten. Anschließend analysierten die Forschenden die Daten hinsichtlich des so genannten fehlerbezogenen Potenzials, das im menschlichen Gehirn beim Erkennen von Fehlverhalten ausgelöst wird.

In weiteren Studien wurde sowohl implizites als auch explizites Feedback erhoben. Zum einen bei Versuchspersonen, die das Fehlverhalten einer getragenen Ellenbogenorthese wahrnahmen, zum anderen bei der Beobachtung von Fehlverhalten an einem Pendelroboter. Die Analyse der EEG-Daten zeigte in allen Studien eine hohe Genauigkeit der fehlerbezogenen Potentialerkennung. Die Forschenden konnten zeigen, dass durch implizites Feedback Fehler in Echtzeit erkannt werden können – sei es bei Robotern, menschlichen Bewegungen oder Orthesen. Dies kann wiederum vom System genutzt werden, um automatisch Anpassungen vorzunehmen, ohne dass Nutzer aktiv eingreifen müssen.

Natürliche Roboterbewegungen durch Optimal Cognitive Cores

Eine weiteres Ergebnis von M-Rock ist die Weiterentwicklung der in Q-Rock eingeführten Cognitive Cores (CCs) zu Optimal Cognitive Cores (OCCs) durch Methoden der optimalen Steuerung. OCCs ermöglichen die Generierung und Ausführung von natürlichem Verhalten für komplexe Systeme und verbessern die Interaktion mit dem Menschen durch präzise Beschreibungen der Roboteraufgaben. Sie verwenden mathematische Modelle, um bestmögliche Lösungen für komplexe Steuerungsprobleme zu finden, wobei Faktoren wie Energieverbrauch, Zeit und Sicherheit berücksichtigt werden. In Versuchen mit dem humanoiden Roboter RH5 ist es den Forschenden gelungen, mit Hilfe von OCCs erfolgreich Tanz- und Gehbewegungen zu erzeugen.

Menschliches Feedback kann zur Verbesserung der Optimal Cognitive Cores (OCCs) und damit zur Verfeinerung des Roboterverhaltens beitragen. Es wird verwendet, um Kostenfunktionen zu erstellen, die bei der Planung optimaler Trajektorien helfen. So lernt der Roboter auf der Grundlage menschlicher Bewertungen, welche Bewegungen effizient sind, und kann besser auf dynamische Umgebungen reagieren.

In zwei Szenarien evaluiert

Die in M-Rock entwickelten Technologien wurden in zwei Anwendungsszenarien evaluiert. Im ersten Szenario testeten die Forschenden den sogenannten „Assist-as-Needed“-Ansatz eines Exoskeletts, das die robotische Unterstützung individuell an die Nutzenden anpasst. Die Testpersonen führten verschiedene Armbewegungen aus, während ihre Muskelaktivität (EMG-Daten) als Feedback für ein neuronales Netz zur Vorhersage der Gelenkkräfte diente. Die Ergebnisse zeigten, dass das Exoskelett in der Lage ist, die jeweiligen Fähigkeiten der Benutzenden anhand der EMG-Daten zu bewerten und sie flexibel und individuell pro Gelenk zu unterstützen.

Im zweiten Szenario lag der Fokus auf der gemeinsamen Optimierung von Verhaltens- und Designparametern eines vierbeinigen Roboters für Sprünge und Rückwärtssalti. Optimal Cognitive Cores (OCCs) halfen dabei, die Bewegungen des Roboters an die jeweilige Aufgabe anzupassen und die optimale Morphologie auszuwählen. Tests am realen System ergaben, dass längere Oberschenkel für Vorwärtssprünge und längere Unterschenkel für Rückwärtssalti die besten Ergebnisse lieferten.



  • Virtueller Browser schützt KRITIS vor Gefahren

    Virtueller Browser schützt KRITIS vor Gefahren

    35 Prozent aller Unternehmen, die zu den Kritischen Infrastrukturen (KRITIS) zählen, sind in den vergangenen zwölf Monaten Opfer eines Angriffs aus dem Internet geworden – mit zum Teil gravierenden Folgen…

    mehr lesen: Virtueller Browser schützt KRITIS vor Gefahren

  • Lazarus entwickelt Fähigkeiten für Supply-Chain-Angriffe

    Lazarus entwickelt Fähigkeiten für Supply-Chain-Angriffe

    Kaspersky-Forscher haben bei Lazarus verstärkte Angriffsfähigkeiten auf Lieferketten identifiziert. Des Weiteren setzt die Advanced-Persistent-Threat(APT)-Gruppe nun das plattformübergreifende MATA-Framework für Cyberspionage-Ziele ein.

    mehr lesen: Lazarus entwickelt Fähigkeiten für Supply-Chain-Angriffe

  • Quantenkommunikation über große Distanzen ermöglichen

    Quantenkommunikation über große Distanzen ermöglichen

    Die Digitalisierung schreitet voran, gleichzeitig braucht der wachsende Austausch sensibler Daten mehr Sicherheit. Ein Kommunikationsnetz, das auf den Gesetzen der Quantenphysik beruht, ist wegen der physikalisch garantierten Abhörsicherheit ein wichtiger…

    mehr lesen: Quantenkommunikation über große Distanzen ermöglichen

  • Höhere Standards für IoT Security ab 2024

    Höhere Standards für IoT Security ab 2024

    Das Internet der Dinge stellt eines der größten Risiken in der Informationstechnologie dar. Die EU-Kommission erhöht mit neuen Sicherheitsanforderungen deutlich den Druck auf Hersteller, Integratoren und Händler von IoT Geräten…

    mehr lesen: Höhere Standards für IoT Security ab 2024

  • Kaum wirksamer Schutz vor Cyberangriffen

    Kaum wirksamer Schutz vor Cyberangriffen

    55 Prozent der großen Unternehmen sind nicht in der Lage, Cyberangriffe schnell zu identifizieren, wirksam zu bekämpfen oder deren Auswirkungen schnell zu begrenzen. Dies geht einer Befragung der Unternehmensberatung Accenture…

    mehr lesen: Kaum wirksamer Schutz vor Cyberangriffen

  • VDMA und BKA vertiefen Zusammenarbeit

    VDMA und BKA vertiefen Zusammenarbeit

    Gemeinsam gegen Cybercrime VDMA und BKA vertiefen Zusammenarbeit Das Bundeskriminalamt (BKA) und der VDMA haben eine vertiefte Zusammenarbeit vereinbart. Durch gegenseitigen Erfahrungs- und Informationsaustausch soll erreicht werden, dass Cybercrime in…

    mehr lesen: VDMA und BKA vertiefen Zusammenarbeit

  • Industrial Transformation auf der Hannover Messe 2022

    Industrial Transformation auf der Hannover Messe 2022

    Digitalisierung und Nachhaltigkeit sind die Schwerpunktthemen der Hannover Messe 2022. Damit will die Industriemesse Impulse für mehr Klimaschutz in Wirtschaft und Industrie setzen. Die Hannover Messe wird im April 2022…

    mehr lesen: Industrial Transformation auf der Hannover Messe 2022

  • Siemens und Merck kooperieren

    Siemens und Merck kooperieren

    Im Rahmen einer Partnerschaft wollen Siemens und Merck Vertrauen in Machine-to-Machine-Kommunikation (M2M) in industriellen Wertschöpfungsketten fördern.

    mehr lesen: Siemens und Merck kooperieren

  • Bitkom-Präsident Berg im Amt bestätigt

    Bitkom-Präsident Berg im Amt bestätigt

    Bitkom-Präsident Achim Berg wurde für weitere zwei Jahre im Amt bestätigt. Zudem wurde Sabine Bendiek (SAP) zur neuen Vizepräsidentin ernannt.

    mehr lesen: Bitkom-Präsident Berg im Amt bestätigt

  • KI-Spezialist Cognostics gehört nun Cloudflight

    KI-Spezialist Cognostics gehört nun Cloudflight

    Cloudflight übernimmt den KI-Software-Development-Spezialisten Cognostics. Anwender sollen dadurch unter anderem zusätzliche KI-Expertise im Bereich Softwareentwicklung für kognitive Systeme erhalten.

    mehr lesen: KI-Spezialist Cognostics gehört nun Cloudflight

  • Ifo-Institut beziffert Produktionsausfälle mit 40Mrd.€

    Ifo-Institut beziffert Produktionsausfälle mit 40Mrd.€

    Die deutsche Industrie hat derzeit mit Lieferengpässen zu kämpfen und laut Ifo Institut haben diese bereits zu Produktionsausfällen in Höhe von 40Mrd.€ geführt.

    mehr lesen: Ifo-Institut beziffert Produktionsausfälle mit 40Mrd.€

  • Orbis bündelt HR-Knowhow unter neuer Dachmarke

    Orbis bündelt HR-Knowhow unter neuer Dachmarke

    Die Orbis-Gruppe will mit der neuen Dachmarke Orbis People ihr SAP-Knowhow im Bereich Personalmanagement unter einem Dach bündeln.

    mehr lesen: Orbis bündelt HR-Knowhow unter neuer Dachmarke