Maschinelles Lernen von Menschenhand

2024 08 14 ICM LAB 20 HaptXDeep IFLKIT 48
Bild: Karlsruher Institut für Technologie

Das IFL am Karlsruher Institut für Technologie und der IAS an der Universität Stuttgart entwickeln gemeinsam einen anpassungsfähigen Roboter mit Greifsystem, der menschliche Fähigkeiten durch Nachahmung erlernt. Dafür haben sie mit dem ICM-Zukunftslabor HaptXDeep eine Forschungsinfrastruktur aufgebaut, finanziert aus Mitteln des InnovationsCampus Mobilität der Zukunft. Das Labor mit dem Komplettsystem der Firma Shadow Robot befindet sich in Karlsruhe.

Programmieren von Robotern für industrielle Tätigkeiten besteht aus Coden und anschließendem Testen. Darauf folgt das Neuschreiben. So oft, bis die Maschine einen Prozess zuverlässig ausführt. Das ist langwierig. „Einen Roboter einsatzbereit zu machen, darf in Zukunft nicht mehr länger dauern, als einen neuen Mitarbeiter einzulernen“, sagt Edgar Welte, Wissenschaftlicher Mitarbeiter am KIT. Um dieses Ziel zu erreichen, will das Team den Robotern menschliches Lernen beibringen. Ähnlich, wie Auszubildende von ihren Meisterinnen und Meistern lernen, soll ihr Robotergreifsystem dann von einem Operator lernen – etwa wie sie neue Werkzeuge nutzen, unterschiedliche Materialien anfassen, ganze Arbeitsschritte ausführen oder auf Veränderungen in Produktionsprozessen reagieren. „Wir setzen für unser System autonomes Imitation Learning und Deep Reinforcement Learning ein. Der Roboter lernt die Fähigkeiten durch die Interaktion mit dem Menschen intuitiv und sofort“, erklärt Junior-Professorin Rania Rayyes. Durch den Ansatz verkürzen sich neben dem ursprüngliche Programmierprozess auch Umrüstzeiten, so die Forschenden.

Kommunikation über die Daten

Im Zukunftslabor erfolgt die Kommunikation mit dem Roboter per Daten. Edgar Welte generiert diese durch seine Bewegungen mit dem HaptX-Glove und erklärt dem sechsachsigen Cobot damit, wie er sich drehen und Werkzeuge oder Werkstücke packen muss. Durch die 20 Stellmotoren kann die Shadow-Dextorous-Hand die menschliche Greifbewegungen fast exakt nachbilden. Die Drucksensoren in den mechanischen Fingern geben dem Operator direktes Feedback. Welte spürt durch kleine Luftpolster im Handschuh, sobald das Gewicht zunimmt oder das Werkzeug falsch in der Hand liegt. Fasst er nach, tut es ihm der Greifer gleich – in Echtzeit. Wie die Forschenden mitteilen, wird dies eine wichtige Funktion sein, wenn die Maschine später per KI selbstständig lernt. „Durch die unmittelbaren Korrekturen können wir die Fähigkeiten unseres Systems schnell erweitern und ersparen uns Monate an Arbeit für die Neuprogrammierungen“, erklärt Rayyes.

Das Zukunftslabor HaptXDeep hat eine Doppelfunktion. Es ist die Hardware für die Erforschung und Entwicklung der Software-gestützten Technologien und gleichzeitig der Demonstrator für deren Funktionsfähigkeit. Welte will mit seiner Promotion zum Thema ’Interactive Imitation Learning for Dexterous Manipulation’ einen Beitrag zur Entwicklung des Gesamtsystems liefern. Daneben soll es in HaptXDeep weitere Projekte zur Sensorik, alternativen Teleoperationsmethoden wie Gestenerkennung über Motion Tracking oder zur Regelung der unterschiedlichen Finger geben. Das schließt auch Kooperationen mit Unternehmen oder anderen Hochschulinstituten ein. „HaptXDeep soll in der Forschung möglichst viele Türen öffnen“, erklärt Rayyes.

In einem Kooperationsprojekt mit der Gruppe um Juniorprofessor Andrey Morozov am IAS der Universität Stuttgart wollen die Forschenden Methoden entwickeln, um die Sicherheit und die Zuverlässigkeit des anpassungsfähigen Roboters zu gewährleisten. Fehlerinjektion über digitale Zwillingen werden als Testverfahren des Systems zum Einsatz kommen, Deep-Learning-Systeme sollen dem Roboter helfen Anomalien selbst zu erkennen und damit Fehler vorherzusagen. Das Ziel: Der Roboter soll Fehler auf Basis des erlernten irgendwann auch autonom korrigieren können. Entwickelt wird dieser Teil der Software in Stuttgart und getestet im Reallabor des IFL am KIT.



  • Vertrauenswürdige Elektronik für das Internet der Dinge

    Vertrauenswürdige Elektronik für das Internet der Dinge

    Zwölf Partner aus Forschung und Industrie haben das Forschungsprojekt VE-Vides gestartet. Ziel ist die Entwicklung eines Sicherheitskonzepts für das Internet der Dinge.

    mehr lesen: Vertrauenswürdige Elektronik für das Internet der Dinge

  • Martina Hofmann übernimmt Vorsitz

    Martina Hofmann übernimmt Vorsitz

    Prof. Dr.-Ing. Martina Hofmann von der Hochschule Aalen ist neue Vorsitzende des VDE-Ausschusses Studium, Beruf und Gesellschaft. Neben klassischer Ausschussarbeit will sie die Themen Frauen und Technik sowie Klimaschutz in…

    mehr lesen: Martina Hofmann übernimmt Vorsitz

  • Steuerungstechnik, IT und IoT sicher verbinden

    Steuerungstechnik, IT und IoT sicher verbinden

    Die Vernetzung in der Industrie und das damit verbundene Industrial Internet of Things (IIoT) definieren die Anforderungen an die Sicherheit neu – und damit auch an die eingesetzten Automatisierungslösungen.

    mehr lesen: Steuerungstechnik, IT und IoT sicher verbinden

  • So können sich Unternehmen schützen

    So können sich Unternehmen schützen

    Eine aktuelle Studie des Digitalverbands Bitkom bewertet Ransomware als Haupttreiber für den enormen Anstieg an Cyberattacken. Die Erpresserangriffe verursachen bei den Betroffenen einen enormen wirtschaftlichen Schaden.

    mehr lesen: So können sich Unternehmen schützen

  • Doppelspitze bei Valantic CEC Schweiz

    Doppelspitze bei Valantic CEC Schweiz

    Florian Heidecke leitet seit Anfang August gemeinsam mit Reto Rutz Valantic CEC in der Schweiz.

    mehr lesen: Doppelspitze bei Valantic CEC Schweiz

  • Maschinen lernen voneinander

    Maschinen lernen voneinander

    Das Kunststoff-Zentrum SKZ in Würzburg führt im Rahmen des Forschungsprojekts Darwin mit dem Fraunhofer Spin-off plus10 mehrere Versuchsreihen durch. Ziel ist die Entwicklung kontinuierlich lernender Modelle, die eine höhere Qualität…

    mehr lesen: Maschinen lernen voneinander

  • Wirtschaftliche Lage in Deutschland im August

    Wirtschaftliche Lage in Deutschland im August

    Das Bruttoinlandsprodukt (BIP) ist im 2. Quartal gewachsen. Damit setzt die deutsche Wirtschaft ihren Erholungskurs fort.

    mehr lesen: Wirtschaftliche Lage in Deutschland im August

  • Digitalisierungsziele werden oft noch nicht erreicht

    Digitalisierungsziele werden oft noch nicht erreicht

    Laut einer Studie von Tata Communications hat die große Mehrheit der 750 befragten Unternehmen ihre Digital-First-Ziele noch nicht erreicht. Dabei werden die Unternehmen in drei Reifegrad-Kategorien eingeteilt.

    mehr lesen: Digitalisierungsziele werden oft noch nicht erreicht

  • Der Fokus liegt auf der Elektromobilität

    Der Fokus liegt auf der Elektromobilität

    Eine gemeinsame Studie von VDA und Deloitte zeigt, dass Automobilzulieferer sich mitten in der Transformation befinden, aktuell jedoch noch 85 Prozent des Umsatzes aus der Verbrennertechnologie generiert wird. Dabei geht…

    mehr lesen: Der Fokus liegt auf der Elektromobilität

  • Förderung für den Messeauftritt

    Förderung für den Messeauftritt

    Kleine und mittlere Unternehmen können für Ihren Auftritt bei bestimmten Messen eine Förderung des BMWi in Anspruch nehmen. Auf bis zu 12.000€ kann sich der Förderbetrag belaufen.

    mehr lesen: Förderung für den Messeauftritt

  • Wenn Cyberangriffe schiefgehen

    Wenn Cyberangriffe schiefgehen

    Ransomware hat sich zu einem kriminellen Geschäft mit hohen Um- und Einsätzen entwickelt. Doch nicht jeder Angriff verläuft wie geplant. Der Security-Anbieter Sophos zählt einige Pannen auf.

    mehr lesen: Wenn Cyberangriffe schiefgehen

  • Universal Robots erzielt +75 Prozent

    Universal Robots erzielt +75 Prozent

    Nach einem großen Umsatzplus im zweiten Quartal rechnet Universal Robots auch im 3. Quartal mit einem zweistelligen Umsatzwachstum.

    mehr lesen: Universal Robots erzielt +75 Prozent