Maschinelles Lernen von Menschenhand

2024 08 14 ICM LAB 20 HaptXDeep IFLKIT 48
Bild: Karlsruher Institut für Technologie

Das IFL am Karlsruher Institut für Technologie und der IAS an der Universität Stuttgart entwickeln gemeinsam einen anpassungsfähigen Roboter mit Greifsystem, der menschliche Fähigkeiten durch Nachahmung erlernt. Dafür haben sie mit dem ICM-Zukunftslabor HaptXDeep eine Forschungsinfrastruktur aufgebaut, finanziert aus Mitteln des InnovationsCampus Mobilität der Zukunft. Das Labor mit dem Komplettsystem der Firma Shadow Robot befindet sich in Karlsruhe.

Programmieren von Robotern für industrielle Tätigkeiten besteht aus Coden und anschließendem Testen. Darauf folgt das Neuschreiben. So oft, bis die Maschine einen Prozess zuverlässig ausführt. Das ist langwierig. „Einen Roboter einsatzbereit zu machen, darf in Zukunft nicht mehr länger dauern, als einen neuen Mitarbeiter einzulernen“, sagt Edgar Welte, Wissenschaftlicher Mitarbeiter am KIT. Um dieses Ziel zu erreichen, will das Team den Robotern menschliches Lernen beibringen. Ähnlich, wie Auszubildende von ihren Meisterinnen und Meistern lernen, soll ihr Robotergreifsystem dann von einem Operator lernen – etwa wie sie neue Werkzeuge nutzen, unterschiedliche Materialien anfassen, ganze Arbeitsschritte ausführen oder auf Veränderungen in Produktionsprozessen reagieren. „Wir setzen für unser System autonomes Imitation Learning und Deep Reinforcement Learning ein. Der Roboter lernt die Fähigkeiten durch die Interaktion mit dem Menschen intuitiv und sofort“, erklärt Junior-Professorin Rania Rayyes. Durch den Ansatz verkürzen sich neben dem ursprüngliche Programmierprozess auch Umrüstzeiten, so die Forschenden.

Kommunikation über die Daten

Im Zukunftslabor erfolgt die Kommunikation mit dem Roboter per Daten. Edgar Welte generiert diese durch seine Bewegungen mit dem HaptX-Glove und erklärt dem sechsachsigen Cobot damit, wie er sich drehen und Werkzeuge oder Werkstücke packen muss. Durch die 20 Stellmotoren kann die Shadow-Dextorous-Hand die menschliche Greifbewegungen fast exakt nachbilden. Die Drucksensoren in den mechanischen Fingern geben dem Operator direktes Feedback. Welte spürt durch kleine Luftpolster im Handschuh, sobald das Gewicht zunimmt oder das Werkzeug falsch in der Hand liegt. Fasst er nach, tut es ihm der Greifer gleich – in Echtzeit. Wie die Forschenden mitteilen, wird dies eine wichtige Funktion sein, wenn die Maschine später per KI selbstständig lernt. „Durch die unmittelbaren Korrekturen können wir die Fähigkeiten unseres Systems schnell erweitern und ersparen uns Monate an Arbeit für die Neuprogrammierungen“, erklärt Rayyes.

Das Zukunftslabor HaptXDeep hat eine Doppelfunktion. Es ist die Hardware für die Erforschung und Entwicklung der Software-gestützten Technologien und gleichzeitig der Demonstrator für deren Funktionsfähigkeit. Welte will mit seiner Promotion zum Thema ’Interactive Imitation Learning for Dexterous Manipulation’ einen Beitrag zur Entwicklung des Gesamtsystems liefern. Daneben soll es in HaptXDeep weitere Projekte zur Sensorik, alternativen Teleoperationsmethoden wie Gestenerkennung über Motion Tracking oder zur Regelung der unterschiedlichen Finger geben. Das schließt auch Kooperationen mit Unternehmen oder anderen Hochschulinstituten ein. „HaptXDeep soll in der Forschung möglichst viele Türen öffnen“, erklärt Rayyes.

In einem Kooperationsprojekt mit der Gruppe um Juniorprofessor Andrey Morozov am IAS der Universität Stuttgart wollen die Forschenden Methoden entwickeln, um die Sicherheit und die Zuverlässigkeit des anpassungsfähigen Roboters zu gewährleisten. Fehlerinjektion über digitale Zwillingen werden als Testverfahren des Systems zum Einsatz kommen, Deep-Learning-Systeme sollen dem Roboter helfen Anomalien selbst zu erkennen und damit Fehler vorherzusagen. Das Ziel: Der Roboter soll Fehler auf Basis des erlernten irgendwann auch autonom korrigieren können. Entwickelt wird dieser Teil der Software in Stuttgart und getestet im Reallabor des IFL am KIT.



  • Maschinenbau in China fährt langsam wieder hoch

    Maschinenbau in China fährt langsam wieder hoch

    Eine 2. Blitzumfrage des VDMA in China zeigt, dass die Auswirkungen der Corona-Pandemie dort als weniger schlimm eingeschätzt werden als noch im März. Dennoch erwarten die Unternehmen kräftige Umsatzeinbußen.

    mehr lesen: Maschinenbau in China fährt langsam wieder hoch

  • Zertifizierung während der Corona-Krise

    Zertifizierung während der Corona-Krise

    Unternehmen sind derzeit in vielerlei Hinsicht gefordert: Sie müssen ihr wirtschaftliches Überleben sichern, Mitarbeiter ins Homeoffice oder in Kurzarbeit schicken und neue Strategien entwickeln. Sind Managementsysteme für Qualität, Umwelt, Energie…

    mehr lesen: Zertifizierung während der Corona-Krise

  • ZVEI-Umfrage

    ZVEI-Umfrage

    Die Elektroindustrie bekommt die Auswirkungen der Corona-Pandemie zunehmend zu spüren. Das ergab eine Umfrage des ZVEI unter seinen Mitgliedsunternehmen.

    mehr lesen: ZVEI-Umfrage

  • Nvidia wird Gesellschafter beim DFKI

    Nvidia wird Gesellschafter beim DFKI

    Das Deutsche Forschungszentrum für Künstliche Intelligenz (DFKI) hat mit Nvidia einen neuen Gesellschafter. Beide Unternehmen forschen gemeinsam in den Bereichen Machine Learning und Deep Learning.

    mehr lesen: Nvidia wird Gesellschafter beim DFKI

  • CDOs vor allem in großen Unternehmen etabliert

    CDOs vor allem in großen Unternehmen etabliert

    Bezogen auf die Gesamtwirtschaft haben 19 Prozent der Unternehmen die Position eines Chief Digital Officers bzw. eines Leiters Digitalisierung geschaffen. Das geht aus einer Befragung des Digitalverbands Bitkom hervor.

    mehr lesen: CDOs vor allem in großen Unternehmen etabliert

  • Corona und die Folgen für die Wirtschaft in Deutschland

    Corona und die Folgen für die Wirtschaft in Deutschland

    Die Auswirkungen von COVID-19 auf unsere Gesellschaft und die Wirtschaft sind enorm und betreffen uns alle.

    mehr lesen: Corona und die Folgen für die Wirtschaft in Deutschland

  • AI-fähige Microlearning-Lösung für die Industrie 4.0

    AI-fähige Microlearning-Lösung für die Industrie 4.0

    Aveva und Axonify wollen gemeinsam eine KI-Microlearning-Lösung für die Industrie anbieten. Beide Unternehmen haben sich diesbezüglich auf eine strategische Partnerschaft geeinigt.

    mehr lesen: AI-fähige Microlearning-Lösung für die Industrie 4.0

  • Industry Show: Virtuelle Messe für alle Bereiche der Industrie

    Industry Show: Virtuelle Messe für alle Bereiche der Industrie

    Der TeDo Verlag veranstaltet ab dem 4. Mai eine virtuelle Messe rund um unsere Themen Automatisierung, Robotik und Energieverteilung, Schaltschrankbau, Industrielle IT, IIoT usw. Wir wollen so eine Lösung finden,…

    mehr lesen: Industry Show: Virtuelle Messe für alle Bereiche der Industrie

  • IoT-Geräte als Köder für Cyberangreifer

    IoT-Geräte als Köder für Cyberangreifer

    Attivo Networks hat seine auf der Deception-Technologie basierende ThreatDefend-Plattform in das Microsoft Azure Security Center integriert. Dadurch wird die Erkennungsrate und Reaktionszeit bei Angriffen auf den Microsoft-Dienst Azure IoT Edge…

    mehr lesen: IoT-Geräte als Köder für Cyberangreifer

  • Zoom-Nutzer verstärkt im Visier

    Zoom-Nutzer verstärkt im Visier

    Die Corona-Pandemie stellt uns alle vor große Herausforderungen – nicht nur im privaten Bereich, sondern auch beruflich. Unzählige Menschen weltweit arbeiten derzeit erstmals im Homeoffice.

    mehr lesen: Zoom-Nutzer verstärkt im Visier

  • Auftragseingang im Maschinenbau im Februar 2020

    Auftragseingang im Maschinenbau im Februar 2020

    Im Februar verfehlten die Auftragseingänge im deutschen Maschinenbau ihr Vorjahresniveau real um 4 Prozent. Während die Bestellungen der inländischen Kunden um 6 Prozent sanken, lagen die Auslandsorders um 3 Prozent…

    mehr lesen: Auftragseingang im Maschinenbau im Februar 2020

  • Neuer Vice President Americas bei Leuze

    Neuer Vice President Americas bei Leuze

    Sergio Resendiz (Bild) ist neuer Leuze-Vice President Americas und berichtet direkt an den CEO Ulrich Balbach.

    mehr lesen: Neuer Vice President Americas bei Leuze