Maschinelles Lernen von Menschenhand

2024 08 14 ICM LAB 20 HaptXDeep IFLKIT 48
Bild: Karlsruher Institut für Technologie

Das IFL am Karlsruher Institut für Technologie und der IAS an der Universität Stuttgart entwickeln gemeinsam einen anpassungsfähigen Roboter mit Greifsystem, der menschliche Fähigkeiten durch Nachahmung erlernt. Dafür haben sie mit dem ICM-Zukunftslabor HaptXDeep eine Forschungsinfrastruktur aufgebaut, finanziert aus Mitteln des InnovationsCampus Mobilität der Zukunft. Das Labor mit dem Komplettsystem der Firma Shadow Robot befindet sich in Karlsruhe.

Programmieren von Robotern für industrielle Tätigkeiten besteht aus Coden und anschließendem Testen. Darauf folgt das Neuschreiben. So oft, bis die Maschine einen Prozess zuverlässig ausführt. Das ist langwierig. „Einen Roboter einsatzbereit zu machen, darf in Zukunft nicht mehr länger dauern, als einen neuen Mitarbeiter einzulernen“, sagt Edgar Welte, Wissenschaftlicher Mitarbeiter am KIT. Um dieses Ziel zu erreichen, will das Team den Robotern menschliches Lernen beibringen. Ähnlich, wie Auszubildende von ihren Meisterinnen und Meistern lernen, soll ihr Robotergreifsystem dann von einem Operator lernen – etwa wie sie neue Werkzeuge nutzen, unterschiedliche Materialien anfassen, ganze Arbeitsschritte ausführen oder auf Veränderungen in Produktionsprozessen reagieren. „Wir setzen für unser System autonomes Imitation Learning und Deep Reinforcement Learning ein. Der Roboter lernt die Fähigkeiten durch die Interaktion mit dem Menschen intuitiv und sofort“, erklärt Junior-Professorin Rania Rayyes. Durch den Ansatz verkürzen sich neben dem ursprüngliche Programmierprozess auch Umrüstzeiten, so die Forschenden.

Kommunikation über die Daten

Im Zukunftslabor erfolgt die Kommunikation mit dem Roboter per Daten. Edgar Welte generiert diese durch seine Bewegungen mit dem HaptX-Glove und erklärt dem sechsachsigen Cobot damit, wie er sich drehen und Werkzeuge oder Werkstücke packen muss. Durch die 20 Stellmotoren kann die Shadow-Dextorous-Hand die menschliche Greifbewegungen fast exakt nachbilden. Die Drucksensoren in den mechanischen Fingern geben dem Operator direktes Feedback. Welte spürt durch kleine Luftpolster im Handschuh, sobald das Gewicht zunimmt oder das Werkzeug falsch in der Hand liegt. Fasst er nach, tut es ihm der Greifer gleich – in Echtzeit. Wie die Forschenden mitteilen, wird dies eine wichtige Funktion sein, wenn die Maschine später per KI selbstständig lernt. „Durch die unmittelbaren Korrekturen können wir die Fähigkeiten unseres Systems schnell erweitern und ersparen uns Monate an Arbeit für die Neuprogrammierungen“, erklärt Rayyes.

Das Zukunftslabor HaptXDeep hat eine Doppelfunktion. Es ist die Hardware für die Erforschung und Entwicklung der Software-gestützten Technologien und gleichzeitig der Demonstrator für deren Funktionsfähigkeit. Welte will mit seiner Promotion zum Thema ’Interactive Imitation Learning for Dexterous Manipulation’ einen Beitrag zur Entwicklung des Gesamtsystems liefern. Daneben soll es in HaptXDeep weitere Projekte zur Sensorik, alternativen Teleoperationsmethoden wie Gestenerkennung über Motion Tracking oder zur Regelung der unterschiedlichen Finger geben. Das schließt auch Kooperationen mit Unternehmen oder anderen Hochschulinstituten ein. „HaptXDeep soll in der Forschung möglichst viele Türen öffnen“, erklärt Rayyes.

In einem Kooperationsprojekt mit der Gruppe um Juniorprofessor Andrey Morozov am IAS der Universität Stuttgart wollen die Forschenden Methoden entwickeln, um die Sicherheit und die Zuverlässigkeit des anpassungsfähigen Roboters zu gewährleisten. Fehlerinjektion über digitale Zwillingen werden als Testverfahren des Systems zum Einsatz kommen, Deep-Learning-Systeme sollen dem Roboter helfen Anomalien selbst zu erkennen und damit Fehler vorherzusagen. Das Ziel: Der Roboter soll Fehler auf Basis des erlernten irgendwann auch autonom korrigieren können. Entwickelt wird dieser Teil der Software in Stuttgart und getestet im Reallabor des IFL am KIT.



  • Maschinenbauexporte verringern sich 2024

    Maschinenbauexporte verringern sich 2024

    Die USA und China bleiben 2024 Spitzenreiter im Exportranking des Maschinenbaus. Insgesamt sind die Ausfuhren um nominal 5 Prozent auf knapp 200 Milliarden Euro gesunken.

    mehr lesen: Maschinenbauexporte verringern sich 2024

  • Materialflüsse im Stress,
Fachmesse im Aufwind

    Materialflüsse im Stress, Fachmesse im Aufwind

    Die Logimat 2025 belegt mit mehr als 120.000 Quadratmetern Ausstellungsfläche erneut alle zehn Hallen des Stuttgarter Messegeländes. Vom 11. bis 13. März geben Global Player, mittelständische Unternehmen sowie Startups auf…

    mehr lesen: Materialflüsse im Stress, Fachmesse im Aufwind

  • Neuer CEO für BE-terna

    Neuer CEO für BE-terna

    Zum 28. Februar 2025 tritt Gerald Pichler als CEO von BE-terna zurück. Wie das Unternehmen mitteilt, wird ab 1. März 2025 Blaž Strle die Position übernehmen.

    mehr lesen: Neuer CEO für BE-terna

  • IDTA und Federtec kooperieren

    IDTA und Federtec kooperieren

    Die Industrial Digital Twin Association (IDTA), die Standards für digitale Zwillinge für die gesamte Industrie entwickelt, und der Verein Federtec, Repräsentant von Unternehmen im Bereich Fluidtechnik, mechanische Kraftübertragung und Automatisierung…

    mehr lesen: IDTA und Federtec kooperieren

  • Igus, Schaeffler und Siemens für den Hermes Award nominiert

    Igus, Schaeffler und Siemens für den Hermes Award nominiert

    Unter der Leitung von Prof. Dr. Holger Hanselka, Präsident der Fraunhofer-Gesellschaft, hat eine unabhängige Jury, besetzt mit Expertinnen und Experten aus Politik, Wirtschaft, Forschung und Medien, drei Unternehmen (nachstehend in…

    mehr lesen: Igus, Schaeffler und Siemens für den Hermes Award nominiert

  • THM stellt Reifegradmodell DigiTamm vor

    THM stellt Reifegradmodell DigiTamm vor

    Mit dem Reifegradmodell DigiTamm (Digital Transformation Assessment Maturity Model) stellt die Technischen Hochschule Mittelhessen (THM), Mitglied des Vereins SEF Smart Electronic Factory, ein Instrument zur systematischen Erfassung des Digitalisierungsgrades in…

    mehr lesen: THM stellt Reifegradmodell DigiTamm vor

  • Lagerabläufe KI-gestützt optimieren

    Lagerabläufe KI-gestützt optimieren

    Auf der Logimat in Stuttgart zeigt PSI vom 11. bis 13. März 2025 (Stand D41, Halle 4), wie Software Logistikprozesse unterstützt.

    mehr lesen: Lagerabläufe KI-gestützt optimieren

  • Eine B2B-Plattfform für Extended Reality und das Metaverse

    Eine B2B-Plattfform für Extended Reality und das Metaverse

    Die XR Expo am 8. und 9. Mai ist ein B2B-Tech-Event für Extended Reality (XR) in Stuttgart.

    mehr lesen: Eine B2B-Plattfform für Extended Reality und das Metaverse

  • Drohne versorgt Langlauf-Event Jizerská 50 mit Mobilfunk

    Drohne versorgt Langlauf-Event Jizerská 50 mit Mobilfunk

    Die Deutsche Telekom hat erstmals eine Drohne zur Mobilfunkversorgung in einem kommerziellen Live-Netz eingesetzt: Von 2,3 Kilometern Höhe aus sorgte ein unbemanntes Luftfahrzeug (UAV) beim Isergebirgslauf ‚Jizerská 50‘ mit integrierter…

    mehr lesen: Drohne versorgt Langlauf-Event Jizerská 50 mit Mobilfunk

  • Conplement zeigt neue Funktionen seiner SaaS-Plattform für digitale Zwillinge

    Conplement zeigt neue Funktionen seiner SaaS-Plattform für digitale Zwillinge

    Auf der Hannover Messe präsentiert Conplement neue Funktionen und Dienste seiner SaaS-Plattform für digitale Zwillinge Twinsphere.

    mehr lesen: Conplement zeigt neue Funktionen seiner SaaS-Plattform für digitale Zwillinge

  • Was Unternehmen tun können, wenn Hacker erfolgreich waren

    Was Unternehmen tun können, wenn Hacker erfolgreich waren

    Was tun, wenn das Unternehmen gehackt wurde? Jörg von der Heydt, Regional Director DACH bei Bitdefender, gibt im Folgenden einen Überblick über die Bedrohungslandschaft und über erste Maßnahmen nach einem…

    mehr lesen: Was Unternehmen tun können, wenn Hacker erfolgreich waren

  • Allianz der Wissenschaftsorganisationen plädiert für Veränderungen im Wissenschaftssystem

    Allianz der Wissenschaftsorganisationen plädiert für Veränderungen im Wissenschaftssystem

    Im Vorfeld der Bundestagswahl appelliert die Allianz der Wissenschaftsorganisationen in einer Stellungnahme an die Vertreterinnen und Vertreter der Politik, sich für ein starkes, innovatives und zukunftsfähiges Wissenschaftssystem einzusetzen.

    mehr lesen: Allianz der Wissenschaftsorganisationen plädiert für Veränderungen im Wissenschaftssystem