Maschinelles Lernen von Menschenhand

2024 08 14 ICM LAB 20 HaptXDeep IFLKIT 48
Bild: Karlsruher Institut für Technologie

Das IFL am Karlsruher Institut für Technologie und der IAS an der Universität Stuttgart entwickeln gemeinsam einen anpassungsfähigen Roboter mit Greifsystem, der menschliche Fähigkeiten durch Nachahmung erlernt. Dafür haben sie mit dem ICM-Zukunftslabor HaptXDeep eine Forschungsinfrastruktur aufgebaut, finanziert aus Mitteln des InnovationsCampus Mobilität der Zukunft. Das Labor mit dem Komplettsystem der Firma Shadow Robot befindet sich in Karlsruhe.

Programmieren von Robotern für industrielle Tätigkeiten besteht aus Coden und anschließendem Testen. Darauf folgt das Neuschreiben. So oft, bis die Maschine einen Prozess zuverlässig ausführt. Das ist langwierig. „Einen Roboter einsatzbereit zu machen, darf in Zukunft nicht mehr länger dauern, als einen neuen Mitarbeiter einzulernen“, sagt Edgar Welte, Wissenschaftlicher Mitarbeiter am KIT. Um dieses Ziel zu erreichen, will das Team den Robotern menschliches Lernen beibringen. Ähnlich, wie Auszubildende von ihren Meisterinnen und Meistern lernen, soll ihr Robotergreifsystem dann von einem Operator lernen – etwa wie sie neue Werkzeuge nutzen, unterschiedliche Materialien anfassen, ganze Arbeitsschritte ausführen oder auf Veränderungen in Produktionsprozessen reagieren. „Wir setzen für unser System autonomes Imitation Learning und Deep Reinforcement Learning ein. Der Roboter lernt die Fähigkeiten durch die Interaktion mit dem Menschen intuitiv und sofort“, erklärt Junior-Professorin Rania Rayyes. Durch den Ansatz verkürzen sich neben dem ursprüngliche Programmierprozess auch Umrüstzeiten, so die Forschenden.

Kommunikation über die Daten

Im Zukunftslabor erfolgt die Kommunikation mit dem Roboter per Daten. Edgar Welte generiert diese durch seine Bewegungen mit dem HaptX-Glove und erklärt dem sechsachsigen Cobot damit, wie er sich drehen und Werkzeuge oder Werkstücke packen muss. Durch die 20 Stellmotoren kann die Shadow-Dextorous-Hand die menschliche Greifbewegungen fast exakt nachbilden. Die Drucksensoren in den mechanischen Fingern geben dem Operator direktes Feedback. Welte spürt durch kleine Luftpolster im Handschuh, sobald das Gewicht zunimmt oder das Werkzeug falsch in der Hand liegt. Fasst er nach, tut es ihm der Greifer gleich – in Echtzeit. Wie die Forschenden mitteilen, wird dies eine wichtige Funktion sein, wenn die Maschine später per KI selbstständig lernt. „Durch die unmittelbaren Korrekturen können wir die Fähigkeiten unseres Systems schnell erweitern und ersparen uns Monate an Arbeit für die Neuprogrammierungen“, erklärt Rayyes.

Das Zukunftslabor HaptXDeep hat eine Doppelfunktion. Es ist die Hardware für die Erforschung und Entwicklung der Software-gestützten Technologien und gleichzeitig der Demonstrator für deren Funktionsfähigkeit. Welte will mit seiner Promotion zum Thema ’Interactive Imitation Learning for Dexterous Manipulation’ einen Beitrag zur Entwicklung des Gesamtsystems liefern. Daneben soll es in HaptXDeep weitere Projekte zur Sensorik, alternativen Teleoperationsmethoden wie Gestenerkennung über Motion Tracking oder zur Regelung der unterschiedlichen Finger geben. Das schließt auch Kooperationen mit Unternehmen oder anderen Hochschulinstituten ein. „HaptXDeep soll in der Forschung möglichst viele Türen öffnen“, erklärt Rayyes.

In einem Kooperationsprojekt mit der Gruppe um Juniorprofessor Andrey Morozov am IAS der Universität Stuttgart wollen die Forschenden Methoden entwickeln, um die Sicherheit und die Zuverlässigkeit des anpassungsfähigen Roboters zu gewährleisten. Fehlerinjektion über digitale Zwillingen werden als Testverfahren des Systems zum Einsatz kommen, Deep-Learning-Systeme sollen dem Roboter helfen Anomalien selbst zu erkennen und damit Fehler vorherzusagen. Das Ziel: Der Roboter soll Fehler auf Basis des erlernten irgendwann auch autonom korrigieren können. Entwickelt wird dieser Teil der Software in Stuttgart und getestet im Reallabor des IFL am KIT.



  • PSI besetzt CTO-Posten mit Erol Bozak

    PSI besetzt CTO-Posten mit Erol Bozak

    Der Softwarehersteller PSI verstärkt das Management im Bereich Technologie und Entwicklung und ernennt Erol Bozak zum CTO.

    mehr lesen: PSI besetzt CTO-Posten mit Erol Bozak

  • Snowflake-Kunden im Visier von Cyberkriminellen

    Snowflake-Kunden im Visier von Cyberkriminellen

    Wie der Security-Spezialist Mandiant berichtet, haben es Bedrohungsakteure auf Kunden des Cloud-Anbieters Snowflake abgesehen. Die Unternehmen raten dazu, die Multi-Faktor-Authentifizierung zu aktivieren.

    mehr lesen: Snowflake-Kunden im Visier von Cyberkriminellen

  • TDM Systems und Cribwise bilden Tool Flow Solutions

    TDM Systems und Cribwise bilden Tool Flow Solutions

    Der Sandvik-Konzern hat den Geschäftsbereich Tool Flow Solutions ins Leben gerufen. Erste Mitglieder werden die beiden Tochterunternehmen TDM Systems und Cribwise.

    mehr lesen: TDM Systems und Cribwise bilden Tool Flow Solutions

  • 2023 wurden mehr als 500.000 Industrieroboter ausgeliefert

    2023 wurden mehr als 500.000 Industrieroboter ausgeliefert

    Trotz eines Rückgangs bei Umsätzen und Auslieferungen von Industrierobotern im Jahr 2023 prognostizieren die Marktforscher von Interact Analysis ein jährliches Marktwachstum von 3,7 Prozent bis 2028.

    mehr lesen: 2023 wurden mehr als 500.000 Industrieroboter ausgeliefert

  • Quantencomputing made in Germany

    Quantencomputing made in Germany

    Quantencomputer haben eine besonders hohe Rechenleistung und können so komplexe Probleme lösen. Wie? Davon können sich Unternehmen und Forschungsteams nun im Hamburg ein Bild machen.

    mehr lesen: Quantencomputing made in Germany

  • USA führend bei Digitalinnovationen

    USA führend bei Digitalinnovationen

    Die Innovationstätigkeit in Digitaltechnologien nimmt weiter an Fahrt auf. Und laut Deutschem Patent- und Markenamt dominieren die USA und China in diesen Bereichen. Die deutsche Bilanz ist zwiespältig.

    mehr lesen: USA führend bei Digitalinnovationen

  • Smarties warnen vor Extremereignissen

    Smarties warnen vor Extremereignissen

    Im Forschungsprojekt Smarties entwickelt und testet das Max-Planck-Institut für Dynamik und Selbstorganisation (MPI-DS) zusammen mit dem Fraunhofer-Institut für Integrierte Schaltungen IIS ein System intelligenter Miniballons mit atmosphärischen Tracern – sogenannten…

    mehr lesen: Smarties warnen vor Extremereignissen

  • Europa mit vergleichsweise niedrigem KI-Reifegrad

    Europa mit vergleichsweise niedrigem KI-Reifegrad

    Data Analytics und KI sollen KMU helfen, Wettbewerbsvorteile zu sichern. Laut einer Studie von AWS liegt Europa beim Reifegrad künstlicher Intelligenz jedoch hinter anderen Regionen zurück.

    mehr lesen: Europa mit vergleichsweise niedrigem KI-Reifegrad

  • VDI will Deutschland fit für die Zukunft machen

    VDI will Deutschland fit für die Zukunft machen

    Die Aufgaben der Transformation sind gewaltig: Um ihren Herausforderungen zu begegnen, startet der VDI die Initiative ’Zukunft Deutschland 2050‘.

    mehr lesen: VDI will Deutschland fit für die Zukunft machen

  • Lena Weirauch von ai-omatic solutions über die Gründung eines Startups

    Lena Weirauch von ai-omatic solutions über die Gründung eines Startups

    Frauen sind im MINT-Bereich immer noch stark unterrepräsentiert, nur 11 Prozent aller Ingenieure sind weiblich und nur 17 Prozent beträgt der Frauenanteil im deutschen Maschinenbau allgemein. Doch woran liegt das?…

    mehr lesen: Lena Weirauch von ai-omatic solutions über die Gründung eines Startups

  • Wie Unternehmen Augmented und Virtual Reality nutzen

    Wie Unternehmen Augmented und Virtual Reality nutzen

    Je ein Fünftel der Unternehmen in Deutschland setzt bereits AR- oder VR-Technologie. Laut einer Bitkom-Befragung dominieren Schulung und Weiterbildung sowie Konstruktion und Planung die Anwendungen.

    mehr lesen: Wie Unternehmen Augmented und Virtual Reality nutzen

  • Stimmung in der Automobilindustrie kühlt ab

    Stimmung in der Automobilindustrie kühlt ab

    Nach zuletzt etwas besseren Werten im April bewegt sich der Ifo-Indikator für das Geschäftsklima in der Automobilindustrie im Mai wieder in die andere Richtung.

    mehr lesen: Stimmung in der Automobilindustrie kühlt ab