Maschinelles Lernen von Menschenhand

2024 08 14 ICM LAB 20 HaptXDeep IFLKIT 48
Bild: Karlsruher Institut für Technologie

Das IFL am Karlsruher Institut für Technologie und der IAS an der Universität Stuttgart entwickeln gemeinsam einen anpassungsfähigen Roboter mit Greifsystem, der menschliche Fähigkeiten durch Nachahmung erlernt. Dafür haben sie mit dem ICM-Zukunftslabor HaptXDeep eine Forschungsinfrastruktur aufgebaut, finanziert aus Mitteln des InnovationsCampus Mobilität der Zukunft. Das Labor mit dem Komplettsystem der Firma Shadow Robot befindet sich in Karlsruhe.

Programmieren von Robotern für industrielle Tätigkeiten besteht aus Coden und anschließendem Testen. Darauf folgt das Neuschreiben. So oft, bis die Maschine einen Prozess zuverlässig ausführt. Das ist langwierig. „Einen Roboter einsatzbereit zu machen, darf in Zukunft nicht mehr länger dauern, als einen neuen Mitarbeiter einzulernen“, sagt Edgar Welte, Wissenschaftlicher Mitarbeiter am KIT. Um dieses Ziel zu erreichen, will das Team den Robotern menschliches Lernen beibringen. Ähnlich, wie Auszubildende von ihren Meisterinnen und Meistern lernen, soll ihr Robotergreifsystem dann von einem Operator lernen – etwa wie sie neue Werkzeuge nutzen, unterschiedliche Materialien anfassen, ganze Arbeitsschritte ausführen oder auf Veränderungen in Produktionsprozessen reagieren. „Wir setzen für unser System autonomes Imitation Learning und Deep Reinforcement Learning ein. Der Roboter lernt die Fähigkeiten durch die Interaktion mit dem Menschen intuitiv und sofort“, erklärt Junior-Professorin Rania Rayyes. Durch den Ansatz verkürzen sich neben dem ursprüngliche Programmierprozess auch Umrüstzeiten, so die Forschenden.

Kommunikation über die Daten

Im Zukunftslabor erfolgt die Kommunikation mit dem Roboter per Daten. Edgar Welte generiert diese durch seine Bewegungen mit dem HaptX-Glove und erklärt dem sechsachsigen Cobot damit, wie er sich drehen und Werkzeuge oder Werkstücke packen muss. Durch die 20 Stellmotoren kann die Shadow-Dextorous-Hand die menschliche Greifbewegungen fast exakt nachbilden. Die Drucksensoren in den mechanischen Fingern geben dem Operator direktes Feedback. Welte spürt durch kleine Luftpolster im Handschuh, sobald das Gewicht zunimmt oder das Werkzeug falsch in der Hand liegt. Fasst er nach, tut es ihm der Greifer gleich – in Echtzeit. Wie die Forschenden mitteilen, wird dies eine wichtige Funktion sein, wenn die Maschine später per KI selbstständig lernt. „Durch die unmittelbaren Korrekturen können wir die Fähigkeiten unseres Systems schnell erweitern und ersparen uns Monate an Arbeit für die Neuprogrammierungen“, erklärt Rayyes.

Das Zukunftslabor HaptXDeep hat eine Doppelfunktion. Es ist die Hardware für die Erforschung und Entwicklung der Software-gestützten Technologien und gleichzeitig der Demonstrator für deren Funktionsfähigkeit. Welte will mit seiner Promotion zum Thema ’Interactive Imitation Learning for Dexterous Manipulation’ einen Beitrag zur Entwicklung des Gesamtsystems liefern. Daneben soll es in HaptXDeep weitere Projekte zur Sensorik, alternativen Teleoperationsmethoden wie Gestenerkennung über Motion Tracking oder zur Regelung der unterschiedlichen Finger geben. Das schließt auch Kooperationen mit Unternehmen oder anderen Hochschulinstituten ein. „HaptXDeep soll in der Forschung möglichst viele Türen öffnen“, erklärt Rayyes.

In einem Kooperationsprojekt mit der Gruppe um Juniorprofessor Andrey Morozov am IAS der Universität Stuttgart wollen die Forschenden Methoden entwickeln, um die Sicherheit und die Zuverlässigkeit des anpassungsfähigen Roboters zu gewährleisten. Fehlerinjektion über digitale Zwillingen werden als Testverfahren des Systems zum Einsatz kommen, Deep-Learning-Systeme sollen dem Roboter helfen Anomalien selbst zu erkennen und damit Fehler vorherzusagen. Das Ziel: Der Roboter soll Fehler auf Basis des erlernten irgendwann auch autonom korrigieren können. Entwickelt wird dieser Teil der Software in Stuttgart und getestet im Reallabor des IFL am KIT.



  • Sabine Scheunert übernimmt Eurocentral-Geschäftsleitung

    Sabine Scheunert übernimmt Eurocentral-Geschäftsleitung

    Dassault Systèmes ernennt Sabine Scheunert zur Vorsitzenden der Geschäftsleitung in Eurocentral. Die Managerin verfügt über jahrzehntelange Erfahrung in der Automobil- und Technologiebranche und war u.a. für Mercedes-Benz tätig.

    mehr lesen: Sabine Scheunert übernimmt Eurocentral-Geschäftsleitung

  • Ifo-Geschäftsklimaindex fällt um 1,3 Punkte

    Ifo-Geschäftsklimaindex fällt um 1,3 Punkte

    Pessimistischere Erwartungen der Unternehmen sorgen dafür, dass der Ifo-Geschäftsklimaindex im Juni unter dem Vormonatswert bleibt. Nach drei Anstiegen in Folge zeigt sich auch die Industrie im Juni wieder skeptischer.

    mehr lesen: Ifo-Geschäftsklimaindex fällt um 1,3 Punkte

  • Wibu-Systems eröffnet Niederlassung in Südkorea

    Wibu-Systems eröffnet Niederlassung in Südkorea

    Mit einer neuen Tochtergesellschaft in Südkorea geht das Karlsruher Unternehmen Wibu-Systems einen strategischen Schritt zur Erschließung des südkoreanischen Hightech-Marktes sowie der dortigen Wirtschaft.

    mehr lesen: Wibu-Systems eröffnet Niederlassung in Südkorea

  • Quantencomputing für effizientere E-Autos

    Quantencomputing für effizientere E-Autos

    Die BMW Group, Nvidia und Classiq wollen gemeinsam mechatronische Systeme optimieren. Das gemeinsame Ziel: den Einsatz von Quantencomputern in der Automobilbranche zu fördern.

    mehr lesen: Quantencomputing für effizientere E-Autos

  • 8,8Mrd.€ für die AWS-Cloud-Infrastruktur in Deutschland

    8,8Mrd.€ für die AWS-Cloud-Infrastruktur in Deutschland

    Kürzlich hat AWS Investitionen in Höhe von 7,8Mrd,€ in die AWS European Sovereign Cloud angekündigt, deren erste Rechenzentren in Brandenburg entstehen sollen. Nun legt der Cloud-Anbieter nochmals 10Mrd.€ nach.

    mehr lesen: 8,8Mrd.€ für die AWS-Cloud-Infrastruktur in Deutschland

  • Ungeplante Stillstände kosten 147.000€ pro Stunde

    Ungeplante Stillstände kosten 147.000€ pro Stunde

    Zwar erhöhen Firmen mittels Wartung die Verfügbarkeit ihrer Anlagen. Laut einer Studie von ABB kommt es bei der Mehrheit der Befragten monatlich jedoch zu mindestens einem ungeplanten Stillstand.

    mehr lesen: Ungeplante Stillstände kosten 147.000€ pro Stunde

  • Ein Robotik-Netzwerk für die Spitzenforschung

    Ein Robotik-Netzwerk für die Spitzenforschung

    Das Robotics Institute Germany (RIG) soll als zentrale Anlaufstelle für Robotik in Deutschland fungieren. Die Beteiligten, darunter Universitäten und Forschungseinrichtungen, haben sich fünf strategische Ziele gesetzt.

    mehr lesen: Ein Robotik-Netzwerk für die Spitzenforschung

  • Mit künstlicher Intelligenz gegen Maschinenstillstände

    Mit künstlicher Intelligenz gegen Maschinenstillstände

    Ein Forschungsteam vom Fraunhofer IPA hat zusammen mit Partnern aus der Industrie eine Methode entwickelt, wie künstliche Intelligenz in die Instandhaltung integriert werden kann. Erkennt die KI einen Fehler, werden…

    mehr lesen: Mit künstlicher Intelligenz gegen Maschinenstillstände

  • Das Auto mit Kopfbewegungen steuern

    Das Auto mit Kopfbewegungen steuern

    Arrow Electronics und Nvidia haben gemeinsam ein KI-basiertes Lenksystem für das semi-autonome SAM Car erarbeitet. Die Steuerung erfolgt per Gesichtserkennung.

    mehr lesen: Das Auto mit Kopfbewegungen steuern

  • Der AI Act im Überblick

    Der AI Act im Überblick

    Die Europäische Union (EU) hat mit dem AI Act ein transnationales Regelwerk für einen sicheren und vertrauenswürdigen Einsatz von KI verabschiedet. Was genau in der Verordnung ausgeführt ist, welche Chancen…

    mehr lesen: Der AI Act im Überblick

  • Phoenix Contact: Dirk Görlitzer folgt auf Frank Stührenberg

    Phoenix Contact: Dirk Görlitzer folgt auf Frank Stührenberg

    Frank Stührenberg übergibt den Vorsitz der Geschäftsführung von Phoenix Contact an Dirk Görlitzer. Bis zum Ausscheiden Stührenbergs zum Jahresende 2024 teilen sich beide den den Posten.

    mehr lesen: Phoenix Contact: Dirk Görlitzer folgt auf Frank Stührenberg

  • Anstieg der Kurzarbeit in der Industrie gestoppt

    Anstieg der Kurzarbeit in der Industrie gestoppt

    Die deutsche Industrie hat im Winterhalbjahr wieder vermehrt Kurzarbeit gefahren. Laut Ifo Institut ist in den nächsten Monaten zwar mit einem erhöhten Niveau zu rechnen, eine weitere Verschärfung zeichnet sich…

    mehr lesen: Anstieg der Kurzarbeit in der Industrie gestoppt