Forum für Wissenschaft, Industrie und Wirtschaft

Intelligente Robotersteuerung durch adaptives Embedded Brainreading

nächste Meldung

Die Raumfahrt-Agentur des Deutschen Zentrums für Luft- und Raumfahrt e.V. (DLR) förderte das Projekt mit Mitteln des Bundesministeriums für Wirtschaft und Energie (BMWi) über fünf Jahre mit rund 3,7 Mio. Euro.

Robotersteuerung mittels der im DFKI-Projekt IMMI entwickelten Technologien.

DFKI GmbH

Neurowissenschaftler, Informatiker, Mathematiker, Physiker und Ingenieure arbeiteten in IMMI gemeinsam an einer intelligenten Mensch-Maschine-Schnittstelle, die nicht nur die intuitive und effektive Steuerung eines oder mehrerer Roboter ermöglicht, sondern sich auch selbstständig an Änderungen des mentalen Zustands des Nutzers und an wechselnde Benutzer anpassen kann.

Im Gegensatz zu klassischen Brain-Computer-Interfaces basiert das entwickelte System auf der passiven Beobachtung des Operators durch Embedded Brain Reading. Dafür trägt der Operator eine mit Elektroden bestückte Kappe, die es dem System mittels Elektroenzephalografie (EEG) ermöglicht, die Gehirnaktivität zu messen und spezifische Änderungen von Gehirnströmen zu interpretieren.

Diese Änderungen erlauben zum Beispiel Aussagen über den Stand der Verarbeitung von präsentierter Information, über die Absichten des Operators oder über dessen kognitive Auslastung. Die Schnittstelle erhält dadurch wichtige Informationen, um den Menschen proaktiv in kritischen Situationen zu unterstützen oder die Effektivität der Steuerung anwenderspezifisch zu steigern.

Hat der Operator beispielsweise eine vom Roboter gesendete Warnmeldung übersehen, so weist ihn das System erneut darauf hin; ist der Anwender kognitiv überfordert, so wird seine Belastung reduziert.

Um die Handlungsabsicht und Aufgabenauslastung des Operators präzise einschätzen zu können, setzen die Forscherinnen und Forscher zusätzlich zum EEG auf Elektromyografie (EMG) zur Messung der Muskelaktivität und auf Eye-Tracking, das die Blickrichtung registriert. Auf diese Weise entsteht ein umfassendes Bild des kognitiven Zustands des Anwenders.

Die Schnittstelle lernt aus diesen Daten und darauffolgenden Handlungen, welche Sequenzen in den Hirnströmen eine Wahrnehmung oder Aktion bedeuten. Auf diese Weise kann sich das System in Echtzeit an wechselnde Zustände des Benutzers und sogar automatisch an neue Benutzer anpassen.

Die Vielzahl komplizierter mathematischer Verfahren, die beim echtzeitfähigen und adaptiven Brain Reading zur Anwendung kommt, erfordert eine besonders große Rechenleistung. Gleichzeitig soll der Operator möglichst mobil sein und sich frei bewegen können, was den Einsatz großer Rechner ausschließt.

Aus diesen Gründen wurde in IMMI ein kompaktes Brain-Reading-System entwickelt, das eine normale CPU mit einem FPGA (Field Programmable Gate Array) auf einer 7 x 10 cm großen Elektronikplatine kombiniert. FPGAs ermöglichen parallele Verarbeitungsoperationen und können daher große Datenmengen in kürzester Zeit verarbeiten. Das entwickelte System kann entweder eigenständig mobil oder zur Optimierung von Embedded Brain Reading in ein technisches System eingebettet angewendet werden.

Die Software-Frameworks pySPACE und reSPACE wurden im Projekt eigens für die Verarbeitung großer Datenmengen entwickelt. Die Open-Source-Software pySPACE erlaubt eine einfache Konfiguration und parallele Ausführung komplexer Vergleiche sowie die Optimierung und Visualisierung von über 200 verschiedenen Verarbeitungs- und Auswertungsmethoden.

Über eine automatisch erzeugte Hochleistungsschnittstelle kann pySPACE auf reSPACE zugreifen und dadurch zeitkritische Verarbeitungsschritte auf den FPGA auslagern. Mit Hilfe von reSPACE können anwendungsspezifische Hardwarebeschleuniger die Verarbeitung der Daten besonders effizient und in Echtzeit durchführen.

Neben Anwendungen in der Raumfahrt sollen die in IMMI entwickelten Technologien auch in der medizinischen Rehabilitation eingesetzt werden. Im kürzlich gestarteten Projekt RECUPERA-Reha arbeiten DFKI-Wissenschaftlerinnen und Wissenschaftler an Methoden zum Aufbau eines innovativen und mobilen Ganzkörper-Exoskeletts, das durch die Vorhersage von Bewegungsabsichten auf Basis der in IMMI entwickelten Technologien, Schlaganfall-Patienten rehabilitativ unterstützen soll.

DFKI-Kontakt
Dr. rer. nat. Elsa Andrea Kirchner
Robotics Innovation Center
E-Mail: Elsa.Kirchner@dfki.de
Tel.: 0421 178 45 4113

DFKI-Pressekontakt
Unternehmenskommunikation Bremen
E-Mail: uk-hb@dfki.de
Tel.: 0421 178 45 4180

Andrea Fink | idw - Informationsdienst Wissenschaft
Weitere Informationen:
http://www.dfki.de

nächste Meldung

Im Focus: Salmonellen als Medikament gegen Tumore

HZI-Forscher entwickeln Bakterienstamm, der in der Krebstherapie eingesetzt werden kann

Salmonellen sind gefährliche Krankheitserreger, die über verdorbene Lebensmittel in den Körper gelangen und schwere Infektionen verursachen können. Jedoch ist...

Im Focus: Salmonella as a tumour medication

HZI researchers developed a bacterial strain that can be used in cancer therapy

Salmonellae are dangerous pathogens that enter the body via contaminated food and can cause severe infections. But these bacteria are also known to target...

Im Focus: Hochfeldmagnet am BER II: Einblick in eine versteckte Ordnung

Seit dreißig Jahren gibt eine bestimmte Uranverbindung der Forschung Rätsel auf. Obwohl die Kristallstruktur einfach ist, versteht niemand, was beim Abkühlen unter eine bestimmte Temperatur genau passiert. Offenbar entsteht eine so genannte „versteckte Ordnung“, deren Natur völlig unklar ist. Nun haben Physiker erstmals diese versteckte Ordnung näher charakterisiert und auf mikroskopischer Skala untersucht. Dazu nutzten sie den Hochfeldmagneten am HZB, der Neutronenexperimente unter extrem hohen magnetischen Feldern ermöglicht.

Kristalle aus den Elementen Uran, Ruthenium, Rhodium und Silizium haben eine geometrisch einfache Struktur und sollten keine Geheimnisse mehr bergen. Doch das...

Im Focus: Schmetterlingsflügel inspiriert Photovoltaik: Absorption lässt sich um bis zu 200 Prozent steigern

Sonnenlicht, das von Solarzellen reflektiert wird, geht als ungenutzte Energie verloren. Die Flügel des Schmetterlings „Gewöhnliche Rose“ (Pachliopta aristolochiae) zeichnen sich durch Nanostrukturen aus, kleinste Löcher, die Licht über ein breites Spektrum deutlich besser absorbieren als glatte Oberflächen. Forschern am Karlsruher Institut für Technologie (KIT) ist es nun gelungen, diese Nanostrukturen auf Solarzellen zu übertragen und deren Licht-Absorptionsrate so um bis zu 200 Prozent zu steigern. Ihre Ergebnisse veröffentlichten die Wissenschaftler nun im Fachmagazin Science Advances. DOI: 10.1126/sciadv.1700232

„Der von uns untersuchte Schmetterling hat eine augenscheinliche Besonderheit: Er ist extrem dunkelschwarz. Das liegt daran, dass er für eine optimale...

Im Focus: Schnelle individualisierte Therapiewahl durch Sortierung von Biomolekülen und Zellen mit Licht

Im Blut zirkulierende Biomoleküle und Zellen sind Träger diagnostischer Information, deren Analyse hochwirksame, individuelle Therapien ermöglichen. Um diese Information zu erschließen, haben Wissenschaftler des Fraunhofer-Instituts für Lasertechnik ILT ein Mikrochip-basiertes Diagnosegerät entwickelt: Der »AnaLighter« analysiert und sortiert klinisch relevante Biomoleküle und Zellen in einer Blutprobe mit Licht. Dadurch können Frühdiagnosen beispielsweise von Tumor- sowie Herz-Kreislauf-Erkrankungen gestellt und patientenindividuelle Therapien eingeleitet werden. Experten des Fraunhofer ILT stellen diese Technologie vom 13.–16. November auf der COMPAMED 2017 in Düsseldorf vor.

Der »AnaLighter« ist ein kompaktes Diagnosegerät zum Sortieren von Zellen und Biomolekülen. Sein technologischer Kern basiert auf einem optisch schaltbaren...