Eingabe löschen

Zum Inhalt

Hauptnavigation

Zürcher Hochschule
für Angewandte
Wissenschaften

Servicenavigation

Neuromorphic Technologie für Embodied KI

Beschreibung

Die Automatisierung in dynamischen Umgebungen - in der Landwirtschaft, im Gesundheitswesen oder in der Kleinserienfertigung - ist begrenzt. Starre Industrieroboter versagen in diesen komplexen Umgebungen. Der Schlüssel zu einer flexibleren, anpassungsfähigen und sicheren Automatisierung ist eine bessere Wahrnehmung. Roboter müssen ihre Umgebung visuell schnell genug erfassen, um bewegte Objekte zu verfolgen und auf sie zu reagieren.

Heutige Bildverarbeitungssysteme sind in ihrer Geschwindigkeit durch die Bildrate und Datendichte der bildbasierten Sensoren begrenzt. Neuromorphes Computing bietet schnelle und energieeffiziente ereignisbasierte Kameras und Spiking-Neural-Network-Beschleuniger, die 3D-Vision in Echtzeit für Objekterkennung, Lokalisierung und Posenschätzung ermöglichen - Schlüsselaufgaben für die Vision in der Robotik. Neuromorphes Computing umfasst Computerhardware, Sensoren, Algorithmen und Anwendungsentwicklung. Neuromorphe Hardware erreicht ein um bis zu 5 Grössenordnungen besseres Energie-Verzögerungs-Produkt für rekurrente neuronale Netze, parallele Such- und Optimierungsalgorithmen. Unsere Forschung wird Folgendes umfassen:

  1. Aufbau eines ereignisbasierten Echtzeit-3D-Sehsensors auf der Grundlage von Bewegungstiefe, ereignisbasiertem Stereo oder aktivem strukturiertem Licht;
  2. Entwicklung effizienter 3D-Darstellungen für neuromorphe Hardware: hierarchische Darstellung für Formen, ähnlich wie CNNs für Textur; NeRFs oder andere implizite Darstellungen sind ein Ausgangspunkt.
  3. Entwicklung von Methoden zur Objekterkennung, -lokalisierung und -posenschätzung unter Verwendung von a) neuromorphem Mustervergleich mit kNN-Suche und b) VSA-ähnlichen Resonatornetzen.
  4. Parallel zur technischen Arbeit werden wir mit DSI an ethischen Überlegungen zum Einsatz von Robotern im öffentlichen Raum und in neuen Bereichen, die unsere Technologie ermöglichen wird, zusammenarbeiten.

Eckdaten

Projektteam

Projektstatus

abgeschlossen, 03/2024 - 02/2026

Institut/Zentrum

Institut für Computational Life Sciences (ICLS)

Drittmittelgeber

Digitalisierungsinitiative der Zürcher Hochschulen DIZH / DIZH Fellowship 2024

Projektvolumen

194'000 CHF

Privatsphäre-Einstellungen

Wir zeigen Ihnen hier, welche Dienste auf unserer Website laufen können. Sie entscheiden selbst, welche Dienste wir nutzen dürfen. Mehr Informationen finden Sie in unseren Datenschutzhinweisen.

Unsere Website braucht diese Cookies, damit alles richtig funktioniert. Diese Cookies werden automatisch erstellt, wenn Sie auf der Seite aktiv sind – zum Beispiel, wenn Sie Datenschutz-Einstellungen ändern oder Formulare ausfüllen. In Ihrem Browser können Sie die Cookies zwar sperren oder sich warnen lassen. Dann werden aber einige Teile der Website nicht mehr richtig angezeigt. Diese Cookies speichern keine persönlichen Daten von Ihnen.

Mit diesen Diensten können wir sehen, wie unsere Website genutzt wird. Wir wissen aber nicht, wer Sie sind. Wenn Sie diese Dienste aktivieren, helfen Sie uns, die Website für alle besser zu machen.