ZuhauseNachrichtenIntelligente Brillen zum Training von Robotern

Intelligente Brillen zum Training von Robotern



Was wäre, wenn Roboter lernen könnten, indem sie einfach Menschen beobachten?Ein neues System, das intelligente Brillen mit Smart Brille nähert, kann diese Idee der Realität näher bringen.



In den letzten Jahrzehnten sind Roboter in Orten wie Einkaufszentren, Flughäfen, Krankenhäusern, Büros und Häusern aufgetreten.Um als Helfer zu dienen, müssen sie Aufgaben wie Reinigen, Waschen von Geschirr, Kochen und Wäsche erledigen.Das Training von Robotern für diese Aufgaben mit maschinellem Lernen ist schwierig, da es Daten oder Videos von Menschen benötigt, die die Aufgaben erledigen.Um dies zu lösen, entwickelten Forscher der New York University und der UC Berkeley Egozero, ein System, das Videos aus der ersten Person mit Projekt ARIA Smart Bräber von Meta sammelt.

Egozero verwendet die Bewegung der intelligenten Brille, um 3D -Darstellungen der Szene zu erzeugen.Es kombiniert diese mit Handpose -Daten aus einem Handschätzungsmodell.Das System erstellt eine Reihe von Datenpunkten für Staats-Action-Daten, mit denen eine transformatorbasierte Richtlinie geschult wird, mit der Roboter die Aufgaben lernen können.


Im Gegensatz zu früheren Systemen benötigt Egozero nicht mehrere Kameras, Handgelenks -Wearables oder Motion -Capture -Handschuhe.Es werden nur intelligente Brillen verwendet, um die Daten zu erfassen.

Egozero vereinfacht die Datenerfassung für das Robotertraining.Mit 20 Minuten menschlicher Demonstrationen kann das System genügend Daten sammeln, um Roboteraufgaben zu unterrichten.Dies macht die Datenerfassung in natürlichen Umgebungen schneller und praktischer.

Durch die Beseitigung der Notwendigkeit von Teleoperations- oder Roboter-spezifischen Demonstrationen erlaubt Egozero Roboter, aus menschlichem Verhalten zu lernen.Das System generiert Trainingsdaten ohne das von früheren Methoden erforderliche Einrichtung.

Die von Egozero geschulte transformatorbasierte Richtlinie arbeitet in einer geschlossenen Schleife unter Verwendung von 3D-Datenpunkten, die während der Demonstration erfasst wurden.Dies hilft dem Roboter, sowohl die Umgebung als auch die Maßnahmen zu verstehen, die für die Erfüllung von Aufgaben erforderlich sind.

Mit Egozero können Forscher Roboter effizient schulen und Zeit und Kosten senken.Die Fähigkeit des Systems, menschliche Fähigkeiten auf Roboter ohne roboterspezifische Daten zu übertragen, ermöglicht eine schnellere Entwicklung von Robotern.

Wenn mehr Daten verfügbar werden, kann dieser Ansatz zu Robotern führen, die Aufgaben in Häusern, Büros und öffentlichen Räumen erledigen.Durch die Vereinfachung des Trainings kann Egozero die Einführung von Robotern als Helfer beschleunigen.