Nvidia nutzt Apple Vision Pro zur Steuerung humanoider Roboter

Nvidia hat eine neue Steuerungslösung vorgestellt, die es Entwicklern ermöglicht, Projekte im Bereich humanoider Robotik zu realisieren, gesteuert und überwacht durch die Apple Vision Pro. Die Herausforderung der Steuerung hochkomplexer Geräte wird durch Nvidias umfassende Tools für robotische Simulationen erleichtert. Diese Suite, die für große Roboterhersteller und Softwareentwickler bereitgestellt wird, soll die nächste Generation humanoider Roboter trainieren.

Das musst Du wissen – Nvidia nutzt Apple Vision Pro zur Steuerung humanoider Roboter

NIM Microservices: Diese vorgefertigten Container nutzen Nvidias Inferenzsoftware, um die Einsatzzeit zu verkürzen.

MimicGen NIM: Diese Microservices übersetzen Bewegungen der Apple Vision Pro in Roboterbewegungen.

OSMO Orchestrierung: Verarbeitet mehrstufige Robotik-Workloads mit KI- und simulationsgestützten Teleoperations-Workflows.

Einsatz von Headsets: Geräte wie Apple Vision Pro werden nicht nur zur Datenvisualisierung, sondern auch zur Steuerung verwendet.

Humanoid Robot Developer Program: Exklusiv für Software-, Hardware- oder Roboterhersteller zugänglich.

Die Entwicklung humanoider Roboter ist eine äußerst komplexe Aufgabe, die eine immense Menge an realen Daten erfordert. Nvidias neue Simulationstools und generative KI-Entwicklungswerkzeuge sollen diese Prozesse beschleunigen und optimieren. CEO Jensen Huang betont, dass der nächste Schritt der KI die Robotik sei und dass humanoide Roboter eine der spannendsten Entwicklungen darstellen. Nvidia öffnet seine gesamte Robotik-Plattform, um Entwicklern weltweit Zugang zu den besten Plattformen, Bibliotheken und Modellen zu bieten.

Die NIM Microservices sind wesentliche Komponenten dieser Initiative. Speziell das MimicGen NIM ist darauf ausgelegt, Hardware über die Apple Vision Pro oder ähnliche Geräte zu steuern. Diese Dienste generieren synthetische Bewegungsdaten für Roboter, basierend auf aufgezeichneten Teleoperationsdaten. Dadurch können Benutzer die Bewegungen der Roboter direkt mit der Apple Vision Pro steuern, einschließlich Hand- und Armbewegungen.

Ein besonderes Highlight ist die Möglichkeit, durch die Apple Vision Pro aufgezeichnete Bewegungen in Simulationen zu nutzen. Diese erzeugten synthetischen Datensätze helfen Entwicklern, humanoide Modelle wie das Project Groot effizienter zu trainieren. Dies reduziert die Kosten und den Zeitaufwand erheblich.

Bei einer Demonstration auf der Siggraph-Konferenz wurden Teleoperations-Workflows präsentiert, die es Entwicklern ermöglichen, große Mengen an Bewegungs- und Wahrnehmungsdaten aus wenigen Fernaufzeichnungen zu erstellen. Fourier CEO Alex Gu lobt Nvidias Tools als einen bedeutenden Schritt zur Beschleunigung der Modellentwicklung.

Fazit: Nvidia nutzt Apple Vision Pro zur Steuerung humanoider Roboter

Nvidia hat einen bedeutenden Schritt in der Entwicklung humanoider Roboter gemacht. Die Kombination aus NIM Microservices und der Apple Vision Pro ermöglicht es, Roboterbewegungen präzise zu steuern und zu simulieren. Dies beschleunigt die Entwicklungsprozesse und reduziert die Notwendigkeit, reale Daten mühsam zu sammeln. Die Nutzung von KI und Simulationen zur Steuerung humanoider Roboter markiert einen wichtigen Fortschritt in der Robotik.

Die Exklusivität des Humanoid Robot Developer Program unterstreicht Nvidias Engagement, spezialisierte Werkzeuge nur den relevantesten Entwicklern und Herstellern zur Verfügung zu stellen. Dies fördert eine gezielte und effektive Weiterentwicklung in der Robotik. Diese Tools bieten nicht nur technologische Vorteile, sondern auch einen erheblichen wirtschaftlichen Mehrwert durch die Optimierung von Entwicklungszeit und -kosten.

#AI #ArtificialIntelligence #Robotics #Nvidia #AppleVisionPro

Nvidia using Apple Vision Pro to control humanoid