NVIDIA wykorzystuje Apple Vision Pro do rejestrowania pokazów zdalnie sterowanych i sterowania humanoidalnymi robotami

cyberfeed.pl 1 miesiąc temu


Jabłko może nie mieć zbyt dużego zastosowania dla NVIDIAale to nie znaczy, iż NVIDIA nie ma zastosowania dla Apple. Konkretnie, zestawu słuchawkowego Apple Vision Pro, którego używa do opracowywania swojego humanoidalnego robota. Zobacz jak poniżej:

Film jest częścią kampanii promującej działalność firmy NVIDIA w dziedzinie robotyki.

W komunikacie prasowym Apple Vision Pro pojawia się dwukrotnie jako instrument do sterowania robotami firmy NVIDIA w kontekście mikrousługi MimicGen NIM:

Szkolenie modeli fundamentów dla robotów humanoidalnych wymaga niewiarygodnej ilości danych. Jednym ze sposobów przechwytywania danych demonstracyjnych ludzi jest teleoperacja, ale staje się to coraz bardziej kosztownym i długotrwałym procesem.

Referencyjny przepływ pracy teleoperacji oparty na sztucznej inteligencji NVIDIA i Omniverse, zaprezentowano na konferencji poświęconej grafice komputerowej SIGGRAPHumożliwia badaczom i twórcom sztucznej inteligencji generowanie ogromnych ilości syntetycznych danych dotyczących ruchu i percepcji na podstawie minimalnej liczby zdalnie zarejestrowanych demonstracji ludzkich.

Najpierw programiści używają Apple Vision Pro do przechwytywania niewielkiej liczby demonstracji teleoperowanych. Następnie symulują nagrania w NVIDIA Isaac Sim i używają mikrousługi MimicGen NIM do generowania syntetycznych zestawów danych z nagrań.

Programiści szkolą Projekt GR00T humanoidalny model fundamentu z danymi rzeczywistymi i syntetycznymi, umożliwiający deweloperom oszczędzanie czasu i redukcję kosztów. Następnie wykorzystują mikrousługę Robocasa NIM w Laboratorium Izaakaframework do uczenia się robotów, aby generować doświadczenia w celu ponownego wyszkolenia modelu robota. W całym procesie pracy NVIDIA OSMO bezproblemowo przypisuje zadania obliczeniowe do różnych zasobów, oszczędzając programistom tygodnie zadań administracyjnych.

Przeczytaj pełną wersję komunikatu Tutaj do głębokiego nurkowania.

Dziękuję @NathieVR

FTC: Używamy linków afiliacyjnych generujących dochód. Więcej.





Source link

Idź do oryginalnego materiału