Podczas SIGGRAPH w Denver firma NVIDIA Corp. zaprezentowała zestaw nowych narzędzi i technologii, mających na celu przyspieszenie rozwoju robotów humanoidalnych. Firma wprowadziła szereg usług, modeli AI i platform obliczeniowych, które mają usprawnić tworzenie i szkolenie zaawansowanych systemów robotycznych.
Jensen Huang, wizjonerski założyciel i prezes firmy NVIDIA, podkreślił transformacyjny potencjał tych innowacji. „Następną falą AI są robotyka, a roboty humanoidalne są na czele” – powiedział. „Ulepszamy cały stos robotyki NVIDIA, udostępniając go deweloperom i firmom na całym świecie. Obejmuje to nasze platformy, biblioteki przyspieszające oraz modele AI dostosowane do konkretnych potrzeb.”
Głębokie korzenie NVIDIA w badaniach nad grafiką, sięgające 2001 roku, stanowią solidne podstawy dla obecnych osiągnięć firmy w dziedzinie grafiki, symulacji i robotyki. Rev Labaredian, wiceprezes ds. strategii Omniverse i wirtualizacji, podkreślił tę więź podczas briefingu prasowego, zwracając uwagę na długoletnie doświadczenie firmy.
Przyspieszanie rozwoju cyfrowych bliźniaków dzięki usługom NVIDIA NIM
Przedstawienie przez NVIDIA usług NIM (Microservices) stanowi znaczący krok naprzód w rozwoju cyfrowych bliźniaków i systemów szkolenia robotów. Te wstępnie skonfigurowane kontenery, zasilane oprogramowaniem do wnioskowania NVIDIA, są teraz dostępne jako usługa, obiecując radykalne skrócenie czasu wdrażania z tygodni do zaledwie kilku minut. Kari Briski, wiceprezes ds. zarządzania produktami oprogramowania AI generatywnego, zauważyła: „Zapotrzebowanie na AI generatywne jest teraz, ale może być przytłaczające. Nasze usługi NIM zapewniają standaryzację wdrażania modeli AI, wykorzystując CUDA do gotowej funkcjonalności.”
Kluczowe składniki obejmują usługę MimicGen NIM, która generuje syntetyczne dane ruchu przy użyciu nagrań teleoperacyjnych i urządzeń do obliczeń przestrzennych, takich jak Apple Vision Pro. Tymczasem usługa Robocasa NIM koncentruje się na tworzeniu zadań robotycznych i środowisk gotowych do symulacji w ramach uniwersalnego opisu sceny NVIDIA OpenUSD, ułatwiając współpracę w 3D.
NVIDIA zaprezentowała również usługi NIM do tworzenia cyfrowych bliźniaków, a także łączniki USD do przesyłania strumieniowego ogromnych zestawów danych śledzenia promieni RTX do Apple Vision Pro.
NVIDIA OSMO: zarządzana chmurowa orkiestracja robotów
NVIDIA OSMO, zarządzana usługa w chmurze, jest teraz dostępna dla deweloperów robotyki. Oferuje ona orkiestrację i skalowanie wieloetapowych przepływów pracy w rozproszonych zasobach obliczeniowych, zarówno lokalnie, jak i w chmurze. Platforma upraszcza szkolenie i symulację robotów, skracając cykle rozwoju z miesięcy do mniej niż tygodnia. OSMO umożliwia użytkownikom zarządzanie zadaniami, takimi jak generowanie syntetycznych danych, szkolenie modeli, uczenie wzmacniane i testowanie oprogramowania w pętli zamkniętej na dużą skalę dla robotów humanoidalnych, autonomicznych robotów mobilnych (AMRs) i manipulatorów przemysłowych.
Łączenie danych rzeczywistych i syntetycznych do szkolenia robotów
Szkolenie modeli fundamentalnych dla robotów humanoidalnych zazwyczaj wymaga ogromnych ilości danych, których gromadzenie może być kosztowne i czasochłonne. Nowy przepływ pracy NVIDIA wykorzystuje AI i platformę Omniverse do efektywnego szkolenia przy mniejszej ilości danych. Dzięki rejestrowaniu demonstracji teleoperacyjnych przy użyciu Apple Vision Pro, symulowaniu ich w programie Isaac Sim i generowaniu syntetycznych zestawów danych za pomocą usługi MimicGen NIM, deweloperzy mogą efektywniej szkolić model fundamentalny Project GR00T. Ten podejście oszczędza czas i zasoby, umożliwiając robotykom tworzenie nowych doświadczeń szkoleniowych w ramach programu Isaac Lab przy użyciu usługi Robocasa NIM.
Integracja z NVIDIA OSMO upraszcza te procesy, automatyzując przydział zadań obliczeniowych i minimalizując obciążenie administracyjne. Ta innowacja okazuje się już cenna dla firm takich jak Fourier, której prezes, Alex Gu, chwalił narzędzia: „Opracowywanie robotów humanoidalnych jest niezwykle złożone. Nowe narzędzia do symulacji i AI generatywnego NVIDIA znacznie przyspieszą nasze przepływy pracy związane z tworzeniem modeli.”
Wczesny dostęp dla deweloperów robotów humanoidalnych
Nowy program NVIDIA Humanoid Robot Developer oferuje wczesny dostęp do najnowszych narzędzi, w tym usług NIM, OSMO i najnowszych wersji programu Isaac Sim na platformie Omniverse, programu Isaac Lab, obliczeń Jetson Thor i modeli fundamentalnych Project GR00T. Do programu dołączyli już czołowi deweloperzy robotów, tacy jak 1x, Boston Dynamics, ByteDance Research, Field AI, Figure, Fourier, Galbot, LimX Dynamics, Mentee, Neura Robotics, RobotEra i Skild AI.
Aaron Saunders, dyrektor techniczny Boston Dynamics, wyraził entuzjazm z powodu współpracy z NVIDIA: „Blisko współpracowaliśmy z NVIDIA, aby posunąć granice robotyki. Program wczesnego dostępu oferuje doskonałą okazję do wykorzystania najnowocześniejszej technologii, przyspieszając postępy w całej branży.”
Podczas wydarzenia odbył się również rozmowa przy kominku między Jensenem Huang a Lauren Goode z Wired, która dotyczyła wpływu robotyki i AI na digitalizację przemysłu, a także rozmowa między Huang a Markiem Zuckerbergiem z Meta. To spotkanie liderów myśli podkreśla kluczową rolę, jaką NVIDIA odgrywa w kształtowaniu przyszłości robotyki i AI.
