Společnosti NVIDIA a Hugging Face spojily síly, aby do knihovny LeRobot — otevřené robotické knihovny Hugging Face — přinesly NVIDIA Isaac GR00T 1.7 a framework NVIDIA Isaac Teleop. Brzy by měl následovat i NVIDIA Cosmos 3, hraniční model pro fyzickou AI.
Isaac GR00T 1.7 je otevřený, uvažující model typu vision-language-action (VLA) určený pro humanoidní roboty. Dohromady mají tyto integrace dát vývojářům dostupnější a standardizovanější cestu k vývoji robotů od začátku do konce a zároveň podpořit inovaci a spolupráci v otevřené robotické komunitě.
Otevřená AI podle obou partnerů ukázala, jak rychle dokážou vývojáři inovovat, když se sdílejí modely, data i nástroje. Robotika má stejnou příležitost — pokrok ve fyzické AI ale stále brzdí nákladné a roztříštěné zdroje, od velkých datových sad a základových modelů přes simulaci a výpočetní výkon až po validační nástroje.
„Open source je způsob, jakým obor promění pokročilý výzkum v něco, co lidé mohou studovat, přizpůsobovat a na čem mohou stavět,“ řekl Thomas Wolf, spoluzakladatel a vědecký ředitel Hugging Face. „Díky NVIDIA Isaac GR00T 1.7 a Isaac TeleOp v LeRobot mohou vývojáři robotiky už dnes používat sdílené modely, data a workflow k trénování a hodnocení robotů otevřeně. A s plánovaným NVIDIA Cosmos 3 bude mít komunita cestu, jak do téže společné smyčky přinést hraniční modely světa.“
Propojení dvou komunit
LeRobot je open-source robotická knihovna pro trénování, spouštění a sdílení robotických datasetů, modelů, politik a workflow. Pokračující partnerství propojuje tři miliony vývojářů robotiky kolem NVIDIA se šestnácti miliony tvůrců AI v ekosystému Hugging Face a rozšiřuje přístup k hraničním nástrojům pro fyzickou AI.
Vývojáři tak dostávají jednotný způsob, jak sbírat a standardizovat data, trénovat a dolaďovat základové modely robotů, vyhodnocovat výkon a modely nasazovat. Konkrétně jde o tyto integrace:
- NVIDIA Isaac Teleop — otevřený framework pro sběr robotických dat, který umožňuje zachytit kvalitní lidské demonstrace z externích zařízení ve standardizovaných, interoperabilních formátech a datasety pak rozšiřovat a sdílet přímo v LeRobot.
- NVIDIA Isaac GR00T 1.7 — podle firem první otevřený a komerčně životaschopný základový model pro roboty, navržený tak, aby se v rámci workflow LeRobot snáze dotrénovával a nasazoval. Vývojáři jej mohou adaptovat na nová robotická těla a úkoly s ověřenou výkonností.
- NVIDIA Cosmos 3 — hraniční základový model světa pro fyzickou AI, jenž má do LeRobot dorazit brzy. Má pomoci generovat a rozšiřovat robotická data, simulovat scénáře a podporovat vývoj politik tam, kde jsou reálná data omezená nebo příliš drahá na sběr.
Co už v LeRobot běží
Nové integrace navazují na širší sadu zdrojů NVIDIA, které jsou s LeRobot propojeny a pokrývají celou vývojovou smyčku. Knihovna už nabízí rozsáhlý open-source dataset fyzické AI, který si uživatelé podle uvedených údajů stáhli více než patnáctkrát milionkrát. Obsahuje přes 350 000 reálných i simulovaných trajektorií a 57 milionů úchopů.
Součástí jsou také simulační frameworky postavené na NVIDIA Isaac Sim a Isaac Lab, určené k nastavení prostředí, generování robotických dat, testování politik a ověřování chování ještě před přechodem na fyzické roboty. NVIDIA Isaac Lab-Arena je dostupná v LeRobot Environment Hub, kde si vývojáři mohou rychle prototypovat složitá simulační prostředí, registrovat je v LeRobot EnvHub a využívat je k trénování a hodnocení generalistických robotických politik, jako jsou GR00T, Pi nebo SmolVLA.
Integrace NVIDIA Jetson Thor s robotem Reachy 2 z ekosystému LeRobot navíc podporuje nasazení VLA modelů na open-source humanoidních robotech.
Zdroj: therobotreport.com
