NVIDIA je proširio Isaac: razvoj humanoidnih robota navodno s tjedana na dane

NVIDIA je na konferenciji GTC Berlin najavila proširenje robotske platforme Isaac. Dodani su referentna platforma za humanoidne robote, novi datasetovi i novi izvršni framework. Alati pokrivaju generiranje podataka, učenje, simulaciju i prijenos na stvarnog robota. NVIDIA tvrdi da se vrijeme potrebno za postavljanje razvoja tako skraćuje s nekoliko tjedana na nekoliko dana.

Tvrtka Agile Robots predstavila je humanoida Agile ONE SN. Dolazi s unaprijed konfiguriranim modelom Isaac GR00T i edge AI platformom Jetson Thor. Isporuka je planirana za početak 2027.

Agile ONE SN

Robot se temelji na modelu Agile ONE S, visokom 1,4 m i teškom 40 kg. Ima 31 stupanj slobode i može nositi 3 kg po ruci. Svaka ruka ima petoprstu šaku WUJI Hand 2 s 20 stupnjeva slobode, koja podržava kontrolu sile na 1 kHz i taktilno očitavanje.

Jetson Thor ima 2.070 TFLOPS-a u FP4 formatu i 128 GB objedinjene memorije. Chip na samom robotu obavlja inferenciju i kontrolu u stvarnom vremenu. Robot ima i kamere na glavi i zapešćima, LiDAR te inercijalne mjerne jedinice. NVIDIA navodi da planira integraciju sa sigurnosnom platformom NVIDIA Halos.

Software

NVIDIA je objavila opću dostupnost open-source frameworka za učenje Isaac Lab 3.0. Podržava AI agente i obradu na više GPU-ova, a koristi physics engine poput Newtona i PhysX-a. Služi za učenje i poboljšavanje politika upravljanja ponašanjem robota, od desktopa do data centera.

Novi Isaac OS open-source je izvršni framework temeljen na NVIDIA Holoscanu. Povezuje AI, senzore, kontrolu i hardware robota. Prema NVIDIA-i, omogućuje rad u stvarnom vremenu s predvidljivim vremenom obrade, i u simulaciji i na stvarnom robotu.

Podaci i radni tokovi

SimReady Central Library sadrži više od 2.000 asseta spremnih za simulaciju, namijenjenih robotici i tvornicama. Assete među ostalima nude Fanuc, Comau, Franka Robotics i Universal Robots, a objavljeni su na Hugging Faceu.

NVIDIA je počela nuditi i Human 1M Dataset sa snimkama raznovrsnih ljudskih aktivnosti. Uključuje sinkronizirane videe iz tri kuta i 3D praćenje ruku. Potpunoj verziji pristup imaju partneri iz Cosmos Coalitiona.

Za DGX Station objavljena su tri open-source referentna radna toka. Podržavaju poboljšavanje modela GR00T 1.7 pomoću reinforcement learninga, učenje precizne manipulacije objektima u Isaac Labu te dodatno učenje Cosmos world modela za generiranje sintetičkih podataka pomoću GPT-6 Astre.