L’intelligenza artificiale open source ha dimostrato quanto velocemente gli sviluppatori possano innovare quando modelli, dati e strumenti sono condivisi apertamente. La robotica ha la stessa opportunità, ma gli avanzamenti nello sviluppo di intelligenze fisiche, l’AI fisica, sono spesso ostacolati da risorse costose e frammentate, tra cui grandi dataset, modelli di base per robot, simulazione, capacità di calcolo e strumenti di validazione. Con una visione comune, NVIDIA e Hugging Face stanno lavorando insieme per portare il modello NVIDIA Isaac GR00T 1.7, una rete di vision-language-action (VLA), il framework NVIDIA Isaac TeleOp e presto il modello NVIDIA Cosmos 3 su LeRobot, la libreria open source di Hugging Face dedicata alla robotica. Insieme questi integrano una via più accessibile e standardizzata per lo sviluppo robotico end-to-end, promuovendo innovazione e collaborazione nella comunità open robotics.
Pipeline Aperta per Modelli di Base per Robot
Hugging Face LeRobot è una libreria open source per l’addestramento, l’esecuzione e la condivisione di dataset robot, modelli, politiche e workflow. La collaborazione continuativa tra NVIDIA e Hugging Face collega gli sviluppatori robotici di NVIDIA—oltre 3 milioni—ai costruttori di AI di Hugging Face—circa 16 milioni—espandendo l’accesso a strumenti di AI fisica di frontiera attraverso workflow aperti.
Includere le capacità fisiche NVIDIA in LeRobot offre uno strumento comune per raccogliere e standardizzare dati, addestrare e finetunare modelli di base per robot, valutare le prestazioni e distribuire modelli tramite workflow aperti. Gli integrazioni sono le seguenti:
- NVIDIA Isaac TeleOp è un framework open source per la raccolta di dati robotici che agevola lo sviluppo in modo standardizzato e interoperabile. Permette di registrare e distribuire dataset in alta qualità con l’aiuto della comunità, direttamente all’interno di LeRobot.
- NVIDIA Isaac GR00T 1.7, il primo modello di base aperto per robot commercialmente viable, facilita post-training e distribuzione tramite workflow LeRobot, aiutando gli sviluppatori a adattare GR00T a nuove forme fisiche e compiti con prestazioni testate.
- NVIDIA Cosmos 3, un modello frontier di base per l’AI fisica in arrivo su LeRobot, permetterà agli sviluppatori di generare e arricchire dati robotici, simulare scenari e sostenere lo sviluppo di politiche quando i dati reali sono troppo costosi da registrare.
Strumenti e Risorsa di Sviluppo Robotica
Queste integrazioni si basano su una vasta serie di strumenti NVIDIA già collegati con LeRobot per sostenere l’intero ciclo di sviluppo robotico:
- Il più grande dataset di AI aperto, scaricato più di 15 milioni di volte, comprendente oltre 350.000 traiettorie reali e simulate e 57 milioni di afferrature per aiutare gli sviluppatori a iniziare i propri workflow robotici.
- I framework di simulazione NVIDIA Isaac Sim e Isaac Lab consentono agli sviluppatori di configurare ambienti, generare dati, testare politiche e validarne comportamenti prima di passare ai robot fisici.
- NVIDIA Isaac Lab-Arena, integrato con LeRobot Environment Hub, permette agli sviluppatori di prototipare rapidamente ambienti di simulazione complessi, registrandoli su LeRobot EnvHub e usando il tutto all’interno dell’ecosistema LeRobot per addestrare politiche robotiche generiste come GR00T, Pi e SmolVLA.
- L’integrazione NVIDIA Jetson Thor con LeRobot Reachy 2 supporta la distribuzione dei modelli VLA su robot umanoide open source.
Gli sviluppatori sono invitati ad approfondire l’utilizzo di Isaac Teleop, Isaac GR00T 1.7 e Isaac Lab-Arena insieme a LeRobot per lo sviluppo end-to-end di robot umanoidi e ad esplorare i dettagli dei workflow di integrazione di LeRobot.
Visione Comune per la Robotica Aperta
“L’open source è il modo in cui un campo trasforma la ricerca avanzata in qualcosa che le persone possono studiare, adattare e costruire”, ha dichiarato Thomas Wolf, cofondatore e chief science officer di Hugging Face. “Con NVIDIA Isaac GR00T 1.7 e Isaac Teleop in LeRobot oggi, gli sviluppatori robotici possono utilizzare modelli, dati e workflow condivisi per addestrare ed valutare robot aperti. E con NVIDIA Cosmos 3 programmato per il futuro, la comunità potrà integrare modelli front-line in questo stesso ciclo collaborativo.”
Questa collaborazione rappresenta un passo importante verso la democratizzazione dell’AI fisica. Gli strumenti aperti non solo abbassano le barriere di accesso tecnico, ma creano un ecosistema in cui ogni contributo—che si tratti di dati di addestramento, modelli o codice—è condiviso, testato e migliorato in collaborazione.
Tags e Categorie
Categorie: Robotica
Tags: Intelligenza Artificiale, Cosmos, Isaac, Jetson, Open Source, Physical AI, Robotica, Simulation and Design, Synthetic Data Generation