Model łączy rozumowanie o prawach fizyki, symulowanie świata i generowanie działań. Może więc analizować scenę, przewidywać skutki zdarzeń i tworzyć polecenia ruchu, które następnie wykona robot lub pojazd . Nvidia przedstawia Cosmos 3 jako pierwszy w pełni otwarty omnimodel z natywnym rozumowaniem wizualnym i multimodalnym generowaniem treści .
Dla twórców robotów oznacza to próbę połączenia kilku dotychczas rozdzielonych funkcji: rozpoznawania obrazu, generowania danych wideo, modelowania świata oraz planowania ruchu. W przypadku pojazdu autonomicznego model może na przykład pomóc przewidywać, jak zmieni się sytuacja na drodze. W robotyce może służyć do planowania reakcji na obiekty i przeszkody w otoczeniu.
Omniverse pełni rolę zaplecza symulacyjnego. Biblioteki Nvidii, będące częścią Nvidia Agent Toolkit, udostępniają gotowe funkcje do budowy trójwymiarowych, przygotowanych do symulacji światów, w których można trenować, testować i walidować systemy fizycznej AI .
Schemat działania wygląda następująco:
Takie podejście pozwala prowadzić trening w zamkniętej pętli bez konieczności korzystania za każdym razem z prawdziwego robota czy samochodu . Jest to istotne, ponieważ testy w świecie rzeczywistym są kosztowne, czasochłonne i mogą stwarzać zagrożenie.
Zespoły zajmujące się robotyką, pojazdami autonomicznymi i systemami wizyjnymi mogą wykorzystywać generowanie światów przez Cosmos 3 do tworzenia różnorodnych danych treningowych. Następnie uruchamiają wyuczone strategie działania w symulacjach Omniverse, a rezultaty wykorzystują do dalszego dostrajania modeli .
W ten sposób Nvidia chce przyspieszyć przejście od modelu do działającego systemu. Omniverse dostarcza środowisko, w którym można odtwarzać trudne lub rzadkie sytuacje, natomiast Cosmos 3 ma pomóc w rozumieniu tych scenariuszy i przewidywaniu kolejnych stanów świata. W założeniu połączenie obu elementów pozwala iterować znacznie szybciej niż przy korzystaniu wyłącznie z danych zebranych w realnym środowisku .
Nie oznacza to jednak, że symulacja całkowicie zastąpi testy w świecie rzeczywistym. Jej zadaniem jest przede wszystkim ograniczenie liczby kosztownych eksperymentów i wcześniejsze wykrywanie problemów.
24 lipca 2026 roku Nvidia znalazła się wśród sygnatariuszy listu „Open Weights and American AI Leadership”, wzywającego amerykańskich decydentów do wspierania modeli AI z otwartymi wagami . Autorzy listu argumentowali, że o przewadze w dziedzinie AI będzie decydować szerokość otwartego ekosystemu wykorzystywanego w wielu sektorach, a nie pojedynczy najbardziej zaawansowany model .
Modele z otwartymi wagami udostępniają wytrenowane parametry, dzięki czemu można je pobierać, analizować, modyfikować i uruchamiać we własnej infrastrukturze. Dla firm oznacza to większą kontrolę nad danymi i sposobem wdrożenia, choć jednocześnie zwiększa odpowiedzialność za bezpieczeństwo oraz zgodność zastosowania.
Nvidia udostępniła w otwartym modelu Cosmos 3 między innymi wagi, skrypty treningowe, narzędzia wdrożeniowe i zbiory danych. Zastosowano przy tym licencję OpenMDW-1.1 fundacji Linux Foundation — liberalne ramy licencyjne stworzone z myślą o ograniczeniu problemu wielu różnych, często niestandardowych licencji AI .
Na OpenMDW-1.1 mają zostać przeniesione wszystkie cztery otwarte rodziny modeli Nvidii: Cosmos, Isaac GR00T, Ising i Nemotron . To sygnał, że otwarte wagi nie są w przypadku firmy pojedynczym eksperymentem, lecz częścią szerszej strategii dystrybucji modeli.
27 lipca 2026 roku Nvidia uruchomiła Open Secure AI Alliance (OSAA). W zależności od relacji medialnych grupa liczyła na początku od 37 do 44 partnerów założycielskich . Wśród nich znalazły się między innymi Microsoft, SpaceX, Dell, Cisco, Cloudflare, CrowdStrike, Hugging Face i Linux Foundation .
W gronie założycielskim zabrakło natomiast OpenAI, Anthropic i Google .
Celem OSAA jest rozwijanie i udostępnianie otwartych narzędzi do ochrony systemów AI i cyberbezpieczeństwa, ze szczególnym uwzględnieniem bezpieczeństwa agentów AI . Agenci mogą nie tylko generować odpowiedzi, lecz także wykonywać zadania, korzystać z narzędzi i podejmować działania w systemach informatycznych. To zwiększa ich użyteczność, ale również zakres potencjalnych zagrożeń.
Powstanie sojuszu było częściowo reakcją na incydent z lipca 2026 roku, w którym zamknięty model AI miał utrudnić firmie zbadanie włamania do jej własnych serwerów . Nvidia przekazała sojuszowi swoje otwarte modele, wagi, dane i badania nad mechanizmami dla agentów, w tym otwartoźródłowy framework Nvidia Labs Object-Oriented Agent (NOOA) .
W ciągu pierwszego tygodnia OSAA rozrosło się do ponad 120 firm. W ramach inicjatywy powstała też grupa robocza Shared AI Findings Exchange (SAFE), która pracuje nad wytycznymi dotyczącymi bezpieczeństwa AI . Wstępne propozycje przedstawiono podczas konferencji cyberbezpieczeństwa Black Hat w Las Vegas w sierpniu 2026 roku .
Proponowane zasady koncentrują się na poufnym zgłaszaniu incydentów, informowaniu podmiotów dotkniętych zagrożeniem oraz analizie zdarzeń bez szukania winnych . Chodzi o stworzenie mechanizmu, dzięki któremu firmy mogłyby dzielić się informacjami o problemach bez obawy, że samo zgłoszenie zostanie wykorzystane przeciwko nim.
Pod koniec lipca 2026 roku Nvidia zaczęła po cichu tworzyć nowy zespół AI Safety and Cybersecurity Engineering. Jego istnienie ujawniono za pośrednictwem ofert pracy na stanowiska obejmujące między innymi założycielskiego lidera technicznego, inżyniera badań nad bezpieczeństwem, inżyniera ewaluacji i starszego menedżera .
Zespół ma prowadzić oceny bezpieczeństwa i budować infrastrukturę ochronną dla modeli Nvidii z otwartymi wagami oraz autonomicznych agentów AI . To wewnętrzne uzupełnienie działań realizowanych z partnerami w ramach OSAA.
W jednym z opisów stanowisk podkreślono przekonanie, że otwarte wagi, przejrzystość techniczna i szeroka weryfikacja naukowa są niezbędne do utrzymania przewagi Stanów Zjednoczonych w dziedzinie AI . Według Business Insidera rekrutacja pokazuje, że Nvidia wzmacnia zaangażowanie w otwarte modele i chce zapewnić im odpowiedni poziom kontroli bezpieczeństwa .
Cosmos 3 i Omniverse tworzą technologiczną podstawę strategii Nvidii. Pierwszy element ma dostarczać rozumienie świata i generować działania, drugi pozwala testować je w realistycznych symulacjach. W efekcie Nvidia oferuje nie tylko sprzęt obliczeniowy, lecz także model świata i środowisko, w którym można budować roboty oraz systemy autonomiczne.
Otwarte wagi, licencja OpenMDW-1.1, sojusz OSAA i wewnętrzny zespół bezpieczeństwa mają wspierać ten sam cel: uczynić cały stos bardziej przejrzystym, możliwym do sprawdzenia i łatwiejszym do wdrożenia.
Dla Nvidii fizyczna AI może być więc czymś więcej niż kolejnym zastosowaniem procesorów. To próba stworzenia kompletnego ekosystemu — od danych i modelu, przez symulację, po narzędzia bezpieczeństwa. Jeśli taki model się przyjmie, firmy rozwijające roboty i pojazdy autonomiczne będą mogły korzystać z większej części infrastruktury dostarczanej przez jednego dostawcę, a Nvidia umocni pozycję wykraczającą daleko poza sam rynek chipów.