Det innebär att modellen kan analysera en scen, resonera kring fysik och förutsäga vad som händer härnäst. Därefter kan den generera de rörelsekommandon som en robot eller ett fordon behöver utföra . Nvidia beskriver Cosmos 3 som den första helt öppna omnimodellen med inbyggd visionsförståelse och multimodal generering inom dessa områden .
Omniverse fungerar som simuleringsmotorn. Omniverse-biblioteken, som ingår i Nvidia Agent Toolkit, ger utvecklare färdiga funktioner för att skapa 3D-världar där fysisk AI kan tränas, testas och valideras .
I praktiken kan Cosmos 3 generera eller förutsäga ett fysiskt scenario, varefter Omniverse återger scenariot i en detaljerad virtuell miljö. På så sätt kan utvecklare träna AI-system i en sluten loop utan att varje experiment kräver en verklig robot, bil eller annan fysisk prototyp .
Återkopplingen kan korta utvecklingstiden. Utvecklare kan använda Cosmos 3 för att skapa varierade träningsdata, köra AI-systemens policyer i Omniverse och sedan föra tillbaka resultaten till modellen för vidare förbättring .
Det ger team inom robotik, självkörande fordon och visionsbaserad AI möjlighet att testa betydligt fler situationer än vad som vore praktiskt möjligt med enbart data från den verkliga världen .
Den 24 juli 2026 var Nvidia en av undertecknarna bakom brevet ”Open Weights and American AI Leadership”. Där uppmanas amerikanska beslutsfattare att stödja AI-modeller vars vikter kan laddas ner, granskas, modifieras och köras på egen infrastruktur .
Argumentet är att AI-ledarskap inte bör avgöras av en enda ledande modell, utan av hur brett ett öppet ekosystem kan användas i olika branscher . Microsoft, Meta, Nvidia och flera andra organisationer skrev under .
Nvidia har dessutom publicerat Cosmos 3:s modellvikter, träningsskript, verktyg för driftsättning och dataset under Linux Foundations licens OpenMDW-1.1. Licensen är utformad för AI-modeller och ska minska den juridiska friktion som uppstår när företag behöver hantera många olika speciallicenser .
Företaget har flyttat sina fyra öppna modellfamiljer – Cosmos, Isaac GR00T, Ising och Nemotron – till OpenMDW-1.1. Det pekar på en bredare företagsstrategi där standardiserad distribution av öppna modellvikter ska bli en viktig del av Nvidias AI-ekosystem .
Den 27 juli 2026 lanserade Nvidia Open Secure AI Alliance, eller OSAA, tillsammans med mellan 37 och 44 grundarparter. Olika rapporter anger olika antal. Bland deltagarna finns Microsoft, SpaceX, Dell, Cisco, Cloudflare, CrowdStrike, Hugging Face och Linux Foundation .
OpenAI, Anthropic och Google fanns inte med i den ursprungliga gruppen .
Alliansens uppdrag är att utveckla och dela säkerhets- och cybersäkerhetsverktyg med öppen källkod för AI-system, med särskilt fokus på AI-agenter . En del av bakgrunden var en incident i juli 2026 där en sluten AI-modell enligt rapporteringen försvårade ett företags utredning av ett intrång i de egna servrarna .
Nvidia bidrar med öppna modeller, modellvikter, data och forskning om så kallade agentharnessar. Där ingår även det öppna ramverket Nvidia Labs Object-Oriented Agent, NOOA .
Under sin första vecka växte OSAA till över 120 företag. Alliansen bildade också arbetsgruppen Shared AI Findings Exchange, SAFE, för att ta fram riktlinjer för AI-säkerhet . De första förslagen presenterades vid cybersäkerhetskonferensen Black Hat i Las Vegas i augusti 2026 .
Förslagen handlar bland annat om konfidentiell rapportering av incidenter, att berörda aktörer ska larmas och att säkerhetshändelser ska analyseras utan att fokus automatiskt läggs på att hitta en syndabock .
I slutet av juli 2026 började Nvidia i det tysta bygga upp ett nytt AI Safety and Cybersecurity Engineering-team. Teamets existens blev känd genom platsannonser för bland annat en grundande teknisk chef, säkerhetsforskare, utvärderingsingenjörer och en senior chef .
Teamet ska genomföra säkerhetsutvärderingar och bygga säkerhetsinfrastruktur för Nvidias öppna modeller och autonoma AI-agenter. Det blir ett internt komplement till det branschgemensamma arbetet inom OSAA .
En av platsannonserna beskriver gruppen som byggd på övertygelsen att öppna modellvikter, teknisk transparens och bred vetenskaplig granskning är avgörande för att upprätthålla USA:s AI-ledarskap .
Business Insider har tolkat rekryteringen som ett tecken på att Nvidia satsar ännu hårdare på öppna modeller – och samtidigt försöker säkerställa att säkerhetsarbetet håller jämna steg med ambitionerna .
Cosmos 3 och Omniverse ger Nvidia en position som sträcker sig längre än försäljning av AI-chip. Företaget vill erbjuda både världsmodellen som hjälper system att förstå och förutsäga den fysiska miljön, och simuleringsplattformen där systemen kan tränas innan de släpps ut i verkligheten.
De parallella initiativen kring öppna modellvikter, OSAA och det interna säkerhetsteamet stödjer samma idé: fysisk AI måste kunna granskas och säkras om företag ska våga använda den i allt från fabriker och lager till robotik och autonoma fordon.
Nvidia försöker därmed bygga hela utvecklingskedjan – från modell och syntetiska träningsdata till simulering, säkerhetsverktyg och utvärdering. Om strategin lyckas kan företaget bli mer än leverantören av beräkningskraften bakom fysisk AI. Det kan också bli leverantören av infrastrukturen som gör tekniken möjlig att utveckla och ta i bruk.