D-Robotics en GigaAI willen een complete AI-stack voor robots bouwen

Een robot die een opdracht begrijpt, zijn volgende handeling kiest en die ter plekke uitvoert: daarvoor is meer nodig dan een AI-model dat op een chip kan draaien. D-Robotics en GigaAI willen een samenhangende software- en hardwarestack bouwen waarmee dat proces op de robot zelf plaatsvindt. Hun eerste stap is de aanpassing van GigaBrain-0.7 aan D-Robotics’ Sunrise S600-platform. Het doel is een oplossing die niet alleen krachtig is, maar ook herhaalbaar kan worden ingezet en betaalbaar blijft. Een afgerond product of bewezen referentieontwerp is nog niet aangekondigd. 89

Hoe model en leerproces op elkaar aansluiten

GigaBrain-0.7 verdeelt het werk over drie systemen. Systeem 1 genereert doorlopende reeksen robotacties; systeem 2 richt zich op begrip en planning; systeem 3 voorspelt mogelijke ontwikkelingen en beoordeelt de voortgang. De zogenoemde Action Expert binnen de actiearchitectuur is bedoeld om geleerde vaardigheden tussen verschillende robotlichamen te delen, ook als die andere gewrichten of besturingsmogelijkheden hebben. Dat moet voorkomen dat voor elk type robot een volledig afzonderlijk actiebeleid nodig is. 17

Daaromheen ligt een leer- en evaluatieproces. GigaWorld moet scenario’s genereren, de gevolgen van acties voorspellen, strategieën beoordelen en mislukte pogingen opnieuw in het leerproces betrekken. GigaWorld-Policy koppelt zulke voorspellingen directer aan het leren van acties. Daarbij kan het model bij gebruik acties afleiden zonder voor iedere stap ook video van de voorspelde toekomst te genereren. Het beoogde resultaat is een verbinding tussen virtueel oefenen en daadwerkelijk handelen op een robot. 217

Waarom de S600 in beeld is

D-Robotics geeft voor de Sunrise S600 een piekcapaciteit van 560 TOPS bij INT8 op: een maat voor het aantal berekeningen per seconde met 8-bits precisie. Het platform combineert vier BPU-rekenkernen voor AI, achttien Cortex-A78AE-processorkernen, zes realtime-MCU-kernen en een geheugenbandbreedte van 204,8 GB/s. De ontwikkelhardware biedt ook aansluitingen voor camera’s en uitbreiding. Daarmee is de S600 een aannemelijke basis om waarneming, planning en besturing lokaal te combineren, zonder voor elke beslissing op een externe server te steunen. 1

De eigenlijke integratie vraagt meer dan voldoende rekenkracht. GigaBrain-0.7 moet worden omgezet en geoptimaliseerd voor de hardware; bij kwantisatie — het verkleinen van de numerieke precisie — moet vervolgens worden gemeten of de acties nog nauwkeurig genoeg zijn. De beschikbare toolchain biedt een route voor die ontwikkeling, maar de opgegeven TOPS-waarde bewijst op zichzelf geen snelle, stabiele robotbesturing. 81

Kansrijk, maar nog niet gevalideerd

De partners mikken op verschillende robotconfiguraties en toepassingen in huiselijke, industriële en commerciële omgevingen. D-Robotics zegt dat de S600 al door meer dan twintig klanten voor belichaamde AI is gekozen, waaronder UBTECH, X Square Robot en FOURIER. Dat zegt iets over het bereik van de chip, niet over het gebruik van deze gezamenlijke GigaBrain-implementatie door die klanten. 9615

Open modelgewichten, een architectuur voor meerdere robottypen en bestaande ontwikkelhardware maken de combinatie een serieuze kandidaat voor een referentieontwerp. Om daarvan een bewezen ontwerp te maken, zijn resultaten op echte robots nodig: de vertraging van waarneming tot actie, een vol te houden besturingsfrequentie, stroomverbruik en warmteontwikkeling, fouten door kwantisatie, taaksucces en herstel na mislukkingen. Ook moet blijken hoeveel werk het kost om de stack per robottype aan te passen. Die uitkomsten zijn op basis van de beschikbare informatie nog niet vastgesteld. 17189