Når en robot skal fullføre en oppgave med mange trinn, holder det ikke alltid å reagere på det den ser akkurat nå. Den må også holde styr på hva som allerede er gjort, og kunne endre kurs hvis noe går galt. Det er problemet Songyan Dynamics vil angripe med Scalabots HERON-CRA, den andre modellen i HERON-serien etter HERON-World Model. Foreløpig bygger resultatbildet på demonstrasjoner og selskapets egne opplysninger, ikke uavhengig bekreftede tester.
6
14
15
Tre deler som skal virke sammen
Hukommelse: Komponenten Context Expert gjør tidligere romlig informasjon og informasjon om hva som skjer i oppgaven om til strukturerte data som modellen kan bruke senere. Betegnelsen «4D» betyr her tredimensjonalt rom fulgt over tid. Målet er at robotens neste handling skal bygge på oppgaveforløpet, ikke bare det nyeste kamerabildet.
6
9
Korrigering: En lettvektskomponent for forsterkningslæring, kalt RL Engine, skal lære justeringer av robotens grunnleggende handlingsstrategi i stedet for å erstatte den. En egen modell er beskrevet som et verktøy for å vurdere fremdriften underveis. Dette skal gi mer presis kontroll når utførelsen avviker fra planen, men kildene viser ikke hvor stor del av en eventuell forbedring som skyldes denne komponenten alene.
5
9
Overføring og øving: Forhåndstrening på tvers av roboter med ulike kropper skal gjøre lærte ferdigheter lettere å gjenbruke. I tillegg kan tilstander fra vellykkede og mislykkede forsøk i den virkelige verden brukes som utgangspunkt når HERON-World Model lager tenkte handlingsforløp for videre læring. Det beskriver en mulig læringssløyfe – ikke et bevis for at modellens tenkte utfall treffer det som faktisk skjer med en fysisk robot.
7
14
15
Hva er vist så langt?
Scalabot oppgir at andelen vellykkede forsøk på å brette sokker steg fra 38,5 til 97,8 prosent i selskapets test. Det er en stor rapportert forbedring for akkurat denne oppgaven, men ikke en generell suksessrate for robotarbeid. Materialet gir ikke grunnlag for å kontrollere antall forsøk, testbetingelser eller sammenligningsgrunnlag uavhengig.
12
En demonstrasjon av kaffelaging illustrerer behovet for å huske tidligere trinn. Viste eksempler på overføring mellom roboter og håndtering av forstyrrelser illustrerer de andre målene. Ingen av demonstrasjonene fastslår i seg selv hvor ofte systemet lykkes med nye omgivelser, andre robotkropper eller uventede avbrudd.
4
6
15
HERON-CRA har dermed en tydelig idé: å koble sammen hukommelse, korrigering og gjenbruk av erfaring. For å vite hvor robust løsningen er, trengs uavhengige, sammenlignbare tester som også skiller bidraget fra de enkelte delene.
4
14
15