Robot může vidět, co leží před ním, a přesto při delším úkolu selhat: potřebuje také vědět, co už udělal a zda se mezitím něco změnilo. Právě na tento problém míří HERON-CRA, druhý model řady HERON, který značka Scalabot společnosti Songyan Dynamics představila po modelu HERON-World Model. Má propojit paměť úkolu, průběžné opravy pohybu a využití naučených dovedností na robotech s odlišnou konstrukcí. Zatím jde především o popis systému a výsledky uváděné firmou, nikoli o nezávisle potvrzenou spolehlivost.
6
14
15
Paměť nestačí: robot musí umět i změnit postup
Context Expert uchovává průběh úkolu. Dřívější prostorové informace a význam toho, co se ve scéně dělo, převádí na strukturované jednotky kontextu. Označení „4D“ zde znamená trojrozměrný prostor sledovaný v čase. Robot se tak při volbě dalšího kroku nemá řídit jen posledním obrazem, ale i tím, co předcházelo.
6
9
RL Engine se zaměřuje na opravy. Podle dostupných popisů jde o lehkou součást využívající posilované učení typu „actor–critic“, která se učí dílčí korekce základního způsobu řízení místo toho, aby ho celý nahradila. Samostatný hodnoticí model má průběžně posuzovat pokrok v úkolu. Záměrem je zpřesnit manipulaci a pomoci robotu zareagovat, když se provedení začne odchylovat od plánu. Dostupné podklady však neukazují, jak velký díl případného zlepšení připadá právě na tuto součást.
5
9
Zkušenost se má dát přenášet i procvičovat. Předtrénování na datech z robotů s různými těly má usnadnit přenos dovedností mezi nimi. Úspěchy i nezdary při práci ve skutečném prostředí mohou zároveň posloužit jako výchozí stavy pro HERON-World Model, který vytváří „představované“ možné průběhy dalších kroků. To je zamýšlený způsob, jak rozšířit učení bez každého dalšího pokusu na fyzickém robotu — nikoli důkaz, že takto vytvořené scénáře spolehlivě předpovídají realitu.
7
14
15
Co ukázky skutečně dokládají
Scalabot uvádí, že v jeho testu vzrostla úspěšnost skládání ponožek z 38,5 % na 97,8 %. Jde o výrazné zlepšení hlášené u jedné úlohy, ne o obecnou úspěšnost robotické manipulace. Poskytnuté podklady neumožňují nezávisle ověřit počet pokusů, testovací podmínky ani srovnávací základ.
12
Ukázka přípravy kávy má ilustrovat práci s návazností více kroků; ukázky přenosu mezi roboty a reakcí na narušení zase zamýšlené využití dovedností a úpravu postupu. Samy o sobě ale neříkají, jak často by systém uspěl s neznámými předměty, na jiném robotu nebo při odlišné komplikaci.
4
6
15
HERON-CRA tedy představuje srozumitelný návrh, jak robotovi dodat paměť a schopnost reagovat na chybu. K posouzení skutečného přínosu budou potřeba nezávislé, srovnatelné testy — ideálně i takové, které oddělí vliv paměti, korekčního učení, předtrénování a virtuálního procvičování.
4
14
15