Robot yang membuat kopi perlu lebih daripada sekadar mengenal pasti apa yang ada di hadapannya. Ia juga perlu mengingati langkah yang sudah dibuat dan menyesuaikan tindakan apabila keadaan berubah. Itulah masalah tugasan berbilang langkah yang cuba ditangani oleh HERON-CRA, model kedua dalam rangkaian HERON keluaran Scalabot, jenama Songyan Dynamics, selepas HERON-World Model. Reka bentuknya menghubungkan memori, pembetulan tindakan dan pemindahan kemahiran antara robot.
6
14
15
Daripada ingatan kepada tindakan
Context Expert menyimpan sejarah tugasan. Komponen ini mengekod maklumat ruang dan makna daripada langkah terdahulu sebagai token konteks berstruktur. Istilah “4D” di sini merujuk kepada ruang tiga dimensi yang dijejaki sepanjang masa. Dengan itu, keputusan robot tidak semata-mata bergantung pada imej terkini: ia boleh mengambil kira apa yang telah berlaku dan bagaimana susunan objek berubah.
6
9
RL Engine bertujuan membetulkan tindakan yang tersasar. Menurut laporan, komponen pembelajaran pengukuhan ini menggunakan pendekatan aktor–pengkritik residual yang ringan. Ia belajar membuat pelarasan kepada dasar tindakan asas, bukannya menggantikannya sepenuhnya; model nilai pula digunakan untuk menilai kemajuan tugasan dari semasa ke semasa. Tujuannya ialah kawalan yang lebih teliti dan pemulihan selepas kesilapan, tetapi bukti yang tersedia belum mengasingkan sumbangan komponen ini terhadap peningkatan prestasi.
5
9
Latihan merentas jenis robot dan simulasi meluaskan peluang belajar. Prapelatihan merentas robot bertujuan membolehkan kemahiran digunakan pada robot yang bentuk badannya berbeza. Kejayaan dan kegagalan dalam dunia sebenar juga boleh dijadikan titik permulaan untuk HERON-World Model menjana jujukan tindakan yang dibayangkan bagi latihan lanjut. Itu ialah kitaran pembelajaran yang dicadangkan, bukan bukti bahawa masa depan yang disimulasikan sentiasa sepadan dengan hasil pada robot fizikal.
7
14
15
Apa yang ditunjukkan oleh demonstrasi?
Scalabot melaporkan kadar kejayaan melipat stoking meningkat daripada 38.5% kepada 97.8% dalam ujiannya. Peningkatan yang dilaporkan itu besar bagi satu tugasan, tetapi tidak wajar dibaca sebagai kadar kejayaan robot untuk semua kerja manipulasi. Bahan yang tersedia tidak menetapkan bilangan percubaan, keadaan ujian atau garis perbandingan yang telah diperiksa secara bebas.
12
Demonstrasi membuat kopi menggambarkan mengapa ingatan terhadap langkah terdahulu penting. Demonstrasi pemindahan kemahiran antara robot dan tindak balas terhadap gangguan pula menggambarkan kebolehan yang ingin dicapai: menggunakan semula kemahiran dan menyemak tindakan apabila keadaan berubah. Namun, demonstrasi itu sendiri tidak membuktikan kadar kejayaan yang boleh diulang dalam persekitaran, jenis robot atau gangguan yang belum dikenali.
4
6
15
Ringkasnya, HERON-CRA menawarkan reka bentuk yang jelas untuk membantu robot mengingati, membetulkan dan memindahkan kemahiran. Untuk mengetahui sejauh mana ia benar-benar boleh diharapkan, masih diperlukan penilaian bebas yang setanding—termasuk ujian yang memisahkan kesan memori, RL, prapelatihan dan jujukan tindakan yang dibayangkan.
4
14
15