Model dunia kontra-faktual Bantu Robot Memperkirakan Aksi Alternatif

Untuk memperkirakan posisi perahu jika diarahkan ke kanan, model menggunakan prediksi bagi arah kanan lalu menambahkan selisih dua meter yang sama. Dengan cara itu, model memanfaatkan gangguan yang terjadi pada percobaan nyata ketika menghitung hasil alternatif.

“Model dunia kontra-faktual kami melakukan ketiga langkah itu dengan satu pengurangan,” kata Balestriero, merujuk proses inferensi kausal yang biasanya memisahkan pengamatan, perubahan tindakan, dan prediksi ulang.

Penjelasan fisiknya, menurut Balestriero, adalah pengaruh tindakan dan gangguan sama-sama bertambah seiring durasi dalam rentang waktu pendek. Interaksi keduanya tumbuh lebih lambat, sehingga dampaknya dapat diperkirakan dengan menjumlahkan pengaruh tindakan dan gangguan.

Uji simulasi menunjukkan peluang keberhasilan lebih tinggi

Dalam tugas simulasi yang dijelaskan Balestriero, robot yang memilih tindakan berdasarkan model kontra-faktual mencapai tujuan dalam 35 hingga 69 persen kejadian. Pembandingnya, perencana yang mengetahui simulator sebenarnya tetapi mengabaikan hasil pengamatan, mencapai tujuan dalam 14 hingga 23 persen kejadian.

Jika robot mendapat dua percobaan tambahan pada kejadian yang sama, tingkat keberhasilan pendekatan itu naik menjadi 51 hingga 97 persen. Angka tersebut berasal dari simulasi, bukan pengujian robot di lingkungan nyata.

Dampaknya bagi pengembangan robot terletak pada kemampuan belajar dari kegagalan. Ketika robot menemui beban tak terduga atau gangguan lain, model dapat membantu memilih tindakan baru untuk situasi yang sama. Itu berbeda dari sekadar mengulang rencana awal yang sudah meleset.

Peneliti juga melihat potensi penggunaan untuk menangani kerusakan yang menetap, seperti motor yang tidak terkalibrasi dengan benar. Model dapat membantu membedakan apakah kegagalan terjadi karena keputusan yang buruk atau karena kondisi tersembunyi, lalu memberi dasar untuk percobaan berikutnya.

Penyesuaian JEPA tidak memerlukan pelatihan ulang besar

Eksperimen Balestriero dan koleganya menggunakan encoder siap pakai DINOv2 dan MAE tanpa penyetelan ulang. Mereka hanya melatih prediktor kecil di atas encoder itu. Menurut Balestriero, membuat model dunia kontra-faktual dari titik awal tersebut memerlukan tambahan yang relatif kecil.

Upaya awal peneliti mencoba menambahkan komponen yang mempelajari gangguan tersembunyi, seperti arus dalam contoh perahu. Namun, pendekatan itu rapuh. Balestriero mengatakan data biasa tidak selalu dapat menentukan gangguan mana yang benar karena label gangguan dapat diubah untuk tiap tindakan tanpa mengubah prediksi model.

Karena itu, pendekatan mereka memakai sifat sistem fisik sebagai dasar: pengaruh gaya dapat dijumlahkan, sedangkan interaksi antarpengaruh berkembang lebih lambat dalam waktu singkat. Peneliti menyatakan kesalahan relatif aturan tersebut menyusut seiring kuadrat langkah waktu, dan tidak ada metode yang memakai data biasa sama yang dapat melampaui laju itu pada kondisi terburuk.

Bagi robot yang beroperasi di dunia nyata, kemampuan memperkirakan tindakan alternatif penting setelah kejutan mengubah hasil. Balestriero menekankan bahwa prediksi saja belum cukup untuk memahami kegagalan atau menentukan percobaan berikutnya.

“Setelah kejutan, pertanyaan yang berguna bukan lagi apa yang diharapkan, melainkan apa yang akan terjadi jika robot bertindak berbeda dalam situasi yang sama,” ujar Balestriero.