Saat robot merencanakan langkah berikutnya, kopi masih bisa terus dituang.
Dalam deskripsi Gemini Robotics ER 2 pada 30 Juli, Google menempatkan kedua aktivitas itu berdampingan. Model penalaran mengamati video dan merencanakan pekerjaan, sementara model aksi terpisah menangani gerakan fisik. Rancangan ini memungkinkan robot terus berpikir selama melakukan suatu tindakan, alih-alih berhenti setiap kali perlu memutuskan langkah selanjutnya.
Menuangkan kopi membuat pengaturan itu mudah dibayangkan. Gerakan harus terus berlangsung selagi cangkir terisi, lalu berhenti pada saat yang tepat. Google menggunakan titik berhenti itu sebagai contoh peristiwa yang harus ditemukan model penalaran dalam video. Gerakan berkelanjutan yang memberinya sesuatu untuk diamati juga terus mengubah situasi yang sedang dinilainya.
Untuk proses menuang ini, pengukuran yang berguna akan mencakup seluruh tindakan: kapan model mengenali titik berhenti, kapan pengendali menindaklanjutinya, dan kapan aliran kopi benar-benar berhenti. Uji video Google membahas cara menemukan peristiwa tersebut dalam rekaman, bukan mengukur waktu dari keseluruhan rangkaian itu. Mengamati aliran kopi hingga berhenti akan menunjukkan bagaimana penilaian tersebut diterapkan dalam gerakan.
Sumber: https://deepmind.google/blog/gemini-robotics-er-2-powering-robotics-with-video-understanding-task-orchestration-and-multi-robot-collaboration/
Gambar: Ilustrasi editorial buatan AI, bukan robot Google atau rekaman pengujian.
Dalam deskripsi Gemini Robotics ER 2 pada 30 Juli, Google menempatkan kedua aktivitas itu berdampingan. Model penalaran mengamati video dan merencanakan pekerjaan, sementara model aksi terpisah menangani gerakan fisik. Rancangan ini memungkinkan robot terus berpikir selama melakukan suatu tindakan, alih-alih berhenti setiap kali perlu memutuskan langkah selanjutnya.
Menuangkan kopi membuat pengaturan itu mudah dibayangkan. Gerakan harus terus berlangsung selagi cangkir terisi, lalu berhenti pada saat yang tepat. Google menggunakan titik berhenti itu sebagai contoh peristiwa yang harus ditemukan model penalaran dalam video. Gerakan berkelanjutan yang memberinya sesuatu untuk diamati juga terus mengubah situasi yang sedang dinilainya.
Untuk proses menuang ini, pengukuran yang berguna akan mencakup seluruh tindakan: kapan model mengenali titik berhenti, kapan pengendali menindaklanjutinya, dan kapan aliran kopi benar-benar berhenti. Uji video Google membahas cara menemukan peristiwa tersebut dalam rekaman, bukan mengukur waktu dari keseluruhan rangkaian itu. Mengamati aliran kopi hingga berhenti akan menunjukkan bagaimana penilaian tersebut diterapkan dalam gerakan.
Sumber: https://deepmind.google/blog/gemini-robotics-er-2-powering-robotics-with-video-understanding-task-orchestration-and-multi-robot-collaboration/
Gambar: Ilustrasi editorial buatan AI, bukan robot Google atau rekaman pengujian.