OK-Robot: kerangka kerja modular terbuka untuk tugas pick-and-drop zero-shot di dalam rumah yang dikondisikan oleh bahasa
- OK-Robot adalah kerangka kerja modular terbuka untuk tugas pick-and-drop zero-shot berbasis kondisi bahasa di lingkungan rumah tangga yang sewenang-wenang.
- Di 10 lingkungan rumah tangga di New York City, OK-Robot mencoba 171 tugas pick-and-drop, dan menampilkan masing-masing 5 sampel tugas di 5 rumah.
Memahami kinerja OK-Robot
- OK-Robot dapat menunjukkan generalisasi zero-shot di lingkungan yang sepenuhnya baru, tetapi analisis dilakukan untuk lebih memahami alasan keberhasilan dan kegagalannya.
- Di lingkungan rumah tangga baru, sistem ini menunjukkan tingkat keberhasilan 58.5%, tetapi ada ekor panjang pada penyebab kegagalan, dengan tiga penyebab utama: gagal mengambil objek yang benar dari memori semantik (9.3%), memperoleh pose yang sulit pada modul manipulasi (8.0%), dan masalah perangkat keras (7.5%).
Makalah
- Judul: "OK-Robot: Apa yang benar-benar penting dalam integrasi model pengetahuan terbuka untuk robotika"
- Makalah ini dapat dibaca dalam format arXiv dan PDF, serta menyediakan informasi sitasi dalam format bibtex.
Kode
- Kode OK-Robot tersedia di GitHub, dengan kode sumber berlisensi MIT, dan konten situs web dilisensikan di bawah CC ANS 4.0.
Opini GN⁺
- Proyek OK-Robot menghadirkan pendekatan inovatif untuk mengintegrasikan pemahaman bahasa dan interaksi fisik di bidang robotika.
- Kerangka kerja ini dapat memainkan peran penting dalam meningkatkan otonomi dan adaptabilitas robot di lingkungan rumah tangga nyata.
- Melalui kode dan makalah yang disediakan, para peneliti dan pengembang memiliki kesempatan untuk lebih mengembangkan teknologi ini dan menerapkannya ke berbagai bidang aplikasi.
3 komentar
https://hello-robot.com/purchase
Unit utamanya seharga 25 ribu dolar...
Tambahan lagi perlu iPhone Pro
Pengisi daya dock-nya 995 dolar wkwkwk
Apakah ini harga yang benar-benar mencekik konsumen?
Kenapa docking station harganya benar-benar seperti itu ya?
Bahkan cara koneksinya juga model colok konektor DC langsung.. wkwkwk
https://hello-robot.com/stretch-docking-station
Komentar Hacker News
Kecepatan kerja robot terlihat lambat, tetapi hasil pengujian menunjukkan bahwa robot menyelesaikan sebagian besar tugas lebih cepat, lebih akurat, dan tanpa keluhan dibanding generasi Gen Z.
Ini adalah kemajuan luar biasa yang dapat mengubah kehidupan penyandang disabilitas, lansia, gamer, orang yang sangat malas, serta para perawat mereka.
Menunjukkan kemungkinan penyelesaian tugas jangka panjang melalui model besar yang berbasis interactive fiction.
Pertanyaan tentang bagaimana robot mengenali objek, bagaimana robot mengetahui saat tidak bisa memenuhi permintaan, dan apakah robot mampu menangani objek yang tertutup.
Pendapat pribadi yang ingin membeli robot seharga 25.000 dolar untuk melipat dan merapikan cucian.
Pertanyaan mengapa robot tujuan umum begitu lambat, padahal mesin diharapkan dapat bekerja lebih cepat daripada manusia, tetapi kenyataannya tidak demikian.
Penyebutan robot seperti Dobb-e.
Mengungkapkan harapan sambil memantau perkembangan proyek ini, bahwa integrasi dengan alat bantu mobilitas dapat membawa perubahan besar bagi orang dengan keterbatasan fisik.
Analisis kegagalannya dinilai baik, dan ada rasa ingin tahu tentang apa yang dimaksud dengan kegagalan perangkat keras, misalnya bagaimana ditentukan dalam 5 uji coba ketika "Realsense memberikan kedalaman yang salah".
Menginginkan kendaraan platform yang distabilkan dengan giroskop, serta bertanya apakah ada solusi yang bisa bolak-balik di jalan kasar sambil membawa minuman dan camilan.