Meta Fair Lab baru -baru ini merilis terobosan teknologi persepsi taktil multimodal fingertip yang disebut "Sparsh", yang diharapkan untuk sepenuhnya merevolusi bidang manipulasi robot. Model Sparsh menggunakan pembelajaran yang diatur sendiri untuk melakukan pra-pelatihan lebih dari 460.000 gambar taktil, dan mempelajari representasi sentuhan umum tanpa pelabelan data manual, mewujudkan kemampuan persepsi taktil robot yang mirip dengan manusia. Ini kompatibel dengan berbagai sensor haptic visual dan berkinerja baik dalam berbagai tugas seperti estimasi gaya dan deteksi geser, terutama ketika data terbatas, kinerjanya jauh melebihi model tradisional.
Model Sparsh mengadopsi pembelajaran yang di-kupervis, menggunakan lebih dari 460.000 gambar sentuhan untuk pra-pelatihan, dan mempelajari representasi sentuhan umum tanpa pelabelan data manual.
Model ini mampu mendukung berbagai jenis sensor haptic visual, termasuk Digit, Gelsight2017 dan Gelsight Mini, dan secara signifikan meningkatkan kinerja robot pada tugas persepsi taktil seperti estimasi gaya, deteksi geser, estimasi pose, prediksi stabilitas ambil dan identifikasi kain, dll. Para peneliti juga membangun platform pembandingan standar yang disebut Tacbench untuk mengevaluasi kinerja berbagai sensor dan model haptic pada berbagai tugas.
Hasil pengujian menunjukkan bahwa model Sparsh berkinerja baik di semua enam tugas di Tacbench, terutama ketika volume data terbatas, dan kinerjanya jauh melampaui model khusus tugas tradisional dan spesifik sensor. Sebagai contoh, dalam estimasi kekuatan dan tugas deteksi geser, model Sparsh dapat mencapai hasil yang memuaskan bahkan jika hanya 1% dari data anotasi yang digunakan. Ini berarti bahwa Sparsh dapat membantu robot lebih memahami sifat fisik objek dan melakukan manipulasi yang lebih halus.
Pelepasan model Sparsh menandai terobosan besar di bidang persepsi haptic AI. Di masa depan, dengan akumulasi lebih banyak data dan optimalisasi model lebih lanjut, Sparsh diharapkan untuk sepenuhnya mengubah cara robot berinteraksi dengan dunia fisik dan mempromosikan penerapan robotika dalam berbagai bidang yang lebih luas.
Alamat kertas:
https://scontent-tjc3-1.xx.fbcddn.net/v/t39.2365-6/46496994133 _nc_ohc = y8Ui1hew3bqq7knvgfe-epu & _nc_zt = 14 & _nc_ht = scontent-sjc3-1. xx & _nc_gid = aeafsuzziasvwpfmqseozqu & oh = 00_ayamqxgq0atcysdxzwb0zt8bgskogymj13c9f3ytvtkmsg & oe = 672deee4
Munculnya teknologi sparsh menunjukkan bahwa teknologi persepsi haptic robot telah mencapai tonggak baru. Potensinya dalam manipulasi yang disempurnakan dan interaksi manusia-komputer sangat besar, dan prospek penerapannya di masa depan layak untuk dinanti-nantikan.