Memperkenalkan Agility A2 Isomorphic Teleoperation VLA Suite: Jalur Lebih Cepat dari Demonstrasi Manusia ke Pembelajaran Robot

Membangun sistem AI yang mumpuni membutuhkan lebih dari sekadar lengan robot dan model AI. Para peneliti dan pengembang memerlukan cara yang andal untuk mendemonstrasikan tugas, menangkap data robot yang tersinkronisasi, melatih kebijakan, dan memvalidasi apakah kebijakan tersebut dapat berfungsi di dunia nyata.

Perangkat lunak Agility A2 Isomorphic Teleoperation VLA Suite yang baru dirancang untuk membuat alur kerja tersebut lebih langsung.

Dibangun di sekitar arsitektur pemimpin-pengikut lengan ganda, sistem ini memungkinkan teleoperasi master-slave yang intuitif melalui pemetaan sendi satu-ke-satu. Sistem ini menggabungkan lengan robot ganda 7-DOF, kontrol latensi rendah, dukungan umpan balik gaya, visi RGB-D multi-kamera, sinkronisasi data kecepatan tinggi, dan pipeline OpenarmX-LeRobotVLA terintegrasi untuk penelitian AI yang terwujud, pembelajaran imitasi, pengembangan VLA, dan validasi bukti konsep yang cepat.

Apa Itu Teleoperasi Isomorfik?

Pengoperasian jarak jauh robot tradisional seringkali memerlukan kinematika invers untuk menerjemahkan masukan manusia menjadi gerakan sendi robot. Meskipun efektif, hal ini dapat menimbulkan kompleksitas, persyaratan kalibrasi, dan potensi inkonsistensi kontrol.

Agility A2 Isomorphic Teleoperation VLA Suite mengambil pendekatan yang lebih langsung.

Robot Agility A2 di sisi master mencerminkan gerakannya ke robot Agility A2 di sisi slave melalui pemetaan sendi satu-ke-satu . Secara praktis, operator menggerakkan robot master, dan robot slave mengikuti gerakan yang sesuai secara real-time.

Metode kontrol pemimpin-pengikut isomorfik ini memungkinkan pengguna untuk melakukan manipulasi lengan ganda dengan cara yang lebih intuitif, tanpa bergantung pada kinematika invers untuk setiap perintah gerakan.

Mengapa Pemetaan Sendi Satu Lawan Satu Penting?

Untuk pengumpulan data AI yang diwujudkan, kualitas demonstrasi sama pentingnya dengan kuantitasnya.

Ketika pergerakan robot sulit dikendalikan, demonstrasi dapat menjadi tidak konsisten. Hal itu dapat memengaruhi kualitas dataset dan membuat pelatihan kebijakan selanjutnya menjadi lebih menantang. Pemetaan sendi satu-ke-satu membantu mengurangi kesenjangan antara pergerakan yang diinginkan operator dan pergerakan yang dilakukan robot.

Hal ini membuat sistem ini sangat berguna untuk tugas-tugas yang membutuhkan kontrol bimanual terkoordinasi, termasuk:

• Pengambilan dan penempatan objek
• Perakitan dan pemasangan
• Penyortiran dan pengangkutan
• Interaksi alat
• Studi manipulasi lengan ganda
• Demonstrasi pembelajaran imitasi
• Simulasi ke eksperimen nyata

Dengan membuat pengoperasian lengan ganda menjadi lebih alami, platform ini membantu para peneliti untuk mendapatkan demonstrasi robot nyata yang lebih bersih dan lebih mudah diulang.

Bagaimana Teleoperasi Latensi Rendah Meningkatkan Pengumpulan Data?

Suatu sistem teleoperasi hanya akan berguna jika responsif.

Agility A2 Isomorphic Teleoperation VLA Suite menyediakan latensi sekitar 0,5–1 ms untuk kontrol master-slave secara real-time. Respons latensi rendah ini membantu operator mempertahankan koneksi yang lebih dekat dengan robot slave selama tugas manipulasi.

Bagi tim peneliti yang mengumpulkan data pembelajaran robot, hal ini dapat meningkatkan konsistensi waktu antara operasi manusia, informasi status robot, masukan visual, dan tindakan yang direkam.

Baik itu tugas mengambil benda kecil, memasukkan komponen, menstabilkan suatu barang dengan satu lengan sambil memanipulasinya dengan lengan lainnya, atau melakukan demonstrasi berulang, teleoperasi responsif membantu membuat proses tersebut lebih terkontrol dan efisien.

Apa Peran Umpan Balik Gaya dalam Manipulasi Robot?

Penglihatan saja tidak dapat memberi tahu operator segala hal tentang suatu interaksi.

Saat robot menyentuh, menggenggam, menekan, atau memasukkan suatu objek, informasi gaya dapat sama pentingnya dengan input kamera. Agility A2 Isomorphic Teleoperation VLA Suite mendukung operasi yang peka terhadap gaya, membantu pengguna lebih memahami kondisi kontak selama manipulasi robot.

Hal ini sangat berharga untuk tugas-tugas di mana gerakan yang terlalu kuat dapat merusak suatu objek, sementara kontak yang tidak cukup dapat menyebabkan kegagalan genggaman atau interaksi yang tidak stabil.

Dukungan umpan balik gaya dapat membantu meningkatkan realisme teleoperasi dan memberikan dasar yang lebih baik untuk mengumpulkan demonstrasi yang melibatkan tugas-tugas yang kaya akan kontak, penanganan presisi, perakitan, dan penyisipan.

Bagaimana Sistem Mengumpulkan Data untuk Pelatihan VLA?

Alur kerja VLA bergantung pada informasi yang tersinkronisasi dari berbagai sumber. Robot perlu memahami apa yang dilihatnya, bagaimana persendiannya bergerak, dan tindakan apa yang sedang dilakukan.

Agility A2 Isomorphic Teleoperation VLA Suite mengintegrasikan pengaturan visi RGB-D multi-kamera dengan:

• Satu kamera kepala Intel D435
• Dua kamera pergelangan tangan Intel D405
• Rakitan penjepit penglihatan
• Perangkat keras ekspansi USB berkecepatan tinggi
• Komunikasi industri CANFD

Kamera di kepala memberikan pandangan yang lebih luas terhadap ruang kerja, sementara kamera di pergelangan tangan menangkap informasi visual jarak dekat di sekitar penjepit dan objek target.

Selama pengoperasian jarak jauh, sistem dapat merekam data visual RGB-D yang tersinkronisasi dan data status robot. Hal ini menciptakan fondasi data praktis untuk pembelajaran aksi berbasis visi, pembelajaran imitasi, pembelajaran penguatan, inferensi model, dan eksekusi tugas otonom.

Model VLA apa saja yang dapat didukung oleh platform ini?

Agility A2 Isomorphic Teleoperation VLA Suite dirancang untuk mendukung alur kerja pengembangan VLA yang fleksibel.

Inferensi ACT tersedia secara default, memberikan titik awal praktis bagi tim yang ingin mulai mengumpulkan demonstrasi dan memvalidasi tugas pembelajaran robot dengan cepat.

Bagi pengguna yang bekerja dengan konfigurasi komputasi berkinerja tinggi, platform ini juga dapat mendukung:

• SmoLVLA
• Pi0
• Pi0.5
• XVLA

Kemampuan multi-model ini memberi para peneliti lebih banyak kebebasan untuk membandingkan berbagai pendekatan, menguji berbagai alur pelatihan, dan memilih model yang paling sesuai dengan kebutuhan tugas mereka.

Alih-alih terpaku pada satu struktur model tunggal, tim dapat menggunakan satu platform perangkat keras untuk mengeksplorasi berbagai alur kerja VLA—mulai dari eksperimen pembelajaran imitasi awal hingga penelitian AI yang lebih canggih.

Bagaimana Platform Ini Mendukung Alur Kerja AI yang Terintegrasi Secara Lengkap?

Agility A2 Isomorphic Teleoperation VLA Suite dirancang untuk menghubungkan tahapan-tahapan penting pembelajaran robot dalam satu sistem.

Pertama, operator menggunakan robot lengan ganda sisi master untuk mendemonstrasikan suatu tugas. Robot sisi slave mengikuti gerakan yang dipetakan secara real time. Selama proses ini, sistem merekam pengamatan visual, status robot, dan data tindakan.

Selanjutnya, data yang terkumpul dapat diproses melalui pipeline OpenarmX-LeRobotVLA untuk pelatihan dan evaluasi.

Terakhir, model yang dihasilkan dapat diuji melalui inferensi dunia nyata dan eksekusi tugas otonom.

Alur kerja ini membantu tim untuk menyelesaikan seluruh siklus pengembangan:

Demonstrasi manusia → pengumpulan data tersinkronisasi → pelatihan VLA → validasi inferensi → eksekusi otonom

Bagi tim yang mengembangkan sistem AI yang terintegrasi, hal ini dapat mengurangi waktu yang dihabiskan untuk mengintegrasikan komponen teleoperasi, penginderaan, kontrol, dan pelatihan yang terpisah.

Mengapa Sistem Lengan Ganda Penting untuk Pembelajaran Robot?

Banyak tugas praktis tidak dapat diselesaikan hanya dengan satu lengan saja.

Membuka wadah, memegang suatu objek sambil menyesuaikannya, melipat kain, memindahkan barang, merakit komponen, atau mengatur material seringkali membutuhkan manipulasi bimanual yang terkoordinasi.

Agility A2 Isomorphic Teleoperation VLA Suite menggunakan lengan robot ganda 7-DOF untuk mendukung operasi dua lengan yang menyerupai manusia. Platform ini dirancang untuk skenario interaksi yang lebih kompleks daripada tugas pengambilan dan penempatan satu lengan sederhana.

Dengan kapasitas beban terukur 5 kg dan kapasitas beban puncak 12 kg, sistem ini dapat mendukung berbagai tugas penelitian dan validasi yang melibatkan penanganan objek, koordinasi lengan ganda, dan manipulasi presisi.

Bagaimana Control Workstation Mendukung Pengembangan Tingkat Lanjut?

Platform robot yang mumpuni juga membutuhkan fondasi komputasi yang mumpuni.

Sistem ini mencakup workstation kontrol dengan prosesor AMD Ryzen 9 Pro, RAM 16 GB, dan SSD 1 TB. Konfigurasi yang lebih tinggi juga tersedia bagi pengguna yang membutuhkan sumber daya komputasi lebih banyak untuk model VLA tingkat lanjut dan alur kerja pengembangan yang lebih kompleks.

Ekosistem perangkat lunak ini mendukung ROS2, NVIDIA Isaac Sim, MuJoCo, Python, C++, dan perencanaan gerak berbasis MoveIt. Dikombinasikan dengan kontrol ROS2 dan kompensasi gravitasi, platform ini dibangun untuk mendukung gerakan robot yang stabil dan berulang serta pengembangan sekunder yang fleksibel.

Bagi para peneliti dan pengembang, ini berarti sistem tersebut dapat berfungsi sebagai platform eksperimental yang siap pakai sekaligus sebagai fondasi untuk kustomisasi yang lebih mendalam.

Untuk Siapa Perangkat Lunak Teleoperasi Isomorfik Agility A2 VLA Dirancang?

Platform ini dirancang untuk tim yang perlu mengubah konsep AI yang diwujudkan menjadi eksperimen robot nyata.

Ini sangat cocok untuk:

Universitas dan Laboratorium Pengajaran

Gunakan platform ini untuk pendidikan robotika praktis, studi manipulasi lengan ganda, eksperimen teleoperasi, dan eksplorasi alur kerja VLA.

Laboratorium Penelitian AI dan Robotika

Mengumpulkan data demonstrasi robot nyata, membandingkan model VLA, melakukan penelitian pembelajaran imitasi, dan memvalidasi pendekatan simulasi ke dunia nyata.

Tim Litbang Industri

Uji alur kerja manipulasi robot sebelum mengembangkan sistem produksi khusus. Evaluasi tugas-tugas seperti penyortiran, perakitan, penyisipan, pengangkutan, dan penanganan material di lingkungan yang terkontrol.

Perusahaan rintisan robotika

Bangun dan validasi bukti konsep awal lebih cepat dengan memulai dari platform teleoperasi, penginderaan, dan VLA yang terintegrasi, daripada mengembangkan setiap komponen dari awal.

Apa saja yang termasuk dalam sistem ini?

Paket Teleoperasi Isomorfik Agility A2 VLA mencakup perangkat keras dan pengaturan kontrol lengkap untuk operasi pengikut-pemimpin lengan ganda:

• 1 × Agility A2 Lengan Ganda Sisi Utama
• 1 × Sisi Slave Lengan Ganda Agility A2
• 1 × Adaptor Daya 48 V / 20 A
• 1 × Kotak Komunikasi CANFD
• 1 × Kamera Kepala Intel D435
• 2 × Kamera Pergelangan Tangan Intel D405 dengan Rakitan Gripper Vision
• 1 × Hub Ekspansi USB Kecepatan Tinggi
• 1 × Stasiun Kerja Kontrol

Konfigurasi terintegrasi ini membantu pengguna memulai teleoperasi, pengumpulan data, dan validasi alur kerja VLA dengan langkah integrasi yang lebih sedikit.

Dari Teleoperasi ke Manipulasi Otonom

Agility A2 Isomorphic Teleoperation VLA Suite bukan sekadar sistem robot lengan ganda. Ini adalah platform lengkap untuk menghubungkan keterampilan manusia, data robot, dan pembelajaran AI yang terwujud.

Melalui pemetaan gabungan satu-ke-satu yang intuitif, kontrol pengikut-pemimpin dengan latensi rendah, dukungan umpan balik gaya, persepsi RGB-D multi-kamera, dan integrasi perangkat lunak yang siap untuk VLA, ini membantu para peneliti dan pengembang membangun jalur yang lebih efisien dari demonstrasi hingga penerapan.

Bagi tim yang mengeksplorasi pembelajaran robot, pelatihan VLA, pembelajaran imitasi, dan manipulasi otonom di dunia nyata, Agility A2 Isomorphic Teleoperation VLA Suite menyediakan fondasi praktis untuk eksperimen yang lebih cepat dan validasi bukti konsep yang lebih bermakna.