Agility A2 İzomorfik Uzaktan Kumanda VLA Paketini Tanıtıyoruz: İnsan Gösteriminden Robot Öğrenimine Daha Hızlı Bir Yol

Yetenekli, somutlaştırılmış yapay zeka sistemleri oluşturmak, bir robot kolundan ve bir yapay zeka modelinden daha fazlasını gerektirir. Araştırmacılar ve geliştiriciler, görevleri göstermek, senkronize robot verilerini yakalamak, politikaları eğitmek ve bu politikaların gerçek dünyada işe yarayıp yaramayacağını doğrulamak için güvenilir bir yönteme ihtiyaç duyarlar.

Yeni Agility A2 İzomorfik Uzaktan Operasyon VLA Paketi , bu iş akışını daha doğrudan hale getirmek için tasarlanmıştır.

Çift kollu lider-takipçi mimarisi etrafında inşa edilen sistem, bire bir eklem eşlemesi yoluyla sezgisel ana-köle uzaktan kumandasını mümkün kılar. Çift 7 serbestlik dereceli robotik kolları, düşük gecikmeli kontrolü, kuvvet geri besleme desteğini, çok kameralı RGB-D görüşünü, yüksek hızlı veri senkronizasyonunu ve somutlaştırılmış yapay zeka araştırmaları, taklit öğrenme, VLA geliştirme ve hızlı kavram kanıtı doğrulaması için entegre bir OpenarmX-LeRobotVLA işlem hattını bir araya getirir.

İzomorfik Teleoperasyon Nedir?

Geleneksel robot uzaktan kumandası, insan girdisini robot eklem hareketine dönüştürmek için genellikle ters kinematik gerektirir. Etkili olsa da, bu karmaşıklık, kalibrasyon gereksinimleri ve potansiyel kontrol tutarsızlıkları getirebilir.

Agility A2 İzomorfik Teleoperasyon VLA Paketi daha doğrudan bir yaklaşım benimser.

Ana robot Agility A2 , birebir eklem eşleştirmesi yoluyla hareketini yardımcı robot Agility A2'ye yansıtır. Pratikte, operatör ana robotu hareket ettirir ve yardımcı robot da karşılık gelen hareketi gerçek zamanlı olarak takip eder.

Bu izomorfik lider-takipçi kontrol yöntemi, kullanıcıların her hareket komutu için ters kinematik hesaplamalara dayanmadan, çift kollu manipülasyonu daha sezgisel bir şekilde gerçekleştirmelerine olanak tanır.

Birebir Eklem Haritalaması Neden Önemlidir?

Yapay zekâ tabanlı veri toplama süreçlerinde, gösterimlerin kalitesi niceliği kadar önemlidir.

Robot hareketinin kontrolü zor olduğunda, gösterimler tutarsız hale gelebilir. Bu durum veri setinin kalitesini etkileyebilir ve daha sonraki politika eğitimini daha zor hale getirebilir. Birebir eklem eşleştirmesi, operatörün amaçladığı hareket ile robotun gerçekleştirdiği hareket arasındaki bu farkı azaltmaya yardımcı olur.

Bu özellik, sistemi özellikle koordineli çift el kontrolü gerektiren görevler için kullanışlı hale getirir; bunlar arasında şunlar yer alır:

• Nesne kavrama ve yerleştirme
• Montaj ve yerleştirme
• Sıralama ve taşıma
• Araç etkileşimi
• Çift kollu manipülasyon çalışmaları
• Taklit öğrenme gösterileri
• Simülasyondan gerçek hayata deneyler

Platform, çift kollu operasyonu daha doğal hale getirerek araştırmacıların daha temiz ve tekrarlanabilir gerçek robot gösterileri yakalamasına yardımcı oluyor.

Düşük Gecikmeli Uzaktan İşlem Veri Toplama Sürecini Nasıl İyileştirir?

Bir uzaktan kumanda sisteminin kullanışlılığı, yanıt verme hızıyla doğru orantılıdır.

Agility A2 İzomorfik Uzaktan Kumanda VLA Paketi, gerçek zamanlı ana-köle kontrolü için yaklaşık 0,5–1 ms gecikme süresi sağlar. Bu düşük gecikmeli yanıt, operatörün manipülasyon görevleri sırasında köle robotla daha yakın bir bağlantı kurmasına yardımcı olur.

Robot öğrenimi verilerini toplayan araştırma ekipleri için bu, insan operasyonu, robot durum bilgisi, görsel girdi ve kaydedilen eylemler arasındaki zamanlama tutarlılığını artırabilir.

İster küçük bir nesneyi kaldırmak, bir parçayı yerleştirmek, bir kolla nesneyi sabit tutarken diğer kolla manipüle etmek veya tekrarlanan gösteriler yapmak olsun, duyarlı uzaktan kumanda, süreci daha kontrollü ve verimli hale getirmeye yardımcı olur.

Robotik Manipülasyonda Kuvvet Geri Beslemesinin Rolü Nedir?

Yalnızca görme yetisi, bir operatöre bir etkileşim hakkında her şeyi anlatamaz.

Bir robot bir nesneye dokunduğunda, kavradığında, bastırdığında veya yerleştirdiğinde, kuvvet bilgisi kamera girdisi kadar önemli olabilir. Agility A2 İzomorfik Uzaktan Kumanda VLA Paketi, kuvvete duyarlı çalışmayı destekleyerek kullanıcıların robotik manipülasyon sırasında temas koşullarını daha iyi anlamalarına yardımcı olur.

Bu özellik, aşırı güçlü hareketin nesneye zarar verebileceği, yetersiz temasın ise kavrama hatasına veya dengesiz etkileşime yol açabileceği görevler için değerlidir.

Kuvvet geri bildirim desteği, uzaktan kumanda işlemlerinin gerçekçiliğini artırmaya ve temasın yoğun olduğu görevler, hassas kullanım, montaj ve yerleştirme gibi işlemleri içeren gösterilerin toplanması için daha iyi bir temel sağlamaya yardımcı olabilir.

Sistem, VLA eğitimleri için verileri nasıl toplar?

VLA iş akışı, birden fazla kaynaktan gelen senkronize bilgilere bağlıdır. Robotun ne gördüğünü, eklemlerinin nasıl hareket ettiğini ve hangi eylemlerin gerçekleştirildiğini anlaması gerekir.

Agility A2 İzomorfik Uzaktan Kumanda VLA Paketi, çok kameralı bir RGB-D görüntüleme kurulumunu şu özelliklerle entegre eder:

• Bir adet Intel D435 kafa kamerası
• İki adet Intel D405 bilek kamerası
• Görsel tutucu tertibatları
• Yüksek hızlı USB genişletme donanımı
• CANFD endüstriyel iletişim

Baş kamerası çalışma alanının daha geniş bir görünümünü sağlarken, bilek kameraları ise tutucular ve hedef nesnelerin etrafındaki yakın mesafeli görsel bilgileri yakalar.

Uzaktan kumanda sırasında sistem, senkronize RGB-D görsel verilerini ve robot durum verilerini kaydedebilir. Bu, görme tabanlı eylem öğrenimi, taklit öğrenimi, pekiştirmeli öğrenim, model çıkarımı ve otonom görev yürütme için pratik bir veri temeli oluşturur.

Platform hangi VLA modellerini destekleyebilir?

Agility A2 İzomorfik Uzaktan Operasyon VLA Paketi, esnek bir VLA geliştirme iş akışını desteklemek üzere tasarlanmıştır.

ACT çıkarımı varsayılan olarak mevcuttur ve robot öğrenme görevlerini hızla doğrulamaya ve gösterimler toplamaya başlamak isteyen ekipler için pratik bir başlangıç ​​noktası sağlar.

Daha yüksek performanslı bilgi işlem yapılandırmalarıyla çalışan kullanıcılar için platform ayrıca şunları da destekleyebilir:

• SmoLVLA
• Pi0
• Pi0.5
• XVLA

Bu çoklu model özelliği, araştırmacılara yaklaşımları karşılaştırma, farklı eğitim süreçlerini test etme ve görev gereksinimlerine en uygun modelleri seçme konusunda daha fazla özgürlük tanır.

Ekipler, tek bir model yapısına bağlı kalmak yerine, erken aşama taklit öğrenme deneylerinden daha gelişmiş somutlaştırılmış yapay zeka araştırmalarına kadar birden fazla VLA iş akışını keşfetmek için tek bir donanım platformu kullanabilirler.

Platform, Tam Kapsamlı Bir Yapay Zeka İş Akışını Nasıl Destekliyor?

Agility A2 İzomorfik Uzaktan Kumanda VLA Paketi, robot öğreniminin temel aşamalarını tek bir sistemde birleştirmek üzere tasarlanmıştır.

Öncelikle, bir operatör ana taraftaki çift kollu robotu kullanarak bir görevi gösterir. Yardımcı taraftaki robot ise haritalandırılmış hareketi gerçek zamanlı olarak takip eder. Bu süreçte sistem, görsel gözlemleri, robot durumlarını ve eylem verilerini kaydeder.

Ardından, toplanan veriler eğitim ve değerlendirme için OpenarmX-LeRobotVLA işlem hattı üzerinden işlenebilir.

Son olarak, elde edilen model gerçek dünya çıkarımları ve otonom görev yürütme yoluyla test edilebilir.

Bu iş akışı, ekiplerin tüm geliştirme döngüsünü tamamlamasına yardımcı olur:

İnsan gösterimi → senkronize veri toplama → VLA eğitimi → çıkarım doğrulaması → otonom yürütme

Bu durum, somutlaştırılmış yapay zeka sistemleri geliştiren ekipler için ayrı ayrı uzaktan kumanda, algılama, kontrol ve eğitim bileşenlerini entegre etmek için harcanan süreyi azaltabilir.

Robot öğrenimi için çift kollu sistem neden önemlidir?

Birçok pratik iş tek kolla tamamlanamaz.

Bir kabı açmak, bir nesneyi tutarken ayarlamak, kumaş katlamak, eşyaları taşımak, bileşenleri birleştirmek veya malzemeleri düzenlemek genellikle koordineli iki el kullanımını gerektirir.

Agility A2 İzomorfik Uzaktan Kumanda VLA Süiti, insan benzeri iki kollu operasyonu desteklemek için çift 7 serbestlik dereceli robotik kol kullanır. Platform, basit tek kollu alma ve yerleştirme görevlerinden daha karmaşık etkileşim senaryoları için tasarlanmıştır.

5 kg nominal taşıma kapasitesi ve 12 kg maksimum taşıma kapasitesiyle sistem, nesne elleçleme, çift kollu koordinasyon ve hassas manipülasyon içeren çeşitli araştırma ve doğrulama görevlerini destekleyebilir.

Kontrol iş istasyonu gelişmiş geliştirmeyi nasıl destekliyor?

Yetenekli bir robot platformunun aynı zamanda yetenekli bir bilgi işlem altyapısına da ihtiyacı vardır.

Sistem, AMD Ryzen 9 Pro işlemci, 16 GB RAM ve 1 TB SSD içeren bir kontrol iş istasyonunu içerir. Gelişmiş VLA modelleri ve zorlu geliştirme iş akışları için daha fazla işlem gücüne ihtiyaç duyan kullanıcılar için daha yüksek konfigürasyonlar da mevcuttur.

Yazılım ekosistemi, ROS2, NVIDIA Isaac Sim, MuJoCo, Python, C++ ve MoveIt tabanlı hareket planlamasını desteklemektedir. ROS2 kontrolü ve yerçekimi telafisi ile birleştirilen platform, istikrarlı, tekrarlanabilir robot hareketini ve esnek ikincil geliştirmeyi desteklemek üzere tasarlanmıştır.

Araştırmacılar ve geliştiriciler için bu, sistemin hem kullanıma hazır bir deneysel platform hem de daha derinlemesine özelleştirme için bir temel görevi görebileceği anlamına gelir.

Agility A2 İzomorfik Uzaktan Operasyon VLA Paketi Kimler İçin Tasarlanmıştır?

Bu platform, somutlaştırılmış yapay zekâ kavramlarını gerçek robot deneylerine dönüştürmesi gereken ekipler için tasarlanmıştır.

Özellikle şunlar için uygundur:

Üniversiteler ve Eğitim Laboratuvarları

Bu platformu uygulamalı robotik eğitimi, çift kollu manipülasyon çalışmaları, uzaktan kumanda deneyleri ve VLA iş akışı keşfi için kullanabilirsiniz.

Yapay Zeka ve Robotik Araştırma Laboratuvarları

Gerçek robot gösterim verilerini toplayın, VLA modellerini karşılaştırın, taklit öğrenme araştırmaları yürütün ve simülasyondan gerçeğe yaklaşımları doğrulayın.

Endüstriyel Ar-Ge Ekipleri

Özel bir üretim sistemi geliştirmeden önce robotik manipülasyon iş akışlarını test edin. Sıralama, montaj, yerleştirme, taşıma ve malzeme elleçleme gibi görevleri kontrollü ortamlarda değerlendirin.

Robotik Girişimleri

Entegre bir uzaktan kumanda, algılama ve VLA (Çok Yönlü Lazer) hazır platformuyla başlayarak, her bir bileşeni sıfırdan geliştirmek yerine, erken bir prototip oluşturma ve doğrulama sürecini daha hızlı gerçekleştirin.

Sisteme Neler Dahildir?

Agility A2 İzomorfik Uzaktan Kumanda VLA Paketi, çift kollu lider-takipçi operasyonu için eksiksiz bir donanım ve kontrol kurulumu içerir:

• 1 × Agility A2 Çift Kollu Master Yan
• 1 × Agility A2 Çift Kollu Yardımcı Taraf
• 1 × 48 V / 20 A Güç Adaptörü
• 1 × CANFD İletişim Kutusu
• 1 × Intel D435 Kafa Kamerası
• 2 × Intel D405 Bilek Kamerası ve Görüntü Tutucu Tertibatı
• 1 × Yüksek Hızlı USB Genişletme Hub'ı
• 1 × Kontrol İş İstasyonu

Bu entegre yapılandırma, kullanıcıların daha az entegrasyon adımıyla uzaktan operasyon, veri toplama ve VLA iş akışı doğrulama işlemlerine başlamasına yardımcı olur.

Uzaktan Kumandadan Otonom Manipülasyona

Agility A2 İzomorfik Uzaktan Kumanda VLA Sistemi, sadece çift kollu bir robot sistemi değil. İnsan becerisini, robot verilerini ve somutlaştırılmış yapay zeka öğrenimini birleştiren eksiksiz bir platformdur.

Sezgisel bire bir eklem eşleme, düşük gecikmeli lider-takipçi kontrolü, kuvvet geri bildirim desteği, çoklu kamera RGB-D algılama ve VLA uyumlu yazılım entegrasyonu sayesinde, araştırmacıların ve geliştiricilerin gösterimden dağıtıma kadar daha verimli bir yol oluşturmalarına yardımcı olur.

Robot öğrenimi, VLA eğitimi, taklit öğrenimi ve gerçek dünya otonom manipülasyonu konularını araştıran ekipler için Agility A2 İzomorfik Teleoperasyon VLA Paketi, daha hızlı deneyler ve daha anlamlı kavram kanıtı doğrulaması için pratik bir temel sağlar.