Foxtech bietet Industrie -Drohnenlösungen an & UAV -Nutzlastsysteme.
Jetzt erhältlich: Agility A2 + ExoArm-7 VLA Suite für die Forschung an verkörperter KI
Der Bau leistungsfähiger Roboter beginnt mit besseren menschlichen Demonstrationen.
Die neue Agility A2 + ExoArm-7 VLA Suite ist eine tragbare, beidhändige Teleoperationsplattform, die Forschern, Entwicklern und Robotikteams helfen soll, schneller von der menschlichen Demonstration zum Roboterlernen und zur Validierung realer Aufgaben zu gelangen.
Durch die Kombination des zweiarmigen Roboters Agility A2 mit dem tragbaren Exoskelettsystem ExoArm-7 ermöglicht diese Lösung die Erfassung natürlicher menschlicher Bewegungen, die synchronisierte multimodale Datenerfassung, das Modelltraining und die Echtzeit-Roboterinferenz innerhalb eines integrierten Arbeitsablaufs.
Für die Forschung im Bereich der verkörperten KI, des Imitationslernens und der Entwicklung von Bild-Sprache-Aktion bietet es einen direkteren Weg vom „Zeigen“ an einen Roboter, wie er eine Aufgabe ausführen soll, zum Aufbau einer autonomen Strategie, die diese ausführen kann.
Welches Problem löst die Agility A2 + ExoArm-7 VLA Suite?
Das Sammeln qualitativ hochwertiger Daten für das Roboterlernen ist oft langsam und schwierig.
Herkömmliche Teleoperationssysteme erfordern unter Umständen separate Controller, externe Tracking-Geräte, manuell synchronisierte Kameras und kundenspezifische Software-Pipelines. Dies verlängert die Einrichtungszeit und erschwert die Erfassung konsistenter Demonstrationen für das KI-Training.
Die Agility A2 + ExoArm-7 VLA Suite vereint diese Elemente in einer vorkonfigurierten Plattform.
Die Bediener tragen das Exoskelett ExoArm-7 und steuern den Roboter durch natürliche Armbewegungen. Das System erfasst synchronisierte menschliche Bewegungen, Informationen zum Roboterzustand, RGB-D-Bilddaten und Punktwolken und schafft so einen umfassenderen Datensatz für das Imitationslernen und das VLA-basierte Robotertraining.
Anstatt einen Datenerfassungs-Workflow von Grund auf neu zu entwickeln, können sich die Teams auf die eigentliche Aufgabe konzentrieren: Greifen, Sortieren, Einfügen, Zusammenbauen, Transportieren und andere reale Manipulationsszenarien.
Wie verbessert tragbare Teleoperation die Erfassung menschlicher Demonstrationen?
Das tragbare Exoskelett ExoArm-7 wurde für eine natürlichere und intuitivere beidhändige Steuerung entwickelt.
Mit 14 Freiheitsgraden und einer Bewegungserfassungslatenz von unter 20 ms überträgt das tragbare System die Armbewegungen des Bedieners in Echtzeit auf den Zweiarmroboter Agility A2. Dadurch fühlt sich die Teleoperation eher wie die direkte Demonstration einer Aufgabe an als die Steuerung eines Roboters über eine herkömmliche Fernbedienung.
Für die Forscher bedeutet dies, dass menschliche Demonstrationen mit größerer Kontinuität und Präzision erfasst werden können.
Für Roboterlernprozesse bedeutet dies, dass der Roboter nicht nur visuelle Informationen erfassen kann, sondern auch die Bewegungsmuster hinter jeder Aktion: wie ein Objekt angenähert wird, wie die Arme koordiniert werden, wie ein Griff angepasst wird und wie eine Aufgabe abgeschlossen wird.
Diese hochpräzisen Demonstrationen können dann Imitationslernen, Policy-Training, Reinforcement-Learning-Experimente und die Generierung von VLA-Datensätzen unterstützen.
Was kann der Zweiarmroboter leisten?
Kernstück der Suite ist der Agility A2 Doppelarmroboter mit zwei 7-DOF-Roboterarmen für eine menschenähnliche, beidhändige Manipulation.
Jeder Arm trägt eine Nennlast von 5 kg und eine maximale Nutzlast von bis zu 12 kg , wodurch die Plattform ein breites Spektrum an Forschungs- und Validierungsaufgaben bewältigen kann. Vom Aufnehmen und Platzieren über Montage, Einsetzen und Handhaben bis hin zu koordinierten Zwei-Arm-Operationen ist das System für die praxisorientierte Manipulationsforschung und nicht nur für Demonstrationen einzelner Aufgaben konzipiert.
Die Konstruktion mit zwei Armen ist besonders wertvoll für Aufgaben, die eine Koordination beider Hände erfordern, wie zum Beispiel das Stabilisieren eines Objekts mit einem Arm, während man es mit dem anderen bedient.
Dadurch eignet sich die Plattform hervorragend, um zu untersuchen, wie Roboter komplexe Manipulationsfähigkeiten durch menschliche Vorführungen erlernen können.
Wie erfasst das System visuelle und räumliche Daten?
Für das Lernen von Robotern reichen Bewegungsdaten allein nicht aus.
Die Agility A2 + ExoArm-7 VLA Suite umfasst eine Intel D435 Kopfkamera und zwei Intel D405 Handgelenkkameras, die in die Vision-Greifer-Baugruppen integriert sind. Zusammen liefern diese Kameras synchronisierte RGB-D-Daten und Punktwolkeninformationen sowohl aus der Übersichts- als auch aus der Nahbereichsperspektive.
Die Kopfkamera erfasst den größeren Arbeitsbereich, während die Handgelenkkameras wichtige Interaktionen in der Nähe der Greifer beobachten.
Dieser Ansatz mit mehreren Kameras trägt zur Erstellung umfangreicherer Datensätze für die visuelle Wahrnehmung, das Objektverständnis, die Greifplanung und das Handlungslernen bei. Er bietet Forschern zudem mehr Flexibilität bei der Untersuchung, wie Roboterstrategien auf sich ändernde Objektpositionen, Arbeitsraumlayouts und Manipulationsbedingungen reagieren.
Kann es einen kompletten VLA-Workflow unterstützen?
Ja. Die Plattform ist als durchgängiger, verkörperter KI-Workflow konzipiert und nicht nur als Teleoperationsgerät.
Die Suite basiert auf dem Open-Source -Framework LeRobot und unterstützt die Erfassung von Demonstrationen durch Menschen, die synchronisierte Datenerfassung, die Generierung von Datensätzen, Trainingsabläufe, Modellinferenz und die autonome Aufgabenausführung.
Das System wird mit einer vorkonfigurierten OpenarmX-LeRobotVLA-Softwareumgebung geliefert, die es Teams ermöglicht, mit weniger Integrationsaufwand mit der Entwicklung zu beginnen.
Die ACT-Inferenz wird standardmäßig unterstützt. Bei leistungsfähigeren Controller-Konfigurationen unterstützt die Plattform auch fortgeschrittene VLA-Modelle wie SmoLVLA, Pi0, Pi0.5 und XVLA .
Dies bietet Forschern ein praktisches Umfeld, um verschiedene Lernansätze zu testen, Strategien zu vergleichen und zu überprüfen, ob ein KI-Modell von gesammelten Demonstrationen auf die Ausführung durch einen realen Roboter übertragen werden kann.
Welche Entwicklungswerkzeuge und Ökosysteme werden unterstützt?
Die Agility A2 + ExoArm-7 VLA Suite wurde für Teams entwickelt, die Flexibilität in den Bereichen Forschung, Simulation und Einsatz benötigen.
Es unterstützt ein breites Ökosystem für die Robotikentwicklung, darunter:
- ROS2 und ROS2-Kontrolle
- NVIDIA Isaac Sim
- MuJoCo
- MoveIt-Bewegungsplanung
- URDF-Robotermodellierung
- Python- und C++-Entwicklung
- Inverse Kinematik und Trajektorienoptimierung
Mit Schwerkraftkompensation, CANFD-Kommunikation, High-Speed-USB-Erweiterung und einer dedizierten Steuerungs-Workstation bietet das System eine stabile Grundlage für synchronisierte Sensoren, Echtzeitsteuerung und wiederholbare Bewegungsexperimente.
Die Standard-Workstation ist mit einem AMD Ryzen 9 Pro Prozessor, 16 GB RAM und einer 1 TB SSD ausgestattet; für anspruchsvollere VLA-Workloads sind höhere Konfigurationen verfügbar.
Für wen ist diese Plattform konzipiert?
Die Agility A2 + ExoArm-7 VLA Suite ist ideal für:
- Universitäten und Robotik-Ausbildungsprogramme
- Labore für verkörperte KI und Roboterlernen
- KI-Forscher, die Imitationslern- oder VLA-Datensätze erstellen
- Industrielle F&E-Teams validieren Manipulationsabläufe
- Robotik-Startups entwickeln schnelle Machbarkeitsstudien
- Teams, die das Lernen von Simulationen zu realen Robotern erforschen
Ob es nun darum geht, Demonstrationsdaten zu sammeln, die Manipulation mit zwei Armen zu lehren, neue Strategien zu evaluieren oder ein Roboterlernkonzept schnell zu validieren – das System bietet einen integrierten Weg von der menschlichen Bewegung zur autonomen Ausführung.
Warum sollten Sie sich für die Agility A2 + ExoArm-7 VLA Suite entscheiden?
Die Entwicklung verkörperter KI erfordert mehr als einen leistungsfähigen Roboterarm. Sie erfordert eine zuverlässige Methode, um aussagekräftige Demonstrationen zu sammeln, visuelle Wahrnehmung mit Handlung zu verknüpfen, Lernmodelle zu trainieren und die Ergebnisse in der realen Welt zu testen.
Die Agility A2 + ExoArm-7 VLA Suite vereint diese entscheidenden Schritte in einer tragbaren Dual-Arm-Teleoperationsplattform.
Von der Erfassung natürlicher menschlicher Bewegungen bis hin zur synchronisierten RGB-D-Bildverarbeitung, von der VLA-Datensatzgenerierung bis zur autonomen Roboterinferenz wurde es entwickelt, um Robotikteams dabei zu helfen, die Integrationszeit zu verkürzen und die Experimentierzeit zu beschleunigen.
Verwandeln Sie menschliche Demonstrationen in Roboterfähigkeiten – mit der Agility A2 + ExoArm-7 VLA Suite.
