Foxtech fournit des solutions de drones industriels & Systèmes de charge utile UAV.
Lancement d'un nouveau produit : Agility A2 Flex – Un robot à deux bras et roues à 27 degrés de liberté pour l'IA incarnée et la téléopération en réalité virtuelle
À mesure que l'IA incarnée et l'automatisation robotique continuent d'évoluer, les chercheurs et les développeurs sont confrontés à un défi croissant : comment les robots peuvent-ils se déplacer librement, manipuler des objets et coordonner de multiples actions dans un environnement réel ?
Les bras robotisés traditionnels sont souvent limités à des postes de travail fixes, tandis que les robots mobiles peuvent manquer des capacités de manipulation nécessaires aux tâches plus complexes. Combiner mobilité, coordination des deux bras, perception et contrôle intelligent au sein d'un même système peut exiger un effort de développement considérable.
Présentation du nouvel Agility A2 Flex , un robot à deux bras et roues open-source à 27 degrés de liberté conçu pour réunir mobilité, manipulation et téléopération VR du corps entier dans une seule plateforme intégrée.
Disponible en configurations Agility A2 Flex et Agility A2 Flex Ultra , le système offre une base flexible pour la recherche en IA incarnée, la manipulation robotique, la collecte de données de démonstration humaine et l'apprentissage robotique.
Quel problème résout l'Agility A2 Flex ?
Pour les développeurs en robotique, la construction d'un robot capable de se déplacer et d'effectuer des tâches de manipulation implique souvent l'intégration de plusieurs systèmes indépendants, notamment des bras robotiques, des plateformes mobiles, des capteurs, des contrôleurs de mouvement et des frameworks logiciels.
Ce processus peut prendre du temps, notamment lorsqu'une coordination entre différents composants est nécessaire.
Le robot Agility A2 Flex relève ce défi grâce à une architecture robotique intégrée à 27 degrés de liberté. Il combine une base mobile, un mécanisme de levage vertical, deux bras robotisés, des pinces et une tête mobile au sein d'un système de contrôle coordonné.
Au lieu de développer chaque composant séparément, les chercheurs peuvent travailler avec une plateforme robotique unifiée qui prend en charge les mouvements et la manipulation de l'ensemble du corps.
Cela offre un point de départ pratique pour développer, tester et améliorer les comportements robotiques dans des environnements dynamiques.
Comment le chariot élévateur Agility A2 Flex gère-t-il les tâches à différents endroits et à différentes hauteurs ?
Un bras robotisé fixe peut effectuer des opérations répétitives dans un espace de travail limité, mais de nombreuses tâches du monde réel exigent que les robots se déplacent entre différents endroits et interagissent avec des objets à différentes hauteurs.
L'Agility A2 Flex combine une base mobile 4W4S (quatre roues motrices, quatre roues directrices) avec un mécanisme de levage vertical de 700 mm , permettant au robot d'ajuster à la fois sa position et sa hauteur de travail.
La base mobile multidirectionnelle permet des mouvements flexibles dans différentes directions, tandis que le système de levage aide le robot à atteindre des objets positionnés à différentes hauteurs.
Ses deux bras robotisés à 7 articulations, offrant chacun une plage de fonctionnement d'environ 714 mm, permettent une manipulation bimanuelle coordonnée.
Cette combinaison est utile pour étudier des tâches telles que la sélection d'objets, le transfert d'articles, la manutention coordonnée et la manipulation sur différentes surfaces de travail.
En intégrant mobilité et manipulation, Agility A2 Flex permet aux développeurs d'explorer des flux de travail robotiques qui vont au-delà d'un simple poste de travail fixe.
Comment la téléopération en réalité virtuelle rend-elle le contrôle des robots plus intuitif ?
La commande d'un robot à plusieurs degrés de liberté via des interfaces conventionnelles peut s'avérer complexe, notamment lorsque l'opérateur doit coordonner les bras, les pinces, la tête, la base mobile et le mécanisme de levage.
L'Agility A2 Flex simplifie ce processus grâce à la téléopération VR corporelle intégrale.
Le système comprend un casque de réalité virtuelle Meta Quest 3S , permettant aux opérateurs de contrôler différentes parties du robot via une interface de téléopération intégrée.
Plutôt que de contrôler chaque composant par des systèmes séparés, les utilisateurs peuvent coordonner les actions de l'ensemble du corps de manière plus intuitive.
Cette capacité est particulièrement précieuse pour la démonstration de robots, la recherche sur la manipulation à distance et le développement avec intervention humaine.
Elle offre également un moyen pratique de recueillir des données de démonstration humaine, permettant aux chercheurs d'étudier comment les mouvements guidés par l'opérateur peuvent contribuer aux futurs flux de travail d'apprentissage robotique.
Comment Agility A2 Flex prend-il en charge l'IA incarnée et l'apprentissage robotique ?
L'un des plus grands défis du développement de l'IA incarnée consiste à connecter le matériel robotique aux algorithmes de perception, de planification des mouvements et d'apprentissage.
Les chercheurs ont besoin d'une plateforme qui prenne en charge les expériences reproductibles, la collecte de démonstrations humaines et l'intégration avec les logiciels de robotique existants.
Agility A2 Flex est construit sur Ubuntu 22.04 et ROS 2 Humble , offrant un environnement de développement ouvert pour la recherche en robotique.
Les deux configurations prennent en charge le contrôle articulaire en temps réel via ROS 2 et la planification des mouvements du bras via MoveIt 2. Ces outils permettent aux développeurs de contrôler les articulations robotiques, de planifier les mouvements de manipulation et de créer des applications personnalisées.
Pour les équipes axées sur le développement d'une IA incarnée avancée, Agility A2 Flex Ultra étend ces capacités avec du matériel de perception supplémentaire, une prise en charge de la navigation et une configuration VLA.
La configuration Ultra utilise π0.5 comme modèle VLA par défaut , prenant en charge l'entraînement du modèle, l'inférence et la validation du flux de travail.
Cela permet aux chercheurs d'explorer le lien entre la perception visuelle, les politiques d'action apprises et l'exécution physique du robot à l'aide d'une plateforme de développement intégrée.
Pourquoi la perception multisensorielle est-elle importante pour la manipulation robotique ?
Les robots évoluant dans des environnements dynamiques doivent comprendre à la fois leur environnement et les objets avec lesquels ils interagissent.
La perception visuelle aide un robot à identifier les conditions de son espace de travail, tandis que la perception spatiale fournit des informations supplémentaires pour le positionnement et la navigation.
L'Agility A2 Flex comprend une caméra frontale Intel RealSense D435i pour la perception visuelle.
Pour les applications nécessitant une détection environnementale plus complète, l'Agility A2 Flex Ultra étend la configuration des capteurs avec deux caméras de poignet Intel RealSense D405, un LiDAR Livox MID-360S et une caméra RealSense D435i supplémentaire montée sur la base.
Les caméras fixées au poignet fournissent des informations visuelles rapprochées autour de la zone de manipulation, tandis que le LiDAR et la caméra montée sur la base fournissent des informations spatiales supplémentaires pour la navigation et la perception de l'environnement.
Associées à la prise en charge de la navigation Nav2, ces fonctionnalités rendent la configuration Ultra plus adaptée au développement et à la validation des flux de travail de manipulation mobile basés sur la perception.
Comment les clients peuvent-ils choisir entre Agility A2 Flex et Flex Ultra ?
Les différents projets de robotique requièrent différents niveaux de puissance de calcul, de perception et d'intégration de l'IA.
Pour répondre à ces exigences, Agility A2 Flex est disponible en deux configurations.
Agility A2 Flex – Pour le développement de la téléopération et de la robotique
Le modèle standard Agility A2 Flex est conçu pour les clients qui ont besoin d'une plateforme robotique mobile à double bras pour la téléopération en réalité virtuelle, le développement du contrôle de mouvement et la collecte de données de démonstration humaine.
Il comprend un contrôleur X86, une caméra RealSense D435i montée sur la tête, un contrôle des articulations ROS 2, une planification de mouvement MoveIt 2 et une téléopération VR corporelle complète.
Cette configuration convient aux universités, aux laboratoires de robotique et aux équipes de développement qui souhaitent étudier la manipulation mobile et créer leurs propres applications de contrôle.
La version standard n'inclut pas de configuration VLA.
Agility A2 Flex Ultra – Pour la recherche avancée en perception et VLA
L'Agility A2 Flex Ultra est conçu pour les équipes qui ont besoin de ressources supplémentaires en matière de détection, de calcul, de navigation et de développement de modèles d'IA.
Elle ajoute un GPU NVIDIA RTX 3090, des caméras de profondeur montées sur le poignet, un LiDAR, une caméra supplémentaire montée sur la base et la navigation Nav2.
Plus important encore, la version Ultra inclut une configuration VLA pour l'entraînement du modèle, l'inférence et la validation du flux de travail.
Pour les équipes de recherche développant des politiques d'IA incarnée ou explorant la manipulation robotique basée sur la perception, Flex Ultra offre un environnement de développement plus complet.
L'architecture Agility A2 Flex peut-elle être étendue à différents besoins de recherche ?
La recherche en robotique nécessite souvent du matériel, des effecteurs terminaux, des capteurs et des environnements logiciels personnalisés.
L'Agility A2 Flex est conçu avec une architecture ouverte et extensible pour répondre à ces exigences.
En plus de son système de téléopération VR standard, la plateforme peut être associée à l' exosquelette portable ExoArm-7 Pro (en option) pour explorer une méthode alternative de téléopération homme-robot.
Des mains mobiles optionnelles permettent d'étendre la recherche en manipulation au-delà des tâches classiques utilisant des pinces. La plateforme prend en charge des effecteurs terminaux personnalisés, des dispositifs de vision supplémentaires et la personnalisation OEM/ODM.
Ces options d'extension permettent aux développeurs d'adapter le robot à différentes exigences expérimentales sans être limités à une seule configuration matérielle.
L'ExoArm-7 Pro et les mains dextres sont des accessoires optionnels vendus séparément.
À qui est destiné le modèle Agility A2 Flex ?
Agility A2 Flex est principalement conçu pour les chercheurs en robotique, les universités, les développeurs d'IA et les entreprises technologiques explorant des systèmes robotiques plus avancés.
Pour les établissements d'enseignement supérieur, la plateforme offre un environnement intégré pour l'étude de la robotique, de la planification des mouvements, de la téléopération en réalité virtuelle et de l'interaction homme-robot.
Pour les chercheurs en IA incarnée, il prend en charge la collecte de données de démonstration humaine et, avec la configuration Ultra, le développement et la validation de modèles VLA.
Pour les entreprises de robotique et les équipes de R&D, sa base mobile, son système de manipulation à deux bras et son architecture matérielle extensible constituent un socle pour tester de nouvelles applications robotiques et valider les flux de travail de validation de concept.
Sa combinaison de mobilité, de manipulation et d'outils de développement ouverts la rend particulièrement pertinente pour les équipes travaillant à la mise au point de systèmes robotiques mobiles plus performants.
Conclusion : Réunir la manipulation mobile et le développement de l'IA incarnée
La mise au point de robots capables de se déplacer, de percevoir et de manipuler des objets nécessite une coordination étroite entre les systèmes mécaniques, les capteurs, les contrôleurs et les logiciels intelligents.
La nouvelle Agility A2 Flex réunit ces capacités essentielles dans une plateforme unifiée à 27 degrés de liberté, montée sur roues et à double bras.
Grâce à sa mobilité multidirectionnelle, sa hauteur de travail réglable, sa téléopération VR corporelle complète, sa prise en charge du développement open source et ses options matérielles extensibles, il aide les équipes de robotique à réduire la complexité d'intégration et à se concentrer sur le développement de capacités robotiques pratiques.
Pour les clients explorant des applications avancées d'IA incarnée et de VLA, Agility A2 Flex Ultra étend encore la plateforme avec des capacités améliorées de perception, de navigation, de calcul GPU et de développement VLA intégrées.
De la téléopération guidée par l'humain à la recherche robotique pilotée par l'IA, Agility A2 Flex offre une base flexible pour le développement de la prochaine génération de manipulation mobile.
