Pourquoi le toucher est essentiel pour l'avenir de l'IA physique

Colin Gallacher, Haply , s'est entretenu avec Ali Afzal, animateur du Robot Builders Club, lors d'une conversation approfondie sur l'haptique, la robotique, l'IA physique et l'avenir de l'interaction homme-machine. Leur discussion explore la manière dont la technologie de retour de force peut aider les personnes à contrôler des robots, à effectuer des tâches physiques et à transmettre des connaissances humaines à des machines intelligentes par le biais du mouvement.

Publié le 25 juillet 2026

Points clés à retenir

  • Les interfaces informatiques traditionnelles ont été conçues pour des écrans bidimensionnels, et non pour une interaction physique dans des environnements tridimensionnels.

  • La technologie haptique à retour de force permet aux utilisateurs de percevoir le contact, la résistance et le mouvement lorsqu'ils commandent des robots ou interagissent avec des objets numériques.

  • Le mouvement peut servir de langage pour transmettre des connaissances physiques aux robots.

  • La simulation et les données synthétiques sont précieuses, mais les démonstrations humaines en conditions réelles restent indispensables pour affiner le comportement des robots.

  • La téléopération et l'autonomie partagée resteront des éléments essentiels à mesure que les robots seront confrontés à des tâches inconnues et à des environnements imprévisibles.

  • Parmi les priorités actuelles Haplyfigurent la collecte de données en robotique et la formation aux politiques, ainsi que les processus professionnels de modélisation et de conception 3D.

  • Des interfaces accessibles et des flux de travail bien conçus peuvent permettre à davantage de personnes de piloter et de programmer des robots sans disposer de compétences spécialisées en robotique.

Au-delà de la souris

Grâce à nos mains, nous pouvons évoluer dans le monde physique presque sans effort. Nous pouvons saisir des objets inconnus, ajuster notre prise, percevoir la résistance et réagir aux changements de poids ou de position sans avoir à calculer consciemment chaque mouvement.

Il est difficile de reproduire cette capacité à l'aide d'une interface informatique classique.

La souris a été conçue pour pointer, cliquer et naviguer sur un écran en deux dimensions. Elle ne permet pas de transmettre naturellement les mouvements, l'orientation et la force nécessaires pour contrôler un bras robotisé, manipuler un modèle numérique ou interagir avec un objet dans un espace tridimensionnel.

Lors de son entretien avec Ali Afzal, Colin a décrit la technologie Haplycomme une sorte de souris en trois dimensions.

Au lieu de déplacer un curseur sur une surface plane, un dispositif haptique permet à l'utilisateur de se déplacer naturellement dans l'espace tout en recevant un retour de force provenant d'un environnement robotique ou numérique.

Ce retour d'information permet de transmettre des sensations de contact, de résistance, de limites et de contraintes physiques. Il fournit à l'utilisateur davantage d'informations que la seule vision et crée un lien plus direct entre le mouvement humain et l'action robotique ou numérique.

Cela revêt une importance particulière lorsqu'il s'agit de piloter des robots dans des environnements industriels dangereux, d'effectuer des tâches à distance sous l'eau, de prélever des échantillons scientifiques ou de manipuler des composants petits et fragiles.

Pourquoi le retour de force est-il important ?

Le terme « haptique » désigne plusieurs formes de retour tactile. La vibration d'un téléphone portable en est un exemple bien connu.

Haply sur le retour de force.

Loin de se limiter à produire une simple vibration, la technologie de retour de force permet d'exercer une résistance ou de générer un mouvement en réponse à ce qui se passe au sein d'un environnement robotique ou numérique. L'utilisateur peut ainsi ressentir le moment où un outil virtuel entre en contact avec une surface, lorsqu'un robot rencontre un obstacle ou lorsqu'une force supplémentaire est exercée.

Ces informations physiques peuvent améliorer la précision, car l'utilisateur ne se fie pas uniquement à ce qu'il voit.

Ce concept a déjà fait ses preuves dans des domaines tels que la robotique chirurgicale. Les chirurgiens peuvent contrôler des systèmes robotiques sophistiqués grâce à des interfaces qui traduisent les mouvements naturels de la main en actions robotiques précises, sans qu'ils aient besoin de raisonner comme des ingénieurs en robotique.

Haply d'étendre ce même niveau de contrôle intuitif à un éventail plus large d'applications, notamment la robotique industrielle, la téléopération, la recherche, la simulation et la conception 3D.

Une même interface de base peut prendre en charge des tâches à des échelles physiques très différentes. Celles-ci peuvent aller de la manipulation de composants électroniques plus petits qu'un grain de sable au pilotage d'engins lourds dans des mines isolées, des environnements sous-marins ou d'autres lieux inaccessibles.

Concevoir des technologies auxquelles les gens peuvent faire confiance

Pour que la technologie haptique se généralise, les performances ne suffisent pas à elles seules.

Comme un dispositif de retour de force peut bouger et exercer des forces de manière active, son comportement doit être prévisible. Si le dispositif vibre de manière inattendue, se déplace sur le bureau ou réagit d'une façon que l'utilisateur ne comprend pas, la confiance peut disparaître instantanément.

Colin a expliqué que cela fait de l'expérience utilisateur l'un des aspects les plus importants et les plus complexes du développement d'un produit.

Une interface haptique bien conçue doit donner une impression de naturel, de stabilité et de clarté. Les utilisateurs ne doivent pas avoir à se demander s'ils l'utilisent mal ou si l'appareil va réagir de manière imprévisible.

Cela nécessite bien plus qu'un matériel de précision. Il faut également des logiciels bien pensés, des systèmes de sécurité et une conception interactive réfléchie.

Chaque comportement doit être pris en compte. Que doit ressentir l'utilisateur lorsqu'un objet numérique s'enclenche ? Que doit-il se passer lorsqu'un outil atteint la limite de son espace de travail ? Comment l'appareil doit-il signaler une surface, une collision ou un changement de résistance ?

Les meilleures fonctionnalités en matière de sécurité et de convivialité sont souvent celles que l'utilisateur ne remarque même pas. Elles contribuent simplement à donner un sentiment de fiabilité à l'expérience utilisateur.

Pour Haply, cette priorité accordée à la confiance et à l'accessibilité est essentielle pour développer une technologie capable de sortir du cadre des laboratoires spécialisés et de s'intégrer dans les processus de travail quotidiens des professionnels.

Le mouvement en tant que langage pour l'IA physique

L'une des idées les plus marquantes qui ressort de la conversation entre Colin et Ali est que le mouvement peut faire office de langage.

Le texte et la parole permettent aux utilisateurs de transmettre leurs idées à des modèles linguistiques. Nous fournissons des instructions, examinons le résultat et affinons la sortie jusqu’à ce qu’elle corresponde à ce que nous souhaitions.

L'IA physique nécessite un processus similaire, mais les informations transmises concernent le mouvement.

Il faut pouvoir montrer comment saisir un objet, quelle force il faut exercer, comment un outil doit se déplacer dans l'espace ou comment un robot doit réagir lorsqu'un événement imprévu se produit.

Les interfaces haptiques permettent de capturer ce mouvement avec précision.

Tout comme les claviers et les systèmes de reconnaissance vocale constituent une interface pour l'IA linguistique, les dispositifs haptiques peuvent servir d'interface pour transmettre des connaissances physiques aux robots.

Cela permet de mettre en place un processus de démonstration, d'évaluation et d'amélioration. Une personne peut montrer à un robot comment effectuer une tâche, analyser le comportement qui en résulte et proposer des démonstrations supplémentaires lorsque le système doit être amélioré.

Dans ce contexte, le mouvement n'est pas simplement une succession de déplacements. C'est de l'information.

Allier la simulation à des démonstrations concrètes

La simulation et l'apprentissage par renforcement permettent de générer de grandes quantités de données d'entraînement synthétiques pour l'IA physique.

Ces outils sont précieux car ils permettent aux systèmes robotiques de s'entraîner à effectuer des tâches de manière répétée sans avoir besoin d'un accès permanent à du matériel physique ou à des environnements réels.

Cependant, la simulation à elle seule ne permet peut-être pas de rendre pleinement compte de la complexité du monde physique.

Les matériaux varient en termes de dureté, de poids, de texture et de souplesse. Les objets peuvent se déplacer de manière imprévisible. Les outils peuvent glisser. Les environnements peuvent présenter des dommages, des obstacles et d’autres conditions difficiles à reproduire à la perfection.

Les démonstrations réalisées par de vraies personnes permettent d'apporter le contexte que la simulation peut ne pas rendre.

Colin a comparé ce défi à l'entraînement d'un modèle linguistique uniquement à partir de contenus générés par un autre modèle linguistique. Les informations synthétiques peuvent être utiles, mais elles gagnent tout de même à s'ancrer dans des connaissances et des comportements humains authentiques.

En robotique, les démonstrations humaines peuvent servir de base à cet égard.

Une personne peut montrer la tâche dans son intégralité ou se concentrer uniquement sur la partie où le robot rencontre des difficultés. Ces démonstrations peuvent ensuite servir à affiner une stratégie sans avoir à réentraîner l'ensemble du comportement depuis le début.

La simulation et l'intervention humaine sont donc complémentaires. La simulation permet d'aborder les grandes échelles, tandis que les démonstrations en conditions réelles contribuent à améliorer la précision et la pertinence.

Pourquoi les robots auront toujours besoin de l'aide des humains

À mesure que la robotique progresse, on serait tenté de penser que l'autonomie totale rendra inutile toute intervention humaine.

Colin s'attend à ce que la transition se fasse de manière plus progressive.

Les robots peuvent certes devenir très performants pour accomplir des tâches courantes ou répétitives, mais le monde physique recèle un nombre considérable de cas particuliers. Une poignée de porte inhabituelle, un composant endommagé, un objet inhabituel ou un obstacle inattendu peuvent nécessiter le jugement humain.

La téléopération permet à une personne d'intervenir lorsque le robot se trouve confronté à l'une de ces situations.

L'opérateur peut résoudre le problème à distance, et cette interaction peut servir de nouvelles données d'apprentissage pour les futures versions du système. Au fil du temps, le robot pourrait apprendre à gérer davantage de situations de manière autonome.

Cela donne naissance à un modèle d'autonomie partagée dans lequel les personnes supervisent plusieurs robots et n'interviennent qu'en cas de besoin.

Le nombre de robots pourrait augmenter considérablement, même si chaque opérateur les contrôle moins fréquemment. Au lieu qu'une seule personne fasse fonctionner une machine en continu, elle pourrait superviser un parc de robots et apporter son aide dans les moments difficiles.

Colin a décrit la téléopération comme un élément important du développement de la robotique au cours de cette décennie, l'autonomie s'améliorant progressivement à mesure que les systèmes collectent davantage de données et tirent des enseignements de leurs interventions dans le monde réel.

Ce sont les processus de travail qui détermineront le succès de la mise en œuvre

Des robots plus performants et des modèles d'IA plus puissants ne constituent qu'une partie de la solution.

Les gens ont également besoin de moyens concrets pour les utiliser.

Tout au long de l'entretien, Colin n'a cessé de souligner l'importance des processus de travail. Un système peut être techniquement sophistiqué, mais il ne créera pas de valeur réelle si les utilisateurs ne savent pas comment effectuer une tâche, corriger une erreur, analyser les données obtenues ou déployer le robot dans un environnement de travail réel.

Ces flux de travail doivent également être accessibles aux personnes qui ne sont pas des intégrateurs en robotique.

Un opérateur d'entrepôt, un chercheur, un concepteur ou un technicien doit pouvoir travailler avec un système robotique sans avoir besoin de comprendre tous les calculs sous-jacents, tous les systèmes de coordonnées ou toutes les boucles de régulation.

C'est l'une des raisons pour lesquelles Haply à créer des interfaces intuitives qui traduisent les mouvements naturels de l'être humain en actions robotiques.

Plus il devient facile de démontrer, d'affiner et de reproduire des tâches physiques, plus les organisations sont en mesure de collecter efficacement des données et de développer des applications utiles d'IA physique.

Les priorités actuelles Haply

Les priorités commerciales immédiates Haplys'articulent autour de deux domaines clés.

Le premier concerne la collecte de données en robotique, la téléopération et l'apprentissage des règles. Les interfaces haptiques peuvent aider les personnes à effectuer des tâches physiques précises, à contrôler des systèmes robotiques et à générer les données de mouvement réelles nécessaires à l'amélioration de l'IA physique.

Le deuxième domaine concerne la modélisation et la conception 3D professionnelles.

Ces applications peuvent sembler différentes, mais elles ont en commun une même fonctionnalité sous-jacente : permettre aux utilisateurs de décrire des mouvements et d'interagir naturellement en trois dimensions.

Lors du CES 2026, Haply deux prix de l'innovation, récompensant ses applications dans les domaines de l'acquisition de données robotiques et de la conception 3D.

Le partenariat entre Haplyet Hexagon met Hexagon en évidence le lien entre l'interaction haptique et les flux de travail professionnels de conception 3D, notamment l'utilisation de Geomagic .

Pris dans leur ensemble, ces domaines montrent comment une même interface haptique peut prendre en charge à la fois des machines physiques et des environnements numériques.

De la robotique à la conception 3D

La technologie haptique est utilisée depuis longtemps dans des domaines tels que la sculpture numérique et la modélisation 3D.

Cela permet aux concepteurs de « sentir » des surfaces virtuelles, de positionner des objets dans l'espace et de manipuler du contenu numérique de manière plus directe qu'avec une souris classique.

Au cours de leur conversation, Colin et Ali ont abordé les flux de travail professionnels dans différents logiciels et environnements de développement, tels que Geomagic , Blender, Maya, Unity et Unreal Engine.

Pour les designers, les artistes, les enseignants et les développeurs, l'haptique peut offrir un moyen plus naturel d'interagir avec des contenus en trois dimensions.

MinVerse dans la démarche Haplyvisant à rendre cette interaction plus accessible. Il permet de conserver les modes d'interaction habituels sur ordinateur de bureau tout en offrant une interface tridimensionnelle avec retour de force, aidant ainsi les utilisateurs à passer sans heurts des flux de travail établis à de nouvelles formes de contrôle spatial.

À plus long terme, des interfaces similaires pourraient trouver des applications dans les jeux vidéo, l'apprentissage interactif et d'autres domaines grand public. Pour l'instant, Haplycontinue toutefois de se concentrer sur les flux de travail professionnels et axés sur la productivité, dans lesquels la technologie haptique peut apporter une valeur ajoutée évidente.

Mise en place d'une plateforme dédiée à la collaboration homme-robot

La technologie Haplyest conçue pour s'adapter à différents niveaux de précision, d'accessibilité et de complexité des applications.

Inverse3 un contrôle précis du retour de force pour la robotique, la simulation, la recherche et les processus techniques avancés.

MinVerse une interaction tridimensionnelle intuitive à la conception, à l'enseignement, au travail créatif et à d'autres applications professionnelles accessibles.

HARP(Human Advanced Robotics Platform) permet aux utilisateurs de connecter Haply à des systèmes robotiques, de mettre en place des flux de travail de téléopération et de faciliter la collecte de données pour le développement de l'IA physique.

Ensemble, ces technologies constituent la base permettant d'interagir avec des systèmes tant numériques que physiques par le mouvement et le toucher.

L'objectif n'est pas simplement de créer un nouveau contrôleur. Il s'agit de mettre au point une plateforme qui aide les utilisateurs à transmettre leurs connaissances en matière de physique à des machines intelligentes.

Rendre l'IA physique plus humaine

L'avenir de la robotique ne dépendra pas uniquement de l'autonomie.

Cela dépendra de la capacité des humains à former efficacement les robots, à superviser leur travail et à intervenir lorsque le monde physique réserve des imprévus.

Le contact physique joue un rôle essentiel dans cette relation.

La technologie de retour de force peut aider les utilisateurs à comprendre comment un robot interagit avec son environnement, leur montrer comment une tâche doit être effectuée et leur permettre d'interagir plus naturellement avec des environnements numériques ou physiques.

Comme Colin et Ali l'expliquent tout au long de l'interview, le défi ne consiste pas seulement à construire des machines plus performantes. Il s'agit de créer les interfaces et les processus de travail qui permettent aux utilisateurs de collaborer avec elles.

En rendant l'interaction physique plus précise, plus accessible et plus intuitive, l'haptique peut contribuer à garantir que l'avenir de l'IA physique reste en lien avec ceux qui la dirigent.

Écoutez l'intégralité de la conversation entre Colin Gallacher, Haply , et Ali Afzal dans le podcast « Robot Builders Club » pour en savoir plus sur l'haptique, l'entraînement des robots, la téléopération et l'avenir de l'interaction homme-machine.

Suivant
Suivant

L'IA avec le sens du toucher. Dépasser les limites spatiales pour la chirurgie à distance, le contrôle des usines, etc. [CES 2025]