Meilleures pratiques pour la mise en place d'applications de réalité augmentée sur le terrain
Découvrez comment le géant industriel ABB utilise Unity et la réalité augmentée pour transformer les procédures de maintenance sur le terrain en un processus entièrement dématérialisé.
Nous avons récemment invité des membres de l'équipe IS Innovation and Digital Scouting d'ABB, Maciej Włodarczyk et Rafał Kielar, à nous expliquer comment ils ont utilisé Unity pour développer un nouveau système numérique d'opérateur de terrain. Cette application multiplateforme fonctionne sur des appareils mobiles et sur l'HoloLens, et elle est conçue pour améliorer l'efficacité et la sécurité des opérateurs de terrain qui assurent la maintenance et l'entretien des équipements sur les sites industriels.
Apprenez-en plus dans leur présentation lors d'un récent webinaire d'Unity, notamment sur leur processus de migration vers l'HoloLens 2. Lors du webinaire, Nick Klingensmith, ingénieur en chef de la Microsoft Mixed Reality Academy, explique comment le nouveau dispositif de Microsoft permettra de passer à la vitesse supérieure en matière de formation, d'orientation et de maintenance par la technologie de la réalité augmentée.
Examinons les problèmes que l'ABB a cherché à résoudre pour ses clients et certains des principaux enseignements qu'elle a tirés du processus de développement.
Pour les clients d'ABB, deux personnes clés sont impliquées dans ce processus : les opérateurs sur le terrain chargés de la maintenance et de l'entretien des équipements, et les opérateurs de la salle de contrôle qui supervisent le processus et sont situés dans une autre partie de l'installation.
En raison de la nature dangereuse des tâches à accomplir, les opérateurs de terrain ont traditionnellement suivi des programmes de formation longs et coûteux avant de travailler sur le terrain.
Cependant, une fois sur le terrain, il est difficile d'assigner et de suivre les procédures de service effectuées, qui se font sur papier. Cela entraîne d'autres problèmes de communication entre les opérateurs sur le terrain et ceux de la salle de contrôle, qui ont souvent besoin d'échanger des informations en temps réel.
ABB a utilisé l'éditeur Unity et la boîte à outils de réalité mixte (MRTK) de Microsoft pour tester rapidement des prototypes et finalement construire une application logicielle prête à la production appelée ABB Ability™ Augmented Field Procedures. Cette application multiplateforme numérise entièrement l'expérience de l'opérateur sur le terrain grâce à des technologies de réalité augmentée à distance.
L'application offre plusieurs avantages par rapport au flux de travail traditionnel sur papier. Ce système :
- Permet à tout opérateur de terrain de suivre les procédures numérisées et de devenir un expert sans formation coûteuse.
- intègre les systèmes de contrôle sur le terrain et distribués pour permettre la saisie des données en temps réel (au lieu de traiter des formulaires papier par la suite)
- garantit que la dernière version d'une procédure est toujours suivie (plutôt que d'utiliser un document obsolète)
- Connecte les opérateurs sur le terrain et dans la salle de contrôle pour une communication en temps réel à l'aide de Microsoft Remote Assist
Sur la base de leurs expériences, Włodarczyk et Kielar d'ABB ont partagé de nombreuses bonnes pratiques pour ceux qui développent des applications similaires liées à la formation, au guidage et aux cas d'utilisation de la maintenance. Dans ce billet, nous nous concentrons sur plusieurs bonnes pratiques pour l'application HoloLens, centrées sur l'interface utilisateur (UI) et l'ergonomie des interactions.
Consultez le webinaire pour obtenir une liste complète des recommandations de l'ABB, notamment en ce qui concerne la reconnaissance des emplacements et des appareils, les positions des hologrammes, et bien d'autres choses encore.
Comme le montre l'image ci-dessus, l'interface utilisateur ne doit pas masquer la vue de l'utilisateur. Les éléments de l'interface utilisateur qui bloquent les objets réels avec lesquels l'utilisateur doit interagir peuvent constituer un risque pour la sécurité.
Pour minimiser l'encombrement dans le champ de vision de l'utilisateur, les menus de navigation ne sont pas omniprésents, mais accessibles à la demande. Dans la vidéo ci-dessus, remarquez que l'utilisateur contrôle la visibilité du menu par un geste.
Afin d'éviter de bloquer le champ de vision, certains peuvent penser qu'il est judicieux de réduire la taille des menus et des boutons. Au contraire, ils doivent être suffisamment grands pour être facilement ciblés par le regard et sélectionnés par des gestes.
Włodarczyk et Kielar devaient rendre leur application plus facile et plus pratique à utiliser que les procédures opérationnelles standard (POS) sur papier auxquelles leurs clients étaient habitués.
Cela les a conduits à automatiser autant que possible l'expérience afin de limiter le nombre d'interactions que l'utilisateur devait effectuer (par exemple, faire apparaître automatiquement une fenêtre à la suite d'un geste, comme le montre la vidéo ci-dessus). Il est également important de fournir des instructions claires (par exemple, le message "tap to dock" montré dans la vidéo) afin de s'assurer que l'étape suivante est toujours claire.
Les utilisateurs devraient également avoir la possibilité de sélectionner le mode d'interaction de leur choix, comme les commandes vocales, le regard et les gestes.
Étant donné que la plupart des opérateurs sur le terrain ont une expérience limitée de la RA mais qu'ils seront les utilisateurs finaux de ces applications, il est essentiel de partager l'application avec un groupe de test composé de ces personnes. Ils seront une source d'informations précieuses qui vous aideront à réduire la complexité et à rationaliser votre application en la ramenant à ses composants essentiels.
---
Pour connaître les meilleures pratiques d'ABB, inscrivez-vous à notre webinaire à la demande.
Vous pouvez également consulter la présentation d'ABB à Unite Copenhagen.
Découvrez Unity Industry Collection et apprenez comment commencer à développer des applications de réalité augmentée avec Unity.