L'émergence d'appareils de réalité virtuelle et augmentée de nouvelle génération comme l'Oculus Rift et Microsoft HoloLens a accru l'intérêt pour l'utilisation de la réalité mixte pour simuler la formation, améliorer le commandement et le contrôle, et améliorer l'efficacité des combattants sur le champ de bataille.

On pense que mettre des données de champ de bataille pertinentes pour la mission, telles que les images satellite ou les informations de capteurs portés sur le corps, dans un environnement immersif permettra aux combattants de récupérer, collaborer et prendre des décisions plus efficacement que les méthodes traditionnelles.

Cependant, il y a actuellement peu de preuves dans la littérature scientifique que l'utilisation de la technologie immersive offre des avantages mesurables, tels qu'un engagement accru dans les tâches ou une meilleure précision des décisions.

Il existe également des mesures limitées qui peuvent être utilisées pour évaluer ces avantages sur les périphériques d'affichage et les tâches.

Chercheurs du Laboratoire de Recherche de l'Armée de RDECOM, le laboratoire de recherche d'entreprise (ARL) de l'armée de terre, en collaboration avec l'Université du Minnesota et l'Institut des technologies créatives de l'armée américaine à l'Université de Californie du Sud, ont entrepris de changer cela.

Dans un article récemment publié, les chercheurs ont interrogé des méthodes potentielles pour évaluer l'utilité des systèmes immersifs, discuter de la façon dont les données pourraient être acquises dans des scénarios expérimentaux et tactiques, ainsi que poser des problèmes dans la collaboration multi-utilisateurs.

Cet article est l'un des premiers à étudier les métriques et les méthodes pertinentes aux problèmes uniques auxquels les combattants peuvent être confrontés lors de la prise de décision dans des scénarios de commandement et de contrôle ou d'analyse du renseignement.

En outre, les chercheurs discutent du kit d'analyse tactique de réalité mixte développé par ARL, ou MRTAK, qui fonctionne comme une plate-forme expérimentale pour effectuer ces évaluations lors de la planification et de l'exécution de missions collaboratives. MRTAK est maintenant développé en tant que module de réalité mixte du projet AURORA (Accelerated User Reasoning for Operations, Recherche, et analyse), comme AURORA-MR.

Cette recherche a récemment été présentée au 23e Symposium international sur le commandement et le contrôle de l'information et de la technologie qui s'est tenu à Pensacola, Floride.

"Notre étude de la littérature existante a déterminé que de nouvelles méthodes et métriques sont essentielles pour garantir que la future recherche fondamentale et appliquée puisse évaluer efficacement et avec précision les différences de performances entre les technologies immersives et les systèmes 2-D traditionnels, " a déclaré le Dr Mark Dennison, psychologue de recherche dans la branche de traitement de l'information du champ de bataille de l'ARL stationnée à l'ARL West à Playa Vista, Californie.

Selon Dennison, leurs travaux ont souvent montré que les chercheurs dans ce domaine ont réalisé des études où les données collectées ne permettent pas de rapporter des métriques utiles, rendant difficile ou impossible pour les décideurs clés de déterminer comment, quand et où la technologie immersive offre un avantage ou un déficit aux besoins spécifiques d'une mission ou d'une tâche.

"Dans ce document, nous suggérons un changement de paradigme loin de la simple comparaison de systèmes non immersifs et immersifs sur des tâches similaires, et au lieu de cela, décomposer méticuleusement la prise de décision complexe en processus de composants qui peuvent être modélisés et comparés avec plus de précision à travers des types d'affichage disparates, " Dennison a dit. "Par exemple, lors de l'étude de la planification d'une opération tactique, comme la brèche et le dégagement d'un bâtiment hostile, la même information spatiale doit être présente dans les conditions expérimentales 2-D et VR pour permettre des comparaisons quantitatives précises.

Dans le cadre de cette recherche sur l'analytique immersive collaborative, les chercheurs ont développé et déployé AURORA-MR, qui sert de banc d'essai pour effectuer des recherches fondamentales et appliquées étroitement contrôlées sur la prise de décision multi-utilisateurs avec des systèmes immersifs distribués.

Actuellement, AURORA-MR est utilisé pour la recherche collaborative en analyse immersive dans le Maryland au siège d'ARL au Adelphi Laboratory Center et à Aberdeen Proving Ground, en Californie à l'ARL West et au Mixed Reality Lab de l'ICT, et à l'Université du Minnesota.

Le système a également été démontré à l'OTAN SET-256, le TAP Lab de l'Armée de l'Air, et a été présenté au AUSA 2018 Global Force Innovator's Corner.

Selon les chercheurs, la recherche menée avec AURORA-MR permettra au soldat de comprendre quand visualiser et interagir avec des informations critiques sur le champ de bataille pourrait être mieux fait dans un système immersif, ou en collaboration avec d'autres utilisant des systèmes traditionnels.

"Grâce à la virtualisation de tout ou partie des éléments du Centre d'Opérations Tactiques, les commandants et les analystes du renseignement peuvent communiquer et collaborer sans les contraintes d'un bâtiment physique et avec une empreinte réduite sur le renseignement ennemi, surveillance et reconnaissance, ou ISR, ", a déclaré Dennison.

La conception d'AURORA-MR vise à permettre une intégration facile avec d'autres bases de données, capteurs et apprentissage automatique afin que la recherche conjointe puisse se dérouler de manière plus fluide en interne dans ARL et en externe avec leurs partenaires académiques et industriels.

"Actuellement, nous faisons évoluer le réseau alimentant AURORA-MR, appelé AURORA-NET, permettre un meilleur contrôle des informations envoyées et reçues par les clients, tout en garantissant que l'environnement virtuel est rendu à une fréquence d'images confortable pour minimiser les effets paralysants du mal des transports sur les utilisateurs immergés, " a déclaré Dennison. " Cela nous permettra de mener des recherches sur la façon dont l'ingestion et l'analyse des données des systèmes bruyants, comme l'Internet des objets de Battlefield, peut être augmentée grâce à une collaboration distribuée en réalité mixte."

AURORA-MR a commencé le développement en tant qu'environnement VR mono-utilisateur en décembre 2017. Il est en cours de développement et une connexion a été récemment établie en novembre 2018 permettant une collaboration à distance avec les chercheurs de l'APG.