Une recherche explorant la rapidité avec laquelle les gens réagissent après avoir observé une cible visuelle affichée a récemment remporté les honneurs du meilleur article. Crédit :Bibliothèque numérique ACM
C'est un scénario de tous les jours :vous conduisez sur l'autoroute quand du coin de l'œil vous apercevez une voiture qui rejoint votre voie sans signaler. À quelle vitesse vos yeux peuvent-ils réagir à ce stimulus visuel ? Cela ferait-il une différence si la voiture incriminée était bleue au lieu de verte ? Et si la couleur verte raccourcissait cette période d'une fraction de seconde entre l'apparition initiale du stimulus et le moment où l'œil commençait à se déplacer vers lui (connu des scientifiques sous le nom de saccade), les conducteurs pourraient-ils bénéficier d'une superposition de réalité augmentée qui rendrait chaque véhicule fusionné vert ?
Qi Sun, professeur associé au Département d'informatique et d'ingénierie de Tandon et au Centre pour les sciences et le progrès urbains (CUSP), collabore avec des neuroscientifiques pour le découvrir.
Lui et son doctorat. l'étudiant Budmonde Duinkharjav - avec des collègues de Princeton, de l'Université de Caroline du Nord et de NVIDIA Research - a récemment rédigé l'article "Image Features Influence Reaction Time:A Learned Probabilistic Perceptual Model for Saccade Latency", présentant un modèle qui peut être utilisé pour prédire comportement temporel du regard, notamment la latence saccadique, en fonction des statistiques d'une image affichée. Inspiré des neurosciences, le modèle pourrait à terme avoir de grandes implications pour la sécurité routière, la télémédecine, les sports électroniques et tout autre domaine dans lequel la réalité augmentée et la réalité virtuelle sont exploitées.
"Bien que la technologie AR/VR ne nous transforme pas immédiatement en surhumains", déclare Sun, qui dirige le laboratoire d'informatique immersive de Tandon, "le potentiel de ces nouvelles formes de médias émergents pour stimuler les performances humaines est très excitant".
"Image Features Influence Reaction Time" a remporté les honneurs du meilleur article au SIGGRAPH 2022 de l'Association for Computing Machinery (Special Interest Group on Computer Graphics and Interactive Techniques), la première conférence annuelle du domaine, et un deuxième article co-écrit par Sun, "Joint Neural Phase Retrieval and Compression for Energy- and Computation-efficace Holography on the Edge", a reçu une mention honorable.
Dans ce deuxième article, lui et ses co-auteurs se penchent sur les défis de la création d'affichages holographiques haute fidélité, qui nécessitent une demande de calcul et une consommation d'énergie supérieures à celles que de nombreux appareils peuvent fournir ; comme le soulignent les chercheurs, même effectuer des calculs entièrement sur un serveur cloud ne constitue pas une solution efficace car cela peut entraîner une latence et un stockage prohibitifs. Au lieu de cela, ils proposent un cadre innovant qui génère et compresse conjointement des hologrammes de haute qualité en répartissant le calcul et en optimisant la transmission, ce qui entraîne une réduction de 83 % des coûts énergétiques et une réduction significative des débits binaires moyens et des temps de décodage.
Dans un autre article récent, Sun, un ancien chercheur du géant du logiciel Adobe, a postulé que nous pouvons prédire et modifier la perception du temps des gens, même sur une période de plusieurs minutes, en modifiant différentes caractéristiques visuelles vues dans les paramètres VR. "La perception du temps est fluide", explique-t-il, "et nos découvertes ont le potentiel d'avoir un impact profond dans des situations réelles. Imaginez, par exemple, que nous puissions réduire la douleur ressentie par un patient lors d'une procédure médicale grâce à l'utilisation de la réalité virtuelle ou aider un pilote en formation à se sentir moins fatigué. Il existe même des applications dans un domaine comme l'urbanisme puisque les temps d'attente perçus pour les transports en commun sont une source d'insatisfaction pour les navetteurs dans de nombreuses villes."
Alors que les neuroscientifiques font de nouvelles découvertes sur le fonctionnement du cerveau, Sun espère les mettre à profit dans les médias émergents pour débloquer des avantages réels. "Considérez le cerveau comme un ordinateur de faible puissance", dit-il. "Nous savons que les nouvelles technologies ont un effet sur notre cognition et notre comportement, et nous devrions exploiter cela pour le bien de la société et aider à prévenir tout effet négatif."
