L'étudiant postdoctoral Yang Jiao communique des mots à Jaeong Jung, un étudiant de premier cycle, utilisant des signaux de phonème transmis au dispositif haptique sur son avant-bras. Crédit :Purdue University photo/Brian Huchel
La communication pourrait aller au-delà de la lecture d'un écran de téléphone cellulaire grâce à une nouvelle technique mise au point par les chercheurs du Purdue College of Engineering pour apprendre et lire des messages grâce au sens du toucher d'une personne.
Hong Tan, professeur de génie électrique et informatique, était le professeur principal de la recherche haptique qui a développé une méthode pour recevoir des messages en apprenant à interpréter des signaux tels qu'une sensation de bourdonnement et d'autres à travers la peau de l'avant-bras.
Les résultats de la recherche ont été présentés vendredi 15 juin lors de la conférence Proceedings of EuroHaptics 2018 à Pise, Italie.
Le projet d'un an a été réalisé avec des chercheurs du Massachusetts Institute of Technology et de Facebook Inc.
Bronzer, fondateur et directeur du laboratoire de recherche sur les interfaces haptiques de Purdue, a déclaré alors que la recherche se prête à être utilisée par des utilisateurs malentendants et malvoyants, l'étude est également examinée en termes généraux pour un certain nombre d'utilisations possibles.
« Nous collaborons avec Facebook dans le cadre de l'accord de recherche universitaire sponsorisé de l'entreprise. Facebook est intéressé par le développement de nouvelles plateformes de communication et la recherche haptique que nous menons est prometteuse, " elle a dit.
« Je suis enthousiasmé par cela … imaginez un avenir où vous pourrez porter une manche qui vous envoie discrètement des messages – à travers votre peau – à des moments où il peut être gênant de regarder un message texte, " a déclaré Tan. " J'espère vraiment que cela deviendra une idée générale pour une nouvelle façon de communiquer.
"Quand cela arrive, les malentendants, les malvoyants, tout le monde peut en profiter."
Dans l'étude, les sujets utilisaient un brassard en matériau encerclant l'avant-bras du poignet jusqu'au-dessous du coude. L'instrument, enroulé autour du bras non dominant du sujet de test, en vedette 24 tactors qui, lorsqu'il est stimulé, émis une vibration contre la peau, changer la qualité et la position dans le processus.
Tan a déclaré que les 39 phonèmes (unités de son dans une langue qui distinguent un mot d'un autre) en anglais ont été cartographiés à l'aide de signaux provenant de facteurs spécifiques. Les sons des consonnes telles que K, P et T étaient des sensations stationnaires sur différentes zones du bras tandis que les voyelles étaient indiquées par des stimulations qui montaient, vers le bas ou autour de l'avant-bras.
"Nous avons utilisé tout ce qui peut vous aider à établir la cartographie, à la reconnaître et à la mémoriser, " a déclaré Tan. " Ceci est basé sur une meilleure compréhension de la façon de transmettre des informations par le sens du toucher d'une manière plus intuitive et efficace. "
Douze sujets ont appris des symboles haptiques grâce à la méthode basée sur les phonèmes à un programme de 100 mots en 100 minutes pour la recherche, tandis que 12 autres ont appris en utilisant un système basé sur des mots avec les signaux haptiques sur leur bras.
Les résultats de la recherche ont montré que les phonèmes fonctionnaient mieux qu'une approche basée sur des mots en offrant un chemin plus cohérent pour l'apprentissage des utilisateurs sur une période de temps plus courte. Les niveaux de performance variaient considérablement entre les sujets de test pour chaque méthode, mais avec l'approche basée sur les phonèmes, au moins la moitié pouvait fonctionner avec une précision de 80 pour cent tandis que deux sujets ont atteint une précision de 90 pour cent.
Tan a déclaré que l'utilisation de phonèmes était plus efficace que les lettres, notant qu'il y a moins de phonèmes dans un mot par rapport au nombre de lettres.
Elle a déclaré que le raisonnement derrière le projet est l'idée qu'il existe de nombreuses façons d'encoder la parole en sentiments. L'objectif du projet est de démontrer une façon qui fonctionne réellement.
« Pour cette recherche, la progression de l'apprentissage est l'un des éléments clés, " dit Tan. " Avec ça, non seulement nous avons un système qui fonctionne, mais nous sommes capables de former les gens en quelques heures plutôt qu'en mois ou même en années."
Pour l'étude, un concentré, régime d'entraînement intense a été développé où les sujets de test ont travaillé pendant environ 10 minutes par jour. Ils ont ensuite été testés sur leurs progrès.
"C'est plus efficace que s'ils restaient assis ici pendant trois heures pour étudier, " dit Tan. " Tu ne peux pas garder une bonne concentration aussi longtemps. "
"Les personnes malentendantes peuvent être motivées à passer plus de temps à s'entraîner, mais le grand public n'a probablement pas la patience, " elle a ajouté.