La reconnaissance faciale passe à la vitesse supérieure en réalité virtuelle
Les visages peuvent déverrouiller les smartphones, donner accès à un bâtiment sécurisé et accélérer le contrôle des passeports dans les aéroports, en vérifiant les identités à de nombreuses fins. Une équipe internationale de chercheurs d’Australie, de Nouvelle-Zélande et d’Inde a porté la technologie de reconnaissance faciale à un niveau supérieur, en utilisant l’expression d’une personne pour manipuler des objets dans un environnement de réalité virtuelle comme un Métaverse sans utiliser de manette ou de pavé tactile.
Une nouvelle technologie pour la VR et la RA
Dans une étude menée en première mondiale par l’université du Queensland, des experts en interaction homme-machine ont utilisé des techniques de traitement neuronal pour capturer le sourire, le froncement des sourcils et la mâchoire serrée d’une personne et ont utilisé chaque expression pour déclencher des actions spécifiques dans des environnements de réalité virtuelle.
L’un des chercheurs impliqués dans l’expérience, le professeur Mark Billinghurst de l’université d’Australie du Sud, explique que le système a été conçu pour reconnaître différentes expressions faciales via un casque EEG.
« Un sourire a été utilisé pour déclencher la commande « bouger », un froncement de sourcils pour la commande « arrêter » et une crispation pour la commande « action », à la place d’une manette manuelle effectuant ces actions », explique le professeur Billinghurst.
« Essentiellement, nous capturons des expressions faciales courantes telles que la colère, le bonheur et la surprise et les mettons en œuvre dans un environnement de réalité virtuelle. »
Trois expressions du visage à l’essai dans un monde virtuel
Les chercheurs ont conçu trois environnements virtuels – heureux, neutre et effrayant – et ont mesuré l’état cognitif et physiologique de chaque personne pendant qu’elle était immergée dans chaque scénario.
En reproduisant trois expressions faciales universelles – un sourire, un froncement de sourcils et une crispation – ils ont cherché à savoir si les changements dans l’environnement déclenchaient l’une des trois expressions, en fonction des réponses émotionnelles et physiologiques.
- Dans l’environnement heureux, les utilisateurs devaient se déplacer dans un parc pour attraper des papillons avec un filet. L’utilisateur se déplaçait lorsqu’il souriait et s’arrêtait lorsqu’il fronçait les sourcils.
- Dans l’environnement neutre, les participants devaient se déplacer dans un atelier pour ramasser des objets éparpillés. La mâchoire serrée déclenchait une action, en l’occurrence ramasser chaque objet, tandis que les commandes de mouvement de démarrage et d’arrêt étaient déclenchées par un sourire et un froncement de sourcils.
- Les mêmes expressions faciales ont été utilisées dans l’environnement effrayant, où les participants ont navigué dans une base souterraine pour tirer sur des zombies.
« Dans l’ensemble, nous nous attendions à ce que les contrôleurs portables donnent de meilleurs résultats, car ils constituent une méthode plus intuitive que les expressions faciales, mais les gens ont déclaré se sentir plus immergés dans les expériences de RV contrôlées par les expressions faciales. »
Le professeur Billinghurst affirme que le fait de s’appuyer sur les expressions faciales dans un environnement RV représente un travail difficile pour le cerveau, mais donne aux utilisateurs une expérience plus réaliste.
« Espérons qu’avec un peu plus de recherche, nous pourrons rendre l’expérience plus conviviale« , ajoute-t-il.
En plus d’offrir une nouvelle façon d’utiliser la RV, la technique permettra également aux personnes handicapées – y compris les amputés et les personnes atteintes de la maladie du motoneurone – d’interagir les mains libres dans la RV, sans avoir à utiliser des contrôleurs conçus pour les personnes valides.
Les chercheurs affirment que cette technologie peut également être utilisée en complément des contrôleurs manuels lorsque les expressions faciales constituent une forme d’interaction plus naturelle.
Les résultats de l’étude ont été publiés dans l’International Journal of Human-Computer Studies.
Source : https://techxplore.com/news/2022-02-facial-recognition-virtual-reality.html