Le développement des interfaces utilisateurs naturelles n'ont pas uniquement boulversé notre quotidien, c'est toute notre façon de vivre, de concevoir, de réfléchir et d'échanger qui ont été modifiées. De nouvelles habitudes se sont mises en place dans nos routines : des nouvelles manières de faire et de percevoir le monde dans lequel on évolue.
Avec les NUI sont apparues des idées et des espoirs quant-aux changements qu'elles pourraient induire. Au delà de simples modifications c'est une nouvelle dimension tout entière qui n'était pas anticipée qui en a émergé et avec elle la remise en question des protocoles établis.
Le concept d'interface utilisateur naturelle ouvre aujourd'hui une nouvelle porte : celui des environnements complexes comme le monde artistique, le monde des analyses, les mondes d'expertises (médical, industrie, etc.), et tout autre domaine d'expertise qui devient alors un domaine d'application potentiel qui pourrait bénéficier des apports liés à l'implémentation d'une NUI au sein d'un parcours d'utilisation ou d'accomplissement de tâches.
Les innovations d’interfaces peuvent alors être perçues comme un moteur d’intérêt général. Innovation et expériences utilisateurs se conjuguent alors pour mettre en place de nouvelles habitudes et de nouvelles interfaces au niveau de la société.
Nous nous concentrerons sur trois thèmes pour identifier les apports des NUI à la société :
Les NUI ne sont pas uniquement exploitée dans le cadre privé ou personnel, elles peuvent aussi s’appliquer dans de nouveaux domaines d’application : éducation, communication, etc. Et doivent alors faire face à de nouveaux scénarios d’utilisation : cadres et contextes variés, utilisateurs uniques ou multiples et même des expériences partagées.
Les NUI représentent un outil d’apprentissage efficace. En effet, nous avons vu précédemment que les interactions naturelles facilitent la compréhension et la mémorisation. L’utilisation de la RV, et de l’AR par exemple, pour former les employés permet d’obtenir des interactions plus précises et plus contextuelles que les méthodes traditionnelles de formation.
"The real problem with the interface is that it is an interface. Interfaces get in the way. I don’t want to focus my energies on an interface. I want to focus on the job… I don’t want to think of myself as using a computer, I want to think of myself as doing my job."
— Don Norman, auteur de l'ouvrage The Design of EveryDay Things.
Le vrai problème de l'interface, c'est qu'il s'agit d'une interface. Les interfaces se mettent en travers de la route. Je ne veux pas concentrer mon énergie sur une interface. Je veux me concentrer sur le travail à faire... Je ne veux pas me considérer comme utilisant un ordinateur, je veux me considérer comme faisant mon travail.
Apprentissage via Microsoft HoloLens appliqué au monde médical.
Améliore des résultats d’apprentissage, par l’interaction contextuelle
En imitant des situations et des réactions de la vie réelle, l'interaction multimodale facilite la compréhension des utilisateurs. La rétention et la mémorisation sont elles aussi améliorées par cette méthode d’apprentissage : l'utilisateur peut évoluer dans un environnement 3D, et utiliser ses sens pour interagir et manipuler les interfaces en temps réel. Aboutissant sur une experience plus interactive et plus significative
Rend l’expérience malléable
Les personnes apprennent de différentes manières : par le visuel, l’auditif, le verbal ou encore le physique. Les formations effectuées par le biais de la réalité virtuelle, augmentée ou mixte peuvent être personnalisées selon les besoins de l’utilisateur, en choisissant parmi les modes interactifs, les plus adaptés pour la personne en question, son âge et ses connaissances.
Démocratise la connaissance
En vivant des scènes qui ne serait pas accessibles dans la réalité, ces technologies contribuent à démocratiser la connaissance et à la rendre accessible. Elles permettent aussi de concrétiser l’information et d’interagir avec.
Sécurise l’environnement d’apprentissage
Dans certaines industries à haut risque, par exemple la construction, l'utilisation de l'environnement virtuel peut simuler des accidents qui peuvent se produire sur le site, pour aider les travailleurs à se préparer à un événement de cette envergure à l'avance en confrontant la théorie à la pratique dans un cadre sécurisé.
Réduit les coûts et économise les ressources
Autres exemples d'apprentissages et d'accès à l'information facilités par des produits issus des NUI :
Exploration et interaction par gestuelle dans un espace 3D grâce à la technologie de "hand-tracking".
Outils de formation et de mise en situation de Caterpillar en réalité virtuelle.
Data Lens est un outil interactif multi-utilisateurs qui interprète et visualise les données scientifiques de la NASA.
Virtualitics - Expérience d'interaction immersive avec la Data
L'art, peut importe sa forme, et la technologie remodèlent continuellement le monde dans lequel nous évoluons. Les NUI rebattent à nouveaux les cartes en d’ajoutant de nouvelles dimensions pour jouer avec nos perceptions, nos opinions et notre compréhension du monde et de la société ; pour nous proposer de nouvelles expérience mêlant corps et esprit.
Installation artistique interactive.
Composition musicale par le mouvement avec les MI·MU Gloves "wearable musical instrument".
Conception en réalité augmentée et expérience partagée au sein du monde des jeux avec Minecraft Heart.
Facilite les tâches quotidiennes de l’utilisateur
Les NUI offrent de nouvelles options pour effectuer nos tâches quotidiennes autant dans la sphère personnelle que professionnelle. Elles modifient la manière dont nous travaillons et nous appréhendons nos tâches quotidiennes.
Pose de nouvelles règles et un nouveau cadre au monde créatif
Le réel, le virtuel, la contemplation et la création partagée fusionnent pour établir de nouvelles possibilités, de conception. Un simple geste peut alors devenir une oeuvre à part entière. Les produits issus des NUI posent ces nouvelles règles nous faisant entrer dans une nouvelle ère de compréhension, d’imagination et de création.
Une nouvel outil de partage d'expériences et de sensibilisation
Les expérience naturelles de création ou d'interaction partagées donnent une nouvelle dimension de collaboration ou coopération dans la conception. Elles sont aussi très immersives pour les utilisateurs et peuvent déclencher diverses émotions chez les utilisateurs qu'elles soient positives ou négatives (comme vu précédemment avec les expériences naturelles liées à la cognition incarnée).
Nous avons vu que les NUI bousculent les habitudes de l'ensemble des domaines d'application et notre manière de consommer n'y échappe pas. En effet, les évolutions technologiques liées à une bonne utilisation des NUI ouvrent pour les marques un nouveau terrain de jeu, et permet de proposer aux clients des expériences plus adaptées à leurs besoins.
Nouvelle experience de shopping "Just Walk Out", avec les magasins Amazon Go.
Développe de nouvelles habitudes de consommation
En réduisant certaines frustrations utilisateurs, les NUI, appliquées au monde de la consommation, promeuvent des expériences plus fluides. Attention cependant à l'adoption et la rétention des utilisateurs qui peut être entachée par une expérience pas assez précise.
Enrichit la relation marque ↔ client
Le concept d'interaction directe avec le contenu, peut, de la même façon, être utiliser pour développer une nouvelle dimension à la relation marque/client et l'enrichir pour développer la fidélité de sa clientèle et le partage de ses valeurs en tant que marque.
Campagne Nike "JUST GO BIGGER" — Expérience partagée et interactive.
Les technologies telles que la RV permettent d'éviter la production certaines ressources, en permettant par exemple aux travailleurs de se former dans un monde virtuel, il n'est plus nécessaire de construire des instruments ou des supports physiques. Ces technologies issus des NUI promeuvent des habitudes plus éco-responsables et peuvent aussi être utilisées à des fins de sensibilisation autour de l'environnement :
Application de mini-jeux interactifs en réalité augmentée mise en place par McDonald's Allemagne pour présenter à sa clientèle leurs initiatives et engagements en matière de développement durable.
L'interface utilisateur naturelle a aussi induit des mouvances telles que le "Zero UI", l'interface invisible ou encore "calm technology" qui permettent une réduction de consommation de certaines ressources, en supprimant l'omniprésence des interfaces dans notre environnement et la replaçant au second plant.
Le développement rapide des technologies issues des NUI a transporté l'interface dans des éléments de notre vie quotidienne (miroir, frigo, montre, poubelle) pour former l'IdO (Internet des objets). Cette tendance d'intégrer la technologie à chaque niveau de notre vie, crée une connexion continue et un constat : les utilisateurs sont ou von devenir connectés à tout moment de la journée.
On parle de la création d'un "jumeau numérique" : une entité numérique de nous-même qui retrace l'ensemble de notre empreinte numérique sur l'internet. L'augmentation des appareils connectés dans notre vie quotidienne nous expose à de nouvelles préoccupations :
La réduction de notre espace privé ;
L'exposition à un plus grand risque de piratage : bluetooth, technologie NFC, etc. ;
Une perte de contrôle sur la projection de son identité physique et virtuelle ;
Une génération de données décuplées et de plus en plus spécifiques :
capacité physique, votre regard, degré d'attention, échelle de la pièce et même le suivi de vos émotions.
Durant l’été 2019, l’application FaceApp a créé un double buzz. Un premier très positif en ce plaçant en tête des téléchargements sur l’App Store au mois de juillet et plus que largement relayé sur les réseaux sociaux. Elle a cependant du faire face à un bad buzz par la suite.
En effet, cette application qui permet de vieillir le visage de façon réaliste a fait polémique, on l’accuse d’utiliser abusivement les données personnelles de ses utilisateurs.
Malgré des conditions générales sont assez claires :
en chargeant une photo et en appliquant un filtre à travers FaceApp pour le partager sur vos réseaux sociaux, vous cédez à l’entreprise gérant l’application la possibilité de modifier, réutiliser ou exploiter par la suite la photo retouchée en question ; et la prise de parole de l’entreprise sur son non exploitation des images transférées sur le cloud et leur destruction toutes les 48 heures, cet accord reste uniquement tacite.
L’application confronte les valeurs éthiques et personnelles de chaque utilisateur sur la récoltes de données personnelles et crée un décalage qui empêche une expérience utilisateur optimale et idéale.
À l'opposé de cette démarche, on trouve des entreprises et start-ups qui cultivent ce droit à la vie privée et la sécurité de ses données.
La start-up française SNIPS en est le parfait ambassadeur. Spécialisée dans l'intelligence artificielle et aujourd'hui rachetée par SONO, elle cherchait à concurrencer les assistants vocaux de Google et Amazon en prenant un positionnement fort :
"What I am really particularly proud of, is that for the first time ever we've been able to make everything run directly on the device itself, without any user data being send to the cloud. Something that we call "Privacy by design”."
— Rand Hindi, fondateur et PDG de SNIPS
Ce dont je suis particulièrement fier, c'est que pour la première fois, nous avons pu faire fonctionner tout, directement sur l'appareil lui-même, sans qu'aucune donnée utilisateur ne soit envoyée dans le cloud. C'est ce que nous appelons "Privacy by design".
L'assistant vocal SNIPS à été créé de manière à respecter ce concept : le produit analyse lui même la voix, sans qu’aucune donnée ne soit envoyée dans le cloud. L'objectif : garantir une totale confidentialité pour ses utilisateurs et une non exploitation de leurs données privées.
Une stratégie qui interpelle et intéresse les investisseurs, la start-up avait réussie une levée de fonds de près de 12 millions d’euros auprès de multiples acteurs (MAIF Avenir, BPI France, Eniac Ventures, etc.) et a depuis été rachetée par l'entreprise américaine Sonos.
À l'heure des réglementations européennes sur la protection des données et les enjeux environnementaux, qui doit partager et endosser ces responsabilités ? Quel rôle doit jouer et assumer le concepteur ?