L’avènement de la réalité mixte est bel et bien là ! Elle est en passe de transformer radicalement des secteurs variés tels que le commerce, l’éducation, la santé, la formation professionnelle, la production industrielle et même l’exploration spatiale.
La quête d’une réalité numérique nous a déjà offert des innovations technologiques remarquables, à l’instar de Google Cardboard, Google VR ou encore Meta Quest. Pourtant, l’évolution ne s’arrête pas là. Désormais, il est possible d’interagir dans un environnement hybride, mêlant virtualisation et réalité.
Ce concept, désigné par l’acronyme RM, suscite un intérêt croissant et attire des investissements considérables. Laissez-vous guider pour comprendre la réalité mixte dans des termes accessibles, afin d’envisager des applications concrètes dans votre parcours professionnel, vos projets d’entreprise ou simplement pour votre divertissement personnel.
Qu’est-ce que la réalité mixte (RM) ?
La réalité mixte englobe les technologies qui se situent à l’intersection entre notre environnement tangible et la réalité étendue. Elle combine la réalité virtuelle, la réalité augmentée et l’interactivité propre à la réalité augmentée.
Alors que la réalité virtuelle et augmentée se limitent souvent à une expérience passive, presque un monologue, la RM ouvre un dialogue dynamique entre l’utilisateur et les éléments numériques, au sein du monde réel.
Ici, il devient possible d’interagir avec des contenus numériques intégrés dans un contexte physique et de créer des interactions significatives. Par exemple, l’application de filtres en réalité augmentée sur Instagram pour produire des images ou des vidéos ludiques est une illustration éloquente de la réalité mixte en action.
Les experts de ce domaine ont constaté que la réalité virtuelle et la réalité augmentée ont des limites en termes de potentiel de monétisation. Bien que ces technologies aient un impact notable sur le secteur du divertissement et, dans une certaine mesure, sur l’éducation, la RM devrait, quant à elle, influencer un plus large éventail d’activités commerciales.
La RM devrait notamment toucher tous les scénarios d’entreprise qui exploitent des contenus numériques sur le web et souhaitent les rendre accessibles à leurs clients dans un cadre physique.
Qu’est-ce qu’un portail de réalité mixte ?
Crédit image : Microsoft
L’application « Mixed Reality Portal » de Microsoft Corporation représente un exemple concret et largement accessible de la RM. Disponible au téléchargement et à l’installation depuis le Microsoft Store, elle est compatible avec tous les ordinateurs équipés de Windows 10 ou d’une version ultérieure.
Toutefois, pour exploiter pleinement le potentiel de l’application, il est indispensable d’être équipé d’un casque de réalité virtuelle (VR) ou de réalité mixte (MR). Au moment de la rédaction de cet article, l’application MR Portal Windows était compatible avec des dispositifs portables tels que le HP Reverb G2, le Microsoft HoloLens 2, le Microsoft HoloLens, le Magic Leap One et l’Occipital Bridge, entre autres.
En complément des équipements portables mentionnés, il est également nécessaire de disposer d’un ordinateur de jeu performant, d’un accès à la bibliothèque SteamVR de jeux VR et d’AltspaceVR pour un usage professionnel ou scolaire en environnement virtuel. Microsoft a également lancé Microsoft Mesh, une application dédiée à l’usage professionnel et intégrée à Teams.
Avantages de la réalité mixte
L’avantage majeur de la RM par rapport aux autres branches de la réalité numérique réside dans les vastes possibilités d’applications commerciales qu’elle offre. Elle ne se cantonne pas uniquement aux jeux et au visionnage de vidéos, comme c’est souvent le cas dans le domaine du divertissement.
Outre son potentiel de monétisation, voici d’autres bénéfices significatifs de la réalité mixte :
Création de contenu numérique
Il est possible de superposer une œuvre d’art numérique à des objets physiques et de créer des copies exactes en quelques secondes, pour une diffusion en ligne sur des sites web, YouTube, les réseaux sociaux, etc.
Production d’objets physiques
Les usines de biens de consommation, de véhicules et d’appareils électroménagers, qui nécessitent une main-d’œuvre qualifiée pour l’assemblage de précision ou les travaux manuels, peuvent tirer parti de cette technologie de nouvelle génération pour réduire les coûts de production. Un artisan peut réaliser le travail à distance et contrôler des milliers de bras robotiques à l’aide de dispositifs portables et de contrôleurs MR.
Réduction des frais de déplacement professionnels
La réalité mixte permet de générer des revenus, tout en limitant les dépenses. Les entreprises peuvent utiliser les solutions Microsoft Mesh et HoloLens pour organiser des réunions professionnelles immersives, sans que les professionnels aient besoin de parcourir de longues distances.
Réduction des dépenses de marketing
Les opérations de marketing événementiel, comme le marketing de terrain et le marketing expérientiel, représentent souvent des investissements considérables. Lorsque la RM deviendra aussi accessible que les smartphones, le public cible pourra participer à ces événements marketing depuis le confort de son domicile. À terme, les entreprises réaliseront des économies substantielles sur leurs dépenses de marketing.
Amélioration de l’expérience client
Les centres commerciaux et les points de vente peuvent enrichir l’expérience des consommateurs en les guidant à l’intérieur des locaux.
Les équipes de développement logiciel, web et applicatif peuvent également inviter des utilisateurs à tester des produits à différents stades du développement Agile, grâce à des discussions et des participations à distance basées sur la RM.
Défis de la réalité mixte
La réalité mixte est encore une technologie en pleine émergence. Bien que de nombreux fabricants de matériel aient mis sur le marché des dispositifs portables, ces derniers présentent leurs propres limites.
Selon les données d’Expert Market Research, le marché mondial de la réalité mixte était estimé à 681 millions de dollars en 2020. Pour la période 2023-2028, le marché devrait croître à un TCAC de 77%. En 2026, il devrait atteindre un chiffre d’affaires de 20 708 millions de dollars.
La majeure partie des investissements visera à relever les défis suivants :
Cartographie environnementale
La cartographie des coordonnées environnementales et le positionnement d’objets 3D dans cet espace sont des technologies encore en développement. Les entreprises doivent concevoir des systèmes de cartographie spatiale plus simples et plus robustes.
Cartographie de l’action humaine
La cartographie des actions des utilisateurs et l’ajustement dynamique de l’ensemble de l’environnement 3D constituent un autre défi.
Son spatial
Les équipements de génération et d’écoute de son spatial sont onéreux et peu disponibles.
Positionnement et localisation des objets et des utilisateurs
La coordination entre l’environnement virtuel et physique avec les données de cartographie spatiale de l’environnement et de l’utilisateur présente ses propres limites.
Création et interaction d’éléments 3D
Il est possible de créer quelques objets 3D pour démontrer la viabilité du concept de réalité mixte en conditions de test. Cependant, lorsque cette technologie deviendra accessible au grand public, il faudra créer des milliards de répliques 3D du monde physique. La modélisation 3D à grande échelle représente donc un autre obstacle à surmonter.
Coût
Les dispositifs comme le Microsoft HoloLens 2, le HP Reverb G2, le Microsoft HoloLens, le Magic Leap One, etc., sont proposés à des prix élevés. Sans oublier que les smartphones deviennent également de plus en plus coûteux chaque année.
Par ailleurs, les logiciels de réalité étendue, l’accès à Internet, le réseau 5G, etc., représentent également des investissements importants.
IA, ML et Big Data
La réalité mixte s’appuiera largement sur l’intelligence artificielle (IA), l’apprentissage automatique (ML) et le Big Data pour offrir l’expérience utilisateur optimale. Ces domaines présentent cependant des limites et nécessitent de nouveaux développements.
Recherche et développement (R&D) de longue haleine
Le processus de R&D est coûteux et chronophage. Il peut prendre des années à une start-up pour produire un produit minimum viable (MVP) dans le domaine de la réalité mixte.
Formation de la main-d’œuvre existante
Les entreprises doivent également déployer des programmes de formation à grande échelle pour familiariser la main-d’œuvre existante avec le matériel et les logiciels de réalité mixte.
Selon la Banque mondiale, on dénombre 3,45 milliards de travailleurs dans le monde. Même en se limitant à la formation des travailleurs qualifiés, cela représente des millions d’employés à former.
Accessibilité
Lorsque les entreprises proposeront des produits et des services de réalité mixte au grand public, elles constateront qu’une minorité d’utilisateurs sera suffisamment familiarisée avec cette technologie pour l’adopter. Il faudra plusieurs années de sensibilisation et de formation pour constituer une base de consommateurs importante.
Comment fonctionne la réalité mixte ?
La RM fonctionne généralement grâce à un casque MR, un ordinateur puissant et des contrôleurs portables.
Les lunettes MR embarquent du matériel qui projette des hologrammes de contenu 3D sur un écran LCD intégré. À l’aide de la cartographie spatiale de l’environnement et du contexte, les lunettes superposent les graphiques 3D de manière à créer une expérience visuelle cohérente.
C’est un peu comme l’interaction entre la baleine et l’eau de mer avec le terrain de basket de l’école illustrée dans la vidéo ci-dessus.
Le casque MR se connecte à l’ordinateur source par Wi-Fi. L’ordinateur source traite tous les calculs et le rendu 3D à l’aide d’une application MR telle que le Mixed Reality Portal.
La plupart des lunettes sont également dotées d’écouteurs audio spatiaux, afin de profiter d’une expérience sonore immersive.
Pour améliorer encore l’expérience utilisateur, certaines configurations MR peuvent inclure les accessoires suivants :
- LiDAR pour smartphones pour une expérience MR optimisée
- Tapis de course, détecteurs de mouvement, combinaisons et caméras en guise de périphériques d’entrée
- Systèmes d’éclairage et de son améliorés dans les théâtres MR de haute technologie
- Modélisation 3D basée sur l’IA dans le logiciel MR
Applications notables de la réalité mixte
La réalité étendue est déjà applicable dans les contextes suivants. Les développeurs de matériel et de logiciels explorent de nouvelles perspectives à mesure que cette technologie se perfectionne :
- Les entreprises peuvent commercialiser leurs produits directement sur les appareils AR et MR des utilisateurs.
- Les consommateurs peuvent accéder virtuellement aux produits de vos rayons et interagir avec eux.
- Les enseignants peuvent rendre l’apprentissage plus efficace en affichant des versions 3D du contenu pédagogique, intégrées à l’environnement réel.
- Les utilisateurs peuvent s’évader depuis le confort de leur domicile grâce à des appareils portables et des logiciels MR.
- Les entreprises peuvent former un grand nombre d’employés à distance et ne sélectionner que les candidats les plus prometteurs, limitant ainsi les coûts de recrutement.
Utilisation du Hololens 2 par Airbus. Crédit image : Microsoft
- Selon Microsoft, Airbus utilise Microsoft Hololens 2 et Azure Mixed Reality pour accélérer la construction de ses avions.
- Une autre annonce de Microsoft révèle que l’armée américaine utilisera la technologie HoloLens pour créer des lunettes de haute technologie pour l’infanterie.
- Lors d’interventions chirurgicales critiques, les chirurgiens peuvent utiliser des casques MR à rayons X pour visualiser les organes internes du patient avec plus de clarté qu’avec les technologies existantes.
- Les facultés de médecine peuvent commencer à utiliser des casques MR dans le cadre de cours pratiques et théoriques, où les étudiants en médecine peuvent interagir avec les organes des patients en 3D.
- Bientôt, des ordinateurs portables basés sur la RM pourraient faire leur apparition, capables de projeter des listes de tâches sur un réfrigérateur ou des documents virtuels sur une table.
Réalité mixte vs réalité augmentée
Les similitudes
L’AR et la RM présentent les points communs suivants :
- La RM est une évolution de l’AR. Il est possible de considérer la RM comme une version plus avancée de l’AR.
- Superposition d’objets 3D dans un environnement physique via des écrans numériques.
- Utilisation de contenu holographique ou d’autres types de contenus 3D.
- Recours à des casques, des contrôleurs et des ordinateurs pour diffuser du contenu dans un environnement semi-virtuel.
- Utilisation de la cartographie spatiale, du son spatial, etc.
Les différences
Bien que la RM découle de la RA, il existe des différences significatives, notamment celles-ci :
- Dans les environnements de réalité mixte, il est possible d’interagir avec des objets 3D, en les faisant pivoter, en les séparant, en les disséquant, en les transportant ou en les réparant. À l’inverse, l’AR se limite à la superposition de contenu 3D sur divers éléments de l’environnement. Il n’y a pas d’interaction à proprement parler.
- La RM est plus sophistiquée que l’AR et nécessite une puissance de traitement de données et de graphiques considérablement plus élevée. L’AR, quant à elle, est une technologie plus ancienne que la RM et elle est moins gourmande en ressources matérielles.
- La RM trouve des applications concrètes dans de nombreux secteurs d’activité. L’AR, de son côté, est surtout utilisée dans les domaines du divertissement, des réseaux sociaux et des jeux.
Réalité mixte vs réalité virtuelle (VR)
Les similitudes
Voici les caractéristiques technologiques que partagent la RM et la VR :
- Le port d’un casque
- Des lunettes connectées à un PC ou un smartphone
- Un contrôleur
- Des capteurs haptiques pour commander le casque
Les différences
Voici les points sur lesquels la RM et la VR divergent :
- La RM nécessite des capacités de traitement bien supérieures à celles de la VR
- La RM superpose du contenu virtuel sur des espaces physiques existants, comme des pièces, des bureaux ou des terrains de jeux. La VR, à l’inverse, crée un environnement entièrement virtuel où tout est généré par ordinateur.
L’avenir de la réalité mixte
Dans les années à venir, la RM devrait se démocratiser et devenir plus abordable, grâce aux éléments suivants :
- La généralisation du réseau 5G et des prix compétitifs grâce à l’arrivée de nouveaux acteurs sur le marché
- L’adoption par les fabricants de smartphones et de tablettes de la technologie LiDAR (Light Detection and Ranging), qui améliore les capacités de réalité augmentée des appareils
- Des casques AR et hologrammes offrant davantage de fonctionnalités à des prix plus bas
- La normalisation des cas d’utilisation par les entreprises et la publication de procédures opérationnelles standard (POS) pour les industries et les cas d’usage concernés
Un avis sur la réalité mixte : la note de l’auteur
La RM est vouée à se généraliser, à l’instar d’Internet et des smartphones. Toutefois, des milliards d’investissements seront nécessaires avant que les investisseurs puissent en tirer des bénéfices concrets.
Si vous êtes une entreprise, il peut être pertinent de participer à des ateliers et à des webinaires pour en apprendre davantage sur les cas d’utilisation et le potentiel de développement commercial, afin de profiter des investissements à venir.
De même, si vous êtes un jeune diplômé en informatique, envisagez de suivre des formations et d’acquérir des compétences pour pouvoir contribuer aux projets de développement dans ce domaine.
Conclusion
La réalité mixte est un concept émergent qui gagne rapidement la confiance des consommateurs et des investisseurs. Elle est en passe de transformer notre rapport au divertissement, aux jeux, à la santé, au sport, aux voyages, au shopping, au travail et à toutes les activités qui intéressent les entreprises.
Pour rester pertinent dans ce domaine, il est essentiel de suivre les tendances de la réalité augmentée et de se familiariser avec les meilleurs casques VR afin de se faire une idée plus précise des possibilités offertes par la réalité étendue.