Expérimentation autour de la réalité mixte avec l’utilisation du casque Hololens
05/2018
-
Casque hololens
-
Boite à outils présente dans Holostudio
-
Mise en situation de l’application Space catcher
-
Modélisation sur blender d’un scan réalisé avec le casque Hololens (espace intérieur et extérieur)
-
Interface du logiciel Blender
-
Test de rendu de la forme sur blender
-
Test de rendu de la forme sur blender
-
en me déplacant accroupie dans l'espace
-
en regardant un point fixe pendant 5 secondes
-
en chutant
-
en levant la tête de mes pieds au plafond
La réalité mixte m’a permis d’appréhender l’espace d’une manière différente, d’apprendre à mélanger la réalité et la virtualité. Elle a été conceptualisée en 2015 par Microsoft sous la forme des lunettes HoloLens. Des hologrammes sont insérés au monde réel, la personne porteuse du casque choisit ce qu’elle veut faire apparaître. Elle manipule à sa guise les éléments virtuels.
Quand on utilise le casque Hololens, l’individu se situe entre deux mondes, ces deux mondes se mélangent et se complètent. Où se trouve alors la réalité ?
Mon premier projet était de placer des hologrammes dans l’espace et de créer des interactions entre ces deux éléments. Révéler l’espace à l’aide de formes, créer des failles dans l’espace. Pour prolonger l’utilisation de cette technique, je me suis initiée à de nouvelles applications comme Space catcher.
Etape 1 – Holostudio : création d’hologrammes
Holostudio est une application présente sur le casque qui permet de créer ses propres hologrammes. Au début de l’expérimentation du casque, cette application avait très peu de fonctionnalités et son utilisation était restreinte. Aujourd’hui, il est possible de créer ses propres hologrammes et de choisir leurs moindres détails (couleur, forme, motif, taille…).
L’application se présente sous la forme d’une boite à outils, on fabrique des formes selon nos désirs.Les hologrammes peuvent ensuite être importés dans le casque et être projetés dans l’espace réel permettant ainsi une cohésion entre ces deux univers: le virtuel et le réel. Grâce à d’autres applications, on est en capacité d’animer ces hologrammes et de pousser la création encore plus loin.
Étape 2 – Space catcher
Mon intérêt durant ce deuxième semestre s’est plus particulièrement porté sur l’étude de l’application Space catcher.Cette application nous permet de scanner/mapper des espaces que l’on choisit. Le casque analyse l’espace et enregistre les scans que l’on réalise sous forme de modélisation. Lorsque l’on ouvre cette application, une boule apparaît dans l’espace et grâce à la commande vocale, celle-ci se déplace avec nous dans tous les espaces : « Come with me ». On peut ainsi décider de scanner à tout moment.
Les étapes pour réaliser un scan d’espace :
1) Choisir un espace, définir ce que l’on veut mapper
2) Définir les options du scan: intensité du maillage, la qualité…
3) Lancer le scan avec la commande vocale : « Start to scan »
4) Enregistrer le scan, pour cela il faut être connecté à internet. Mais le casque enregistre la forme en réserve.
5) Récupérer le fichier grâce au One drive du casque.
Points importants :
– Les espaces à une certaine hauteur sont difficiles voire impossibles à scanner
– Il faut une connexion internet pour enregistrer ce qu’on a mappé
– La vitesse n’est pas idéale pour les scans, il faut regarder l’espace pendant quelques secondes pendant le scan.
– Difficulté à capter notre propre corps
– Le casque ne scanne pas les éléments réfléchissants: voitures, miroirs. Cela créer des espaces vides.
– Scanne en priorité les surfaces planes (sol/mur)
– Ne scanne pas les objets/détails trop petits
– On ne décide pas de l’ampleur du scan
– Pour cibler une seule chose, il faut soit isoler l’objet soit supprimer ce qu’il y a autour
– Le casque a la particularité de garder en mémoire les espaces où on l’on est déjà allé : plus on va dans un même espace, plus le casque est performant et capte les détails du lieu.
Il est possible de modifier les scans réalisés avec le casque notamment avec le logiciel de modélisation 3D Blender. Blender est une suite d’outils de modélisation 3D et de rendu. Avec ce logiciel, on peut essayer des effets de matières, créer un fond pour éditer les formes. Placer les formes dans un espace bien défini avec le rendu voulu.
Le casque Hololens est une technologie qui nécessite obligatoirement le corps et les déplacements d’un usager. Le casque n’existe pas sans un corps mais le corps ne décide pas de ce que fait réellement le casque. L’utilisateur du casque n’a pas complètement le contrôle, le corps est rattrapé par la technologie. L’usager s’adapte aux contraintes du casque.
Étape 3 – Productions en perspective
Pour exploiter ces contraintes et cette vision que nous impose le casque, je me suis imposée des protocoles précis. Le casque garde le contrôle sur ce qu’il décide de scanner mais tout en suivant des règles. J’ai réalisé différents scans avec cette idée de règle et de processus définit :
L’utilisation du casque reste encore au stade d’expérimentation et de la recherche.
La réalité mixte offre de nouveaux aspects, une nouvelle vision du monde qui nous entoure.
Lise Lebleux, étudiante Ensba Lyon
Présentation du casque HoloLens :
https://fr.wikipedia.org/wiki/Microsoft_HoloLens
Top des meilleures applications Hololens (avec la présentation de l’application Holostudio) :
https://www.realite-virtuelle.com/hololens-top-jeux-applications
Space Catcher:
https://support.microsoft.com/fr-fr/help/13760/hololens-spaces-on-hololens
Blender :
http://blender3d.fr/
Tuto pour le logiciel Blender :
https://www.youtube.com/watch?v=9Y6hgVait7s
Liens consultés le 23-05-2018