Protocole de captation vidéo 360° pour le détourage
Space Dances
10/2018

  • Un espace blanc avec des silhouettes détourées
  • Un schéma montrant la caméra (au centre) qui capte les quatres plans autour d'elle
    Captation par la caméra Vuze VR
  • Une vue sphérique d'un espace extérieur
    Étape 1 : faire une "photo" de l'espace vide
  • Un schéma montrant des distances différentes sur chaque arête de la caméra
    Étape 2 : tracer le marquage au sol
  • A côté de la caméra, un homme tient un carnet blanc
    Étape 3 : capter le corps immobile dans ces zones
  • La même vue sphérique de l'espace extérieur, avec des danseurs
    Etape 4 : capter la danse !
Étapes pour la captation de danses en 360° avec la caméra VUZE 360° en vue du détourage des corps des danseurs.
Danse
Réalité Augmentée
Vidéo

Contexte

Space Dances est un projet de visite chorégraphique d’un lieu en réalité augmentée. Il repose sur le développement d’une application de réalité augmentée qui permet au public d’avoir accès au contenu chorégraphique (vidéo) et sonore.

L’écriture chorégraphique est pensée pour un système de captation à 360°. La 1e version de l’œuvre est créée pour les Subsistances avec la caméra VUZE 360° du labo NRV.

La captation à360° permet de filmer l’environnement sous tous ses angles et de créer un film où le public peut tourner l’angle de vision pour déceler les éléments qui se trouvent dans les différents endroits de cet espace.

Pour qu’il y ait réalité augmentée, il doit d’abord y avoir réalité. Pour respecter le propos chorégraphique, la danse est captée dans les espaces qui l’ont inspirée.

Pour apparaître en réalité augmentée, les corps des danseurs doivent être détourés. En environnement réel, le détourage est moins aisé que si la danse était filmée sur fond uni. Le vidéaste a opté pour un système de détourage par soustraction d’images (implique une recherche sur les costumes des danseurs, qui doivent trancher avec le fond réel).

La caméra VUZE 360° a 4 faces. Chaque face capte un plan => 4 plans

Quand les danseurs passent d’un plan à l’autre, il faut faire du « stitching » (de la « couture ») entre les plans, c’est-à-dire raccommoder des bouts de corps souvent décalés.

L’application Humaneyes Studio numérote ces 4 passages (1, 2, 3, 4).

Protocole de captation vidéo

Étape 1 : faire une « photo » de l’espace vide

Capter d’abord l’espace vide qui permet ensuite de reconnaître les danseurs et les éventuels objets que nous voulons garder (tout ce qui n’est pas l’espace vide).

Étape 2 : tracer le marquage au sol

A chaque endroit où il faudra faire du « stitching » (passage entre les plans), on choisit un espace où passeront les danseurs. Sur chaque ligne, les danseurs devront toujours passer dans la même zone. Mais la distance à la caméra peut être différente en 1, 2, 3 ou 4  => Tracer les lignes + les zones.

Étape 3 : capter le corps immobile dans ces zones

Capter avec la VUZE une personne dans chacune de ces zones pour pouvoir choisir les paramètres du stitching une fois pour toutes pour 1, 2, 3 et 4.

Position corporelle de la « personne – gabarit » : debout, immobile, tient une feuille A4 sur laquelle est écrite la distance à laquelle la zone a été tracée (si pile 1m, 2m, 3m, 4m, inutile d’avoir une feuille, on peut donner la distance avec les doigts).

Étape 4 : capter la danse !

Les danseurs dansent, la caméra filme…

Étape 5 : stitching sous Humaneyes Studio

Une fois la vidéo importée sous Humaneyes Studio, les corrections de stitching peuvent être faites sur la personne immobile. Si les danseurs passent au bon endroit, ces corrections fonctionnent pour l’ensemble de la vidéo.

CREDITS

Raphaël Dupont : vidéo
Natacha Paquignon : conception, danse
Amaury Belin, MuseoPic : réalité augmentée

Matériel utilisé : caméra VUZE 360°

Logiciels utilisés :

  • Humaneyes studio
  • Adobe After Effects (détourage, editing)

Ressources :

Les deux premières fiches de documentation du projet Space Dances

Vidéos des premières expérimentations en réalité augmentée :

Avril 2018 – premier test aux Subsistances https://vimeo.com/267787590

Octobre 2018 – expérimentation lors de l’événement L’aventure ordinaire au CCO La Rayonne.
Danser avec son double : https://vimeo.com/297586529
Première expérience participative : https://vimeo.com/297586626