Expériences interactives immersives
Quand le public devient acteur de l'œuvre
Le contexte
Des centres d'art numérique veulent aller plus loin que la projection immersive classique. Ils souhaitent que les visiteurs interagissent avec les œuvres : toucher un mur et révéler du contenu, scanner un dessin et le voir prendre vie, piloter un bateau virtuel...
Le défi : créer des expériences qui fonctionnent avec 1 ou 50 visiteurs simultanément, sans file d'attente, sans écran tactile, et qui tournent 7j/7 en toute fiabilité.
Les projets
Light Stripes — Amsterdam
Des bandes lumineuses interactives révèlent les œuvres de Klimt quand les visiteurs touchent les murs. Détection par scanner laser, effets visuels temps réel.
2 murs de 90 m², capteurs Leuze ROD4
Atelier des enfants — Paris & Hamburg
Les enfants colorient des dessins sur papier (bateaux, oiseaux, dinosaures...), puis les scannent. En quelques secondes, leur dessin est détecté, texturé sur un modèle 3D animé, et apparaît sur les murs de la salle immersive. Leur création prend vie et se balade dans différents univers : jungle de Rousseau, monde préhistorique...
Les dessins projetés deviennent aussi interactifs : en les touchant sur le mur, les enfants déclenchent des animations (plumes qui virevoltent, vagues, etc.).
Scan QR code, texturing temps réel sur modèles 3D, LiDAR pour interactions tactiles
Course de bateaux — Hamburg
En complément des dessins, une course de bateaux interactive. Trois proues de navires physiques équipées d'encodeurs permettent aux enfants de piloter leur bateau à l'écran, naviguer entre les obstacles et atteindre l'île au trésor.
Encodeurs TCP/IP, moteur physique 3D temps réel
Ma mission
J'ai conçu et développé l'ensemble de ces expériences interactives :
Développement
- •Programmation complète de l'interactivité dans Modulo Kinetic (Python/JS)
- •Création des effets visuels temps réel
- •Création des effets sonores
Intégration capteurs
- •Calibration des LiDAR 2D (Leuze, Hokuyo)
- •Configuration des scanners et encodeurs
- •Tests et validation
Coordination
- •Interface entre les studios créatifs (Holymage, Spectre Lab) et Modulo Pi
- •Adaptation des concepts artistiques aux contraintes techniques
Installation
- •Déploiement sur site
- •Calibration finale
- •Mise en service
Les résultats
The complementarity between the artistic and the technical dimensions allowed us to achieve a result up to what we imagined. Modulo Kinetic offers advanced rendering tools that allowed us creating what we wanted.