Retour

Reverie

Transformez des moments précieux en un monde musical à manivelle : sur un cadre à champ lumineux Jupiter en 3D sans lunettes, un rouleau horizontal de scènes 3D se déroule en musique à mesure que vous tournez la manivelle, et s’achève sur un objet-souvenir personnel.

Auteur: Gift DuoCode source
Reverie

Description

Reverie permet à chacun de rassembler les moments qui lui sont chers, tirés de la vie ou de la fiction, dans un monde musical à explorer à la main. Un voyage partagé, un personnage d’anime préféré, une vue dans un jeu ou un moment d’un roman peuvent inspirer un cadeau personnel, pour quelqu’un qui partage ce souvenir ou cette histoire, ou pour vous-même.

Tournez la manivelle et un monde horizontal se déploie en musique : vous traversez des lieux familiers, rencontrez des personnages et des objets aimés, et, à la fin, un objet-souvenir dans la scène donne au voyage une conclusion personnelle. Au cœur de l’objet se trouve un cadre à champ lumineux Jupiter en 3D sans lunettes. L’équipe place le cadre à la verticale pour que les colonnes lenticulaires conservent la parallaxe gauche-droite, et le boîtier est mis à l’échelle à partir de dimensions réelles en millimètres (192 × 324 mm hors tout), si bien que le rouleau à l’écran respecte les proportions de la boîte à musique physique. La manivelle utilise un Pro Micro qui fait office de clavier USB, relié à la carte mère du cadre : chaque tour complet fait avancer le monde d’un tronçon, et la musique progresse avec lui.

Le processus de création proposé par l’équipe part de photos, d’images de référence et des idées de l’utilisateur. Le système les interprète et crée un panorama 2D modifiable, dont l’utilisateur affine le thème, la composition et les éléments, en choisissant un monde comme un jardin à la Mucha, un univers fantastique tiré du Shanhaijing, une aire de jeux Bauhaus, une île en pixel art ou une miniature chibi. Une fois le design 2D validé, l’API Tripo génère chaque élément 3D ; un modèle de langage aide à agencer la scène, ou l’utilisateur ajuste lui-même la position, l’échelle et la profondeur. Après validation du monde et choix de la musique, la scène, la musique et l’objet-souvenir final sont empaquetés et transférés sur le matériel Jupiter, pour être explorés avec la boîte à musique à manivelle.

Plutôt que d’utiliser le plug-in Unity, l’équipe a branché la sortie d’entrelacement web du Jupiter Interlace SDK directement sur une scène Three.js : le même code web sert d’aperçu 2D sur un ordinateur et de 3D sans lunettes sur le cadre. Le concept panoramique de chaque étape est transformé en monde 3D explorable avec World Labs Marble afin de vérifier que le premier plan, le plan intermédiaire, l’arrière-plan et le lointain se séparent vraiment ; il est ensuite précalculé en une plaque de fond placée derrière les modèles de premier plan générés par Tripo, ce qui donne une vraie profondeur à l’arrière tout en gardant l’avant interactif et les performances maîtrisées.

L’œuvre s’adresse à ceux qui partagent des souvenirs et des histoires. L’équipe espère qu’elle permettra à chacun de façonner un monde autour de ce qui l’émeut, puis de le voir, de l’entendre et d’y revenir à son propre rythme.

Comment Tripo a été utilisé

Tripo produit tous les assets 3D de l’œuvre : une fois le design 2D validé, l’API Tripo génère chaque élément 3D. Selon l’équipe, cela remplace des semaines de modélisation manuelle, si bien que chacun peut construire son propre monde 3D sur une page web en quelques minutes.

  • Images de style : après qu’un utilisateur a importé des photos, Tripo les redessine dans le style artistique choisi, par exemple Mucha.
  • Personnages : transformés en modèles 3D par génération multivue, puis aplatis en reliefs par les scripts maison de l’équipe pour s’adapter à l’écran à champ lumineux.
  • Objets : générés directement en image-to-3D ; les petites pièces sont reconstruites en voxels, décimées et passées au baking pour un rendu fluide sur un RK3566.
  • Le cas de démonstration a réellement été généré avec Tripo : 3 photos, 12 images de style, 4 images de référence et 4 modèles, avec des plaques de fond World Labs précalculées derrière les modèles de premier plan.

Vidéo