Description
Les photos préservent les moments, mais elles les aplatissent aussi dans des cadres fixes, en deux dimensions. MemoAR propose une autre forme d’archive des souvenirs, où les moments reprennent forme, occupent l’espace et reviennent dans la vie quotidienne. C’est un cadeau pour celles et ceux qui veulent que leurs souvenirs existent au-delà du cadre.
MemoAR est une application mobile d’AR pour iOS qui transforme des photos existantes et des moments tout juste capturés en objets-souvenirs 3D interactifs. Un jouet d’enfance, un gâteau d’anniversaire ou un plat préféré peut être reconstitué à partir d’une image et ramené dans votre environnement grâce à l’AR. Passer une photo en 3D change plus que son apparence : vous pouvez faire le tour d’un souvenir, le voir sous de nouveaux angles, le redimensionner et le repositionner, le poser sur des surfaces réelles, interagir avec lui de vos mains et réunir plusieurs souvenirs dans le même espace. Un gâteau d’il y a des années peut retrouver la table de la salle à manger ; ce que vous capturez aujourd’hui peut devenir un souvenir 3D que vous retrouverez à l’avenir. MemoAR prend aussi en charge la réapparition contextuelle : les souvenirs importants refont surface aux moments et aux endroits pertinents au lieu de rester enfouis dans une photothèque.
L’équipe a évalué MemoAR avec 16 participants et 329 souvenirs. Les participants ont créé des objets-souvenirs 3D non seulement pour préserver des moments importants, mais aussi pour l’esthétique, le plaisir de collectionner, la curiosité et la valeur tangible. En AR, ils se sont servis des souvenirs pour relier passé et présent, composer des mises en scène ludiques, interagir avec des objets remémorés et transformer leur environnement. Il en résulte une boucle de mémoire continue : capturer ou redécouvrir une photo, la transformer en 3D, la placer et interagir avec elle en AR, puis la retrouver au fil du temps.
Avant l’événement, MemoAR était un concept de recherche doté d’un premier prototype, et le protocole d’étude avait reçu l’approbation d’un IRB. Pendant l’événement, l’équipe l’a reconstruit pour en faire l’actuel système iOS de bout en bout : un frontend soigné, un backend avec base de données et gestion des utilisateurs, la pipeline complète de la photo à la 3D avec Tripo, le placement et la manipulation en AR, y compris par gestes de la main dans les airs, la composition de plusieurs objets, l’enregistrement géolocalisé pour laisser des souvenirs dans un lieu physique et les y retrouver, et le déploiement de l’ensemble du système. L’étude utilisateur et son analyse ont également été réalisées pendant l’événement.
Comment Tripo a été utilisé
Tripo est le moteur central de génération 3D de MemoAR. Plutôt que de l’utiliser pour créer des assets ponctuels, l’équipe a intégré l’API Tripo dans une pipeline de mémoire complète :
- Gemini repère le sujet et le contexte significatifs d’une photo et génère une image de référence stylisée.
- L’image-to-3D de l’API Tripo transforme cette référence en un objet-souvenir 3D cohérent.
- Les modèles sont ensuite placés, manipulés, combinés, enregistrés dans l’espace et ramenés à la surface au fil du temps en AR mobile.
