Descrizione
Le foto conservano i momenti, ma li appiattiscono anche in cornici fisse e bidimensionali. MemoAR propone un altro tipo di archivio della memoria, in cui i momenti riprendono forma, occupano spazio e tornano nella vita quotidiana. È un regalo per chi vuole che i propri ricordi esistano oltre la cornice.
MemoAR è un’app mobile AR per iOS che trasforma foto esistenti e momenti appena catturati in oggetti-ricordo 3D interattivi. Un giocattolo d’infanzia, una torta di compleanno o un piatto preferito possono essere ricostruiti da un’immagine e portati nel tuo ambiente tramite l’AR. Trasformare una foto in 3D cambia più del suo aspetto: puoi girare intorno a un ricordo, vederlo da nuove angolazioni, ridimensionarlo e riposizionarlo, appoggiarlo su superfici reali, interagire con lui usando le mani e riunire più ricordi nello stesso spazio. Una torta di anni fa può tornare sulla tavola da pranzo; qualcosa che catturi oggi può diventare un ricordo 3D da incontrare di nuovo in futuro. MemoAR supporta anche la riemersione contestuale, così i ricordi significativi ricompaiono nei momenti e nei luoghi pertinenti invece di restare sepolti in una libreria di foto.
Il team ha valutato MemoAR con 16 partecipanti e 329 ricordi. I partecipanti hanno creato oggetti-ricordo 3D non solo per conservare momenti significativi, ma anche per estetica, collezionismo, curiosità e valore tangibile. In AR, hanno usato i ricordi per ricollegare passato e presente, creare composizioni giocose, interagire con oggetti ricordati e ridisegnare l’ambiente intorno a loro. Il risultato è un ciclo continuo della memoria: catturare o riscoprire una foto, trasformarla in 3D, collocarla e interagirci in AR, e ritrovarla nel tempo.
Prima dell’evento, MemoAR era un concept di ricerca con un primo prototipo, e il disegno dello studio aveva l’approvazione di un IRB. Durante l’evento, il team lo ha ricostruito trasformandolo nell’attuale sistema iOS end-to-end: un frontend curato, un backend con database e gestione degli utenti, la pipeline completa dalla foto al 3D con Tripo, il posizionamento e la manipolazione in AR, inclusi i gesti delle mani a mezz’aria, la composizione di più oggetti, il salvataggio basato sulla posizione per lasciare i ricordi in un luogo fisico e ritrovarli lì, e il deployment dell’intero sistema. Anche lo studio con gli utenti e la relativa analisi sono stati svolti durante l’evento.
Come è stato usato Tripo
Tripo è il motore centrale di generazione 3D dietro MemoAR. Invece di usarlo per creare asset una tantum, il team ha integrato l’API di Tripo in una pipeline completa della memoria:
- Gemini individua il soggetto e il contesto significativi in una foto e genera un’immagine di riferimento stilizzata.
- L’image-to-3D dell’API di Tripo trasforma il riferimento in un oggetto-ricordo 3D coerente.
- I modelli vengono poi collocati, manipolati, combinati, salvati nello spazio e fatti riemergere nel tempo in AR su dispositivi mobili.
