Provalo dal vivo Descrizione
Upright Planet nasce da una storia vera. Nell’estate del 2021 la Commissione sanitaria nazionale e il Ministero dell’Istruzione cinesi hanno rivisto le norme sulle visite mediche per gli studenti delle scuole primarie e secondarie, rendendo per la prima volta il controllo della colonna vertebrale una voce di base della visita. Quell’anno il team dell’autore si è unito a un team congiunto più ampio in una contea dello Shaanxi per l’ultimo test sul campo su larga scala prima della pubblicazione dello standard: 36 telecamere di profondità costruivano in 5 secondi un modello della schiena di ogni studente per lo screening iniziale, con un tasso di successo superiore al 95%, ma il costo dell’hardware ne ha impedito la diffusione. Cinque anni dopo, ormai padre, l’autore ha trasformato quel rimpianto in questo pianeta: una foto scattata con il telefono più le capacità 3D di Tripo, per offrire a ogni famiglia un primo screening gratuito e delicato.
Scatta una foto della schiena del bambino (le viste laterale e in flessione anteriore sono facoltative). MediaPipe individua i punti di riferimento sul corpo e calcola cinque indicatori di simmetria: equilibrio delle spalle, angolo relativo spalle-bacino, spostamento laterale del tronco, simmetria del profilo della vita e inclinazione del bacino. Il risultato viene classificato in fascia verde, gialla o rossa secondo l’approccio di screening della norma nazionale cinese GB/T 16133. Nel frattempo, Tripo trasforma la stessa foto in un modello 3D della schiena del bambino stesso in circa 40 secondi, con linee di misurazione come quelle del medico (spalle, bacino e linea mediana) tracciate direttamente sopra, così ogni asimmetria salta all’occhio.
Nella modalità Mondo, la schiena diventa un pianeta. L’asimmetria si manifesta come terreno eclissato dall’ombra, che il bambino risana attraverso tre prove di movimento davanti alla telecamera, e le creature guardiane del pianeta sono state generate con Tripo text-to-3D. Alla fine il pianeta si raddrizza e le zone rosse si ritirano lasciando il posto a oasi. È un regalo per ogni bambino che nasconde la schiena ai genitori.
L’app chiarisce in ogni momento che offre uno screening, non una diagnosi, e l’unico consiglio che dà per la fascia rossa è sempre quello di rivolgersi a un medico per una radiografia completa della colonna. Poiché i punti di riferimento 2D non possono misurare la rotazione assiale della colonna vertebrale, le foto in flessione anteriore finiscono sempre in una fascia prudenziale: l’app preferisce negare un verde piuttosto che offrire false rassicurazioni. Inoltre, un questionario sui fattori ad alto rischio rende automaticamente più severe le fasce.
Sotto il cofano è un sito statico senza fase di build, con Three.js e MediaPipe eseguiti interamente in locale, quindi funziona offline ed è disponibile in versione web e Android. Grazie al rendering 3D senza occhiali di Jupiter, il pianeta mostra una vera profondità su uno schermo 3D lenticolare.
Come è stato usato Tripo
Tripo è al centro dell’opera, in due modi:
- Ricostruzione della schiena con image-to-3D: da una foto della schiena di un bambino, l’app chiama l’image-to-3D dell’API Tripo per generare in circa 40 secondi un modello 3D PBR della schiena del bambino stesso. Il modello non è un soprammobile ma la base dello screening: le linee di spalle e bacino e la linea mediana vi sono sovrapposte direttamente, rendendo l’asimmetria evidente. Un proxy same-origin aggira i limiti CORS del browser sull’API, così un sito puramente statico può eseguire l’intero workflow.
- Creature con text-to-3D: le quattro creature guardiane, Jimao, Yiniao, Xingshu e Xiaoji, sono state generate con Tripo text-to-3D e integrate nell’opera; le loro schede del bestiario mostrano i prompt originali.
Tutti questi modelli vengono visualizzati attraverso la pipeline di rendering 3D senza occhiali di Jupiter.
