Upright Planet

Descrição

Upright Planet nasceu de uma história real. No verão de 2021, a Comissão Nacional de Saúde e o Ministério da Educação da China revisaram as regras dos exames de saúde para alunos do ensino fundamental e médio, tornando o exame da coluna um item básico pela primeira vez. Naquele ano, a equipe do autor se juntou a uma equipe conjunta maior em um condado de Shaanxi para o último teste de campo em grande escala antes da publicação da norma: 36 câmeras de profundidade geravam em 5 segundos um modelo das costas de cada aluno para a triagem inicial, com uma taxa de sucesso da triagem acima de 95%, mas o custo do hardware impediu que a solução ganhasse escala. Cinco anos depois, já pai, o autor transformou aquela frustração neste planeta: uma foto de celular somada aos recursos 3D do Tripo, com a proposta de oferecer a cada família uma primeira triagem gratuita e gentil.

Basta tirar uma foto das costas da criança (as vistas lateral e em flexão anterior são opcionais). O MediaPipe localiza pontos de referência no corpo e calcula cinco métricas de simetria: equilíbrio dos ombros, ângulo relativo entre ombros e pelve, deslocamento lateral do tronco, simetria do contorno da cintura e inclinação pélvica. O resultado é classificado em faixa verde, amarela ou vermelha, seguindo a abordagem de triagem da norma nacional chinesa GB/T 16133. Ao mesmo tempo, o Tripo transforma a mesma foto em um modelo 3D das costas da própria criança em cerca de 40 segundos, com linhas de medição no estilo das usadas por médicos (ombros, pelve e linha média) traçadas diretamente sobre ele, para que qualquer assimetria fique fácil de ver.

No modo Mundo, as costas se transformam em um planeta. A assimetria aparece como um terreno eclipsado por sombras, que a criança restaura em três provas de movimento feitas diante da câmera, e as criaturas guardiãs do planeta foram geradas com text-to-3D do Tripo. No fim, o planeta volta a se endireitar e as zonas vermelhas recuam até virarem oásis. É um presente para cada criança que esconde as costas dos pais.

O aplicativo deixa claro o tempo todo que oferece triagem, não diagnóstico, e o único conselho que ele dá para a faixa vermelha é sempre procurar um médico para fazer uma radiografia da coluna inteira. Como pontos de referência em 2D não conseguem medir a rotação axial da coluna, as fotos em flexão anterior sempre caem em uma faixa conservadora: o aplicativo prefere deixar de dar um verde a oferecer uma falsa tranquilidade. Um questionário de alto risco também torna as faixas mais rigorosas automaticamente.

Tecnicamente, é um site estático sem etapa de build, com Three.js e MediaPipe rodando inteiramente no dispositivo, por isso funciona offline; há versões para web e Android. Com a renderização 3D sem óculos da Jupiter, o planeta ganha profundidade real em uma tela 3D lenticular.

Como o Tripo foi usado

O Tripo está no centro da obra, de duas formas:

• Reconstrução das costas com image-to-3D: a partir de uma foto das costas da criança, o aplicativo chama o image-to-3D da API do Tripo para gerar, em cerca de 40 segundos, um modelo 3D PBR das costas da própria criança. O modelo não é uma peça decorativa, e sim a base da triagem: as linhas dos ombros e da pelve e a linha média são sobrepostas diretamente a ele, deixando a assimetria evidente. Um proxy de mesma origem contorna os limites de CORS do navegador para a API, então um site puramente estático consegue executar todo o fluxo.
• Criaturas com text-to-3D: as quatro criaturas guardiãs, Jimao, Yiniao, Xingshu e Xiaoji, foram geradas com text-to-3D do Tripo e incorporadas à obra; os cartões de guia de campo delas mostram os prompts originais.

Todos esses modelos são exibidos por meio do pipeline de renderização 3D sem óculos da Jupiter.