Upright Planet

Açıklama

Upright Planet gerçek bir hikâyeden doğdu. 2021 yazında Çin Ulusal Sağlık Komisyonu ve Eğitim Bakanlığı, ilk ve ortaöğretim öğrencilerine yönelik sağlık muayenesi kurallarını revize ederek omurga kontrolünü ilk kez temel muayene kalemleri arasına aldı. O yıl yazarın ekibi, standart yayımlanmadan önceki son büyük ölçekli saha testi için Shaanxi'deki bir ilçede daha büyük bir ortak ekibe katıldı: 36 derinlik kamerası ön tarama için her öğrencinin sırtının modelini 5 saniyede oluşturuyordu ve tarama başarı oranı %95'in üzerindeydi; ancak donanım maliyeti sistemin yaygınlaşmasını engelledi. Beş yıl sonra artık bir baba olan yazar, içinde ukde olarak kalan bu deneyimi bu gezegene dönüştürdü: Bir telefon fotoğrafı ve Tripo'nun 3D yetenekleriyle her aileye ücretsiz ve nazik bir ilk tarama sunmayı amaçlıyor.

Çocuğun sırtının fotoğrafını çekmeniz yeterli (yandan ve öne eğilme pozisyonundaki çekimler isteğe bağlıdır). MediaPipe vücut üzerindeki referans noktalarını belirler ve beş simetri ölçütünü hesaplar: omuz dengesi, omuz-pelvis göreli açısı, gövdenin yana kayması, bel konturu simetrisi ve pelvis eğimi. Sonuç, Çin ulusal standardı GB/T 16133'ün tarama yaklaşımına göre yeşil, sarı veya kırmızı kademeye ayrılır. Bu sırada Tripo aynı fotoğrafı yaklaşık 40 saniyede çocuğun kendi sırtının 3D modeline dönüştürür; doktorların kullandığı türden ölçüm çizgileri (omuz, pelvis ve orta hat) doğrudan modelin üzerine çizildiği için her türlü asimetri kolayca görülür.

Dünya modunda sırt bir gezegene dönüşür. Asimetri, gölge tutulmasına uğramış bir arazi olarak görünür; çocuk bu araziyi kamera karşısında yaptığı üç hareket sınavıyla onarır. Gezegenin koruyucu yaratıkları ise Tripo text-to-3D ile üretildi. Sonunda gezegen yeniden dimdik durur ve kırmızı bölgeler geri çekilerek vahalara dönüşür. Bu, sırtını anne babasından saklayan her çocuğa bir hediye.

Uygulama, teşhis değil tarama sunduğunu baştan sona açıkça belirtir; kırmızı kademe için verdiği tek tavsiye de her zaman tüm omurga röntgeni için doktora gitmektir. 2D referans noktaları omurganın eksenel rotasyonunu ölçemediğinden öne eğilme fotoğrafları her zaman temkinli bir kademeye yerleştirilir: Uygulama, yanlış bir güvence vermektense yeşil vermemeyi tercih eder. Yüksek risk anketi de kademeleri otomatik olarak sıkılaştırır.

Teknik açıdan, derleme adımı gerektirmeyen statik bir site söz konusu; Three.js ve MediaPipe tamamen yerelde çalıştığı için çevrimdışı da kullanılabilir, web ve Android sürümleri de bulunur. Jupiter'in gözlüksüz 3D render teknolojisi sayesinde gezegen, lentiküler bir 3D ekranda gerçek bir derinlik kazanır.

Tripo nasıl kullanıldı

Tripo bu çalışmanın merkezinde ve iki şekilde kullanılıyor:

• Image-to-3D ile sırt rekonstrüksiyonu: Uygulama, bir çocuğun sırtından çekilen tek bir fotoğraftan yola çıkarak Tripo API'nin image-to-3D özelliğini çağırır ve yaklaşık 40 saniyede çocuğun kendi sırtının PBR'li 3D modelini üretir. Model bir vitrin objesi değil, taramanın temelidir: Omuz, pelvis ve orta hat çizgileri doğrudan modelin üzerine bindirilir, böylece asimetri açıkça görülür. Aynı kökenli bir proxy, tarayıcının API'ye yönelik CORS kısıtlamalarını aşar; bu sayede tamamen statik bir site tüm iş akışını çalıştırabilir.
• Text-to-3D ile yaratıklar: Dört koruyucu yaratık, yani Jimao, Yiniao, Xingshu ve Xiaoji, Tripo text-to-3D ile üretilip çalışmaya dahil edildi; rehber kartlarında orijinal prompt'ları gösteriliyor.

Tüm bu modeller Jupiter'in gözlüksüz 3D render iş akışı üzerinden görüntüleniyor.