Upright Planet

Beschreibung

Upright Planet geht auf eine wahre Geschichte zurück. Im Sommer 2021 überarbeiteten Chinas Nationale Gesundheitskommission und das Bildungsministerium die Regeln für die Gesundheitsuntersuchung von Grund- und Mittelschülern und machten die Wirbelsäulenuntersuchung erstmals zu einem festen Bestandteil der Basisuntersuchung. Im selben Jahr schloss sich das Team des Autors einem größeren Verbundteam an, das in einem Kreis der Provinz Shaanxi den letzten groß angelegten Feldtest vor der Veröffentlichung des Standards durchführte: 36 Tiefenkameras erstellten in 5 Sekunden ein Modell vom Rücken jedes Schülers für das Erstscreening, mit einer Erfolgsquote von über 95 %, doch die Hardwarekosten verhinderten eine breite Einführung. Fünf Jahre später, inzwischen selbst Vater, hat der Autor dieses Bedauern in diesen Planeten verwandelt: ein Handyfoto plus die 3D-Fähigkeiten von Tripo, die jeder Familie ein kostenloses, behutsames erstes Screening ermöglichen sollen.

Fotografieren Sie den Rücken des Kindes (Seiten- und Vorbeugeaufnahmen sind optional). MediaPipe lokalisiert Landmarken am Körper und berechnet fünf Symmetriekennwerte: Schulterbalance, relativer Schulter-Becken-Winkel, seitliche Rumpfverschiebung, Symmetrie der Taillenkontur und Beckenschiefstand. Das Ergebnis wird in Anlehnung an das Screening-Verfahren der chinesischen Nationalnorm GB/T 16133 in eine grüne, gelbe oder rote Stufe eingeordnet. Gleichzeitig erstellt Tripo aus demselben Foto in etwa 40 Sekunden ein 3D-Modell vom Rücken genau dieses Kindes, auf dem Messlinien wie beim Arzt (Schulter-, Becken- und Mittellinie) direkt eingezeichnet sind, sodass jede Asymmetrie leicht zu erkennen ist.

Im Weltmodus wird der Rücken zu einem Planeten. Asymmetrien erscheinen als von Schatten verfinstertes Gelände, das das Kind in drei kamerabasierten Bewegungsprüfungen wiederherstellt, und die Wächterwesen des Planeten wurden mit Tripo Text-to-3D erzeugt. Am Ende steht der Planet wieder aufrecht, und die roten Zonen weichen Oasen. Es ist ein Geschenk für jedes Kind, das seinen Rücken vor den Eltern versteckt.

Die App stellt durchgehend klar, dass sie ein Screening bietet und keine Diagnose, und ihr einziger Rat bei der roten Stufe lautet stets, für eine Röntgenaufnahme der gesamten Wirbelsäule einen Arzt aufzusuchen. Da 2D-Landmarken die axiale Rotation der Wirbelsäule nicht messen können, landen Vorbeugeaufnahmen immer in einer konservativen Stufe: Die App vergibt lieber kein Grün, als falsche Sicherheit zu vermitteln. Zudem verschärft ein Hochrisiko-Fragebogen die Einstufung automatisch.

Technisch handelt es sich um eine statische Website ohne Build-Schritt, auf der Three.js und MediaPipe vollständig lokal laufen, sodass sie offline funktioniert; es gibt sie als Web- und als Android-Version. Mit dem brillenlosen 3D-Rendering von Jupiter zeigt der Planet auf einem 3D-Bildschirm mit Linsenraster echte Tiefe.

Wie Tripo eingesetzt wurde

Tripo steht in zweifacher Hinsicht im Zentrum des Werks:

• Image-to-3D-Rekonstruktion des Rückens: Aus einem Foto vom Rücken eines Kindes erzeugt die App über Image-to-3D der Tripo API in etwa 40 Sekunden ein PBR-3D-Modell vom Rücken genau dieses Kindes. Das Modell ist kein Schaustück, sondern die Grundlage des Screenings: Schulter-, Becken- und Mittellinie werden direkt darübergelegt, sodass Asymmetrien klar zu sehen sind. Ein Same-Origin-Proxy umgeht die CORS-Beschränkungen des Browsers für die API, sodass eine rein statische Website den gesamten Ablauf ausführen kann.
• Text-to-3D-Wesen: Die vier Wächterwesen Jimao, Yiniao, Xingshu und Xiaoji wurden mit Tripo Text-to-3D erzeugt und in das Werk integriert; ihre Karten im Bestiarium zeigen die ursprünglichen Prompts.

Alle diese Modelle werden über die brillenlose 3D-Rendering-Pipeline von Jupiter dargestellt.