01 / ÜBERBLICK
Überblick
Die Wassermond-Guanyin der Liao–Jin-Zeit ist eine tausend Jahre alte Holzskulptur in der Sitzhaltung königlicher Gelassenheit und befindet sich heute im Nelson-Atkins Museum of Art in den USA. Von der Zeit gezeichnet und fern der Heimat, lässt sie sich am besten durch digitale Restaurierung heimholen.
Dieser Leitfaden zerlegt die Restaurierung der Wassermond-Guanyin in einen Workflow aus acht Schritten, der sich im Projekt bewährt hat: Referenzbilder und drei Ansichten, Geometrie mit Tripo, Reparatur in ZBrush, dann Texturierung, Baking und eine UE5-Szene. Jeder Schritt beschreibt, was zu tun ist, welche Werkzeuge du brauchst und worauf es am meisten ankommt. Die letzten beiden Abschnitte behandeln die Methode der digitalen Stele, die aus dem Projekt hervorgegangen ist, sowie die abschließende Erzählszene „Zen-Tempel nach dem Schnee“.
Projekt-Setup:
- Referenzen und Ansichten: hochauflösende Referenzbilder plus Banana AI
- 3D-Generierung: Tripo H3.1 (Multiview-Eingabe, bis zu 2 Millionen Flächen) sowie Tripo-Retopologie und Texturgenerierung
- Sculpting und Reparatur: ZBrush
- Baking und Materialien: Substance Painter
- Szene und Rendering: Unreal Engine 5 (Lumen, Nanite)
02 / ÜBERBLICK
Zwei Mauern rund um die Digitalisierung von Kulturerbe
Mit einem Foto und einem Modell ist es bei der Digitalisierung von Kulturerbe nicht getan. In der industriellen Produktion wird sie vor allem von zwei Hürden ausgebremst.
Asset-Mangel und die Effizienzmauer
Bis ein einzelner Künstler komplexe Kulturerbe-Modelle wie Bodhisattvas, Kassettendecken, Dougong-Konsolen oder Stickereien von Hand gebaut hat, vergehen oft Wochen. Zehn IPs pro Jahr sind mit klassischem Outsourcing praktisch nicht zu schaffen.
Retopologie-Hölle
Hochpräzise Scans sind riesig, 5–20 GB pro Stück, und lassen sich nicht direkt in die Echtzeit-Pipeline von UE5 mit Nanite / Lumen übernehmen. Manuelle Retopologie kostet eine Person 1–2 Wochen, und sobald die Zahl der Assets wächst, bricht die Pipeline zusammen.
KI + 3D: von Wochen auf Minuten
Der größte Gewinn durch KI + 3D ist kein hübscheres Ergebnis, sondern ein Rollenwechsel: Der Designer wird vom Handwerker zum Regisseur der Erzählung. So hat sich jede Phase im Projekt der Wassermond-Guanyin verändert:
| Phase | Traditionell | KI + 3D |
|---|---|---|
| Basis-Mesh | Etwa 1 Woche | Etwa 1 Minute |
| Texturen | Etwa 1 Woche | Etwa 2 Minuten |
| Retopologie | Etwa 1 Woche | Automatisch |
| Fokus der Künstler | Jede Linie selbst zeichnen | Jedes Bild der Geschichte inszenieren |
03 / ÜBERBLICK
Warum die Wassermond-Guanyin
Drei Gründe machten sie zum Leuchtturmprojekt:
- Form: Die Haltung königlicher Gelassenheit bringt eine äußerst komplexe Anatomie mit sich — ein Härtetest dafür, wie gut KI Geometrie versteht.
- Detail: Die Schmuckketten auf der Brust, die fließenden Gewänder und das verwitterte Holz sind hochfrequente Oberflächendetails, die KI präzise rekonstruieren muss.
- Kultureller Wert: Mit Tripo können Kunstschätze, die heute im Ausland verstreut sind oder unter Verschluss liegen, im digitalen Raum heimkehren.
Das Kernziel war also nicht, eine digitale Skulptur zu kopieren, sondern Folgendes:
- Die asymmetrische Anatomie getreu nachbilden: Das ist keine symmetrische Sitzhaltung
- Hochfrequente Oberflächendetails automatisch erzeugen: Schmuckketten, Gewandfalten und verwitterte Maserung
- Einen erzählerischen Schauplatz über die Zeiten hinweg schaffen: kein isoliertes Modell, sondern eine Szene mit Geschichte
Was wir wiederbeleben wollten, war nicht die Holzschnitzerei, sondern ihr Geist.
04 / ÜBERBLICK
Datenerfassung und semantische Aufschlüsselung
Ziel: brauchbare semantische Seeds sammeln, also klares, rechtmäßig beschafftes und kulturell repräsentatives Ausgangsmaterial.
Eingabe / Ausgabe: Hochauflösende Referenzbilder gehen hinein, heraus kommt ein nach semantischen Ebenen beschriftetes Bildpaket.
Sammle sowohl Gesamtansichten als auch Nahaufnahmen wie die beiden Fotos oben und ordne sie dann nach Ebenen: Haltung, Gesicht und Haarknoten, Schmuckketten, Faltenwurf und Holzmaserung. Im nächsten Schritt kommen die Seed-Bilder direkt aus diesem Paket.
05 / ÜBERBLICK
Drei Ansichten mit KI ableiten
Ziel: aus einem oder wenigen Bildern drei Ansichten ableiten, damit die KI bei der 3D-Generierung die Proportionen richtig trifft.
Werkzeuge: Banana AI.
Worauf es ankommt: Dieser Schritt bestimmt, wie proportionsgenau alles wird, was danach generiert wird.
- Seeds vorbereiten: Wähle das klarste Einzelbild als Hauptreferenz, dazu drei bis sechs der repräsentativsten Bilder mit möglichst wenig Verdeckung.
- Ansichten in Banana AI ableiten: Alle Ansichten müssen exakt aufeinander ausgerichtet sein, auch für das bloße Auge.
06 / ÜBERBLICK
Die Form mit Matcap prüfen
Ziel: das Grundgerüst schon in 2D fixieren, damit die 3D-Generierung nicht abdriftet.
Werkzeuge: ein Matcap-Material (Feedback durch eine einzige Lichtquelle) plus eine graue Modellvorschau in ZBrush oder Blender.
Worauf es ankommt: Matcap nimmt die Farbe aus dem Spiel, sodass dein Auge nur beurteilt, ob die Form stimmt.
07 / ÜBERBLICK
Die Geometrie mit Tripo generieren
Ziel: das geometrische Basis-Mesh mit KI im Eiltempo aufbauen.
Werkzeuge: Tripo H3.1, das Multiview- und andere multimodale Eingaben verarbeitet, bis zu 2 Millionen Flächen erreicht und Volumen versteht.
Stärken: bis zu 2 Millionen Flächen an hochpräzisen Details, Eingabe aus mehreren Blickwinkeln und automatische Ergänzung der Bereiche, die auf den Bildern nicht zu sehen sind.
- Bereite mehrere Varianten von Referenz-Prompts oder Stichwörtern vor, etwa „Wassermond-Guanyin, Haltung königlicher Gelassenheit, verwitterte Holzschnitzerei, Liao–Jin-Stil“, als semantische Orientierung für die Generierung.
- Vergleiche die Ergebnisse von drei verschiedenen Prompts, behalte die Version, die dem kulturellen Charakter am nächsten kommt, und archiviere sie für späteres Feintuning.
- In Komponenten aufteilen: Reicht die Präzision nicht aus, zerlege das Bild in Teilstücke und generiere jedes einzeln. Je feiner die Aufteilung, desto reicher die Details.
08 / ÜBERBLICK
In ZBrush reparieren
Ziel: KI-Tempo mit Feinschliff von Hand verbinden, für hochpräzise Details wie Finger, Haarknoten und Schmuckketten.
Werkzeuge: Basis-Mesh aus Tripo, danach Reparatur von Hand in ZBrush.
Arbeitsteilung: Tripo baut das Basis-Mesh mit 2 Millionen Flächen in etwa einer Minute; ZBrush übernimmt das Sculpting von Hand für abgebrochene Finger, den Haarknoten, die Schmuckketten und ähnliche Details.
Die wichtigsten Einstellungen bei der Reparatur:
| Panel | Einstellungen |
|---|---|
| DynaMesh | Resolution 4096 · Blur 2 · Project an · SubProjection 0.6 |
| Projektion | Dist 0.02 · Mean 25 · Geometry an · Color an · PA Blur 10 · Farthest aus · ProjectionShell 0 |
| Geometrie | SDiv 3 · Lower Res · Del Lower |
| Verschweißen | Weld Points · WeldDist 1 |
Pinsel: Smooth, Standard, Move, Move Topological, Clay, ClayBuildup, KnifeLasso, MaskPen, Polish.
09 / ÜBERBLICK
Texturierung im zweiten Durchgang
Ziel: aus dem High-Poly-Modell hochpräzise 4K-Texturen erzeugen, die den verwitterten Look abblätternder Bemalung auf altem Holz zurückbringen.
Werkzeuge: Tripo-Retopologie plus Texturgenerierung. Dezimiere das Modell mit 2 Millionen Flächen zuerst: Retopologisiere es auf 150.000 Dreiecksflächen und generiere erst dann die Texturen.
Worauf es ankommt: Die KI nutzt beim Generieren der Texturen die drei Ansichten als Referenz und bewahrt so die historische Anmutung und die kulturellen Spuren.
10 / ÜBERBLICK
Baking und Materialverfeinerung
Ziel: die High-Poly-Details ins Low-Poly-Modell backen und so in die Echtzeit-Pipeline von UE5 gelangen.
Werkzeuge: Substance Painter (SP) mit High-/Low-Poly-Matching.
Worauf es ankommt: Dieser Schritt entscheidet, ob das Asset in UE5 wechselndem Licht standhält.
- Zeit für SP einplanen: 15–20 % des Gesamtaufwands, damit du kaputte Texturdetails nicht erst in UE5 entdeckst.
- Namenskonvention für Texturen festlegen: Der komplette Fünfersatz
_BaseColor/_Normal/_Roughness/_Metallic/_AOist Pflicht. - Das Asset unter extremer Beleuchtung in UE5 testen: Bleibt es bei grellem Licht, im Schatten und unter wandernden Lichtflecken stabil?
Wenn du Texturen mit KI direkt in SP malen möchtest, sieh dir dieses Plugin-Tutorial von Tianyu Xingfan auf bilibili an (auf Chinesisch):
Texturen malen in Substance 3D Painter mit NanoBanana (bilibili)11 / ÜBERBLICK
In eine UE5-Szene integrieren
Ziel: das digitale Asset so in eine Erzählszene setzen, dass die Betrachter glauben, es sei kein Rendering, sondern ein Moment mit eigener Geschichte.
Werkzeuge: Lumen-Echtzeitbeleuchtung in UE5 mit Nanite-Mikropolygon-Geometrie.
Worauf es ankommt: Erzählen mit Licht und durchdachtes Szenendesign machen aus dem Modell ein fertiges Werk.
12 / ÜBERBLICK
Ein wiederverwendbares Asset: die digitale Stele
Die digitale Stele ist das originellste Asset, das nebenbei im Projekt entstanden ist: KI verwandelt eine traditionelle Inschrift in ein 3D-Objekt, das du weiter sculpten kannst. Dieselbe Methode lässt sich auf jede Aufgabe übertragen, bei der aus einem 2D-Muster ein 3D-Modell wird, etwa Rüstungsmuster, Stickereien oder geschnitzte Fenstergitter.
Die Inschrift
Steleninschrift zur digitalen Wiedergeburt der Wassermond-Guanyin
Guanyin, die große Bodhisattva, erschienen als Mond im Wasser, wurde einst unter den Dynastien Liao und Jin von einer Klinge wundersamen Geschicks geschnitzt, ihre Haltung wie dahinziehende Wolken. Doch die Jahre verrannen, in Holz und Stein taten sich Risse auf, die Farben blätterten ab, und sie zog weit über die Meere, sodass die Heimat ihr wahres Antlitz nicht mehr erblicken konnte.
Heute reicht die Wissenschaft des intelligenten Rechnens von der Erde bis zum Himmel. Wir sammeln ihre in der Fremde verbliebenen Abbilder und die feinsten Stäubchen des Lichts, geben ihr Gestalt durch Zahlen statt durch Meißel und erschaffen ihr heiliges Bildnis neu, im Einklang von Wirklichem und Virtuellem. Jeder haarfeine Riss tritt auf klarer Bahn wieder hervor; ihre Schmuckketten und Gewänder erstrahlen im Licht wie neu. Von nun an kann alles, vom Berg Sumeru bis zum Senfkorn, Gestalt annehmen, und zehn Millionen Mesh-Flächen bauen gemeinsam am Mitgefühl.
Liegen auch Berge und Meere dazwischen, ihr Geist kehrt heim nach China. Diese Wiedergeburt ist nicht bloß zur Pagode gehäufter Sand, sondern die Begegnung von Handwerkskunst und göttlichem Erfindungsgeist. Wir meißeln diese Worte in Stein, auf dass ihre Gestalt fortbestehe, unvergänglich durch tausend Kalpas, und in kommenden Generationen den Funken der Inspiration entfache.
An einem glückverheißenden Tag im Frühsommer des Jahres Bingwu (2026)
So erzeugst du die Stele
Ziel: das 3D-Modell aus einem Bild der unbeschrifteten Stele erzeugen und die Inschrift anschließend in ZBrush zurück auf das High-Poly-Modell projizieren.
- Bereite ein Bild der Inschrift vor. Der Hintergrund muss reines Schwarz sein.
- Erzeuge mit Tripo die 3D-Grundform der Stele.
- Drücke in ZBrush Shift+Z, um Spotlight zu öffnen, und projiziere das Bild der Inschrift auf die 3D-Oberfläche.
- Sitzt das Bild an der richtigen Stelle, wechselst du mit Z in den Malmodus und pinselst den Text ein.
- Exportiere das High-Poly-Modell und backe die Normalen in SP.
Materialverfeinerung
- Importiere das High-Poly-Modell mit dem projizierten Text aus ZBrush in SP.
- Backe die Textdetails vom High-Poly-Modell in die Normal Map des Low-Poly-Modells.
- Baue in SP einfache Materialien nach: Stein, Moos und Schnee.
Einsatzmöglichkeiten: jede Aufgabe, bei der aus einem 2D-Muster ein 3D-Modell wird, etwa Muster auf Rüstungsoberflächen, geschnitzte Fenstergitter, Stickereien oder Motive auf Stirnziegeln.
13 / ÜBERBLICK
Szenische Erzählung: Zen-Tempel nach dem Schnee
Am Ende wird die Wassermond-Guanyin nicht isoliert gezeigt, sondern in eine Erzählszene gesetzt: „Zen-Tempel nach dem Schnee“. Das ist der Teil des Projekts, der sich am besten übertragen lässt. Ein Asset ist nie die Ziellinie; die Geschichte der Szene ist die Seele des Werks.
Das Wichtigste zum Szenendesign
Erzählerischer Kern: die Abendsonne nach dem Schneefall simulieren, wie sie durch die Dougong-Konsolen des Tempels bricht, damit die Lumen-Beleuchtung dem KI-Modell eine Lebendigkeit verleiht, die über das Traditionelle hinausgeht.
Drei konkrete Schritte beim Szenendesign:
- Eine Szenengeschichte mit 200 Zeichen schreiben: Was sollen die Betrachter auf den ersten Blick fühlen und sehen?
- Eine Schlüsseleinstellung wählen: Die gesamte technische Arbeit dreht sich um sie.
- Eine Richtung fürs Sounddesign festlegen: Tempelglocken, Wind, Sutrengesang. Der Klang ist die halbe Geschichte.
Szenenintegration
In UE5 wird das generierte Guanyin-Asset in den verschneiten Tempelhof gesetzt, und die Lumen-Beleuchtung erweckt es zum Leben.
„Gestalt durch Zahlen, nicht durch Meißel; ein heiliges Bildnis, wiedergeboren im Einklang von Wirklichem und Virtuellem.“ So lautet die knappste Fußnote des Teams zum digitalen Kulturerbe.
Bis ins letzte Detail: der Geist der Bodhisattva
Das KI-generierte hochpräzise Modell und seine Texturen fangen die verwitterte Maserung des Holzes und die geometrische Spannung der Haltung ein. Die finalen Abnahmekriterien:
- Auf den ersten Blick gleicht es dem Original: Es besteht den kulturellen Bauchgefühl-Test
- Auf den dritten Blick wirkt es neu: KI-verstärkte Details wie Verwitterung und Patina müssen sichtbar sein
- Auf den zehnten Blick hält es stand: Es verträgt genaues Hinsehen in jedem Licht und aus jedem Winkel
KI ist nicht der Endpunkt der Kunst, sondern Treibstoff für die Vorstellungskraft. Im langen Strom der Kulturerbe-Restaurierung stellen wir nicht nur Objekte wieder her, sondern die kulturelle Bedeutung, die Vergangenheit und Gegenwart verbindet.