Volver

IA + 3D: restauración digital del patrimonio

2026.11.0410 MIN DE LECTURAFlujos de trabajo

01 / RESUMEN

Resumen

La Guanyin de la Luna en el Agua de época Liao–Jin es una escultura milenaria de madera, sentada en la postura de relajación real, que hoy se conserva en el Museo de Arte Nelson-Atkins, en Estados Unidos. Con el desgaste de los siglos y lejos de su tierra, su mejor camino de regreso es la restauración digital.

Esta guía desglosa la restauración de la Guanyin de la Luna en el Agua en un flujo de trabajo de ocho pasos probado en el propio proyecto: imágenes de referencia y tres vistas, geometría con Tripo, reparación en ZBrush y, después, texturizado, horneado y escena en UE5. Cada paso explica qué hacer, con qué herramientas y qué es lo más importante. Las dos últimas secciones presentan el método de la estela digital que surgió del proyecto y la escena narrativa final, «Templo zen tras la nevada».

Configuración del proyecto:

  • Referencias y vistas: imágenes de referencia en alta resolución y Banana AI
  • Generación 3D: Tripo H3.1 (entrada multivista, hasta 2 millones de caras), además de la retopología y la generación de texturas de Tripo
  • Esculpido y reparación: ZBrush
  • Horneado y materiales: Substance Painter
  • Escena y renderizado: Unreal Engine 5 (Lumen, Nanite)
La escena final, «Templo zen tras la nevada», renderizada en tiempo real en UE5.
La escena final, «Templo zen tras la nevada», renderizada en tiempo real en UE5.

02 / RESUMEN

Los dos muros de la digitalización del patrimonio

Digitalizar el patrimonio exige algo más que una foto y un modelo. En la producción industrial, hay dos obstáculos que realmente lo frenan.

La escasez de assets y el muro de la eficiencia

Los modelos patrimoniales complejos, como bodhisattvas, techos artesonados, ménsulas dougong o bordados, suelen llevarle semanas a un solo artista si los modela a mano. Sacar diez IP al año es prácticamente imposible con la subcontratación tradicional.

El infierno de la retopología

Los escaneos de alta precisión son enormes, de 5–20 GB por pieza, y no pueden entrar directamente en el pipeline en tiempo real de UE5 con Nanite / Lumen. La retopología manual le lleva a una persona 1–2 semanas, y el pipeline se viene abajo en cuanto crece el número de assets.

IA + 3D: de semanas a minutos

La mayor ventaja del binomio IA + 3D no es un resultado más bonito: hace que el diseñador deje de ser un artesano manual para convertirse en un director narrativo. Así cambió cada etapa en el proyecto de la Guanyin de la Luna en el Agua:

EtapaTradicionalIA + 3D
Malla baseAlrededor de 1 semanaAlrededor de 1 minuto
TexturasAlrededor de 1 semanaAlrededor de 2 minutos
RetopologíaAlrededor de 1 semanaAutomática
Foco del artistaDibujar cada líneaDirigir cada fotograma de la historia

03 / RESUMEN

Por qué la Guanyin de la Luna en el Agua

Tres razones la convirtieron en el caso insignia:

  • Forma: la postura de relajación real tiene una anatomía extremadamente compleja, toda una prueba de fuego para la comprensión geométrica de la IA.
  • Detalle: los collares sobre el pecho, las vestiduras ondulantes y la madera erosionada son detalles superficiales de alta frecuencia que la IA debe reconstruir con precisión.
  • Valor cultural: con Tripo, los tesoros dispersos por el extranjero o guardados bajo llave pueden volver a casa en el espacio digital.
El originalEl original
DetalleDetalle
La Guanyin de la Luna en el Agua de época Liao–Jin, Museo de Arte Nelson-Atkins.

Por eso, el objetivo central no era limitarse a replicar la escultura en digital, sino:

  • Reproducir fielmente la anatomía asimétrica: no es una postura sedente simétrica
  • Generar automáticamente el detalle superficial de alta frecuencia: collares, pliegues del ropaje y vetas erosionadas
  • Construir un escenario narrativo que atraviese el tiempo: no un modelo aislado, sino una escena con una historia

Lo que nos propusimos revivir no es una talla de madera, sino su espíritu.

04 / RESUMEN

Recopilación de datos y desglose semántico

Objetivo: reunir semillas semánticas utilizables, es decir, material de partida nítido, de procedencia legítima y culturalmente representativo.

Entrada / salida: entran imágenes de referencia de alta resolución y sale un paquete de material etiquetado por capas semánticas.

Recoge vistas completas y también primeros planos, como las dos fotos de arriba, y luego archívalo todo por capas: postura, rostro y moño, collares, ropaje y veta de la madera. En el siguiente paso, las imágenes semilla se eligen directamente de este paquete.

05 / RESUMEN

Deduce las tres vistas con IA

Objetivo: deducir las tres vistas a partir de una o unas pocas imágenes para que la IA acierte con las proporciones durante la generación 3D.

Herramientas: Banana AI.

Punto clave: este paso determina la precisión de las proporciones de todo lo que se genere después.

  • Prepara las semillas: elige la imagen más nítida de todas como referencia principal y añade entre tres y seis de las imágenes más representativas y con menos oclusiones.
  • Deduce las vistas en Banana AI: todas deben alinearse con exactitud, incluso a simple vista.
FrontalFrontal
Tres cuartosTres cuartos
LateralLateral
Las vistas deducidas en Banana AI.

06 / RESUMEN

Comprueba la forma con Matcap

Objetivo: fijar la estructura esquelética cuando todavía estás en 2D, para que la generación 3D no se desvíe.

Herramientas: un material Matcap (respuesta a una única fuente de luz) con vista previa del modelo en gris en ZBrush o Blender.

Punto clave: Matcap saca el color de la ecuación, así que tu ojo solo juzga si la forma es correcta.

FrontalFrontal
LateralLateral
Vista previa con Matcap: juzga la forma, no el color.

07 / RESUMEN

Genera la geometría con Tripo

Objetivo: construir rápidamente con IA la malla base geométrica.

Herramientas: Tripo H3.1, que admite entrada multivista y otras entradas multimodales, llega hasta 2 millones de caras y entiende los volúmenes.

Puntos fuertes: hasta 2 millones de caras de detalle de alta precisión, entrada desde varios ángulos y relleno automático de las zonas que las imágenes no muestran.

  • Prepara varios conjuntos de prompts o palabras clave de referencia, por ejemplo «Guanyin de la Luna en el Agua, postura de relajación real, talla de madera erosionada, estilo Liao–Jin», como guía semántica para la generación.
  • Compara los resultados de tres prompts distintos, quédate con la versión más fiel al carácter cultural y archívala para ajustes posteriores.
  • Trabaja por componentes: cuando la precisión se quede corta, divide la imagen en partes y genera cada una por separado. Cuanto más fina sea la división, más rico será el detalle.
Malla base completaMalla base completa
Detalle de la cabezaDetalle de la cabeza
La malla base generada con Tripo H3.1.
Documentación de la API de multivista a modelo 3D (serie H)

08 / RESUMEN

Repara los detalles en ZBrush

Objetivo: combinar la velocidad de la IA con el acabado manual en detalles de alta precisión, como los dedos, el moño y los collares.

Herramientas: malla base de Tripo y, después, reparación manual en ZBrush.

Reparto de tareas: Tripo genera la malla base de 2 millones de caras en alrededor de un minuto; ZBrush se encarga de esculpir a mano los dedos rotos, el moño, los collares y detalles similares.

Detalles tras la reparación en ZBrush.
Detalles tras la reparación en ZBrush.

Ajustes principales usados en la reparación:

PanelAjustes
DynaMeshResolution 4096 · Blur 2 · Project activado · SubProjection 0.6
ProyecciónDist 0.02 · Mean 25 · Geometry activado · Color activado · PA Blur 10 · Farthest desactivado · ProjectionShell 0
GeometríaSDiv 3 · Lower Res · Del Lower
SoldaduraWeld Points · WeldDist 1

Pinceles: Smooth, Standard, Move, Move Topological, Clay, ClayBuildup, KnifeLasso, MaskPen, Polish.

09 / RESUMEN

Texturizado en segunda pasada

Objetivo: generar a partir del modelo high-poly texturas 4K de alta precisión que recuperen el aspecto envejecido de la pintura desconchada sobre la madera antigua.

Herramientas: retopología y generación de texturas de Tripo. Primero reduce el modelo de 2 millones de caras: retopologízalo en triángulos con 150.000 caras y luego genera las texturas.

Punto clave: la IA usa las tres vistas como referencia al generar las texturas, de modo que conserva la sensación de antigüedad y las huellas culturales.

El modelo tras la generación de texturas con Tripo.
El modelo tras la generación de texturas con Tripo.
Documentación de la API de retopologíaDocumentación de la API de texturas

10 / RESUMEN

Horneado y refinado de materiales

Objetivo: hornear el detalle del modelo high-poly en el low-poly y entrar en el pipeline en tiempo real de UE5.

Herramientas: Substance Painter (SP) con emparejamiento entre high-poly y low-poly.

Punto clave: este paso decide si el asset aguanta los cambios de luz en UE5.

Materiales en Substance Painter.
Materiales en Substance Painter.
El asset en el viewport de UE5.
El asset en el viewport de UE5.
  • Reserva tiempo para SP: el 15–20 % del total, para no descubrir detalles de textura rotos cuando ya hayas llegado a UE5.
  • Define una convención de nombres para las texturas: el juego completo de cinco, _BaseColor / _Normal / _Roughness / _Metallic / _AO, es obligatorio.
  • Prueba el asset con iluminación extrema en UE5: ¿se mantiene estable con luz intensa, sombras y manchas de luz en movimiento?

Para pintar texturas con IA directamente dentro de SP, consulta este tutorial de Tianyu Xingfan sobre el plugin, publicado en bilibili (en chino):

Substance 3D Painter con NanoBanana para pintar texturas (bilibili)

11 / RESUMEN

Integra el asset en una escena de UE5

Objetivo: situar el asset digital en una escena narrativa para que el público crea que no es un render, sino un momento en el tiempo con su propia historia.

Herramientas: iluminación en tiempo real con Lumen de UE5 y geometría de micropolígonos con Nanite.

Punto clave: narrar con la luz y con el diseño de escena convierte el modelo en una obra acabada.

El patio nevado del templo en UE5.
El patio nevado del templo en UE5.

12 / RESUMEN

Un asset reutilizable: la estela digital

La estela digital es el asset complementario más ingenioso del proyecto: la IA convierte una inscripción tradicional en un objeto 3D que puedes esculpir. El mismo método se extiende a cualquier tarea que convierta un motivo 2D en un modelo 3D, como motivos de armaduras, bordados o celosías talladas de ventanas.

La inscripción

Estela del renacer digital de la Guanyin de la Luna en el Agua

Guanyin, la Gran Bodhisattva, encarnada como la luna en el agua, fue tallada por vez primera en tiempos de los Liao y los Jin por una gubia de prodigiosa maestría, con un porte como de nube errante. Mas fluyeron los años: se agrietaron la madera y la piedra, se desprendió su policromía, y ella partió lejos, allende los mares, de suerte que su tierra natal ya no pudo contemplar su verdadero rostro.

Hoy, la ciencia de la computación inteligente se extiende de la tierra al cielo. Reuniendo las imágenes que de ella quedaron en ultramar y las más finas motas de luz, le damos forma con números y no con cinceles, y reconstruimos su sagrada efigie allí donde lo real y lo virtual conviven. Cada grieta, fina como un cabello, reaparece por una senda clara; bajo la luz, sus collares y sus vestiduras vuelven a lucir como nuevos. Desde ahora, del monte Sumeru a un grano de mostaza, todas las cosas pueden cobrar forma, y diez millones de caras de malla edifican juntas la compasión.

Aunque medien montes y mares, su espíritu vuelve a China. Este renacer no es mera arena amontonada hasta alzar una pagoda, sino el encuentro entre la maestría artesana y el ingenio divino. Grabamos en piedra esta memoria con la esperanza de que su forma perdure, imperecedera a lo largo de mil kalpas, y encienda la inspiración de las generaciones venideras.

Un día fausto de principios del verano, año bingwu (2026)

La estela digital, erguida en el templo nevado.
La estela digital, erguida en el templo nevado.

Cómo generarla

Objetivo: generar el modelo 3D a partir de una imagen de la estela sin inscripción y luego proyectar de nuevo la inscripción sobre el modelo high-poly en ZBrush.

  • Prepara una imagen de la inscripción. El fondo debe ser negro puro.
  • Genera con Tripo la base 3D de la estela.
  • En ZBrush, pulsa Shift+Z para abrir Spotlight y proyecta la imagen de la inscripción sobre la superficie 3D.
  • Cuando esté en su sitio, pulsa Z para pasar al modo de pintura y aplica el texto con el pincel.
  • Exporta el modelo high-poly y hornea las normales en SP.
Inscripción sobre fondo negroInscripción sobre fondo negro
Estela generada con TripoEstela generada con Tripo

Refinado de materiales

  • Importa en SP el modelo high-poly con el texto proyectado desde ZBrush.
  • Hornea el detalle del texto del modelo high-poly en el mapa de normales del low-poly.
  • Recrea materiales sencillos en SP: piedra, musgo y nieve.
La inscripción proyectada en relieve en ZBrush.
La inscripción proyectada en relieve en ZBrush.
Estela sin inscripciónEstela sin inscripción
Tras la proyecciónTras la proyección
Material de piedra en SPMaterial de piedra en SP

Dónde reutilizarlo: cualquier tarea que convierta un motivo 2D en un modelo 3D, como los motivos de la superficie de una armadura, las celosías talladas de ventanas, los bordados o los motivos de las antefijas.

13 / RESUMEN

Narrativa de escena: «Templo zen tras la nevada»

Al final, la Guanyin de la Luna en el Agua no se muestra de forma aislada: se sitúa en una escena narrativa, «Templo zen tras la nevada». Es la parte más extrapolable del proyecto. Un asset nunca es la meta; la historia de la escena es el alma de la obra.

Claves del diseño de escena

Núcleo narrativo: simula el sol del atardecer tras la nevada atravesando las ménsulas dougong del templo, para que la iluminación de Lumen dé al modelo de IA una sensación de vida que va más allá de lo tradicional.

Tres acciones concretas durante el diseño de escena:

  • Escribe una historia de la escena en 200 caracteres: ¿qué debe sentir y ver el público a primera vista?
  • Elige un plano clave: todo el trabajo técnico gira en torno a él.
  • Define una línea de diseño sonoro: campanas del templo, viento, cánticos. El sonido es la mitad de la historia.
Vista general de «Templo zen tras la nevada».
Vista general de «Templo zen tras la nevada».

Integración en la escena

En UE5, el asset generado de la Guanyin se coloca en el patio nevado del templo, y la iluminación de Lumen le da vida.

«Forma dada por números, no por cinceles; una sagrada efigie renacida allí donde lo real y lo virtual conviven». Es la apostilla más concisa del equipo sobre el patrimonio digital.

Detalle máximo: el espíritu de la bodhisattva

El modelo y las texturas de alta precisión generados con IA capturan la veta erosionada de la madera y la tensión geométrica de la postura. Los criterios finales de aceptación:

  • A primera vista, se parece al original: supera la prueba de la intuición cultural
  • A la tercera mirada, aporta algo nuevo: deben verse los detalles realzados por la IA, como la erosión y la pátina
  • A la décima mirada, se sostiene: resiste un examen minucioso con cualquier luz y desde cualquier ángulo
La Guanyin de la Luna en el Agua en el interior del templo.
La Guanyin de la Luna en el Agua en el interior del templo.

La IA no es el punto final del arte, sino un acelerante de la imaginación. En el largo río de la restauración del patrimonio, no solo restauramos objetos, sino el significado cultural que une el pasado y el presente.

«Templo zen tras la nevada»: el render en tiempo real de UE5.