ChatSpace

Descripción

No hace mucho, había que dominar la edición de modelos, el texturizado, el desplegado de UV, la retopología, el rigging y la animación esquelética antes de poder considerarse un modelador cualificado, y solo dominar Blender ya llevaba mucho tiempo. ChatSpace es un regalo para los modeladores 3D. El autor cree que, con los avances en LLM, NeRF, Gaussian splatting e infraestructura de agentes, los modeladores tienen ahora la oportunidad de contar con nuevas herramientas, sin tener que aprender primero software complejo como Blender, 3ds Max o C4D.

La idea: abstraer todas las capacidades de IA que ayudan en el modelado 3D, además de todo lo que puede hacer el propio Blender, en herramientas que una IA pueda llamar, de modo que todo el trabajo pueda hacerse en lenguaje natural. Tareas complejas que antes requerían muchas idas y vueltas dentro del software de modelado, como el modelado, el texturizado, el desplegado de UV, la retopología, el horneado, el rigging, la animación esquelética e incluso el dibujo CAD, pueden resolverse en un solo intercambio. Todo ocurre en un único cuadro de chat y puede ejecutarse en paralelo y por lotes, así que puedes editar muchos modelos a la vez.

Por ejemplo, sube la foto de una escena: la IA identifica lo que contiene, genera por lotes imágenes de referencia y modelos 3D de cada elemento y coloca los modelos en su sitio, listos para seguir editándolos. También hay un modo en primera persona con seguimiento de manos: agarra y selecciona con la mano un modelo de la escena y luego di o escribe lo que quieres, desde el modelado y la retopología hasta el desplegado de UV y la animación. La interacción está diseñada pensando en XR.

El modelado con IA ya es rápido. ¿Qué pasa cuando diez IA modelan para ti por lotes al mismo tiempo? El autor cree que la eficiencia se multiplica por más de diez.

Cómo se usó Tripo

El autor convirtió cada capacidad de la documentación de la API de Tripo en una herramienta que el agente puede llamar, como la generación de modelos, la generación de imágenes de referencia, la edición de texturas, la segmentación por partes, el completado de mallas, la retopología, el rigging y la animación.

• De foto a escena: un usuario sube la foto de una escena, la IA identifica qué elementos contiene y Tripo genera por lotes imágenes de referencia y después modelos 3D de cada elemento, que se colocan en su sitio. El usuario puede seguir editando con las demás capacidades de Tripo.
• Trabajo con World Labs: los elementos de una escena de World Labs no admiten interacción por separado, así que el autor creó un flujo de trabajo con agentes. Un modelo de imagen elimina los objetos de la foto para obtener una referencia limpia del escenario, World Labs genera el entorno a partir de ella, Tripo genera por lotes los objetos eliminados como modelos 3D y se añaden colisionadores y lógica de interacción, con lo que se obtiene una escena 3D interactiva.