ChatSpace

Descrição

Não faz muito tempo, era preciso dominar edição de modelos, texturização, desdobramento de UV, retopologia, rigging e animação esquelética antes de poder se considerar um modelador qualificado, e dominar só o Blender já levava muito tempo. ChatSpace é um presente para modeladores 3D. O autor acredita que, com os avanços em LLMs, NeRF, Gaussian splatting e infraestrutura de agentes, os modeladores agora têm a chance de contar com novas ferramentas, sem precisar aprender primeiro softwares complexos como Blender, 3ds Max ou C4D.

A ideia: abstrair cada capacidade de IA que ajuda na modelagem 3D, além de tudo o que o próprio Blender consegue fazer, em ferramentas que uma IA possa chamar, para que todo o trabalho seja feito em linguagem natural. Tarefas complexas que antes exigiam muitas idas e vindas dentro de um software de modelagem, como modelagem, texturização, desdobramento de UV, retopologia, bake, rigging, animação esquelética e até desenho CAD, podem ser concluídas em uma única troca. Tudo acontece em uma única caixa de chat e pode rodar em paralelo e em lote, para que você edite muitos modelos ao mesmo tempo.

Por exemplo, envie a foto de uma cena: a IA identifica o que há nela, gera em lote imagens de referência e modelos 3D para cada elemento e posiciona os modelos onde devem ficar, prontos para novas edições. Há também um modo em primeira pessoa com rastreamento de mãos: pegue e selecione um modelo na cena com a mão e depois diga ou digite o que quer, da modelagem e da retopologia ao desdobramento de UV e à animação. A interação foi pensada para XR.

A modelagem com IA já é rápida. O que acontece quando dez IAs estão modelando para você em lote ao mesmo tempo? O autor acha que o ganho de eficiência é mais do que dez vezes maior.

Como o Tripo foi usado

O autor transformou cada capacidade da documentação da API do Tripo em uma ferramenta que o agente pode chamar, incluindo geração de modelos, geração de imagens de referência, edição de texturas, segmentação em partes, complementação de malha, retopologia, rigging e animação.

• Da foto à cena: o usuário envia a foto de uma cena, a IA identifica quais elementos ela contém, e o Tripo gera em lote imagens de referência e depois modelos 3D para cada elemento, que são posicionados onde devem ficar. O usuário pode continuar editando com as outras capacidades do Tripo.
• Trabalhando com a World Labs: os elementos dentro de uma cena da World Labs não permitem interação individual, então o autor criou um fluxo de trabalho com agentes. Um modelo de imagem remove os objetos da foto para obter uma referência limpa do cenário, a World Labs gera o ambiente a partir dela, o Tripo gera em lote os objetos removidos como modelos 3D, e colisores e lógica de interação são adicionados, resultando em uma cena 3D interativa.