Açıklama
Aural Matter, üretilmiş 3D'yi bitmiş bir görüntü olarak değil, dönüşüme açık kalan bir madde olarak ele alan gerçek zamanlı bir mekânsal performans enstrümanıdır. World Labs ortamları, Tripo ile üretilmiş mesh'ler, örneklenmiş noktalar ve canlı ses ortak bir TouchDesigner sistemine akıyor; burada Gaussian, nokta ve mesh temsilleri mekânsal alanlar, morphing, kamera, ışıklandırma ve optik işleme aracılığıyla yeniden düzenlenebiliyor.
Yapısı üç tür yazarlığı birbirinden ayırıyor: üretim malzemeyi hazırlıyor, açık kurallar ilişkileri koruyup dönüştürüyor, performans ise bu dönüşümlerin ne zaman gerçekleşeceğine karar veriyor. Aural Matter, müziği vuruşla tetiklenen efektlere indirgemek yerine sesi bir basınç ve uyaran alanı olarak ele alıyor. Bas, orta ve tiz frekans sinyalleri ile ani ses geçişleri seçilen parametreleri modüle ederken icracı dünya, temsil, zamanlama ve yoğunluk üzerindeki kontrolü elinde tutuyor.
Merkezinde süreklilik ile ayrışma arasındaki bir gerilim var: bir mekân önce tutarlı bir ortam olarak algılanabilir, ardından kimliğini kaybetmeden yavaş yavaş parçacıklar, yüzeyler, sinyaller ve alanlar olarak açığa çıkabilir. Üretilmiş dünyalar ve modeller nihai asset'ler değil; yeniden düzenlenebilen, ışıklandırılabilen ve icra edilebilen madde hâlleri. Proje ayrıca üretimi ve performansı tek bir kesintisiz iş akışında birleştiriyor: Tripo ve World Labs asset'leri üretilebiliyor ya da içe aktarılabiliyor, normalize edilebiliyor, taşınabilir bir proje kütüphanesine kaydedilebiliyor ve çalınabilir kaynaklar olarak canlı sisteme geri gönderilebiliyor.
Hackathon'dan önce, temel 3DGS görüntüleme, ses analizi ve kamera hareketi sunan AuralAlchemy adlı erken bir TouchDesigner prototipi vardı. Tripothon sırasında bu prototip büyük ölçüde yeniden inşa edilerek Aural Matter'a dönüştü: mimari yeniden yapılandırıldı, Tripo ve World Labs API entegrasyonu ile asset kaydı eklendi, Gaussian, nokta ve mesh temsilleri birleştirildi ve canlı performans arayüzü baştan yapıldı. Eser, mekânsal yaratıcılara ve canlı görsel sanatçılara bir hediye; üretilmiş 3D'nin tasarım gereği bitmemiş kalması, yoruma, müdahaleye ve performansa açık olması gerektiğini öne sürüyor.
Tripo nasıl kullanıldı
Aural Matter'da Tripo ile üretilen modeller asla statik asset olarak kalmıyor; çalınabilir olmayı sürdürüyor.
- Üretme ve içe aktarma: projenin API / Services katmanı üzerinden 3D modeller Tripo ile üretiliyor ya da içe aktarılıyor, ardından ortak bir asset kütüphanesine giriyor.
- Hazırlama ve normalize etme: Prep / Normalize aşamasından sonra modeller Mesh, Point ya da Hybrid temsilleri olarak kullanılabiliyor.
- Performansa geçiş: modeller canlı olarak World Labs mekânlarıyla ve Field, Camera, Lighting, Audio Mapping gibi TouchDesigner modülleriyle birlikte yeniden düzenleniyor.
