説明
「Aural Matter」は、生成された 3D を完成したイメージではなく、変容に開かれ続ける物質として扱う、リアルタイムの空間パフォーマンス楽器です。World Labs の環境、Tripo で生成したメッシュ、サンプリングした点、ライブ音声が共通の TouchDesigner システムに流れ込み、そこではガウシアン、ポイント、メッシュの各表現を、空間フィールド、モーフィング、カメラ、ライティング、光学処理によって再構成できます。
その構造は、3 種類の作者性を切り分けています。生成が素材を用意し、明示的なルールが関係性を保ちながら変換し、パフォーマンスがその変換をいつ起こすかを決めます。Aural Matter は音楽をビートで発動するエフェクトに還元するのではなく、音を圧力と刺激のフィールドとして扱います。低域、中域、高域、トランジェントの各信号が選んだパラメーターを変調する一方で、世界、表現、タイミング、強度のコントロールはパフォーマーが握り続けます。
作品の中心にあるのは、連続性と分解のあいだの緊張です。ある空間はまとまった環境として知覚されたあと、アイデンティティを失わないまま、粒子、面、信号、フィールドとして徐々に姿を現していきます。生成された世界やモデルは最終的なアセットではなく、再編成し、照らし、演奏できる物質の状態です。このプロジェクトはまた、生成とパフォーマンスを 1 本の連続したワークフローにつなげています。Tripo と World Labs のアセットは、生成またはインポートしてから正規化し、ポータブルなプロジェクトライブラリに登録して、演奏可能なソースとしてライブシステムに送り返せます。
ハッカソン以前には、基本的な 3DGS 表示、音声解析、カメラモーションを備えた AuralAlchemy という TouchDesigner の初期プロトタイプがありました。Tripothon の期間中にこれを大幅に作り直して Aural Matter とし、アーキテクチャの再構成、Tripo と World Labs の API 連携とアセット登録、ガウシアン・ポイント・メッシュ表現の統一、ライブパフォーマンス用インターフェースの作り直しを行いました。この作品は空間クリエイターとライブビジュアルアーティストへの贈り物であり、生成 3D はあえて未完成のままであるべきだ、つまり解釈、介入、パフォーマンスに開かれているべきだと提案しています。
Tripo の活用方法
Aural Matter では、Tripo で生成したモデルが静的なアセットで終わることはなく、いつでも演奏できる状態に保たれます。
- 生成とインポート：プロジェクトの API / Services レイヤーを通じて、3D モデルを Tripo で生成またはインポートし、共有のアセットライブラリに取り込みます。
- 準備と正規化：Prep / Normalize の段階を経たモデルは、Mesh、Point、Hybrid のいずれかの表現として使えます。
- パフォーマンスへ：モデルは World Labs の空間や、Field、Camera、Lighting、Audio Mapping といった TouchDesigner のモジュールとともに、ライブで再構成されます。
