ライブで試す 説明
「Vaho」は、遠く離れた場所でつらい時を過ごしている誰か、たとえばホームシックの人や病院のベッドにいる人、あるいはただ地球の反対側にいる人のための窓です。曇った窓を指で拭うと、その向こうにある場所が現れます。曇りの上に絵を描き、ひと言添えると、「Vaho」はその場所とあなたの絵とメッセージを、ひとつの短いリンクにたたみ込みます。リンクを開いた人は、ガラスに自分の名前を見つけます。息がかかってガラスが曇り、あなたのメッセージがひとりでに書かれていき、相手がガラスを拭うと、あなたが描いたすべてが窓の外で待っています。
窓は 8 つあります。エクアドルの火山のふもとの町、日本の鉄道の町、アイオワの農場、プロヴァンスの中庭、雲の上の島、月の温室、海の底の庭、そして夕暮れに明かりが灯る森です。いくつかの窓では、窓枠を乗り越えて外を歩くこともできます。
描くことがインターフェースです。記号は場所を変えます。ハートを描けば紙のランタンが舞い上がり、星を描けば夜が訪れ、鳥を描けば折り鶴が放たれます。動物は自由に描けます。Google の Quick, Draw! データセットで学習した小さなニューラルネットワークがブラウザ内で 10 種類の動物を認識し、折り紙になったその動物が歩み出て、その世界の本物の地面の上を歩きます。
どの景色も、1 枚の画像から生成された World Labs のワールドです（元画像は ChatGPT の画像生成で作られました）。それを Spark でガウシアンスプラットとしてストリーミングし、曇りのシェーダーの奥に表示しています。マウスの動きで、あるいはカメラをオンにすれば頭の動きで、本物の視差が生まれます。各ワールドのコライダーメッシュが、生き物や訪れた人が歩く地面になり、紙の生き物は壁の前で立ち止まります。
スマートフォンでもデスクトップでも、どのブラウザでも動作し、インストールは不要です。アイデア、コード、8 つの World Labs のワールド、Tripo で作った生き物と窓辺の小物、スケッチ認識器、サウンド、ウォークスルー動画まで、すべてハッカソン期間中にゼロから作られました。音楽と効果音はコードで生成されています。
Tripo の活用方法
Tripo は、この動物図鑑のエンジンです。作者はこう語ります。「Tripo がなければ、落書きは落書きのままだった」。
- 落書きから生き物へ：シンプルなスケッチを画像から画像への生成にかけ、スケッチのポーズを保った折り紙バージョンにし、画像から 3D（H v3.1）でモデルを作り、オートリギングとリターゲティングで歩行や泳ぎのサイクルを付けます。
- 成果物：10 種類の動物と窓辺の小物です。すべて作者がオフラインで生成しているため、ページが Tripo のクレジットを消費することはなく、訪れた人のサインアップも不要です。
- 作品の中で：訪れた人が曇りの上に動物のどれかを描くと、その折り紙バージョンが歩み出て、World Labs の地面を歩きます。
