Zurück

Encounters

Fotografieren Sie etwas, dem Sie zum ersten Mal begegnen, oder nehmen Sie eine Sprachnotiz dazu auf. Die KI sagt Ihnen, was es ist, macht aus Ihrer Reise ein Reisetagebuch und baut die Objekte in 3D in Ihrem ganz eigenen Erinnerungsuniversum nach.

Autor: 造梦师傅Quellcode
Live ausprobieren
EncountersLive ausprobieren

Beschreibung

Encounters ist eine KI-Agenten-App, mit der Sie festhalten, was Ihnen zum ersten Mal begegnet – von ihren Autoren als Geschenk an ihr zukünftiges Ich geschaffen. Sie glauben, dass die Innenwelt eines Menschen davon geprägt wird, wie weit sein Blick reicht, und jede neue Begegnung erweitert sie still und leise. Ohne Aufzeichnung jedoch verblassen diese Momente und hinterlassen nur einen schwachen Kratzer im Gedächtnis.

Im Alltag oder unterwegs genügt ein Foto oder eine Sprachnotiz, um etwas Neues festzuhalten. Die KI antwortet, indem sie Ihnen sagt, was es ist und ob Sie es schon einmal gesehen haben, und am Ende einer Reise ordnet sie Ihre Aufzeichnungen zu einem Reisetagebuch. Gleichzeitig werden die physischen Objekte auf Ihren Fotos in 3D-Modelle verwandelt und in einem 3D-„Erinnerungsuniversum“ platziert.

Das Universum wächst, je mehr Sie aufzeichnen. Die Autoren stellen sich vor, dass eines Tages jeder eine eigene innere Landschaft haben und in die anderer eingeladen werden könnte; für Sammler ist es außerdem eine Möglichkeit, geschätzte Gegenstände für immer zu bewahren. Zudem planen sie, daraus ein Spiel über das Wiederbesuchen von Erinnerungen zu entwickeln.

Der Rest der Encounters-App existierte bereits vor dem Hackathon; das Modul für das Erinnerungsuniversum hat das Team währenddessen gebaut.

Wie Tripo eingesetzt wurde

Die Umwandlung der Objekte auf Ihren Fotos in 3D erfolgt mit Image-to-3D der Tripo API. Der Agent findet mit einem multimodalen Modell zunächst die physischen Objekte auf einem Foto und ruft dann die Tripo API auf, um für jedes ein 3D-Modell zu generieren; das Backend rendert die Modelle als Partikelanimationen und lädt sie in das Erinnerungsuniversum.

Trailer