ReCollection, kullanıcıların dil girdilerine dayanarak kişisel anıları sentezleyen bir AI sanat deneyimidir. AI sistem tasarımı ve deneysel görselleştirme aracılığıyla hatırlama ve hayal gücü arasındaki sınırları bulanıklaştırır. Demans grupları için gelecekteki bir terapötik prototip olarak potansiyelini aşan bu çalışma, kolektif anılar ve kültürel üretim için yeni olanaklar sunar.
ReCollection, AI sistemleri ve deneysel görselleştirmeyi interaktif bir sanat deneyiminin tasarımına entegre eder. Konuşma tanıma, metin otomatik tamamlama ve metin-den-resim modelleri gibi AI tekniklerini kullanarak, parçalanmış dilin ses girdilerini gerçek zamanlı olarak hareketli bilgisayar grafiklerine dönüştürür. Sanat kurulumunda, ReCollection katılımcıları kişisel anılarını bir cümle ile paylaşmaya davet eder. AI sistem daha sonra konuşmayı metne dönüştürür ve tamamlanmış bir anlatı olarak ayrıntıları otomatik olarak doldurur, yeni görsel anılar üretir.
ReCollection, bir duvar projeksiyonu veya LED ekranı içeren interaktif bir sanat kurulumu olarak sergilenmiştir ve projeksiyonun karşısına yerleştirilmiş bir kaide tasarlanmıştır. Bu kaide, etkileşim için bir mikrofon ve bir USB düğmesi tutmak üzere tasarlanmıştır. Sergi alanımız, projeksiyon ışığı ve kaide üzerinde yer alan karartılmış bir spot ışığı tarafından aydınlatılan karanlık bir ortamda kasıtlı olarak tasarlanmıştır.
ReCollection, katılımcıların mikrofona fısıldadıkları parçalanmış anıları, GPT-4 gibi büyük bir dil modeli kullanarak otomatik olarak tamamlanan bir metne ve ardından Stable Diffusion tarafından makinenin yorumuna dayanarak anıları temsil eden sentetik görüntüler üreten bir sanat kurulumudur. Makineler tarafından çıkarılan görüntüler, etkileşimli bir deneyim olarak geliştirilir ve görselleştirilir.
ReCollection, kişisel anıları kullanıcıların dil girdilerine dayanarak sentezleyen bir AI sanat deneyimidir. AI sistem tasarımı ve deneysel görselleştirme aracılığıyla hatırlama ve hayal gücü arasındaki sınırları bulanıklaştırır. Demans grupları için gelecekteki bir terapötik prototip olarak potansiyelini aşan bu çalışma, kolektif anılar ve kültürel üretim için yeni olanaklar sunar.
ReCollection, AI'nin demans araştırmalarında erken tespit ve hastalığın ilerlemesinin haritalandırılmasından demanslı bireyler için bir arkadaş olarak hizmet etmeye kadar uzanan rolünü incelemektedir. Ancak, AI'nin demans araştırmalarındaki kullanımı genellikle bakım verme rollerine sınırlı kalmakta ve daha simbiyotik, yaratıcı işbirliklerindeki potansiyelini nadiren araştırmaktadır. Demans araştırmalarının gelişiminden ve kritik dönüşümünden ilham alarak, ReCollection, AI'yi işbirlikçi dünya yaratmada insan olmayan bir anlatı ajansı olarak entegre ederek dil, hafıza ve hayal gücü arasındaki bağlantıları araştırır.
ReCollection, AI destekli bir hikaye oluşturma sistemi geliştirmiştir. Bu sistem, bir hikaye anlatma sürecinde birleşen üç ana bileşenden oluşur. Sistem, Whisper adlı ileri düzey bir konuşma metne çevirme modeli ile başlar ve 98 dilde destek sunar. İkinci bileşen olarak, metin tamamlama için GPT-4 kullanırız. Alzheimer belgesellerinden ilham alarak, istemlerde iki farklı ajan tanımladık. İlk ajan içeriği kontrol eder ve anlatının tutarlı ve bağlamsal olarak alakalı olmasını sağlarken, ikinci ajan görsel tarzı etkiler. Bu çift ajan yaklaşımı, yazılı formda etkili bir hikaye tahtası oluşturur ve üretilen anlatıya derinlik ve sofistike bir katman ekler.
ReCollection, AI destekli bir hikaye oluşturma sistemi geliştirmiştir. Bu sistem, bir hikaye anlatma sürecinde birleşen üç ana bileşenden oluşur. Sistem, Whisper adlı ileri düzey bir konuşma metne çevirme modeli ile başlar ve 98 dilde destek sunar. İkinci bileşen olarak, metin tamamlama için GPT-4 kullanırız. Alzheimer belgesellerinden ilham alarak, istemlerde iki farklı ajan tanımladık. İlk ajan içeriği kontrol eder ve anlatının tutarlı ve bağlamsal olarak alakalı olmasını sağlarken, ikinci ajan görsel tarzı etkiler. Bu çift ajan yaklaşımı, yazılı formda etkili bir hikaye tahtası oluşturur ve üretilen anlatıya derinlik ve sofistike bir katman ekler.
Proje Tasarımcıları: Weidi Zhang and Jieliang Luo
Görsel Kredileri: credit to Weidi Zhang and Jieliang Luo
Proje Ekibi Üyeleri: Weidi Zhang
Jieliang Luo
Proje Adı: ReCollection
Proje Müşterisi: Weidi Zhang and Jieliang Luo