SoundSculpt: Hareketle Şekillenen Müzik ve Sanat Deneyimi

Yiqi Zhao’nun SoundSculpt tasarımı, müziği ve görsel sanatı beden hareketleriyle birleştirerek etkileşimli bir yaratıcılık sunuyor.

SoundSculpt, müzik ve görsel sanatları bir araya getiren yenilikçi bir interaktif sentezleyici olarak dikkat çekiyor. Yiqi Zhao tarafından MIT Media Lab’de geliştirilen bu proje, antik çömlekçilikte olduğu gibi, malzemeyi şekillendirmenin duygusal etkisini dijital ortama taşıyor. Kullanıcılar, Bose AR Frame gözlükleri sayesinde baş hareketleriyle sesleri ve görsel unsurları gerçek zamanlı olarak şekillendirebiliyor. Böylece, yaratıcılık süreci ile izleyici arasındaki sınırlar bulanıklaşıyor ve kullanıcılar, sanat eserinin hem yaratıcısı hem de bir parçası haline geliyor.

SoundSculpt’un en belirgin özelliği, hareketin ve mekânsal sesin birleşiminden doğan sürükleyici deneyim. Bose Frames’in altı eksenli jiroskop sensörleri, baş hareketlerini algılayarak MIDI altyapısı üzerinden sesin perde ve şiddetini anında değiştiriyor. Unity platformunda geliştirilen sistem, dokunmatik girdilerle sanal baloncuk yüzeylerinin dinamik olarak şekillendirilmesine olanak tanıyor. Bu sayede kullanıcılar, hem işitsel hem de görsel olarak etkileşimli bir ortamda kendi sanatlarını üretebiliyor.

Teknik açıdan bakıldığında, SoundSculpt’un MIDI altyapısı, Bose Frames’in baş yönelim verilerini ses parametrelerine eşleştiriyor. C# betikleriyle geliştirilen dokunmatik kontrol sistemi, sanal baloncukların yüzeyini manipüle etmeye imkân tanıyor. Sinestezi prensiplerinin entegrasyonu sayesinde, duyusal algı güçleniyor ve fiziksel ile dijital sanat arasındaki sınır daha da inceliyor. Cihaz, 7.2 x 3.1 x 2.9 inç boyutlarında, 12.31 ons ağırlığında, IPX2 suya dayanıklılık derecesine ve 5.5 saate kadar pil ömrüne sahip.

SoundSculpt’un geliştirilme sürecinde, çoklu duyusal geri bildirimin kusursuz bir akışta birleştirilmesi en büyük zorluklardan biri olarak öne çıktı. Gerçek zamanlı ses ve görsel senkronizasyonunu sağlamak için ileri düzey XR teknolojileri ve tekrarlayan kullanıcı testleri kullanıldı. Proje kapsamında yapılan araştırmalar, hem tasarımcılar hem de tasarımcı olmayan katılımcılarla yürütüldü ve sonuçlar, mekânsal hacim, ses ve hareket algısında artış ile duygusal istikrarın güçlendiğini gösterdi. Bu bulgular, SoundSculpt’un sanat terapisi ve psikiyatri gibi alanlarda da kullanılabileceğini ortaya koyuyor.

2025 yılında A' Digital Art Award’da Iron ödülüne layık görülen SoundSculpt, endüstri standartlarını karşılayan yenilikçi ve pratik bir tasarım olarak öne çıkıyor. Yiqi Zhao’nun bu projesi, sanat ve teknolojinin kesişiminde, kullanıcıların yaratıcılığını ve duygusal iyi oluşunu destekleyen yeni bir deneyim sunuyor. SoundSculpt, dijital çağda sanatın sınırlarını yeniden tanımlayan bir araç olarak dikkat çekiyor.