Her ay ortaya çıkan yeni yapıtlar, programlar ve deneyler bize üretken yapay zekanın potansiyelinin gerçekte ne kadar büyük olduğunu gösteriyor. Google şimdi de bu teknolojinin etkileyici bir yanını gösteren farklı bir örnekle karşımıza çıkıyor.
Japon araştırmacılarla birlikte çalışan Google, işlevsel manyetik rezonans görüntüleme (fMRI) kullanılarak yakalanan ve Google’ın MusicLM müzik oluşturma modeliyle yeniden oluşturulan insan beyni aktivitesinden müzik üretmenin bir yolunu buldu.
Google’ın ” Brain2Music: İnsan Beyni Aktivitesinden Müziği Yeniden Üretmek 15 saniyelik klipler, on farklı çeşidi kapsayan 540 müzik modülünden rastgele seçildi. Beş katılımcı, beyin aktiviteleri taranırken klipleri MRI uyumlu bir kulaklıkla dinledi.
Araştırmacılar, ” insan öznenin maruz kaldığı müzik türlerini tahmin etmek ve yeniden yapılandırmak ” için veriler MusicLM’e yüklendi. Elde ettikleri sonuç, oluşturulan müziğin “deneklerin orijinal olarak dinledikleri müzikle bağlantılı” olduğudur. anlam düzeyinde“Benzerlikler vardı.
Yeniden yapılandırılmış beyin aktivitesi müziklerinden bazılarını dinlemek isterseniz, Google’ın çalışma için tamamen yeni uyaranları ve yeniden yapılandırmaları Web sayfasını ziyaret edebilirsiniz.
Buna ek olarak, araştırma grubu AI müziğinin kalitesini sınırlayan üç faktörden bahsediyor:
- fMRI bilgisinde yer alan bilgi, zaman ve mekan açısından çok seyrektir (gözlenen bölgeler 2×2×2 mm3’tür, birçok büyüklük mertebesi insan nöronlarından daha büyüktür).
- Müziğin içerdiği bilgiler, müziği yeniden yarattığımız yerde gömülür (on saniyelik müziğin yalnızca 128 sayıyla temsil edildiği MuLan’ı kullandık).
- Müzik prodüksiyon sistemimizin sınırlamaları. MusicLM’yi incelediğimizde, hem metin istemine bağlı kalma biçimi hem de üretilen sesin aslına uygunluğu açısından yumuşatmaya yatkın olduğunu gördük.
Çoğu dil modelinde olduğu gibi, bu çalışma daha da geliştirilebilir. Bununla birlikte, AI’nın duyduğunuz sesleri yeniden üretmek için beyin aktivitenizi etkili bir şekilde kullanabileceği zaten gösterilmiştir. Ama bir yabancının beyin dalgalarınızı taramasından ve fikirlerinizi çalmasından endişe ediyorsanız, muhtemelen – en azından şimdilik – endişelenmenize gerek yok. Ekip, gönüllülerin bu çalışma için büyük bir fMRI tarayıcısında saatler harcamak zorunda kaldığını belirtiyor.
