Google, yapay zekanın da yardımıyla beyin dalgalarını müzik parçalarına dönüştürdü

Her ay karşımıza çıkan yeni eserler, programlar ve deneyler bize üretken yapay zekanın potansiyelinin gerçekte ne kadar büyük olduğunu gösteriyor. Google da şimdi, bu teknolojinin etkileyici bir yanını gösteren farklı bir örnekle karşımıza çıkıyor.

Japonya’dan araştırmacılarla birlikte çalışan Google, fonksiyonel manyetik rezonans görüntüleme (fMRI) kullanılarak yakalanan ve Google’ın MusicLM müzik oluşturma modeliyle yeniden oluşturulan insan beyni aktivitesinden müzik üretmenin bir yolunu buldu.

Google’ın “Brain2Music: İnsan Beyin Aktivitesinden Müziği Yeniden Oluşturmak” başlıklı bir araştırma makalesinde açıkladığı benzeri, on farklı çeşide yayılan 540 müzik modülünden 15 saniyelik klipler rastgele seçildi. Beş katılımcı, klipleri bir çift MRI uyumlu kulaklıkla dinledi ve bu sırada beyin aktiviteleri tarandı.

Araştırmacılar, “insan deneğin maruz kaldığı müzik cinslerini tahmin etmek ve yeniden yapılandırmak” için bilgileri MusicLM’ye yükledi. Elde ettikleri sonuçta, oluşturulan müzik, deneklerin orjinal olarak dinledikleri müzikle “anlamsal düzeyde” aynılikler taşıyordu.

Yeniden oluşturulmuş beyin aktivitesi müziklerinden kimilerini dinlemek isterseniz, Google’ın çalışma için özgün uyaranları ve yeniden yapılandırmaları içeren web sayfasını ziyaret edebilirsiniz.

Ayrıca araştırma ekibi, AI müziğinin kalitesini sınırlayan üç faktörü de şu şekilde belirtiyor:

• fMRI bilgilerinde yer alan bilgiler zamansal ve uzamsal olarak çok seyrektir (gözlenen bölgeler 2×2×2 mm3 boyutundadır, birçok büyüklük mertebesi insan nöronlarından daha büyüktür).
• Müziği yeniden oluşturduğumuz müzik gömmelerinde yer alan bilgiler (on saniyelik müziğin sırf 128 sayıyla temsil edildiği MuLan’ı kullandık).
• Müzik üretim sistemimizin sınırlamaları. MusicLM’yi incelediğimizde, hem metin istemine bağlı kalma biçimi hem de üretilen sesin aslına uygunluğu açısından güzelleştirmeye açık olduğunu gördük.

Çoğu lisan modelinde olduğu, bu çalışmanın da çok daha fazla gelişmesi mümkün. Tekrar de, AI’nin duyduğunuz sesleri yeniden oluşturmak için beyin aktivitenizi tesirli bir şekilde kullanabileceği şimdiden gösterilmiş durumda. Lakin bir yabancının beyin dalgalarınızı taramasından ve fikirlerinizi çalmasından telaş ediyorsanız, muhtemelen – en azından şimdilik – endişelenmenize gerek yok. Ekip, gönüllülerin bu çalışma için büyük bir fMRI tarayıcısında saatler harcamak zorunda kaldığını belirtiyor.