Japonya’da bir araştırmacı, beyin görüntüleme teknikleri ve yapay zekayı kullanarak insanların zihninde canlandırdığı görüntüleri sözcüklere dönüştürebilen “zihin betimleme” yöntemini geliştirdi. fMRI cihazıyla kaydedilen beyin aktiviteleri, yapay zeka tarafından analiz edilerek ayrıntılı yazılı betimlemelere çevriliyor. Bu teknoloji, konuşma yetisini kaybetmiş kişilerin iletişim kurmasına da imkan tanıyacak. Çalışma, Science Advances dergisinde yayımlandı.
Japonya'da bir araştırmacı, beyin görüntüleme yöntemleri ve yapay zekadan yararlanarak insanların zihninde canlandırdığı görüntüleri sözcüklere dökebilen "zihin betimleme" adlı yeni bir yöntem geliştirdi.
Japonya'da bulunan Nippon Telegraph ve Telephone telekomünikasyon şirketinin İletişim Bilimleri Laboratuvarı'nda çalışan araştırmacı Horikawa Tomoyasu, 22-37 yaş aralığında, ana dili Japonca olan 6 gönüllüyle yürüttüğü çalışmada, zihinsel imgelerin yazılı betimlemelere aktarılma sürecini araştırdı.
Yapay zeka modelleri eğitildi
Deney süresince katılımcılara nesnelerden doğa manzaralarına, insan hareketlerinden günlük aktivitelere kadar çeşitli içeriklere sahip 2 bin 180 video gösterildi.
Katılımcıların beyin aktiviteleri, izledikleri kısa süreli videolar sırasında fonksiyonel manyetik rezonans görüntüleme (fMRI) cihazıyla kaydedildi.
Videoların içeriğine ilişkin yazılı metinler önce büyük dil modelleri tarafından sayısal dizilere dönüştürüldü, ardından basit yapay zeka modelleri, bu sayısal diziler ile videolar izlenirken kaydedilen beyin aktivitelerini eşleştirecek şekilde eğitildi.
'Zihin betimleme' adı verildi
Deney kapsamında, katılımcıların videoları izlerken veya izlediklerini hatırlarken zihinlerinde canlandırdığı görüntüleri cümlelere dönüştürmeyi başaran Horikawa, geliştirdiği tekniğe "zihin betimleme" adını verdi.
Horikawa, bu yeni yöntemin, beynin görsel bilgiyi nasıl işlediğini çözümleyerek nesneleri, mekanları, eylemleri, olayları ve aralarındaki ilişkileri betimleyen ayrıntılı metinler üretebildiğini söyledi.
Tekniğin, beyindeki dil merkezlerinden bağımsız çalıştığını vurgulayan Horikawa, bunun nörodejeneratif hastalıklar nedeniyle konuşma yetisini kaybeden kişilerin iletişim kurmasına yardımcı olabileceğini belirtti.
Çalışma, "Science Advances" dergisinde yayımlandı.
