Yapay Zeka

Yapay Zeka Hareketlerle Duyguları Çözüyor

Özet: Uluslararası bir araştırma ekibi tarafından geliştirilen yeni bir metodoloji, hareketlerden duyguları çözmek için hareket yakalama ve EMOKINE yazılımını kullanıyor. Ekip, çeşitli duyguları ifade eden koreografiler yapan bir dansçıyı kaydetti ve hareketlerinin kinematik özelliklerini analiz etti.

ZENODO ve GitHub’da ücretsiz olarak sunulan EMOKINE yazılımı, tüm vücut hareketleri aracılığıyla duygusal ifadeyi incelemek için yenilikçi bir araç sunar. Bu disiplinler arası yaklaşım, deneysel psikoloji, duygusal sinirbilim ve görsel medyanın yapay zeka destekli analizi için faydalı olabilir.

Ana unsurlar:

  1. EMOKINE yazılımı duygusal hareketlerin kinematik özelliklerini analiz eder.
  2. Hareket yakalama teknolojisi, bir dansçının altı duyguyu ifade eden hareketlerini kaydetti.
  3. EMOKINE açık kaynaklıdır ve çeşitli hareket yakalama sistemlerine uyarlanabilir.

Kaynak: Max Planck Enstitüsü

Hareketlerimizden nasıl hissettiğimizi çözmek mümkün müdür? Duygular deneysel yöntemler kullanılarak “dışarıdan” nasıl incelenebilir?

Bu soruları cevaplamak için Almanya’nın Frankfurt am Main kentindeki Max Planck Deneysel Estetik Enstitüsü (MPIEA) liderliğindeki büyük bir uluslararası ve disiplinlerarası araştırma ekibi bütünleştirici bir bilimsel metodoloji geliştirdi.

Araştırmacılar, hareket yakalama teknolojisi gibi sanatsal ve dijital araçları kullanarak, duyguları ifade eden hareketlerin nesnel kinematik özelliklerini ölçmek için EMOKINE yazılımını geliştirdiler.

Çalışmanın sonuçları yakın zamanda dergide yayımlandı Davranış Araştırma Yöntemleri.

Bu bir kadını gösteriyor.
Hareket takibi son yıllarda birçok alanda kullanılmaktadır çünkü hareket parametrelerinin nesnel kaydı insanların niyetleri, duyguları ve zihin durumları hakkında fikir verebilir. Kaynak: Neuroscience News

Ekip, profesyonel bir dansçının yeşil bir ekranın önünde kısa dans koreografilerini tekrarlamasını sağladı. Hareketleriyle farklı duyguları ifade etmesi istendi: öfke, memnuniyet, korku, mutluluk, tarafsızlık ve üzüntü.

Dans hareketlerini “veri” olarak yakalamak için bilim insanları MPIEA’nın teknoloji havuzuna daldı: Dansçı, toplamda 17 adet son derece hassas sensörle donatılmış, XSENS® marka tam vücut hareket yakalama kıyafeti giydi.

Bir film kamerasıyla birlikte dinamik vücut hareketleri ölçüldü ve kaydedildi. Araştırmacılar daha sonra nesnel kinematik özellikleri (hareket parametreleri) çıkardılar ve bu hareket parametrelerini bir düğmeye dokunarak veri kümelerinden sağlayan EMOKINE yazılımını programladılar.

Tüm Vücut Hareketi için Bilgisayarlı Takip

12 hareket parametresinden toplam 32 istatistik derlendi ve bir pilot dans veri setinden çıkarıldı. Kaydedilen kinematik parametreler, örneğin, hız, ivme veya uzuvların kasılmasıydı.

“Daha önceki araştırmalar hakkında literatürde ayrı ayrı tartışılan duygusal tüm vücut hareketlerinin 12 kinematik özelliğini belirledik. Daha sonra hepsini aynı veri setinden çıkardık ve daha sonra özellikleri EMOKINE yazılımına girdik,” diye bildiriyor MPIEA’dan ilk yazar Julia F. Christensen.

Hareket takibi son yıllarda birçok alanda kullanılmaktadır çünkü hareket parametrelerinin nesnel kaydı insanların niyetleri, duyguları ve zihin durumları hakkında fikir verebilir. Ancak bu araştırma, kaydedilen verilerden anlamlı sonuçlar çıkarılabilmesi için teori tabanlı bir metodoloji gerektirir.

Almanya, Tübingen’deki Max Planck Akıllı Sistemler Enstitüsü’nden ortak birinci yazar Andrés Fernández, “Bu çalışma, sanatsal uygulama, psikoloji ve bilgisayar biliminin, insan bilişini incelemek için yöntemler geliştirmek amacıyla ideal bir şekilde birlikte nasıl çalışabileceğini gösteriyor” diyor.

Yazılım paketine eşlik eden ve duyguları incelemek için açıkça dans hareketlerini kullanan metodolojik çerçeve, el sallama veya yürüme gibi “duygusal eylemlerin” video kliplerini sıklıkla kullanan önceki araştırma yaklaşımlarından bir sapmadır.

“Özellikle Goethe Üniversitesi Frankfurt am Main, Glasgow Üniversitesi ve Portekiz WiseWorld Ai’den bir film ekibi gibi çok sayıda uzmanın yer aldığı bu çalışmanın yayınlanmasından dolayı heyecan duyuyoruz.

Goethe Üniversitesi’nde Bilgisayar Bilimi, Hesaplamalı Görme ve Yapay Zeka Laboratuvarı Profesörü ve kıdemli yazar Gemma Roig, “Psikoloji, nörobilim, bilgisayar bilimi ve deneysel estetiğin yanı sıra dans ve filmden disiplinleri bir araya getirdi” diye özetliyor.

Açık Kaynaklı Yazılım Paketi

EMOKINE, ZENODO ve GitHub’da ücretsiz olarak mevcuttur ve küçük değişikliklerle diğer hareket yakalama sistemlerine uyarlanabilir. Bu ücretsiz olarak erişilebilen dijital araçlar, dansçıların ve diğer sanatçı gruplarının duygusal ifadelerini ve ayrıca günlük hareketleri analiz etmek için kullanılabilir.

Araştırmacılar şimdi geliştirdikleri EMOKINE yazılımının deneysel psikoloji, duygusal sinirbilim ve bilgisayarlı görüşte, özellikle de görsel medyanın yapay zeka destekli analizinde kullanılmasını umuyorlar. Yapay zeka, bilgisayarların ve sistemlerin dijital görüntülerden, videolardan ve diğer görsel girdilerden anlamlı bilgiler çıkarmasını sağlayan bir yapay zeka dalıdır.

EMOKİNE, bilim insanlarının tüm vücut hareketlerinin kinematik parametrelerinin gözlemciye farklı niyetleri, hisleri ve zihin durumlarını nasıl ilettiğine ilişkin araştırma sorularına cevap bulmalarına yardımcı olacak.

Bu yapay zeka araştırma haberi hakkında

Soyut

EMOKİNE: Son derece kontrollü duygusal tüm vücut hareket veri kümelerinin oluşturulmasını ölçeklendirmek için bir yazılım paketi ve hesaplama çerçevesi

EMOKINE, deneysel psikoloji, duygusal sinir bilimi ve bilgisayarlı görme alanlarında duygusal tüm vücut hareketleri araştırmaları için bir yazılım paketi ve veri seti oluşturma paketidir.

Gelecekte büyük ölçekte veri kümesi oluşturulmasını kolaylaştırmak için bir hesaplama çerçevesi, kapsamlı talimatlar, bir pilot veri kümesi, gözlemci derecelendirmeleri ve kinematik özellik çıkarma kodu sağlanmaktadır.

Ek olarak, EMOKINE çerçevesi karmaşık hareket dizilerinin duygu araştırmalarını nasıl ilerletebileceğini ana hatlarıyla belirtir. Geleneksel olarak, bu tür araştırmalarda sıklıkla el sallama veya yürüme hareketleri gibi duygusal ‘eylem’ tabanlı uyaranlar kullanılır.

Burada ise pilot veri seti, her tekrarında farklı duygusal niyetleri ifade eden bir dansçı tarafından birkaç kez tekrarlanan kısa dans koreografileriyle sağlanıyor: öfke, memnuniyet, korku, neşe, tarafsızlık ve üzüntü.

Veri seti eş zamanlı olarak profesyonel olarak filme alındı ​​ve XSENS® hareket yakalama teknolojisi (17 sensör, 240 kare/saniye) kullanılarak kaydedildi.

12 kinematik özellikten otuz iki istatistik, ilk kez tek bir veri setinde çevrimdışı olarak çıkarıldı: hız, ivme, açısal hız, açısal ivme, uzuv kasılması, kütle merkezine olan mesafe, hareket miktarı, boyutsuz sarsıntı (integral), baş açısı (dikey eksene ve sırta göre) ve uzay (dışbükey gövde 2B ve 3B). Ortalama, medyan mutlak sapma (MAD) ve maksimum değer uygulanabilir şekilde hesaplandı.

EMOKINE yazılımı diğer hareket yakalama sistemlerine de uygulanabilir ve Zenodo Deposunda herkese açık olarak mevcuttur.

GitHub’daki sürümler şunları içerir: (i) 32 istatistiği çıkarmak için kod, (ii) MVNX dosyasını Blender formatına dönüştürmek için Python için bir donanım eklentisi (MVNX=çıktı dosyası XSENS® sistemi) ve (iii) yüzleri bulanıklaştırmaya yardımcı olmak için Python betiği destekli özel bir yazılım; son ikisi GPLv3 lisansları altındadır.

Kaynak ve İleri Okuma: https://neurosciencenews.com/ai-movement-emotion-26401/

İlgili Makaleler

Başa dön tuşu