Seni Boneka Suara Emosional
Author
Venue
IEEE VR 2023/TVCG
Abstract
Makalah ini memaparkan teknik boneka suara emosional, sebuah pendekatan animasi wajah berbasis audio untuk menggambarkan karakter dengan perubahan emosi yang hidup. Gerakan bibir dan area wajah di sekitarnya dikendalikan oleh isi audio, sedangkan dinamika wajah ditentukan oleh kategori emosi dan intensitasnya. Pendekatan kami unik karena mempertimbangkan validitas persepsi dan geometri, bukan sekadar proses geometris murni. Keunggulan lain dari pendekatan kami adalah kemampuannya untuk diterapkan pada berbagai karakter. Hasil penelitian menunjukkan bahwa melatih karakter sekunder baru saat parameter rig dikategorikan sebagai mata, alis, hidung, mulut, dan kerutan khas sangat penting dalam mencapai hasil generalisasi yang lebih baik dibandingkan dengan pelatihan bersama. Studi pengguna menunjukkan keefektifan pendekatan kami baik secara kualitatif maupun kuantitatif. Pendekatan kami dapat diterapkan dalam AR/VR dan 3DUI, yaitu avatar realitas virtual/avatar diri, telekonferensi, dan dialog dalam game.
