భావోద్వేగ స్వర బొమ్మలాట
Author
Venue
IEEE VR 2023/TVCG
Abstract
ఈ పత్రం భావోద్వేగ వాయిస్ పప్పెట్రీని ప్రదర్శిస్తుంది, ఇది స్పష్టమైన భావోద్వేగ మార్పులతో పాత్రలను చిత్రీకరించడానికి ఒక ఆడియో-ఆధారిత ముఖ కదలికల యానిమేషన్ విధానం. పెదవుల కదలిక మరియు చుట్టూ ఉన్న ముఖ భాగాలు ఆడియోలోని విషయాల ద్వారా నియంత్రించబడతాయి, మరియు భావోద్వేగం యొక్క వర్గం మరియు తీవ్రత ద్వారా ముఖ కదలికలు ఏర్పడతాయి. మా విధానం ప్రత్యేకమైనది, ఎందుకంటే ఇది కేవలం జ్యామితీయ ప్రక్రియలకు బదులుగా గ్రహణ సామర్థ్యం మరియు జ్యామితిని పరిగణనలోకి తీసుకుంటుంది. మా విధానం యొక్క మరో ముఖ్యమైన అంశం ఏమిటంటే, ఇది బహుళ పాత్రలకు సాధారణీకరించదగినది. రిగ్ పారామితులను కన్ను, కనుబొమ్మలు, ముక్కు, నోరు మరియు సంతకం ముడతలుగా వర్గీకరించినప్పుడు, కొత్త ద్వితీయ పాత్రలకు శిక్షణ ఇవ్వడం అనేది జాయింట్ ట్రైనింగ్‌తో పోలిస్తే మెరుగైన జనరలైజేషన్ ఫలితాలను సాధించడంలో ముఖ్యమైనదని పరిశోధనలు చూపించాయి. వినియోగదారుల అధ్యయనాలు మా విధానం యొక్క ప్రభావాన్ని గుణాత్మకంగా మరియు పరిమాణాత్మకంగా రెండింటిలోనూ నిరూపిస్తున్నాయి. మా విధానం AR/VR మరియు 3DUIలో, అనగా వర్చువల్ రియాలిటీ అవతారాలు/స్వీయ-అవతారాలు, టెలికాన్ఫరెన్సింగ్ మరియు ఇన్-గేమ్ సంభాషణలలో వర్తించవచ్చు.
