I contenuti di questo sito sono stati tradotti mediante intelligenza artificiale (IA) o tecnologia di traduzione automatica e potrebbero contenere errori.

Skip to content
Human Computer Interaction

Conversione automatica di video musicali in video con i testi delle canzoni

View Publication

Author

Jiaju Ma (Stanford), Anyi Rao (Stanford), Li-Yi Wei (Adobe), Rubaiat Habib Kazi (Adobe), Hijung Valentina Shin (Adobe) e Maneesh Agrawala (Stanford + Roblox)

Venue

UIST 2023

Abstract

Musicisti e fan spesso realizzano video con il testo, una forma di video musicali che mostra il testo della canzone, per le loro canzoni preferite. Tuttavia, la realizzazione di tali video può essere impegnativa e richiedere molto tempo, poiché il testo deve essere aggiunto in sincronia e in armonia visiva con il video. Sulla base di lavori precedenti e di un attento esame dei video con il testo esistenti, proponiamo una serie di linee guida di progettazione per aiutare i creatori a realizzare tali video. Le nostre linee guida garantiscono la leggibilità del testo della canzone, mantenendo al contempo un focus di attenzione unificato. Abbiamo implementato queste linee guida in una pipeline completamente automatizzata che converte un video musicale in ingresso in un video con il testo della canzone. Dimostriamo la robustezza della nostra pipeline generando video con il testo della canzone da una vasta gamma di fonti di input. Uno studio sugli utenti mostra che i video con il testo della canzone generati dalla nostra pipeline sono efficaci nel mantenere la leggibilità del testo e nell'unificare il focus di attenzione.