Konten di situs ini telah diterjemahkan menggunakan kecerdasan buatan (AI) atau teknologi penerjemahan mesin, dan mungkin terdapat kesalahan.

Skip to content
Human Computer Interaction

Konversi Otomatis Video Musik Menjadi Video Lirik

View Publication

Author

Jiaju Ma (Stanford), Anyi Rao (Stanford), Li-Yi Wei (Adobe), Rubaiat Habib Kazi (Adobe), Hijung Valentina Shin (Adobe), dan Maneesh Agrawala (Stanford + Roblox)

Venue

UIST 2023

Abstract

Musisi dan penggemar sering membuat video lirik, sebuah bentuk video musik yang menampilkan lirik lagu, untuk lagu-lagu favorit mereka. Namun, membuat video semacam itu bisa menjadi tantangan dan memakan waktu karena lirik harus ditambahkan secara sinkron dan selaras secara visual dengan video. Berdasarkan penelitian sebelumnya dan pemeriksaan mendalam terhadap video lirik yang ada, kami mengusulkan serangkaian pedoman desain untuk membantu para kreator membuat video semacam itu. Pedoman kami memastikan keterbacaan teks lirik sambil mempertahankan fokus perhatian yang terpadu. Kami mengimplementasikan pedoman ini dalam alur kerja otomatis penuh yang mengubah video musik masukan menjadi video lirik. Kami menunjukkan ketahanan alur kerja kami dengan menghasilkan video lirik dari berbagai sumber masukan. Studi pengguna menunjukkan bahwa video lirik yang dihasilkan oleh alur kerja kami efektif dalam mempertahankan keterbacaan teks dan menyatukan fokus perhatian.