Alat sulih suara AI baru ini dapat menerjemahkan audio sekaligus mempertahankan suara pembicara

Ucapkan selamat tinggal pada sulih suara yang tidak wajar dengan alat baru dari ElevenLabs ini.

Jika Anda pernah menonton film atau acara yang di-dubbing, Anda pasti tahu betapa tidak wajarnya rasanya. Seringkali, suara pembicara tidak berubah di antara karakter yang berbeda, atau pola dan fluktuasinya tidak ada sama sekali. Fitur AI baru dari ElevenLab dimaksudkan untuk mengatasi masalah tersebut.

Pada hari Selasa, ElevenLabs meluncurkan AI Dubbing, sebuah fitur baru yang dapat mengubah konten lisan ke bahasa lain sambil mempertahankan suara, pola bicara, emosi, dan intonasi dari pembicara aslinya.

Fitur AI Dubbing dimaksudkan untuk memungkinkan pemirsa di seluruh dunia menikmati konten favorit mereka dalam bahasa asli mereka dengan mengonversinya hanya dalam hitungan menit.

Fitur AI Dubbing menggabungkan sintesis ucapan multibahasa, kloning suara, teks, dan pemrosesan audio ElevenLab untuk menjaga sifat konten asli saat membuat terjemahan, menurut perusahaan.

Dalam rilisnya, CEO dan salah satu pendiri ElevenLabs, Mati Staniszewski, berbagi pengalaman negatifnya dengan konten yang disulihsuarakan dan bagaimana teknologi baru dapat menjadi solusi.

“Tumbuh di Polandia, kami menonton film berbahasa Inggris yang disulihsuarakan oleh satu narator. Artinya setiap aktor memiliki suara yang sama. Dibutuhkan begitu banyak keajaiban dari pengalaman tersebut,” kata Staniszewski.

“Peluncuran AI Dubbing merupakan langkah terbesar kami dalam menghilangkan hambatan linguistik pada konten. Hal ini akan membantu pemirsa menikmati konten apa pun yang mereka inginkan, apa pun bahasa yang mereka gunakan.”

Fitur AI Dubbing akan mendukung lebih dari 20 bahasa yang saat ini didukung oleh model Eleven Multilingual v2.

Daftar lengkap mencakup bahasa Inggris, Jepang, Cina, Jerman, Hindi, Prancis, Korea, Portugis, Italia, Spanyol, Indonesia, Belanda, Turki, Filipina, Polandia, Swedia, Bulgaria, Rumania, Arab, Ceko, Yunani, Finlandia, Kroasia, Melayu, Slovakia, Denmark, Tamil, dan Ukraina.

AI Dubbing tersedia untuk semua pengguna mulai hari ini, dan harganya bergantung pada berapa banyak karakter yang ingin Anda sulih suara.