D-ID mengimplementasikan alat terjemahan video AI yang mencakup produksi suara dan sinkronisasi bibir

Platform produksi video AI D-ID adalah perusahaan terbaru yang menerapkan alat terjemahan video menggunakan teknologi AI. Namun, dalam hal ini, D-ID juga menyinkronkan suara pembicara dan mengubah gerakan bibir agar sesuai dengan ucapan yang diterjemahkan sebagai bagian dari proses pemrosesan AI.

Teknologi ini didasarkan pada proyek D-ID asli – yang mungkin Anda ingat dari video viral beberapa tahun lalu di mana pengguna memutar foto keluarga lama mereka, dan kemudian foto tersebut dapat berbicara. Di balik kesuksesan ini, startup ini berhasil mengumpulkan $25 juta dalam penggalangan dana Seri B pada tahun 2022 dengan tujuan untuk mendukung semakin banyak pelanggan AS yang menggunakan teknologinya untuk membuat video berbasis AI.

Berkat teknologi AI Video Translate perusahaan, yang ditawarkan secara gratis kepada pelanggan D-ID, pembuat konten dapat menerjemahkan video mereka ke bahasa lain untuk membantu mereka mengembangkan kreativitas. Total ada 30 bahasa yang tersedia, antara lain Arab, Mandarin, Jepang, Hindi, Spanyol, Prancis. Langganan D-ID mulai dari $56 per tahun untuk paket berbiaya rendah dan jumlah kredit terkecil yang dapat Anda gunakan untuk produk AI, lalu naik menjadi $1.293 per tahun sebelum beralih ke harga bisnis.

Teknologi AI video baru D-ID dapat membantu klien menghemat biaya lokal dengan mempromosikan kampanye mereka ke khalayak global seperti periklanan, hiburan, dan media sosial. Teknologi ini akan bersaing dengan solusi lain baik untuk fotografi maupun video AI.

Selama bertahun-tahun, teknologi produksi video telah memudahkan pemirsa untuk mendengarkan video dalam bahasa mereka sendiri, namun hal ini seringkali tidak dapat dilakukan oleh produser kecil. Hal ini telah berubah seiring dengan perluasan akses perusahaan terhadap teknologi. Misalnya, YouTube merilis audio multibahasa yang dirancang untuk membantu pembuat konten menjangkau lebih banyak pemirsa dengan menerjemahkan video mereka ke bahasa lain. Produser legendaris MrBeast (Jimmy Donaldson) termasuk di antara pengguna awal, yang menggunakan teknologi ini untuk membawa beberapa film populernya ke dalam 11 bahasa lain.

Baca juga:  Apple Store Bakal Buka di dalam Negara Malaysia 22 Juni 2024, Nusantara Siap-siap Iri

Dengan AI, kemampuan untuk membuat, menafsirkan, atau meniru ucapan semakin berkembang. Microsoft tahun ini mengumumkan bahwa mereka akan menggunakan AI untuk menerjemahkan dan memberi nama video YouTube, dan lainnya, saat Anda menontonnya. Pada bulan Juli, platform pengembang Vimeo meluncurkan alat untuk menerjemahkan kata dan subtitle dan melakukan ini berdasarkan suara pembicara dan teknologi AI. Banyak perusahaan juga menawarkan alat terjemahan suara atau alat terjemahan AI (atau terkadang keduanya), termasuk Descript, ElevenLabs, Speechify, Veed, Camb.ai, Captions.ai, dan Akool, dan masih banyak lagi alat yang memungkinkan Anda membuat video. menggunakan avatar AI yang dapat berbicara berbagai bahasa, seperti HeyGen, Deepbrain AI, dan lainnya.

Menulis dan menghubungkan bibir ke perpustakaan AI, seperti Wav2lip, juga memudahkan startup untuk membuat alat semacam ini sekaligus mendorong pengembang untuk mempermudah, dan mungkin lebih murah, menggunakan teknologi AI. (Model kepemilikan baru D-ID yang disebut Rosetta-1 mendukung AI Video Translate.)

D-ID mengatakan teknologi Terjemahan Video barunya akan tersedia melalui D-ID Studio dan API-nya. Uji coba satu bulan ditawarkan dan lebih banyak demo tersedia di situs webnya.

Perusahaan mengatakan video dapat berdurasi antara 10 detik dan 5 menit, dan ukuran file harus di bawah 2 GB. Pertunjukan ini hanya berfungsi dengan satu orang dalam bingkai dan, untuk hasil terbaik, dia harus menghadap kamera dengan wajahnya terlihat sepanjang waktu.

Tinggalkan Balasan

Alamat email Anda tidak akan dipublikasikan. Ruas yang wajib ditandai *