Meta Kembangkan Movie Gen, Model AI yang Bisa Buat Video dengan Suara

NEW YORK Meta mengumumkan bahwa mereka telah membangun model AI baru yang disebut Movie Gen yang dapat membuat klip video dan audio yang tampak realistis sebagai respons terhadap perintah pengguna. Perusahaan induk Facebook itu mengklaim bahwa model ini dapat menyaingi alat dari perusahaan rintisan pembuat media terkemuka seperti OpenAI dan ElevenLabs.

Contoh kreasi Movie Gen yang disediakan oleh Meta menunjukkan video hewan yang berenang dan berselancar, serta video yang menggunakan foto asli orang untuk menggambarkan mereka melakukan tindakan seperti melukis di atas kanvas.

Movie Gen juga dapat menghasilkan musik latar dan efek suara yang disinkronkan dengan konten video, kata Meta dalam sebuah posting blog pada Jumat, (4/10/2024).

Dalam salah satu video tersebut, Meta meminta Movie Gen memasukkan pom-pom ke tangan seorang pria yang berlari sendirian di padang pasir, sementara di video lain alat tersebut mengubah tempat parkir tempat seorang pria bermain skateboard dari tanah kering menjadi tempat yang tertutup genangan air.

Dilaporkan Reuters , video yang dibuat oleh Movie Gen dapat berdurasi hingga 16 detik, sementara audio dapat berdurasi hingga 45 detik, kata Meta. Perusahaan membagikan data yang menunjukkan uji buta yang menunjukkan bahwa model tersebut berkinerja lebih baik dibandingkan dengan penawaran dari perusahaan rintisan termasuk Runway, OpenAI, ElevenLabs, dan Kling.

Pengumuman tersebut muncul saat Hollywood tengah bergulat dengan cara memanfaatkan teknologi video AI generatif tahun ini, setelah OpenAI yang didukung Microsoft pada Februari pertama kali memamerkan bagaimana produknya Sora dapat membuat video seperti film layar lebar sebagai respons terhadap perintah teks.

Para ahli teknologi di industri hiburan sangat ingin menggunakan alat-alat tersebut untuk meningkatkan dan mempercepat pembuatan film, sementara yang lain khawatir tentang penerapan sistem yang tampaknya telah dilatih pada karya-karya berhak cipta tanpa izin.

Para pembuat undang-undang juga telah menyoroti kekhawatiran tentang bagaimana kepalsuan yang dihasilkan AI, atau deepfake, digunakan dalam pemilihan umum di seluruh dunia, termasuk di Amerika Serikat, Pakistan, India, dan Indonesia.

Juru bicara Meta mengatakan perusahaan itu tidak mungkin merilis Movie Gen untuk penggunaan terbuka oleh para pengembang, seperti yang telah dilakukan dengan seri Llama model bahasa besarnya, dengan mengatakan bahwa mereka mempertimbangkan risiko secara individual untuk setiap model. Mereka menolak mengomentari penilaian Meta untuk Movie Gen secara khusus.

Sebaliknya, mereka mengatakan, Meta bekerja secara langsung dengan komunitas hiburan dan kreator konten lainnya untuk penggunaan Movie Gen dan akan memasukkannya ke dalam produk Meta sendiri tahun depan.

Menurut posting blog dan makalah penelitian tentang alat yang dirilis oleh Meta, perusahaan itu menggunakan campuran dataset berlisensi dan yang tersedia untuk umum untuk membangun Movie Gen.