Runway, perusahaan kecerdasan buatan (AI) yang berfokus pada video, memperkenalkan model generasi video baru pada hari Senin. Dijuluki Gen-4, ini adalah model generasi gambar-ke-video yang menggantikan model Gen-3 Alpha AI perusahaan. Muncul dengan beberapa peningkatan, termasuk konsistensi karakter, lokasi, dan objek di seluruh adegan, serta fisika dunia nyata yang dapat dikendalikan. Runway mengklaim bahwa model AI baru juga hadir dengan kepatuhan prompt yang lebih tinggi, dan dapat mempertahankan gaya, suasana hati, dan elemen sinematik adegan dengan perintah sederhana.
Runway Memperkenalkan Model Pembuatan Gambar-ke-Video Gen-4
Dalam sebuah posting di X (sebelumnya dikenal sebagai Twitter), pegangan resmi Runway mengumumkan perilisan model video baru. Gen-4 saat ini diluncurkan ke tingkat pasangan perusahaan serta klien perusahaan. Tidak ada kabar kapan mungkin tersedia untuk tingkat gratis. “Gen-4 adalah langkah maju yang signifikan untuk kesetiaan, gerakan dinamis, dan kemampuan kontrol dalam media generatif,” tambah postingan itu.
Penerus model Gen-3 Alpha hadir dengan beberapa peningkatan untuk menawarkan pembuatan gambar dan video dengan gaya, subjek, lokasi, dan banyak lagi yang konsisten. Perusahaan juga memposting beberapa film pendek yang dibuat seluruhnya menggunakan model generasi video Gen-4.
Dalam sebuah posting blog, perusahaan merinci kemampuan baru. Runway mengatakan bahwa, hanya dengan satu gambar referensi, model AI dapat menghasilkan karakter yang konsisten di berbagai kondisi pencahayaan, lokasi, dan sudut kamera. Hal yang sama dikatakan berlaku untuk objek. Pengguna dapat memberikan gambar referensi suatu objek, dan dapat ditempatkan di lokasi atau kondisi apa pun sambil memastikan konsistensi. Runway mengatakan ini memungkinkan pengguna untuk menghasilkan video untuk konten berbasis naratif dan pemotretan produk menggunakan referensi gambar yang sama.
Dengan memberikan deskripsi teks di samping gambar referensi, model AI dapat menghasilkan pemandangan dari sudut yang berbeda, termasuk close-up dan profil samping sudut lebar, bahkan menangkap detail yang hilang dalam referensi. Area lain di mana perusahaan mengklaim Gen-4 unggul adalah pemahaman tentang fisika dan gerak dunia nyata.
Saat subjek dalam video berinteraksi dengan lingkungan, model AI memastikan bahwa fisika dunia nyata dan gerakan realistis ditambahkan. Hal ini juga terlihat dalam video demonstrasi yang dibagikan oleh perusahaan, di mana air membuat percikan realistis dan semak-semak yang bergerak menghasilkan gerakan yang hidup.
Perusahaan, bagaimanapun, tidak mengungkapkan kumpulan data yang digunakan untuk melatih model AI untuk output dinamis dan fidelitas tinggi. Ini menarik, mengingat perusahaan saat ini menghadapi gugatan terhadap artis dan perusahaan AI generatif saingan yang mengklaim bahwa Runway melatih modelnya pada materi berhak cipta tanpa izin.
