industryModel dan insight11 menit baca

Video AI real-time dan world model: penjelasan untuk kreator

Apa arti sesungguhnya video AI real-time dan world model, bedanya pembuatan video interaktif dengan teks-ke-video batch, dan apa yang berubah bagi kreator.

Tim OmniArt
Video AI real-time dan world model: penjelasan untuk kreator

Video AI real-time adalah batas terdepan yang paling banyak dibicarakan di media generatif saat ini, dan sekaligus yang paling tidak jelas definisinya. Tergantung siapa yang berbicara, ia bisa berarti model yang merender lebih cepat daripada durasi pemutarannya, model yang bisa Anda arahkan dengan papan tombol sambil berjalan, atau model yang menyimpan seluruh lingkungan simulasi di dalam kepalanya. Itu tiga masalah teknis berbeda dengan tiga tenggat berbeda, dan meleburkannya menjadi satu judul berita adalah cara kreator berakhir menyusun rencana di sekitar kemampuan yang belum ada.

Tulisan ini memisahkan istilah-istilahnya. Apa yang sebenarnya diuraikan "pembuatan real-time", apa itu "world model" dan apa yang bukan, siapa yang sedang membangun di ruang ini, apa kendala kerasnya, dan — bagian yang penting bagi siapa pun yang punya tenggat bulan ini — apa yang berubah dan tidak berubah bagi pekerjaan yang dikirim hari ini. Versi singkatnya: video untuk produksi masih berjalan di atas model batch, dan akan begitu untuk sementara waktu.

Apa arti "real-time" sesungguhnya di video AI

Model yang dipakai kebanyakan kreator adalah model batch. Anda menulis arahan, mengirimnya, modelnya merencanakan dan merender seluruh klip sebagai satu satuan, lalu beberapa detik atau menit kemudian Anda mendapat berkas yang sudah jadi. Tidak ada bagian dari hasilnya yang diputuskan sambil Anda menonton. Pembuatannya adalah sebuah pekerjaan yang dijalankan.

Pembuatan real-time membalik putaran itu. Alih-alih menghasilkan klip yang sudah jadi, modelnya menghasilkan bingkai secara terus-menerus, cukup cepat sehingga alirannya bisa ditonton sambil dibuat — dan, yang terpenting, cukup cepat sehingga masukan yang datang di tengah aliran bisa memengaruhi bingkai yang muncul berikutnya. Sifat terakhir itulah yang biasanya dimaksud orang ketika mereka bilang real-time, dan istilah yang lebih tepat untuk itu adalah pembuatan video interaktif.

Sebenarnya ada tiga klaim berbeda yang bersembunyi di balik satu label:

KlaimArtinyaMengapa itu sulit
Render lebih cepat daripada pemutarannyaSebuah klip selesai dirender dalam waktu lebih singkat daripada waktu menontonnyaSebagian besar masalah efisiensi dan infrastruktur
Pembuatan mengalirBingkai datang bertahap alih-alih sekaligusButuh arsitektur kausal, bingkai demi bingkai
Pembuatan interaktifMasukan Anda di tengah aliran mengubah apa yang terjadi berikutnyaButuh model yang menyimpan dan memperbarui keadaannya

Yang pertama adalah optimasi. Yang ketiga adalah kategori sistem yang sama sekali lain.

Apa itu world model (dan apa yang bukan)

World model bukan sekadar model video yang berjalan lebih lama. Pembedanya adalah keadaan yang tersimpan. Model teks-ke-video memetakan sebuah prompt menjadi rangkaian bingkai; prompt-nya adalah seluruh instruksinya dan rangkaiannya adalah seluruh jawabannya. World model memelihara representasi internal sebuah pemandangan — apa saja yang ada di dalamnya, di mana benda-benda berada, bagaimana perilakunya — dan menghasilkan bingkai sebagai pandangan atas representasi itu, memperbaruinya sebagai tanggapan atas tindakan.

Itulah sebabnya world model dibicarakan berdampingan dengan mesin gim alih-alih dengan alat video. Perbandingannya tidak sempurna, tapi berguna:

SifatTeks-ke-video batchWorld model
Satuan keluarannyaSebuah klip yang sudah jadiSebuah pandangan yang dibuat terus-menerus
InstruksinyaSebuah prompt, diberikan di awalSebuah prompt plus tindakan yang berlanjut
Keadaan internalnyaTersirat, dibuang setelah render selesaiTegas dan bertahan selama satu sesi
Syarat berhasilnyaKlipnya cocok dengan arahannyaLingkungannya tetap konsisten saat Anda bergerak melewatinya
Cara gagalnyaBidikan yang salah, pelencengan di dalam klipObjek menghilang, geometri bertolak belakang dengan dirinya sendiri, fisikanya rusak

Pertanyaan riset yang menarik adalah ketahanannya: kalau Anda memalingkan pandangan dari sebuah objek lalu menoleh kembali, apakah ia masih ada di sana, di tempat yang sama, dengan tampilan yang sama? Model batch tidak pernah harus menjawab itu. World model gagal atau berhasil justru di titik itu.

Para pemain yang perlu dicatat

Ada tiga kelompok longgar yang sedang mendorong hal ini, dan mereka menginginkan hal yang berbeda.

World model kelas Genie dari Google

Barisan Genie dari Google DeepMind adalah titik acuan yang paling banyak dikutip orang. Tawarannya adalah pembuatan lingkungan yang bisa dijelajahi dari sebuah prompt atau gambar, dan yang dikondisikan oleh tindakan — Anda menguraikan sebuah tempat, lalu Anda bergerak melewatinya, dengan modelnya membuat setiap pandangan berikutnya alih-alih memutar ulang pandangan yang sudah dirender lebih dulu. Peragaan publiknya menekankan interaksi pada laju bingkai yang terasa tanggap serta keutuhan yang bertahan sepanjang satu rentang penjelajahan yang menerus, dan pembingkaiannya secara tegas berorientasi riset, dengan pelatihan agen dan AI berwujud disebut sebagai motivasi yang setidaknya sekuat pembuatan konten.

PixVerse R1

PixVerse memposisikan R1 sebagai world model real-time alih-alih sebagai satu lagi peluncuran teks-ke-video, dan memasarkannya sebagai alternatif bagi sistem kelas Genie dengan sasaran kreator serta khalayak yang berdekatan dengan dunia gim. Pembingkaian itu perlu dicatat karena datang dari perusahaan pembuatan video, bukan dari laboratorium riset, yang menunjukkan kategori ini mulai ditanggapi serius sebagai permukaan produk dan bukan cuma sebagai makalah. Perlakukan rinciannya sebagai posisi vendor sampai ada perbandingan langsung yang independen — ini ruang di mana mutu pengumuman dan mutu yang benar-benar dirilis pernah berbeda jauh.

Jalan tengah yang berdekatan dengan dunia gim

Kelompok ketiga adalah yang paling tidak menarik untuk judul berita dan mungkin yang paling berdampak: pekerjaan yang menaruh model generatif di dalam atau di samping mesin konvensional. Lapisan render neural di atas keluaran mesin gim, aset dan lingkungan hasil pembuatan yang masuk ke jalur produksi biasa, perilaku karakter bukan pemain yang dibuat secara generatif, pemindahan gaya yang diterapkan per bingkai. Tidak ada satu pun dari itu yang merupakan world model utuh. Semuanya sudah bisa dikirim lebih cepat, karena mewarisi kepastian dan kendali dari sebuah mesin gim dan memakai pembuatan generatif hanya di tempat yang memang lebih baik dikerjakan secara generatif.

Catatan

Bahasa yang perlu diwaspadai di pengumuman: "real-time" tanpa putaran interaksi yang dinyatakan biasanya berarti render yang cepat, bukan pembuatan yang bisa diarahkan. "World model" yang disematkan pada pembuat klip berdurasi tetap biasanya berarti tim pemasarannya tiba lebih dulu daripada arsitekturnya.

Kendala yang menentukan tenggatnya

Ada empat masalah yang berdiri di antara peragaan dan alat kreatif yang bisa diandalkan. Tidak satu pun mendekati selesai, dan kemajuan di salah satunya biasanya menuntut pengorbanan di yang lain.

Kelambatan versus kesetiaan gambar. Interaktivitas memaksakan anggaran komputasi per bingkai yang keras: apa pun yang bisa dihasilkan modelnya sebelum bingkai berikutnya jatuh tempo, itulah yang Anda dapat. Model batch bisa menghabiskan waktu selama apa pun untuk satu bingkai. Setiap satuan mutu di sistem interaktif harus dibayar di dalam anggaran itu, dan itulah sebabnya keluaran interaktif terlihat satu generasi di belakang keluaran batch — serta sebabnya ia akan terus terlihat begitu meski keduanya terus membaik.

Resolusi dan detail. Anggaran yang sama, diterapkan pada piksel. Jalur produksi batch mampu membiayai putaran penghalusan dan tahap penaikan resolusi; sistem yang membuat bingkai sesuai permintaan umumnya tidak mampu, setidaknya tidak tanpa menambahkan kelambatan yang justru ingin dihindarinya.

Keutuhan sepanjang waktu. Inilah yang paling dalam. Konsistensi berjangka panjang menuntut ingatan atas apa yang sudah dibuat, dan ingatan itu memakan komputasi yang bersaing dengan anggaran bingkainya. Objek yang melenceng, geometri yang diam-diam bertolak belakang dengan dirinya, dan pencahayaan yang berubah antara dua kali kunjungan ke titik yang sama semuanya adalah gejala dari keterbatasan yang sama. Kemajuan di sini nyata tapi bertahap, dan pembingkaian yang jujur adalah bahwa sesi tetap konsisten untuk sementara lalu berhenti konsisten.

Ketepatan kendali. Interaksi hanya berguna kalau modelnya menanggapi masukan sesuai maksud Anda. Gerakan berarah relatif bisa ditangani. Pengarahan yang presisi, bisa diulang, dan akurat sampai per bingkai — hal yang benar-benar dibutuhkan pembuat film atau perancang gim — jauh lebih sulit, dan ada ketegangan yang belum terpecahkan antara sistem yang berimprovisasi dan sistem yang melakukan tepat apa yang diperintahkan.

Ada juga kendala ekonomi yang kurang mendapat perhatian. Satu render batch adalah pekerjaan yang batasnya jelas dan bisa ditagihkan. Satu sesi interaktif adalah aliran komputasi yang terbuka ujungnya, dan ada yang harus membayar setiap detiknya. Itu membentuk wujud produk di kategori ini jauh sebelum risetnya selesai.

Apa yang berubah bagi kreator — dan apa yang tidak

Apa yang belum berubah

Kalau Anda mengirim video untuk klien, kampanye, atau khalayak, world model real-time belum menjadi bagian dari jalur kerja Anda, dan berpura-pura sebaliknya akan menghabiskan satu tenggat. Mutu klip yang sudah jadi, resolusi, audio, kendali bidikan, dan kesetiaan pada gambar referensi semuanya masih tinggal di model batch — generasi Seedance, Veo, Kling, Sora, PixVerse, dan Grok Imagine yang tersedia di OmniArt hari ini. Setiap satu dari mereka dioptimalkan tepat untuk hal yang dikorbankan sistem interaktif: menghabiskan komputasi yang sungguhan untuk membuat satu klip sebaik mungkin.

Ini juga bukan lintasan yang saling menggantikan. Pembuatan interaktif dan pembuatan batch mengoptimalkan dua ujung yang berlawanan dari pertukaran yang sama. Masa depan di mana world model sudah sangat baik tidak berarti masa depan di mana model batch jadi usang, sebagaimana mesin gim real-time tidak membuat render film secara luring menjadi usang.

Apa yang berubah

Ada tiga hal yang perlu Anda sesuaikan sekarang.

  • Pravisualisasi jadi murah lebih dulu. Penerapan pembuatan yang bisa diarahkan yang paling awal benar-benar berguna adalah menjelajahi sebuah ruang atau gagasan penataan sebelum berkomitmen pada render yang jadi. Kasar, interaktif, dan bisa langsung direvisi mengalahkan rapi tapi lambat ketika Anda masih memutuskan.
  • Prompt berhenti menjadi satu-satunya antarmuka. Seiring model menerima masukan yang berlanjut, arahan mulai terlihat lebih sedikit seperti paragraf dan lebih banyak seperti pengarahan — sebuah keadaan awal plus rangkaian maksud. Kreator yang sudah berpikir dalam bidikan dan ketukan alih-alih dalam kalimat akan beradaptasi lebih cepat.
  • Pekerjaan yang berdekatan dengan gim terbuka lebih dulu daripada yang berdekatan dengan film. Media interaktif memaklumi kesetiaan gambar yang lebih rendah sebagai tukaran atas ketanggapannya, karena khalayaknya ikut bermain alih-alih menonton. Di situlah teknologi ini pertama-tama benar-benar bersaing.

Keterampilan yang bisa dibawa pindah

Tidak ada yang Anda pelajari di model hari ini yang terbuang. Menguraikan sebuah pemandangan dengan tepat, menetapkan kamera dan pencahayaan, menjaga seorang karakter atau satu tampilan lintas bidikan, dan membangun kebiasaan menilai yang bisa diulang — arahan yang sama, referensi yang sama, rubrik yang sama, dijalankan pada apa pun yang baru — semuanya berpindah langsung. Antarmukanya berubah; keterampilan menjadi spesifik tentang apa yang Anda inginkan tidak.

Peringatan

Hati-hati dengan klaim tolok ukur di kategori ini. Sistem interaktif sulit dibandingkan secara adil, dan peragaan yang dioptimalkan untuk satu jalur pendek yang menguntungkan di dalam sebuah lingkungan hampir tidak memberi tahu apa pun tentang perilakunya sepanjang sesi yang lebih panjang. Tunggu uji langsung sebelum menulis ulang jalur kerja Anda.

Apa yang bisa Anda lakukan di OmniArt hari ini

OmniArt tidak menawarkan pembuatan berbasis world model real-time, dan kami lebih memilih mengatakannya terang-terangan daripada mengaburkan batasnya. Yang ditawarkan ruang kerja videonya adalah jajaran model batch saat ini di satu tempat — Seedance 2.0, Veo 3.1, Kling, Sora 2, PixVerse V6 dan C1, Google Gemini Omni, Happy Horse, dan Grok Imagine — dengan satu saldo dan satu tata bahasa prompt untuk semuanya.

Itu lebih berguna bagi masa depan yang interaktif daripada kedengarannya. Cara bersiap adalah menjadi cepat pada bagian-bagian yang terbawa pindah:

  1. Ulik di tingkatan yang murah. Buat draf bidikannya di varian cepat atau mini, mantapkan komposisi dan geraknya, lalu jalankan ulang arahan yang sama di tingkatan yang lebih tinggi. Ini padanan batch dari satu putaran interaktif, dan begitulah Anda belajar apa yang sebenarnya diminta sebuah arahan.
  2. Bekerjalah dalam bentuk kelanjutan, bukan sekali jadi. OmniArt punya model khusus Grok Imagine Extend dan Modify yang bekerja pada klip yang sudah jadi — memperpanjangnya atau mengubahnya alih-alih membuatnya ulang dari nol — dan Extend bisa dipakai pada rekaman dari model mana pun di ruang kerja video. Anda juga bisa merangkainya secara manual: pakai mode transisi, atau umpankan bingkai terakhir sebuah klip sebagai gambar awal klip berikutnya. Bagaimanapun caranya, berpikir dalam bentuk kelanjutan membangun tepat kebiasaan berurutan dan sadar-keadaan yang akan dituntut pembuatan interaktif.
  3. Bandingkan model pada arahan yang sama. Satu prompt, beberapa model, berdampingan. Itu satu-satunya cara jujur menilai apa pun di bidang ini, dan itulah kebiasaan yang akan memungkinkan Anda menilai kemampuan yang benar-benar baru dalam satu sore alih-alih satu kuartal.

Untuk keliling penuh model yang ada di ruang kerja, lihat semua model video AI di satu ruang kerja. Untuk mulai membuat bidikan sekarang, menuju halaman pembuatan.

Tanya jawab

Apakah video AI real-time sudah tersedia bagi kreator hari ini?

Render yang cepat sudah. Pembuatan yang sungguh interaktif dan bisa diarahkan masih berupa kemampuan yang baru muncul dengan peragaan dan produk awal, bukan alat produksi yang bisa diandalkan. Pekerjaan video yang jadi berjalan di atas model batch.

Apa bedanya world model dengan model teks-ke-video?

Model teks-ke-video mengubah sebuah prompt menjadi klip yang sudah jadi. World model memelihara keadaan internal sebuah pemandangan yang bertahan lalu membuat pandangan atasnya sebagai tanggapan atas tindakan yang berlanjut, dan itulah sebabnya keutuhan saat Anda kembali ke satu tempat lebih penting daripada mutu klipnya.

Apakah world model akan menggantikan model video batch?

Kecil kemungkinannya, setidaknya tidak sebagai kategori. Keduanya mengoptimalkan ujung yang berlawanan dari pertukaran kelambatan versus kesetiaan gambar yang sama, jadi keduanya lebih tepat dipahami sebagai alat yang saling melengkapi daripada sebagai generasi yang berurutan.

Apa yang sebaiknya saya pelajari sekarang supaya siap?

Uraian pemandangan yang tepat, pengarahan kamera dan pencahayaan, keutuhan lintas bidikan, dan kebiasaan membandingkan yang bisa diulang. Semuanya terbawa pindah, apa pun bentuk akhir antarmukanya nanti.

Siap membuat?

Mulai hasilkan konten menakjubkan dengan AI

Mulai gratis