Kling V4.0 Reference-to-Video: gambar, video, dan suara dalam satu klip
Kling V4.0 Reference-to-Video memadukan hingga sepuluh gambar, lima video, dan tiga klip audio jadi satu video baru. Cara kerja tag @, tiga resep, uji hemat.
Kebanyakan model video mengambil satu gambar dan membayangkan sisanya. Kling V4.0 Reference-to-Video mengambil satu folder penuh: hingga sepuluh gambar referensi, hingga lima video referensi, dan hingga tiga klip audio, lalu membangun klip baru berdurasi 3 sampai 30 detik yang memakai semuanya. Karakter dari satu gambar, jaket dari gambar lain, gerakan kamera dari video ponsel, suara dari sebuah rekaman. Inilah yang paling mendekati memberi brief kepada kru film kecil di katalog, dan seperti brief mana pun, ia hanya berhasil jika jelas siapa adalah siapa.
Satu aturan: sebut setiap referensi di prompt
Setiap unggahan mendapat tag sesuai urutannya: gambar pertama adalah @Image1, yang kedua @Image2, dan seterusnya; video adalah @Video1 sampai @Video5, klip audio @Audio1 sampai @Audio3. Prompt wajib diisi, dan di situlah Anda mengatakan untuk apa setiap referensi. Referensi yang Anda unggah tetapi tidak pernah disebut hanya jadi tebakan bagi model. Ingat urutan unggahan, karena menukar dua gambar setelah menulis prompt diam-diam juga menukar perannya.
Resep 1: karakter yang sama di adegan baru
Dua gambar: tampak depan karakter Anda dan detail pakaiannya. Tidak ada yang lain. Ini cara paling sederhana untuk melihat apakah model mempertahankan wajah dan pakaian sebelum Anda menambahkan referensi gerakan.
@Image1 adalah sang wanita, @Image2 adalah jas hujan merahnya. Ia keluar dari pasar malam ke dalam gerimis, menarik tudung jas hujannya ke atas dan menoleh ke belakang melewati bahunya. Pantulan neon di jalan basah, tracking shot pelan dari samping.Resep 2: pinjam gerakan kamera dari video nyata
Video referensi ada di pengaturan lanjutan. Video ini mengarahkan gerakan, kamera, dan tempo, sehingga klip ponsel sepuluh detik saat Anda berjalan mengelilingi meja bisa menjadi orbit di sekitar produk yang tidak pernah ada. Secara keseluruhan, video dipakai hingga 30 detik.
@Image1 adalah teko keramik. Ikuti jalur kamera dari @Video1: orbit pelan setinggi meja, berakhir dekat pada cerat teko. Cahaya pagi dari jendela, uap mengepul, meja kayu.Ada juga sakelar bernama pertahankan suara asli. Jika dinyalakan, klip memakai suara dari video referensi Anda alih-alih membuat audio baru. Ini hanya berlaku jika Anda mengunggah video, dan merupakan pilihan tepat ketika referensinya sudah punya musik atau suasana yang Anda inginkan.
Resep 3: suara dan wajah
Klip audio referensi, juga di pengaturan lanjutan, mengarahkan suara dan bunyi hasilnya. Masing-masing sebaiknya berdurasi 5 sampai 30 detik. Klip keluar dengan audio stereo yang tersinkron, sehingga karakter bisa berbicara dengan nada rekaman Anda di dalam adegan yang dibangun model.
@Image1 adalah penjaga mercusuar tua, @Image2 adalah mercusuarnya. Ia berdiri di puncak tangga dengan lentera dan berbicara ke kamera dengan suara @Audio1, pelan dan hangat, angin dan ombak di latar belakang.Pengaturan yang penting
- Resolusi: 720p secara default, 1080p jika diminta. Buat draf di 720p.
- Durasi: bilangan bulat apa pun dari 3 sampai 30 detik; default-nya 5. Klip yang lebih panjang memberi model lebih banyak waktu untuk menyimpang dari referensi, jadi dapatkan durasinya dengan versi pendek yang bagus terlebih dulu.
- Rasio aspek: otomatis mengikuti gambar atau video referensi Anda. Atur 16:9, 9:16, 1:1, atau 21:9 hanya jika tujuannya membutuhkan, dan beri referensi dengan bentuk serupa.
Di mana model ini kurang
Sepuluh referensi adalah batas atas, bukan target. Gambar yang saling bertentangan (dua warna rambut berbeda untuk orang yang sama, pakaian siang hari dan adegan malam) menghasilkan rata-rata keduanya, dan detail kecil seperti teks dan perhiasan biasanya menjadi tempat penyimpangan pertama kali terlihat. Jika Anda hanya perlu menganimasikan satu gambar, model Kling V4.0 Image-to-Video lebih sederhana dan memberi kendali atas frame pertama dan terakhir. Untuk tips memilih referensi yang selaras, baca gambar referensi untuk gaya yang konsisten; untuk pendekatan lain pada pekerjaan yang sama, lihat panduan reference-to-video Vidu Q4. Daftar lengkapnya ada di halaman model.
Pertanyaan
Bagaimana memberi tahu model referensi mana yang mana?
Dengan tag di prompt: @Image1, @Image2, dan seterusnya untuk gambar sesuai urutan unggahan, @Video1 untuk video, dan @Audio1 untuk klip audio.
Berapa banyak referensi yang bisa saya pakai?
Hingga sepuluh gambar, lima video, dan tiga klip audio. Video dan klip audio ada di pengaturan lanjutan.
Seberapa panjang dan setajam apa klipnya?
Dari 3 sampai 30 detik, 5 secara default, di 720p atau 1080p, dengan audio stereo yang tersinkron.
