Panduan OmniHuman 2.0

Panduan OmniHuman 2.0

OmniHuman 2.0 membuat video orang berbicara atau bernyanyi dari satu foto dan satu trek audio. Pelajari cara memilih foto, menyiapkan audio, membuat take tunggal 5 menit, menulis baris arahan, dan menjaga latar tetap diam, lengkap dengan contoh yang bisa diputar.

Apa yang membuat OmniHuman 2.0 berbeda

OmniHuman 2.0 hanya butuh satu foto. Seluruh penampilannya dibangun dari audio Anda. Model ini menangkap cara tiap kalimat diucapkan, bukan sekadar bunyinya, sehingga wajah ikut membawa suasana trek. Nyalakan suara untuk mendengarnya.

Hasilnya pas untuk konten vertikal TikTok dan Reels, atau video penjelasan produk untuk toko online Anda.

Satu foto dan suara yang terengah-engah: penampilannya mengikuti antusiasme dan tawanya

Menurut postingan peluncuran BytePlus, ada tiga perubahan yang membedakan versi 2.0.

OmniHuman 2.0Artinya untuk video Anda
Membaca audioNada, emosi, dan tiap kata menggerakkan wajah, jadi bisikan, teriakan, dan tawa tampil berbeda
Trek apa punUcapan, lagu, atau percakapan, tanpa mode terpisah untuk masing-masing
Lima menit sekali jalanNaik dari 60 detik. Satu pelajaran atau satu lagu utuh menjadi satu shot, tanpa sambungan yang perlu disamarkan

Cara kerja OmniHuman 2.0

Anda memberi dua hal, dan hal ketiga bersifat opsional. Kebanyakan video cukup dengan dua yang pertama.

InputFungsinya
FotoSang pemeran. Satu wajah yang jelas, menghadap kamera, dengan framing seperti yang Anda inginkan di video akhir
Trek audioPenampilannya. Panjang audio menentukan panjang video, hingga 5 menit
Baris arahanOpsional. Catatan pendek soal suasana atau gerakan, misalnya tenang dan hangat atau gerakan tangan kecil

Pilih foto yang tepat untuk OmniHuman 2.0

Fotolah yang paling menentukan hasil. Model mempertahankan apa yang dilihatnya, jadi wajah yang tajam dan terang menghasilkan penampilan yang tajam dan terang pula.

LakukanAlasannya
Satu wajah, menghadap kameraWajah tambahan di dalam frame bisa ikut bergerak dan berbicara sendiri
Latar polos atau soft-focusLatar yang ramai memberi model lebih banyak hal untuk digerakkan. Lihat uji latar di bawah
Mulut tertutup, ekspresi rileksModel membuka mulut sesuai kata-katanya. Senyum lebar di foto akan bertabrakan dengan ucapan
Atur framing sesuai video yang Anda mauFoto kepala dan bahu menghasilkan video kepala dan bahu. Sisakan ruang untuk tangan kalau Anda ingin gestur
Samakan rasio dengan tempat tayangPakai foto vertikal untuk Reels dan Shorts, foto lebar untuk materi belajar dan YouTube
Tanpa teks, logo, atau pola ramaiTulisan kecil dan pola halus bisa berkilau saat orangnya bergerak

Karakter tanah liat dan ilustrasi juga bisa. Gambar wajahnya dengan jelas, dengan mata dan mulut yang mudah dibaca.

Foto: satu wajah, latar soft-focus

Karakter tanah liat sebagai pemeran

Siapkan audio untuk OmniHuman 2.0

Audio adalah penampilannya, jadi cara kalimat diucapkan akan terlihat di layar. Buat atau rekam suaranya lebih dulu, lalu dengarkan sebelum Anda menjalankan videonya.

TrekCara menyiapkannya
UcapanSatu suara yang jernih, tanpa musik di bawahnya. Tulis jeda dan tawa ke dalam cara membacakan, dan wajah akan mengikutinya
LaguJaga vokal tetap keras dan di depan. Vokal tipis di bawah mix yang padat memberi mulut lebih sedikit bahan untuk diikuti
DialogBytePlus mencantumkan dialog sebagai input. Uji pertukaran singkat dulu, lalu pastikan tiap kalimat jatuh di wajah yang benar
Take panjangPangkas jeda panjang di awal dan akhir. Setiap detik audio menjadi satu detik video

Trek lagu: nada panjang dan tarikan napas terlihat di wajah

Pelajaran yang tenang: penyampaian stabil dan hangat

Model yang sama membaca penyampaian yang sangat berbeda. Bisikan, teriakan, dan tawa masing-masing menjadi penampilan yang lain.

Bisikan

Teriakan

Tawa

Jalankan take panjang dengan OmniHuman 2.0

Satu shot bisa berjalan hingga 5 menit. Sebelum 2.0, video di atas 60 detik harus dibuat per bagian lalu disambung. Di tiap sambungan, wajah, cahaya, atau latar bisa melompat. Take panjang menghindari itu, selama foto dan audionya tahan sampai akhir.

Pelajaran 75 detik dalam satu take dari satu foto

  1. Tulis naskah lengkap dan buat suaranya sekaligus, agar nadanya sama dari awal sampai akhir.
  2. Dengarkan sekali dari awal sampai akhir, lalu perbaiki kata yang salah ucap sebelum membuat video. Kalau baru diperbaiki belakangan, seluruh take harus dijalankan ulang.
  3. Pilih foto dengan ekspresi tenang dan netral. Foto itu harus cocok untuk setiap momen di trek, bukan hanya kalimat pembuka.
  4. Jalankan tes 20 detik dari tengah naskah dulu, baru take penuhnya.

Tulis baris arahan untuk OmniHuman 2.0

Audio membawa sebagian besar penampilan. Baris arahan berguna kalau Anda menginginkan jenis gerakan tertentu. Jelaskan cara penyampaiannya, bukan kata-katanya.

Yang Anda mauTulis
Presenter yang tenangtenang dan hangat, gerakan kepala kecil dan alami, latar tetap diam
Kreator yang lincahceria dan ramah, wajah ekspresif, gerakan tangan kecil
Penceritagerakan pelan dan lembut, senyum penuh kenangan, jeda di antara kalimat
Penyanyimata terpejam di nada panjang, bergoyang pelan, penuh perasaan
Karakter kartunkepala bergerak lincah, ekspresi jenaka, pertahankan gaya gambar

Mengapa latar OmniHuman berkedip, dan cara mencegahnya

Sebagian penonton awal demo peluncuran BytePlus melihat latar bergeser saat orangnya berbicara. Model berbasis audio menggambar setiap piksel di tiap frame, bukan hanya wajah. Jadi apa pun di foto bisa ikut bergeser: orang di belakang pembicara, rak, papan tulisan, pola. Makin banyak yang digambar, makin banyak yang bergerak.

Kami mengujinya di Morphic dengan wajah dan kalimat suara yang sama di dua latar. Di versi kafe yang ramai, orang-orang di belakangnya menoleh dan bergerak sendiri. Latarnya berubah sekitar 2,3 kali lebih banyak dari frame ke frame dibanding versi dinding polos.

Latar ramai: orang di belakangnya mulai bergerak

Dinding polos: wajah dan suara sama, latarnya tetap diam

Lima langkah menjaga latar tetap diam:

  1. Pakai latar polos atau soft-focus. Kalau Anda hanya punya foto dengan latar ramai, ubah dulu latarnya menjadi dinding polos dengan orang yang sama. Begitulah versi polos di atas dibuat.
  2. Sisakan satu wajah di frame. Potong atau hapus orang lain, bahkan yang buram atau yang ada di tepi.
  3. Hindari detail halus di belakang orang: tulisan, ubin, rak berisi barang kecil, lampu hias.
  4. Tambahkan “latar tetap diam” ke baris arahan.
  5. Kalau satu bagian take panjang masih bergeser, jalankan ulang bagian itu saja lalu sambungkan. Pilih jeda ucapan sebagai titik potong, karena di situ sambungan paling tidak terasa.

Pengujian kami memakai Veed Fabric di Morphic, karena OmniHuman 2.0 belum ada di Morphic. Penyebabnya sama untuk model apa pun yang menggambar seluruh frame dari satu foto, jadi perbaikannya pun sama.

Tips OmniHuman 2.0

TipsAlasannya
Perbaiki audio sebelum videoVideo menyalin cara penyampaiannya. Pembacaan yang datar menghasilkan wajah yang datar
Tes 20 detik sebelum 5 menitTes singkat memperlihatkan masalah framing, latar, dan ekspresi dengan biaya yang jauh lebih kecil
Mulai dari ekspresi netralDari satu titik awal itu, wajah harus bergerak ke setiap emosi di trek
Jauhkan musik dari trek ucapanMusik di bawah suara bisa mengaburkan bunyi mana yang merupakan kata
Satu wajah per fotoSetiap wajah di frame adalah sesuatu yang mungkin dianimasikan model
Samakan rasio foto dengan platformMemotong video jadi belakangan bisa memangkas tangan dan gestur

OmniHuman 2.0 dan Veed Fabric

Keduanya mengubah satu foto dan satu trek audio menjadi video bicara. Veed Fabric sudah tersedia di Morphic hari ini, dan semua contoh di panduan ini dibuat dengannya. OmniHuman 2.0 segera hadir.

OmniHuman 2.0Veed Fabric
Di MorphicSegera hadirTersedia
InputSatu foto dan satu trek audioSatu foto dan satu trek audio
Take tunggal terpanjang5 menit5 menit
AudioUcapan, musik, atau dialogUcapan dalam bahasa apa pun
GayaBelum dirinci untuk 2.0Foto, ilustrasi, 3D, tanah liat, dan anime
ResolusiBelum dipublikasikan untuk 2.0480p atau 720p

Buat video bicara di Morphic hari ini

  1. Buka Copilot dan lampirkan foto dengan satu wajah yang jelas dan latar polos. Foto dari kamera HP sudah cukup.
  2. Lampirkan trek suara atau lagu Anda, atau minta Copilot membuat suaranya lebih dulu dari naskah Anda.
  3. Minta video bicara dengan Veed Fabric, tambahkan baris arahan singkat, lalu unduh hasilnya atau buka di editor.

FAQ

Bagaimana cara memakai OmniHuman 2.0?

Beri satu foto sang pemeran dan satu trek audio. Foto menentukan siapa yang tampil dan bagaimana framing-nya. Audio menentukan apa yang diucapkan atau dinyanyikan, dan bagaimana penyampaiannya. Prompt tidak wajib, karena foto dan audio sudah membawa sebagian besar hasilnya. Baris arahan singkat membantu kalau Anda ingin gerakan tertentu, seperti tenang, bersemangat, atau diam.

Bisakah video OmniHuman 2.0 dipakai untuk jualan atau konten komersial?

Itu bergantung pada hak atas bahan yang Anda masukkan. Pakai foto dan suara yang memang Anda miliki atau sudah berizin, dan minta persetujuan orang yang tampil di foto. Untuk ketentuan pemakaian komersial, cek halaman paket dan ketentuan Morphic begitu OmniHuman 2.0 tersedia.

Mengapa latar di video bicara saya bergerak?

Model berbasis audio menggambar setiap piksel di frame. Karena itu, detail di latar yang ramai bisa bergeser dan wajah lain bisa ikut bergerak. Pakai latar polos atau soft-focus, sisakan satu wajah di frame, dan tambahkan “latar tetap diam” ke baris arahan.

Berapa panjang video OmniHuman 2.0?

Hingga 5 menit dalam satu shot berkelanjutan, menurut BytePlus, naik dari 60 detik di versi sebelumnya. Panjang audio Anda menentukan panjang videonya.

Bisakah OmniHuman 2.0 membuat foto bernyanyi?

Bisa. Model ini menerima musik, bukan hanya ucapan. Jaga vokal tetap jelas dan di depan di dalam mix, supaya mulut punya kata untuk diikuti.

Apakah OmniHuman 2.0 cocok untuk kartun dan ilustrasi?

Versi OmniHuman sebelumnya menganimasikan kartun dan karakter bergaya, bukan hanya foto, dan BytePlus belum merinci gaya untuk 2.0. Beri wajah yang tergambar jelas, dengan mata dan mulut yang mudah dibaca, lalu uji klip pendek lebih dulu.