Apa yang dilakukan motion transfer AI
Motion transfer AI mengambil gerakan dari satu video dan memberikannya ke karakter lain. Anda menyiapkan klip referensi dan gambar karakter. Hasilnya, karakter Anda membawakan gerakan yang persis sama.
Bayangkan maskot merek UMKM Anda berjoget mengikuti gerakan yang Anda rekam sendiri di HP. Hasilnya bisa jadi bahan konten Reels atau TikTok.
Sistem membaca klip referensi frame demi frame, lalu memetakan gerakannya ke karakter Anda:
- Yang disalin: pose, gestur, timing, lengkung anggota badan, dan irama langkah.
- Yang dipertahankan: wajah, proporsi, dan tampilan karakter Anda, di adegan dari gambar karakter itu.
- Kenapa lebih baik daripada prompt: kalimat “dia berjalan dengan percaya diri” bisa menghasilkan sepuluh gaya jalan yang berbeda. Klip referensi menghapus tebakan itu, sehingga gerakannya terlihat natural.
Contoh motion transfer AI
Lihat satu tarian referensi yang sama diolah dengan dua cara. Motion transfer memindahkannya ke astronot dari gambar karakter, di gurun merahnya sendiri. Morphic Recast mempertahankan atap gedung, kamera, dan cahaya aslinya. Yang diganti hanya penarinya.
Klip referensi
Motion transfer
Morphic Recast
Berjalan adalah salah satu gerakan yang paling bersih dipindahkan. Kecepatan langkah dan lirikan ke belakang datang dari referensi. Pria, mantel, dan taman musim gugurnya datang dari gambar karakter.
Klip referensi
Motion transfer
Cara menjalankan motion transfer di Morphic
Motion control berjalan langsung di Canvas. Hasilnya muncul di samping shot Anda yang lain, siap dipotong, diperpanjang, atau diberi musik tanpa perlu ekspor.
Buka Motion control
Buka alat Motion control. Kolom prompt akan meminta satu gambar karakter dan satu video referensi gerakan.
Tambahkan klip dan karakter, lalu sebut namanya
Unggah klip referensi dan gambar karakter. Di prompt, sebut keduanya dengan namanya, misalnya “Astronot di Image 1 membawakan tarian dari Video 1 di gurun merahnya sendiri”.
Buat klipnya, lalu tinjau di Canvas
Buat klipnya. Klip baru masuk ke Canvas Anda. Panel detailnya menyimpan prompt dan kedua referensi, jadi Anda bisa mengulang prompt dari pengaturan yang sama.
Lebih suka meminta dengan kata-kata biasa? Lampirkan dua file yang sama di Copilot, lalu sebut namanya di permintaan Anda. Copilot yang menjalankan motion transfer untuk Anda.
Butuh workflow motion transfer khusus? Mari kita bangun bersama Anda.
Untuk studio, agensi, dan tim gim. Ceritakan karakter, klip referensi, dan cara Anda menyerahkan hasil. Kami rancang workflow motion transfer khusus di sekitarnya, dari transfer pertama sampai hasil akhir yang sudah disunting.
Yang terbawa dengan baik di motion transfer, dan yang rusak
Yang terbawa dengan baik
- Gerakan seluruh tubuh di bingkai penuh: berjalan, menari, bergestur, atau gerakan olahraga.
- Irama yang stabil: ayunan, langkah, atau lambaian memberi sinyal yang bersih bagi model.
- Postur yang mirip: karakter dengan proporsi dekat dengan subjek referensi lebih utuh menjaga identitasnya.
Yang cenderung rusak
- Subjek terhalang: subjek yang terpotong, tersembunyi, atau membelakangi kamera memaksa model menebak pose.
- Detail kecil yang cepat: jari, gerak tangan yang cepat, dan gerak wajah yang halus terdistorsi paling dulu.
- Bentuk yang berbeda jauh: hewan berkaki empat yang digerakkan dengan tarian manusia akan terlihat janggal.
- Take panjang: identitas bisa bergeser di bagian akhir klip, jadi referensi pendek lebih awet.
Cara menyiapkan referensi yang bersih untuk motion transfer
Bingkai seluruh subjek
Pastikan tubuh yang bergerak terlihat utuh dari awal sampai akhir. Subjek menghadap depan, cahayanya baik, dan latarnya polos adalah masukan paling bersih. Rekaman HP Anda sendiri sudah cukup, asal syarat itu terpenuhi.
Buat pendek dan berkesinambungan
Beberapa detik dengan satu gerakan yang jelas lebih baik daripada klip panjang berisi banyak gerakan. Butuh dua gerakan? Jalankan dua kali.
Cocokkan karakter dengan gerakannya
Pakai gambar karakter yang berdiri menghadap depan, dengan proporsi dekat dengan subjek referensi.
Nilai gerakan dan identitas secara terpisah
Periksa dulu timing gerakannya. Lalu periksa apakah karakter tetap terlihat seperti dirinya sampai frame terakhir. Gerakan yang meleset diperbaiki dengan referensi yang lebih bersih. Identitas yang bergeser diperbaiki dengan gambar karakter yang lebih kuat.
Motion transfer, video to video, atau recast?
Ada empat alat yang bekerja dari gerakan atau footage yang sudah Anda punya. Pilih berdasarkan apa yang harus tetap.
| Alat | Yang dipertahankan | Yang berubah |
|---|---|---|
| Motion transfer | Gerakan di klip referensi Anda | Karakter dan adegan, dari gambar Anda |
| Morphic Recast | Adegan, kamera, potongan, dan suara | Orangnya, diganti dengan orang dari foto Anda |
| Video to video | Gerakan dan timing | Tampilan, era, atau latar |
| Image to video | Gambar diam Anda | Gerakan, dibuat dari prompt |
Setelah satu referensi berhasil, pakai lagi. Minta Copilot menjalankan klip yang sama untuk setiap karakter baru, misalnya tiap maskot di toko Anda. Untuk versi klik demi klik, lihat cara memindahkan gerakan video ke karakter AI.
FAQ
Motion transfer AI membaca gerakan di video referensi, yaitu pose, gestur, dan timing, lalu memakainya pada karakter lain, biasanya dari gambar. Karakter tampil dengan gerakan referensi tetapi tetap berwajah dan berpenampilan sendiri. Karena gerakannya berasal dari rekaman nyata, hasilnya sering terlihat lebih natural daripada aksi yang sama dari prompt.
Klip pendek, beberapa detik saja, dengan subjek yang bergerak terlihat penuh di bingkai, cahaya baik, dan latar polos. Gerakan seluruh tubuh seperti berjalan, menari, atau bergestur terbawa dengan bersih. Hindari subjek yang terpotong, tersembunyi, atau membelakangi kamera.
Sebaiknya jangan tanpa izin. Pakai rekaman buatan sendiri, atau footage yang hak pakainya jelas. Gerakan yang dipindahkan berasal dari orang nyata, jadi minta persetujuan orang yang tampil di klip itu. Cek juga aturan platform tempat Anda mengunggah. Untuk kampanye komersial, tanyakan dulu ke penasihat hukum.
Detail yang halus dan cepat terdistorsi paling dulu: jari, gerak tangan yang cepat, dan gerak wajah yang tipis. Identitas juga bisa bergeser di klip yang panjang. Referensi yang pendek membantu. Begitu pula karakter dengan postur yang dekat dengan subjek referensi.
Bisa, selama bentuk objek cocok dengan gerakannya. Bentuk yang sanggup mengikuti gerakan akan berhasil dengan baik. Objek kecil yang disuruh melangkah seperti manusia akan terlihat dipaksakan. Cocokkan gerakan dengan postur targetnya.
Keduanya mempertahankan hal yang berlawanan. Motion transfer mempertahankan gerakan referensi dan memasangnya pada karakter baru. Video to video mempertahankan gerakan klip Anda dan mengubah tampilannya. Pakai motion transfer untuk gerakan tertentu, dan video to video untuk mengubah gaya footage yang sudah ada.
Motion transfer menaruh karakter Anda di adegan dari gambarnya, dan klip referensi hanya dipakai untuk gerakan. Recast mempertahankan adegan, kamera, dan suara video asli, lalu mengganti orangnya dengan orang dari foto Anda. Kalau shot-nya yang penting, recast dengan Morphic Recast. Kalau karakter Anda butuh dunianya sendiri, pakai motion transfer.
Bisa. Jalankan sekali per karakter dengan klip referensi yang sama. Setiap proses menghasilkan karakter itu membawakan gerakannya. Cara ini cepat untuk menampilkan satu gerakan joget di seluruh maskot merek atau tokoh kartun kanal Anda.