Mirelo SFX 2.0:完全ガイド

Mirelo SFX 2.0:完全ガイド

Mirelo SFX 2.0 は、完成した動画の音を作り直します。セリフを残し、不要な BGM を消し、効果音を動きに合わせ、カットをまたいで音をそろえる方法を、プロンプトのコツや長尺編集のヒント、聴き比べできる例つきで紹介します。

Mirelo SFX 2.0 の特徴

Mirelo SFX 2.0 は、すでにある動画に使います。映像と演技はそのままで、それ以外の音をすべて作り直します。音を出して、2つのトラックを切り替えながら聴いてみてください。

公開前に、動画の BGM を自分で選んだ曲だけにしたい場面があります。そのときは、曲だけを外して差し替えられます。

窓から差す温かな光の中、木のカウンターでにんじんを切る女性

BGM を消して、セリフは残す

元の動画では、彼女のセリフの下にギターの曲が流れています。作り直した音では、セリフを残して曲を消し、包丁の音を足しました。

編集の仕上げを変える特徴が、5つあります。

Mirelo SFX 2.0編集で何が変わるか
映像から音を作る効果音は動きに合い、空間にも合います。広間は反響し、森は反響しません。手作業の同期は要りません
セリフを残す話された言葉は、演じたままです。新しい音はセリフの周りに組まれ、人が話している間は低く抑えられます
不要な BGM を消す動画生成モデルが勝手に付けた曲がなくなります。テイクはそのままで、曲はあとから自分で足せます
カットをまたいで同じ音同じ場所のショットが、つないだ編集を通すと一つの場面として聞こえます
編集全体を一度に1回の実行で最長10分です。完成した編集を、先に切り分ける必要はありません

Mirelo SFX 2.0 の仕組み

動画を渡すと、3つの選択が結果を左右します。ほとんどのクリップは、最初の動画だけで足ります。

入力役割
動画メインの入力です。動き、タイミング、場所を読み取り、合う音を組み立てます
セリフを残す初期設定でオンです。効果音だけがほしいとき、たとえばあとでナレーションを録るときは、オフにします
プロンプトと除外する音任意です。ほしい音を短く書き、入れたくない音(BGM、風など)を短い一覧で添えます
テイク1回の実行で、最大4つのバージョンが返ります。合うものを選びます

出典:Mirelo のローンチ投稿、Mirelo の API ドキュメント。

BGM を消してセリフを残す

動画生成モデルは、頼んでいないシーンに曲を付けることがあります。生成し直すとクレジットを使い、気に入ったテイクを失うかもしれません。ミュートすれば、セリフも消えます。Mirelo SFX 2.0 にセリフを残す設定で通すと、セリフはそのままで、曲がシーンに合う音に置き換わります。

雨の夜の通りで、女性のそばで傘を開く男性

ピアノの曲を消して、雨を足す

同じセリフに、傘を打つ雨と、周りの通りの音が加わりました。

松林に囲まれた湖で、木の桟橋から飛び込む若い女性

ポップスを消して、水しぶきを足す

ポップスの曲が消えます。板の上を走る足音、水しぶき、笑い声は、映像に付いたまま残ります。

新しい音からは BGM を外しておき、エディターで自分の曲を重ねます。こうすれば、動画の中の音楽は、自分で選び、利用の権利を持つ曲だけになります。

動きに合わせた音

効果音は、画面の出来事に合わせて置かれます。ハンマーは打つ瞬間、水しぶきは飛び込む瞬間、ボードは着地の瞬間です。説明は要りません。まずプロンプトを空にして、映像から何を聞き取るかを確かめてください。

下の2本は、ショート動画向けの縦型クリップです。

日差しのあるプラザで、コンクリートの縁をグラインドするスケートボーダー

ボードに合わせた音

コンクリートを走る車輪、縁をこするグラインド、着地の音。プロンプトは使っていません。

灰色の浜辺で身震いして水を飛ばす、濡れたゴールデンレトリバー

身震いに合わせた音

波の音、濡れた砂を踏む足音、犬が身震いして飛ばす水しぶき。プロンプトは使っていません。

プロンプトで音を方向づける

映像から読み取れない音が要るときや、ひとつの音を主役にしたいときに、プロンプトを足します。感情ではなく音の名前を書き、1行に収めてください。

暗い鍛冶場で、金床の上の熱を帯びた鉄の棒を打つ鍛冶職人

同じクリップ、プロンプトありとなし

プロンプトあり:金床に響く重いハンマーの音、轟く炉の火、熱した金属が水に入った瞬間の鋭い蒸気の音。

ほしい音書く例
画面の外の音遠くの寺の鐘、二つ先の通りで吠える犬
ひとつを主役にするトタン屋根を打つ激しい雨、足音は下で静かに
特定の素材新雪を踏むブーツ、きしむ革
静かなシーン静かなルームトーン、時計の秒針の音、ほかには何もなし
入れたくない音除外リストに「BGM、風、人混み」を入れる

カットをまたいで一つの音にする

クリップを1本ずつ生成すると、それぞれが自分の音を持つため、つないだシーンはカットのたびに環境音が切り替わります。先に編集を仕上げ、全体を一度に実行してください。同じ場所のショットが、続いた一つのシーンの音で返ってきます。

夕暮れの雪の小屋へ、薪を抱えて向かう赤いジャケットの男性

3つのショットを1回で

引き、寄り、追いの3ショットを、別々に生成してつないだものです。1回の実行で、一つの音にそろいます。

Mirelo SFX 2.0 のコツ

コツ理由
先にカットを確定する音は映像に従うので、実行後にトリムすると、効果音が途中で切れることがあります
クリップごとでなく編集全体を実行する1回の実行なら、ショット間で環境音が変わりません
まずプロンプトなしで試す映像だけで足りることが多いです。足りない音があるときだけ、プロンプトを足します
ナレーションを入れるならセリフをオフに効果音と環境音だけが返り、自分の録音を入れる余地が残ります
BGM は最後に足す新しい音から BGM を外し、権利を確認した自分の曲を重ねて、音量を決めます
テイクを複数出す同じクリップでも、テイクごとに音が変わります。2〜3個を聴き比べます

Mirelo SFX 2.0 のどのバージョンを使うか

Mirelo によると、Mirelo SFX 2.0 には3つのバージョンがあります。

バージョン用途
Video-to-sound(動画から音)動画の音全体を、同期させ、セリフを中心に組み立てます。メインのモデルです
Text-to-sound(テキストから音)映像に合わせる必要のない音を、プロンプトから作ります。たとえば背景の環境音です
Stem(近日公開)音を1つずつ同期して作ります。手元の音声に、足りない音を重ねるときに使います

Mirelo SFX 2.0 と Sonilo SFX

どちらも、動画の音を作り直し、セリフを残します。Sonilo SFX は今日から Morphic で使え、このガイドの例はすべてそれで作りました。Mirelo SFX 2.0 は近日公開です。

Mirelo SFX 2.0Sonilo SFX
Morphic での提供近日公開有料プランで提供中
最長の動画10分10分
セリフを残すはい(初期設定でオン)はい(初期設定でオン)
BGM と環境音の置き換えはいはい
プロンプト任意。除外する音の一覧も指定できます任意
1回で返るテイク数最大4つ1つ

Mirelo 自身のブラインド試聴テストでは、Mirelo SFX 2.0 を選んだ人が46%、Sonilo を選んだ人が33%、差なしが21%でした(出典)。

Morphic で今すぐ動画に新しい音を付ける

  1. Copilot を開き、完成した動画(最長10分)を添付します。
  2. セリフを残して新しい効果音を付けるよう頼みます。主役にしたい音があれば、名前で伝えます。
  3. 結果はダウンロードするか、エディターで開き、自分の音楽を別のトラックに置きます。

よくある質問

AI動画のBGMだけを消して、セリフを残すには?

セリフを残す設定にして、Mirelo SFX 2.0 や Sonilo SFX のような、動画から音を作るモデルに通します。セリフ以外のすべてが新しい効果音と環境音に置き換わるので、曲は消え、セリフは残ります。

公開する動画のBGMの著作権が心配です。どう進めればよいですか?

新しい音からBGMを外し、そのあとエディターで自分の曲を別のレイヤーに重ねる順番がおすすめです。こうすれば、動画の音楽は、自分で選び、利用の権利を持つ曲だけになります。効果音と曲の音量は、重ねたあとで整えてください。

Mirelo SFX 2.0 にプロンプトは必要ですか?

いいえ。メインの入力は動画です。映像から読み取れない音が要るとき、またはひとつの音を主役にしたいときだけ短いプロンプトを足し、入れたくない音は除外リストに入れます。

Mirelo SFX 2.0 は歌を残せますか?

Mirelo はセリフを残すものと説明していて、歌の扱いには触れていません。歌の入る動画は、全編を実行する前に、短い区間で試してください。

音のない動画にも使えますか?

はい。無音のクリップには、映像から作った音が丸ごと付きます。動きに合わせた効果音、フォーリー、環境音です。

何分の動画まで実行できますか?

Mirelo によると、Mirelo SFX 2.0 は1回の実行で最長10分です。Morphic の Sonilo SFX も最長10分です。それより長い作品は、音の変化が自然なシーンの切れ目で分けてください。