ビデオからセリフ、音楽、効果音を分離する方法

検索フレーズ セパレート ダイアログ ミュージック サウンド エフェクト は、3 つのステム音源分離タスクを説明します。ビデオからこれを行うには、独立したダイアログ、音楽、エフェクト ステムを返すワークフローを使用し、サウンドが重複する各ステムをプレビューします。基本的なオーディオ抽出ツールから始めないでください。抽出では完全なサウンドトラックが 1 つのファイルとして保存されるだけです。セパレーターは 3 つのソースを推定するため、それらを個別にミュート、置換、クリーン、またはリバランスできます。完璧な再構成ではなく有用なステムを期待し、比較のためにオリジナルのミックスを保存してください。

重要なポイント

1. 3 つのステムの分割では、音声と背景の単純な分割よりも多くの編集コントロールが保持されます。
2. セリフ、音楽、エフェクトは完成したミックスから推定したものであるため、かすかなにじみが残る場合があります。
3. エクスポートする前に、トランジション、リバーブテール、インパクト、群衆シーン、音楽上のスピーチを確認します。
4. 可能な場合は、問題のある領域のみを修復します。トラック全体を積極的に処理すると、音声が薄っぺらになったり、不自然になったりする可能性があります。
5. 可逆的なワーキング セット (未加工のミックスと分離されたすべてのステム) をエクスポートします。

ビデオ編集に 3 つのステムが重要な理由

2 つのステム「ボーカルとインストゥルメンタル」の結果は、曲に適しています。ビデオサウンドは通常、より複雑です。その背景には、スコア、部屋の雰囲気、拍手、交通量、足音、インターフェイスのクリック音、およびデザインされた効果が含まれる場合があります。これらすべてを 1 つのインストゥルメンタル トラックに結合すると、新たな制限が生じます。スコアを削除すると、シーンを信じられるものにする環境音も削除される可能性があります。

レカポさん オーディオセパレーター ビデオ指向のダイアログ/音楽/エフェクトの分割を提供します。実際的には:

1. ダイアログは、クリーンアップ、翻訳、置換、または強調したい、話し言葉または音声の前景です。
2. 音楽 は、ミュート、置換、または再バランスを行うことができるスコアまたは音楽ベッドです。
3. エフェクトには、編集の場所、動き、連続性を維持するのに役立つサウンドエフェクトとアンビエンスが含まれています。

カテゴリは重複する場合があります。リズムに合わせて合唱する群衆は音楽に似ているかもしれません。残響のある声がエフェクトステムにこぼれる可能性があります。音色効果はスコアの一部に似ている場合があります。そのため、品質管理はワークフローの一部であり、最終的なオプションではありません。

処理する前に分割を計画する

まず、目的の編集を定義します。同じソースでも異なる決定が必要になる場合があります。

オリジナル ミックスのオーディオのみのコピーが 1 つだけ必要な場合は、 音声抽出ワークフロー 代わりに。茎に別の処理が必要な場合には、分離が正当化されます。

段階的なワークフロー

1. 編集が許可されている最適なソースを準備します

利用可能な最も古い、最もクリーンなファイルを使用してください。何度もダウンロード、再圧縮、エクスポートされたコピーには、不鮮明な高周波、ポンピング、またはソース境界の推定を困難にするその他のアーティファクトが含まれている可能性があります。

アップロードする前にソースを聞いてください。難しいセクションにマークを付けます: 同時の会話と音楽、拍手、大きな衝撃、歌、強い室内エコー、急速なトランジション。これらのマーカーは、後でレビューのチェックリストになります。

2. ビデオをアップロードし、3 部構成を選択します

Recapo の Audio Separator を開いて、承認されたソースを提供します。ビデオの再編集、ダビング、またはサウンド デザインが目的の場合は、ボーカル/楽器ではなく、ダイアログ、音楽、エフェクトを選択してください。

古いチュートリアルやスクリーンショットからサポートされていない仮定を立てないようにしてください。製品インターフェイスは変更される可能性があるため、使用時にライブ製品ページでコントロールと利用可能な出力の選択肢を確認してください。

3. ソロですべてのステムをプレビューする

対話から始めます。単語、呼吸、子音のエッジが理解できるかどうかを確認します。次に、スピーチブリードのために音楽を聴きます。最後に、インパクトの欠落、アンビエンスの不連続、または音声とスコアの断片のエフェクトを聞いてください。

静かで簡単なセクションだけを判断しないでください。分離前に作成したすべてのマーカーにジャンプします。きれいなナレーションでは優れた音を奏でるステムでも、同じ話者が音楽のピークを越えて話すと、うまく聞こえなくなる可能性があります。

4. 残しておきたいステムを再結合する

ソロ再生では一部のアーティファクトが誇張されます。保持されたステムを再結合し、一致したリスニング レベルで結果を元のミックスと比較します。 1 本の孤立した茎にあるかすかな痕跡は、自然に隠蔽される可能性があります。リバーブテールの欠落は、状況の中でのみ明らかになる場合があります。

音楽を置き換えるには、分離した音楽ステムをミュートし、ダイアログとエフェクトを維持し、新しいトラックを追加して、スピーチの周りのレベルを調整します。ダビングの場合は、会話ステムを下げるかミュートにし、音楽とエフェクトを保存し、新しいパフォーマンスを映像に合わせます。

5. 局所的な問題を修復する

最も破壊的でない修復を使用してください。

1. 残留物が出現する場所のみのレベルを自動化します。
2. 大まかなステム境界に短いフェードを追加します。
3. 安全に分離できる場合は、元のミックスから欠落しているエフェクトをパッチします。
4. 分割によって不自然な沈黙が生じる場合は、対話のギャップの下に微妙なルームトーンを追加します。
5. 残っている問題が純粋にノイズである場合にのみ、孤立した対話ステムにノイズ リダクションを適用します。

一般的なノイズ低減は、ほぼ安定したテクスチャに対して最も効果的です。 Recapo と Audacity の公式ドキュメントでは、継続的なヒスノイズ、ハムノイズ、またはファンのようなノイズと、突然発生する 1 回限りの音を区別しています。ドアのバタンや単独のクリック音には、通常、ステム全体にわたる強力なノイズ除去ではなく、ターゲットを絞ったタイムラインまたはスペクトルの修復が必要です。

6. リバーシブルパッケージをエクスポートする

保持:

1. オリジナルのビデオまたはオリジナルのミックスサウンドトラック。
2. 対話の幹。
3. 音楽の幹。
4. 影響が生じます。
5. 新しい編集または結合されたミックス。
6. ローカル修理に関するメモ。

明確なファイル名と同期された開始時間が重要です。ステムを個別にトリムまたはシフトすると、次の編集中に同期が失われやすくなります。

各ステムを確認する方法

対話チェックリスト

1. 各行の最初と最後の子音はそのままですか?
2. 声は自然な響きを保っていますか、それとも虚ろになったり、水っぽくなったりしませんか?
3. 音楽の残留物は一時停止中に最も顕著ですか?
4. 息や部屋の反射は意図した編集に許容されますか?
5. ステムは唇の動きと同期していますか?

音楽チェックリスト

1. 認識可能な音声または音声の断片が聞こえますか?
2. 対話が行われた場所で持続音符が中断されますか?
3. トランジションとリバーブテールは滑らかなままですか?
4. このステムを削除した場合、スコアのいずれかがエフェクトに残りますか?

エフェクトとアンビエンスのチェックリスト

1. 足音、衝撃、インターフェイスのクリック音、および場所の雰囲気は存在しますか?
2. 拍手や群衆の音は会話や音楽の幹に移行しましたか?
3. 話されたフレーズの間で雰囲気が突然消えてしまうことはありますか?
4. 重要な同期エフェクトは映像と一致していますか?

よくある問題と実際的な解決策

音声が音楽またはエフェクトステムに残る

影響を受けるフレーズの間のみそのステムを下げるか、必要に応じて置換音楽で残余部分をマスクします。吹き替えの場合は、新しい音声が元のかすかな音声を自然にカバーしているかどうかを確認します。ヘッドフォンや通常のスピーカーで試聴するまでは、消えたと主張しないでください。

会話が薄く聞こえる

フルミックスと比べてみてください。一部の低レベルの部屋情報はエフェクトステムに移動されている可能性があります。制御された量のアンビエンスを再結合すると、イコライゼーションやノイズ除去を強く行うよりも自然に聞こえます。

衝撃は音楽とともに消える

一部の音色効果またはリズミック効果は音楽として分類できます。不要なスコアを再導入せずに特定のイベントを分離できる場合は、元のミックスから特定のイベントを復元するか、許可されたソースからエフェクトを再作成します。

リバーブはクロスステム残留物を作成します

残響は、時間と周波数において直接音と重なる反射で構成されます。音源を分離すると、乾いた声が対話の中に配置され、一部の反射が他の場所に残ることがあります。最初にレベルの自動化とコンテキスト マスキングを使用します。広範なリバーブ除去は一部の録音には役立ちますが、元のマイクでははっきりと捉えられなかったディテールを再現することはできません。

代わりに 2 ステムのボーカル スプリットを使用する場合

ソースが主に音楽的で、タスクがカラオケ、アカペラ、またはリミックスベッドである場合は、ボーカル/楽器のスプリットを使用します。レカポさん ボーカルリムーバー は、その 2 部構成の結果を中心に設計されています。インタビュー、チュートリアル、映画、製品デモ、ローカリゼーションでは、ダイアログ/音楽/エフェクトは一般に、編集上必要な決定により密接に対応しています。

よくある質問

ビデオからダイアログ、音楽、エフェクトを完全に分離できますか?

いいえ、完成したサウンドトラックには重複するソースが含まれており、分離によってそれらの寄与が推定されます。強いオーバーラップ、リバーブ、圧縮を行うと、残留物が残ったり、ディテールが欠けたりする可能性があります。

セリフはボーカルと同じですか？

いつもではありません。 「ボーカル」は音楽ワークフローでよく使用されますが、「ダイアログ」はビデオ内の話された内容をよりよく表します。最適な分割は、ソースと目的の編集によって異なります。

セパレータを使用する前に音声を抽出する必要がありますか?

セパレーターがビデオを直接受け入れる場合はそうではありません。抽出は、完全なミックスのスタンドアロン コピーが特に必要な場合に便利です。それ自体では分離は改善されません。

ノイズリダクションは分離の前に行うべきですか、それとも分離後に行うべきですか?

ノイズが主に音声に影響を与える場合は、分離されたダイアログをクリーニングすることで、音楽やエフェクトの変更を回避できます。大きなノイズによって有用な分離ができない場合は、両方の順序で短いセクションをテストし、アーティファクトが少ない結果を選択します。

突然不要な音が発生したらどうすればよいですか?

地元のイベントとして扱いましょう。可能な場合は、影響を受けた領域を切断、縮小、または修復します。一般的なノイズ除去は、孤立したスラム音、クリック音、叫び声よりも、ほぼ安定した背景ノイズに適しています。

レビューしたステムから新しいミックスを構築する

分離は編集の始まりであり、終わりではありません。 Recapo を使用する オーディオセパレーター ダイアログ、音楽、エフェクトステムを作成し、難しいセクションを試聴し、各レイヤーがチェックリストに合格した後にのみ再結合します。オリジナルのミックスは安全コピーとして残り、最も役立つリファレンスとなります。

参考文献と公式情報源

1. Recapo ビデオオーディオセパレーター
2. Recapo AI ボーカルリムーバー
3. Recapo オーディオノイズリダクション
4. Audacity マニュアル: ノイズリダクション
5. Adobe Premiere: 修復ダイアログ

関連するレカポ ガイド

1. オーディオ分離ツールとオーディオ抽出ツール: どちらのツールが必要ですか?
2. 品質を落とさずにビデオからボーカルを分離する方法
3. ビデオ録画からエコーを削除する方法