Firefly ホームページで、オーディオモジュールに移動し、「音声から効果音生成(Beta)」を選択します。
「音声から効果音生成」機能で、自分の声をガイドとして使用し、効果音を生成する方法について説明します。
音声から効果音生成(Beta)では、自分の声を使用して効果音の生成をガイドできます。 録音した音声をテキストプロンプトと組み合わせて使用すると、タイムラインでの効果音を再生するタイミングや音量を指定できるだけでなく、Firefly で自分の声のエネルギーとタイミングを参照して、録音のダイナミクスに合った効果音を生成します。
録音した音声とテキストプロンプトを組み合わせて、音声のエネルギーとタイミングを同期させ、サウンドエフェクトを作成する方法を説明します。
音声から効果音生成(Beta)を使用すると、アクションに合わせて効果音のタイミングを正確に調整し、タイムラインで意図したイベントと完全に一致させることができます。 この方法により、動画またはオーディオのタイムラインのアクションやイベントに合わせるには長すぎたり短すぎたりするサウンドクリップの調整作業が効率的に行えます。
自分の声の録音は、生成される効果音のタイミングとエネルギーをガイドするためのみに使用されます。 この機能では、スピーチや歌は生成されません。
録音された音声パフォーマンスを含む動画
効果音のタイミングとエネルギーを制御するために録音された音声パフォーマンスを含む動画。
生成された効果音の動画
タイミングとエネルギーを制御するために音声パフォーマンスを使用したプロンプト「吠えるライオン」の生成された効果音の動画。
効果音を生成ページで「メディアをアップロード」を選択して、効果音の作成に使用する動画ファイルまたはオーディオファイルをアップロードします。
タイムライン内で効果音を追加する位置に再生ヘッドを配置します。
「音声パフォーマンス」セクションでは、デバイスからオーディオファイルをアップロードするか、「音声を録音」を使用して録音を開始できます。
最長 30 秒または動画の長さのうちいずれかの短い方で、許可された制限時間内で声を録音できます。
録音インジケーターが有効になり、3 秒のカウントダウンが終了すると録音を開始できます。
「音声録音」セクションの再生ボタンを使用して、録音を聞きます。
プロンプトフィールドに、音声録音が追加されたことを示すメッセージが表示されます。 効果音のバリエーションを生成するために録音と共に使用する効果音について説明するテキストプロンプトを入力します。
例えば、ライオンの吠える声が動画に合わせて聞こえるようにするには、テキストプロンプト「吠えるライオン」を入力し、動画と同期するように自分の声を録音します。
効果的なテキストプロンプトの記述を探索して、効果音の生成を試してみましょう。
「生成 」を選択し、生成された効果音のバリエーションのいずれかを選択して、タイムラインの再生ヘッドの位置に挿入します。
タイムラインの効果音を置換するには、まず既存の効果音を選択してから、生成されたバリエーションから置き換える効果音を選択します。
生成されたクリップは、使用可能なオプション(音量のミュートまたは調整)を使用して編集できます。 ダウンロード、名前の変更、または削除することもできます。
生成された効果音クリップをトリミングするには、どちらかの端からトリミングハンドルを内側にドラッグして短くします。 トリミング後、必要に応じてタイムラインに沿ってクリップを移動して位置を変更します。
タイムラインに別のレイヤーの効果音を追加するには、「オーディオトラックを追加」オプションを選択し、プロンプトバーを使用して同じプロセスに従います。
現在、アップロードされたメディアトラックに加えて、最大 5 つのオーディオトラックがサポートされています。
再生 アイコンを使用して構成をプレビューし、「ダウンロード 」オプションを使用して結果をダウンロードします。
Firefly のモバイル web アプリで自分の声を使用した効果音の生成
対応ブラウザーのいずれかを使用して、Firefly web サイトにアクセスします。
オーディオモジュールをタップして、「音声から効果音生成 (Beta)」を選択します。
「SFX を生成」画面で「アップロード」ボタンを使用して、効果音を適用するタイムラインに動画またはオーディオクリップを追加します。
タイムライン内をスクロールし、効果音を生成して挿入する正確な位置に再生ヘッドを配置します。
「効果音を生成」ボタンをタップし、使用可能なオプションから「動画にタイミングを合わせたサウンド」オプションを選択します。
プロンプトバーで、生成する効果音の説明を追加して、次のいずれかを選択します。
- デバイスから:効果音生成に使用する音声録音付きのオーディオクリップをアップロードします。
- 録音のタイミング:効果音を生成するために、声を直接録音します。
声が録音されたら、再生してレビューし、再録音するか、「生成」を選択して効果音の生成を開始できます。
生成されたバリエーションを再生してプレビューし、目的のものを選択して、「効果音を追加」をタップします。
別の効果音を作成するには、同じオーディオトラック上に再生ヘッドを配置し、プロンプトバーを使用して生成します。レイヤー化されたオーディオの場合、
アイコンを選択して新しいトラックを追加し、そのトラック上で新しい効果音を生成します。最終的な構成を再生してプレビューし、メニュー アイコンをタップしてダウンロードオプションにアクセスします。