自分の声をガイドとして使用した効果音の生成

最終更新日 : 2025年9月25日

「音声から効果音生成」機能で、自分の声をガイドとして使用し、効果音を生成する方法について説明します。

アプリで試す
いくつかの簡単なステップで、テキストプロンプトを使用して効果音を生成できます。

音声から効果音生成(Beta)では、自分の声を使用して効果音の生成をガイドできます。 録音した音声をテキストプロンプトと組み合わせて使用すると、タイムラインでの効果音を再生するタイミングや音量を指定できるだけでなく、Firefly で自分の声のエネルギーとタイミングを参照して、録音のダイナミクスに合った効果音を生成します。

録音した音声とテキストプロンプトを組み合わせて、音声のエネルギーとタイミングを同期させ、サウンドエフェクトを作成する方法を説明します。

音声から効果音生成(Beta)を使用すると、アクションに合わせて効果音のタイミングを正確に調整し、タイムラインで意図したイベントと完全に一致させることができます。 この方法により、動画またはオーディオのタイムラインのアクションやイベントに合わせるには長すぎたり短すぎたりするサウンドクリップの調整作業が効率的に行えます。 

自分の声の録音は、生成される効果音のタイミングとエネルギーをガイドするためのみに使用されます。 この機能では、スピーチや歌は生成されません。

元のサイレント動画

テキストから動画生成機能を使用して生成した動画。 使用したプロンプト:「ライオンが水平線を見つめながら、力強く吠える。」

録音された音声パフォーマンスを含む動画

効果音のタイミングとエネルギーを制御するために録音された音声パフォーマンスを含む動画。

生成された効果音の動画

タイミングとエネルギーを制御するために音声パフォーマンスを使用したプロンプト「吠えるライオン」の生成された効果音の動画。

Firefly ホームページで、オーディオモジュールに移動し、「音声から効果音生成(Beta)」を選択します。

効果音を生成ページで「メディアをアップロード」を選択して、効果音の作成に使用する動画ファイルまたはオーディオファイルをアップロードします。

「効果音を生成」ページで表示されるボタンを使用して、メディアファイルをアップロードできます。 このページでは、最適な結果を得るための理想的な長さと形式も指定します。
「メディアをアップロード」オプションを選択して、.mp4、.mp3、.mov、.wav、または .aac 形式のファイルをアップロードします。

タイムライン内で効果音を追加する位置に再生ヘッドを配置します。

再生ヘッドがハイライトされ、タイムラインの中央に配置されます。 プレビュー、別のオーディオトラックの追加、チャンネルのミュートを行うオプションが表示されます。
タイムライン内を移動し、効果音を追加する正確な位置に再生ヘッドを配置します。

音声パフォーマンス」セクションでは、デバイスからオーディオファイルをアップロードするか、「音声を録音」を使用して録音を開始できます。

注意:

最長 30 秒または動画の長さのうちいずれかの短い方で、許可された制限時間内で声を録音できます。

録音インジケーターが有効になり、3 秒のカウントダウンが終了すると録音を開始できます。

「音声パフォーマンス」セクションでは、オーディオファイルをアップロードするか、ボイスオーバーを録音するオプションが表示されます。 録音ボタンが目立つようにハイライト表示され、最長 30 秒まで録音できます。
音声を録音して大まかなガイドを追加し、最終的に生成されるバリエーションがどのように聞こえるかを指定します。

音声録音」セクションの再生ボタンを使用して、録音を聞きます。

プロンプトフィールドに、音声録音が追加されたことを示すメッセージが表示されます。 効果音のバリエーションを生成するために録音と共に使用する効果音について説明するテキストプロンプトを入力します。

例えば、ライオンの吠える声が動画に合わせて聞こえるようにするには、テキストプロンプト「吠えるライオン」を入力し、動画と同期するように自分の声を録音します。

ヒント :

効果的なテキストプロンプトの記述を探索して、効果音の生成を試してみましょう。

「効果音を生成」ページにはプロンプトセクションがあり、テキストの説明を入力してサウンド効果を生成できます。 現在のテキストプロンプトは、「吠えるライオン」です。
録音した声と組み合わせて使用するテキストプロンプトを追加し、効果音のバリエーションを生成します。

生成 」を選択し、生成された効果音のバリエーションのいずれかを選択して、タイムラインの再生ヘッドの位置に挿入します。

利用可能な効果音のバリエーションが表示され、タイムライン上の現在の再生ヘッドの位置に挿入するバリエーションを選択できます。
生成された効果音のバリエーションのいずれかを選択し、再生ヘッドの位置に挿入します。

ヒント :

タイムラインの効果音を置換するには、まず既存の効果音を選択してから、生成されたバリエーションから置き換える効果音を選択します。

生成されたクリップは、使用可能なオプション(音量のミュートまたは調整)を使用して編集できます。 ダウンロード、名前の変更、または削除することもできます。

タイムラインに追加した効果音を選択すると、使用できる編集オプションが表示されます。 これらの編集オプションには、ミュート、音量、ダウンロード、削除があります。
利用可能な編集オプションを使用して、タイムライン内で生成された効果音を直接編集します。

ヒント :

生成された効果音クリップをトリミングするには、どちらかの端からトリミングハンドルを内側にドラッグして短くします。 トリミング後、必要に応じてタイムラインに沿ってクリップを移動して位置を変更します。

タイムラインに別のレイヤーの効果音を追加するには、「オーディオトラックを追加」オプションを選択し、プロンプトバーを使用して同じプロセスに従います。

動画とオーディオが表示されているタイムライン上で、「オーディオトラックを追加」オプションがハイライト表示されています。 タイムラインに最大 5 つのオーディオトラックを追加できることを示すツールチップも表示されています。
「オーディオトラックを追加」を使用して、別の効果音を生成し、既存の効果音と共にタイムラインに追加します。

注意:

現在、アップロードされたメディアトラックに加えて、最大 5 つのオーディオトラックがサポートされています。

再生 アイコンを使用して構成をプレビューし、「ダウンロード 」オプションを使用して結果をダウンロードします。

Firefly のモバイル web アプリで自分の声を使用した効果音の生成

対応ブラウザーのいずれかを使用して、Firefly web サイトにアクセスします。

オーディオモジュールをタップして、「音声から効果音生成 (Beta)」を選択します。

SFX を生成」画面で「アップロード」ボタンを使用して、効果音を適用するタイムラインに動画またはオーディオクリップを追加します。

ビデオがアップロードされ、タイムラインに追加されました。「効果音を生成ボタン」が使用できます。アップロードオプションが強調表示されています。
アップロードオプションを使用してタイムラインにビデオを追加し、効果音を生成します。

タイムライン内をスクロールし、効果音を生成して挿入する正確な位置に再生ヘッドを配置します。

効果音を生成」ボタンをタップし、使用可能なオプションから「動画にタイミングを合わせたサウンド」オプションを選択します。

「効果音を生成」オプションには 2 つの異なるオプションがあり、使用可能なオプションから「動画にタイミングを合わせたサウンド」オプションが選択されています。
「動画にタイミングを合わせたサウンド」オプションを使用して、オーディオクリップを録音またはアップロードし、動画の効果音を生成します。

プロンプトバーで、生成する効果音の説明を追加して、次のいずれかを選択します。

  • デバイスから効果音生成に使用する音声録音付きのオーディオクリップをアップロードします。
  • 録音のタイミング効果音を生成するために、声を直接録音します。
「動画にタイミングを合わせたサウンド」に、テキストプロンプトと、デバイスからオーディオファイルをアップロードするか、web アプリで直接録音するオプションが表示されます。
「録音のタイミング」オプションを使用して直接声を録音し、生成された効果音が録音のタイミングに合うようにします。

声が録音されたら、再生してレビューし、再録音するか、「生成」を選択して効果音の生成を開始できます。

「録音のタイミング」画面には、アップロードされた動画、テキストプロンプト、およびレビュー、録音、効果音生成のオプションが表示されます。
録音された音声クリップを確認し、再録音するか効果音を生成します。

生成されたバリエーションを再生してプレビューし、目的のものを選択して、「効果音を追加」をタップします。

「短いサウンド」バリエーションオプションが開いており、生成された 4 つの異なるバリエーションから選択できます。タイムラインに効果音を追加するオプションもあります。
生成されたバリエーションを確認し、生成された効果音の 1 つをタイムラインに追加します。

別の効果音を作成するには、同じオーディオトラック上に再生ヘッドを配置し、プロンプトバーを使用して生成します。レイヤー化されたオーディオの場合、 アイコンを選択して新しいトラックを追加し、そのトラック上で新しい効果音を生成します。

最終的な構成を再生してプレビューし、メニュー  アイコンをタップしてダウンロードオプションにアクセスします。

ダウンロードオプションが強調表示されているので、構成されたオーディオまたはビデオクリップをダウンロードできます。
「ダウンロード」オプションを使用して、作成された動画クリップをダウンロードします。