ElevenLabs の「Sound Effects」でテキストから効果音を生成してみる：Webサイト上での生成とMP3ファイルのダウンロード

この記事では、[Text to Speech](https://elevenlabs.io/app/speech-synthesis)や、[ボイスチェンジャー（Speech To Speech）](https://elevenlabs.io/voice-changer)を提供していたりする「[ElevenLabs](https://elevenlabs.io/)」の効果音の生成「Sound Effects」を使い、効果音の生成を試してみます。

![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/50868/31b18fef-0624-117b-a9ef-6f610d4bf57e.png)

## 簡単に試してみる
### Webページ上で試す
簡単に試すには、以下のページを使うのが良さそうです。

●AI Text to Sound Effects Generator | ElevenLabs
　https://elevenlabs.io/sound-effects

![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/50868/df5ee6d9-a1db-e05b-4864-a6d5b3b42ae0.png)

#### 既に生成されたものを聞いてみる
既に生成されたものを聞くだけなら、以下のたくさん並んでいるものの再生ボタンを押すと良いです（※ それぞれの画像の下にはプロンプトも掲載されています）。

![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/50868/c8c25554-1c58-4146-b196-8deafbfe31bf.png)

#### 自分で生成してみる
自分で効果音を生成することもできます。

先ほどのページを少し下へ進むと、以下のプロンプト入力・効果音生成が行える部分があります。

![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/50868/e3b9d706-cbe6-63ab-7f98-a54404d9c759.png)

「Ice Magic in a Fantasy World（ファンタジー世界の氷の魔法）」というプロンプトで試してみました。

![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/50868/44a2b93f-61c4-b346-6ba2-5020345a2e9f.png)

それで生成を実行すると、4種類の効果音が生成されたようでした。

それぞれ、以下の赤枠で囲んだ部分の再生ボタンを押すと、実際の音を聞くことができます。さらに、特定の音が選ばれている状態で、画面右下のダウンロード用のアイコン（以下の緑矢印で示した部分）を押すと、MP3ファイルをダウンロードできました。

![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/50868/300c0454-5db1-dc53-df86-759276d04a75.png)

非常に簡単に、効果音の生成や音のファイルのダウンロードを行うことができました。

## 公式ドキュメント
「Sound Effects」について、以下の公式ドキュメントがありました。

●Overview - ElevenLabs
　https://elevenlabs.io/docs/sound-effects/overview

このページを見ていくと、プロンプトとそれで生成された効果音の例などを見ることができました。

### シンプルなプロンプト
プロンプト1「Opening a creaking door」
プロンプト2「Chopping wood」
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/50868/cfcea8f3-5778-ec72-ea3e-5478f054da38.png)

### 複雑なプロンプト
プロンプト「A man walks through a hallway and then falls down some stairs」
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/50868/3b8a1e12-86f8-2bf5-8e80-16b9a17a1f20.png)

プロンプト「A woman is singing in a church. Then someone coughs.」
![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/50868/2d709853-deb2-3eef-839f-da1b72d1c88b.png)

## API での利用（説明のみ）
公式の情報を見ていると、テキストからの効果音の生成は API経由でもできるようです。

●How to use the text to sound effects API - ElevenLabs
　https://elevenlabs.io/docs/api-reference/how-to-use-text-to-sound-effects

![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/50868/8791493d-40bb-4b67-8e00-638d191548c2.png)

## 利用規約的なところ
生成した効果音の商用利用に関する話が、先ほど効果音の生成をしていたページの下部に書いてありました（※「Frequently asked questions」と書かれた、FAQ の記載部分）。

以下を見ると、無料版で生成したものには “elevenlabs.io” の表示を行う必要があるようです。その表示を不要にするには、有償版を使う必要があるようです。

![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/50868/563f43f4-20e3-2d2d-a057-af226100123e.png)

その下には、生成可能な音についての説明と、費用に関する話が書いてありました。

![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/50868/bcb06216-41a2-c460-3e3f-5254dba1f141.png)

### Pricing のページの一部
Pricing のページで、無料プランと一番月額が安い Starterプランをピックアップしてみました。無料プランでも API は利用できたりするようです。

https://elevenlabs.io/pricing

![image.png](https://qiita-image-store.s3.ap-northeast-1.amazonaws.com/0/50868/dd09d3ca-8577-1f1e-abd3-d23c4ffdad46.png)

## 気になったポスト
以下は、公式のポストで気になったものです。

### ビデオに効果音などをつける
ビデオをアップロードして、それに効果音などをつける、ということもできるようです。

https://x.com/elevenlabsio/status/1803453748041359809

### API と OSS のアプリ

https://x.com/elevenlabsio/status/1802805510510424222

## 参考

- [ElevenLabs テキストから効果音を生成するモデル「Sound Effects」公開 | Ledge.ai](https://ledge.ai/articles/elevenlabs_sound_effects)
- [実践！ElevenLabsで自然な音声と効果音を自在に生成【LumaAIとの組み合わせも】｜ChatGPT研究所](https://chatgpt-lab.com/n/ncb130297473d)
- [Luma Dream Machine+ElevenLabsで効果音付きの動画を自動生成｜IT navi](https://note.com/it_navi/n/n245409d405b9)