【ぼいすくろーにんぐ】

ボイスクローニング とは?

最終更新:
💡 録音を手がかりに、特定の人の声の特徴を再現する

録音した声を手がかりに、特定の話者の声の特徴を再現するAI技術。文章の読み上げや音声の声質変換に利用される。必要な録音量や再現の品質は方式と音声の条件によって異なる。

📌 このページのポイント
録音の声の特徴を、生成に使う 同意した話者の録音 音声サンプル 特徴を抽出 話者の特徴 エンベディング などの表現 方式の一例 読み上げる文章 音声生成 文章+声の特徴 から生成 似た声の音声 必要な録音量と 再現品質は条件次第
文章から音声を作るTTS型の一例。録音から話者の特徴を取り出して生成に使うが、方式や必要な録音量、似方はモデルによって異なる。利用には本人の同意と権限を確認する。
ひよこ ひよこ
10秒の録音だけで、誰の声でも再現できるの?
ペンギン先生 ペンギン先生
必要な長さと品質は方式によるよ。短い録音で試せる研究もあるけれど、すべての声を正確に再現できる保証ではない。たとえばElevenLabsのInstant Voice Cloningは、雑音や反響のない1〜2分程度の音声を勧めているんだ。
ひよこ ひよこ
声を再現する仕組みは?
ペンギン先生 ペンギン先生
一つの方法は、録音から話者の特徴をベクトルにする「話者エンベディング」だよ。それを文章の読み上げモデルに渡し、似た声の音声を生成する。話者ごとの追加学習など別の方式もあり、同じ仕組みに限らないんだ。
ひよこ ひよこ
どんな使い方ができるの?
ペンギン先生 ペンギン先生
本人の同意と利用権限を確認したうえで、ナレーションや吹き替えなどに使えるよ。過去の録音をもとに、声を失った人の意思伝達を支える用途も研究されている。対応する言語や発音、話し方は生成した音声を確認するんだ。
ひよこ ひよこ
本人そっくりなら、悪用されない?
ペンギン先生 ペンギン先生
なりすましに使えるので注意が必要だよ。利用する側は同意とサービスの条件を確認しよう。聞く側も、声が似ているだけで本人だとは判断できない。生成音声に対する確認や検出の仕組みも、製品によって違うんだ。
もっと詳しく知りたい人へ

文章の読み上げと、RVCのような声質変換は何が違うの?

読み上げ(TTS)は文章を入力して新しい音声を作る方式だよ。声質変換は、話した音声を入力して別の話者に似た声質へ変える方式。RVCは音声の声質変換を行うフレームワークで、リアルタイムの変換用画面もある。どちらも声の再現に使われるけれど、入力と処理の役割は違うんだ。

ペンギン
まとめ:ざっくりこれだけ覚えればOK!
「ボイスクローニング」って出てきたら「録音から特定の人の声の特徴を再現するAI技術」と思えばだいたいOK!
📖 おまけ:英語の意味
「Voice Cloning」 = 声の複製
💬 Voiceは声、cloningは複製を表すよ。元の録音をそのまま再生することとは違い、新しい発話を似た声で生成したり、入力音声の声質を変えたりするんだ。

参考資料

← 用語集にもどる