Seiren Voice(セイレンボイス)は株式会社ドワンゴが開発した音声変換技術[1]、およびそれをもとにドワンゴと株式会社エーアイが販売している音声変換ソフトウェアである。

概要

編集

従来の声変換システムはリアルタイム性を重視したものであったが、Seiren Voiceは品質を重視して開発がなされた[2]。開発者はヒホ(ヒロシバ)である。彼は読み上げ音声合成フリーソフトウェアのVOICEVOXの開発者でもある。Seiren Voiceは、100人の話者による高音質な音声データであるJVSコーパスとWaveRNNと呼ばれる音声合成用の深層学習モデルにより音声サンプルを生成している[2]。なお、Seiren voiceのSeirenはギリシャ神話の海の怪物セイレーンからとられたもので、本製品の声で魅了して沼に沈めるという願いが込められたものである[3]。本製品では、人の話し声を音素情報、音素の構成されているタイミング、音の高さの3要素に分解し、話者の発音の仕方、イントネーションやスピード、間の取り方などをディープライニングで再構築しながらターゲットのキャラクタの声に置き換えるものである[4]。「歌モード」により歌声の再現も可能だが、日本語の学習データを使って開発がなされているため外国語の発音の品質は低くなる[3]。2022年の発売当初のv1では、NVIDIA製のGPUを搭載した機器が必要という制限があったが、翌年に一部の製品でリリースされたv2ではGPUが搭載されていない機器でも使用が可能となり、声変換の所要時間も5分の1以下に短縮された[4]。V2の公開以降は、V2のみを製品化させたSeiren Voice スタンダードパック(v2)と、V1とV2の双方のパックであるSeiren Voice コンプリートパック(v1&v2)として販売されている。また、V1の時点で購入していたユーザーはコンプリートパックのものにアップデートできるようになっている[5]。元となる音声は録音またはWAVファイル、MP3ファイルの3形式で入力可能。出力は、WAVファイル(音声)、txtファイル(テキスト)、Labファイル(音声のタイミング情報)の3種類で書き出すことができる[6]

年表

編集
  • 2020年9月14日 - 株式会社ドワンゴの研究開発部門のDwango Media Villageは誰の声でも複数の人の声に変えることができる声変換システムを開発したと発表[2]。これと同時に、声変換を試すことができるデモページが公開された[7][注釈 1]
  • 2022年5月17日 - 製品第一弾となるSeiren Voice琴葉茜・葵とSeiren Voice結月ゆかりが発売される[8]
  • 2023年6月2日 - 一部の製品に対して、バージョン2をリリース[5]。同年8月3日までに全製品がバージョン2に対応[9]

製品一覧

編集
音声ライブラリ名 発売日
(対応バージョン)
キャラクター版権元 性別 音声データ提供者 備考
琴葉茜・葵 2022年5月17日(v1)[8]
2023年6月2日(v2)[5]
エーアイ 女声 榊原ゆい 明るく元気な音声を手軽に表現することができる音声ライブラリ。エーアイからはA.I.VOICEの音声ライブラリとしても発売されている。
結月ゆかり VOCALOMAKETS 石黒千尋 落ち着きのある大人びた女性の声をもとに、優しい音声を手軽に表現することができることが特徴の音声ライブラリ。同じくエーアイの製品であるA.I.VOICEのキャラクターとしても発売されている。
紲星あかり 2022年6月17日(v1)[10]
2023年6月2日(v2)[5]
米澤円 明るく可愛らしい女の子の声をもとに、穏やかな音声を手軽に表現することができることが特徴の音声ライブラリ。同じくエーアイの製品であるA.I.VOICEのキャラクターとしても発売されている。
伊織弓鶴 2022年9月29日(v1)[11]
2023年8月3日(v2) [9]
エーアイ 男声 松浦義之 優しく安心感のある男性の声をもとに、落ち着いた音声を手軽に表現することができることが特徴の音声ライブラリ。エーアイからはA.I.VOICEの音声ライブラリとしても発売されている。
ずんだもん 2022年11月29日(v1)[12]
2023年7月20日(v2)[13]
SSS合同会社 女声 伊藤ゆいな 生き生きとした音声を表現することができる音声ライブラリ。東北ずん子プロジェクトのキャラクター。
東北イタコ 木戸衣吹 メリハリのある音声を表現することができることが特徴の音声ライブラリ。東北ずん子プロジェクトのキャラクター。
咲ちゃん 2023年3月12日(v1)[14]
2023年8月3日(v2)[9]
合同会社如月庵 しののめ。 どこか幼気さの残る少女の声をもとに、思春期に揺れ動く女の子の可憐な音声を表現することができることが特徴の音声ライブラリ。鬼っ子ハンターついなちゃんの関連キャラクター。エーアイからはA.I.VOICEの音声ライブラリとしても発売されている。
東北ずん子 2023年7月20日(v1、v2) [13] SSS合同会社 佐藤聡美 ほんわかしたかわいらしい声をもとに、柔らかい音声を表現することができる音声ライブラリ。東北ずん子プロジェクトのキャラクター。クラウドファンディングの資金により制作される予定である[15]クラウドファンディングのSeirenVoice 東北ずん子コース支援者には6月30日に先行配布された[16]
東北きりたん 茜屋日海夏 自然体なままの可愛らしい声をもとに、落ち着いた音声を表現できることが特徴の音声ライブラリ。東北ずん子プロジェクトのキャラクター。クラウドファンディングの資金により制作される予定である[15] クラウドファンディングのSeirenVoice 東北きりたんコース支援者には6月30日に先行配布された[16]
つくよみちゃん 2024年12月20日(v1、v2) つくよみちゃんプロジェクト 夢前黎 エーアイからはA.I.VOICEの音声ライブラリとしても発売が予定されている。クラウドファンディングにより制作が決定した[17]

関連項目

編集
  • A.I.VOICE - エーアイによって、同じく販売されている読み上げ音声合成ソフトウェア
  • VOICEVOX - ヒホ(ヒロシバ)が同じく開発を務めた読み上げ音声合成フリーソフトウェア

注記

編集
  1. ^ このデモページは、製品販売の直前に公開終了し、現在は製品のキャラクター一覧ページとなっている。

脚注

編集
  1. ^ https://www.ai-j.jp/topics/8490/
  2. ^ a b c 誰の声でも100人の声に変えられる声変換システム”. DWANGO MEDIA VILLAGE (2020年9月14日). 2023年6月18日閲覧。
  3. ^ a b 喋り声を手本に、より自由で高品位な表現を実現する新たなAI音声合成システム、Seiren Voiceをドワンゴが発売開始”. dtmstation (2022年5月17日). 2023年7月2日閲覧。
  4. ^ a b AIボイスチェンジャー「Seiren Voice」が高速化&システム要件緩和!v2音声ライブラリは6月2日より提供開始” (2023年5月25日). 2023年7月2日閲覧。
  5. ^ a b c d AIボイスチェンジャー「Seiren Voice」が高速化&システム要件緩和で声変換動画の制作が高速・快適に!”. nicovideo.jp (2023年6月2日). 2023年7月3日閲覧。
  6. ^ Manual - Seiren Voice”. Seiren Voice. 2023年7月3日閲覧。
  7. ^ Seiren Voice (AIボイスチェンジャー)”. ドワンゴ. 2020年9月16日時点のオリジナルよりアーカイブ。2021年1月1日閲覧。
  8. ^ a b 「Seiren Voice 琴葉 茜・葵」「Seiren Voice 結月ゆかり」販売開始”. A.I.VOICE (2022年5月17日). 2023年7月3日閲覧。
  9. ^ a b c エーアイとドワンゴ、AIボイスチェンジャー「Seiren Voice 伊織 弓鶴」「Seiren Voice 咲ちゃん」高速化&システム要件緩和のv2ライブラリを8月3日リリース” (2023年7月28日). 2023年7月28日閲覧。
  10. ^ Seiren Voice×A.I.VOICE 第3弾!「Seiren Voice 紲星あかり」2022/6/24発売決定” (2022年6月1日). 2023年7月3日閲覧。
  11. ^ A.I.VOICE 伊織弓鶴がSeiren Voice化!エーアイ・ドワンゴ共同開発の「Seiren Voice 伊織弓鶴」2022年9月29日発売決定” (2022年9月22日). 2023年7月3日閲覧。
  12. ^ ドワンゴ開発のAIボイスチェンジャー搭載声変換ソフトウェア 「Seiren Voice 東北イタコ」「SeirenVoice ずんだもん」11月29日発売決定” (2022年11月11日). 2023年7月3日閲覧。
  13. ^ a b 「東北ずん子」「東北きりたん」7月20日発売決定 ~発売済みの「ずんだもん」「東北イタコ」もv2提供開始~” (2023年7月19日). 2023年7月19日閲覧。
  14. ^ エーアイ・ドワンゴ共同開発の「Seiren Voice 咲ちゃん」2023年3月1日発売決定~「鬼っ子ハンターついなちゃん」の高遠咲がAIボイスチェンジャー搭載声変換ソフトウェアに~” (2022年2月16日). 2023年7月3日閲覧。
  15. ^ a b 東北きりたん、東北イタコの新しい音声合成ソフトvoicepeak化を実現したい!”. 2023年6月9日閲覧。
  16. ^ a b SeirenVoice東北きりたん、東北ずん子を送付します(*ゝω・)ノ” (2022年6月30日). 2023年7月4日閲覧。
  17. ^ @TYC_Project (2024年2月23日). "🎊第2ゴール達成の御礼🎊 おかげさまで、本日12:25に、第2ゴール(400万円)を達成していました! ありがとうございます!!(クラファン開始から約18時間後) これで、つくよみちゃんもSeiren Voiceになれます!✨ A.I.VOICEに続き2件目の商業ソフト化です。引き続きよろしくお願いいたします!". X(旧Twitter)より2024年2月23日閲覧

外部リンク

編集