Loading
DeNA AI
contact

NEWS

DeNAとIRIAMはリアルタイム音声変換の社内実証実験を実施しました


株式会社ディー・エヌ・エー(以下DeNA)と株式会社IRIAMは、新感覚VtuberアプリIRIAM(以下IRIAM)においてDeNAが開発したリアルタイム音声変換AIの導入を見据え、2024年3月に社内での実証実験を実施しました。

本実証実験はIRIAMにリアルタイム音声変換AIを導入した場合、配信者側・視聴者側のUXにどのような変化をもたらすかを明らかにすることを目標に、配信者役2名、視聴者役3名をIRIAM社内から募り実施しました。リアルタイム音声変換AIを搭載した実験用IRIAMアプリを制作し、そのアプリによって音声変換しながら配信者が配信を行い、視聴者とコメントを通して会話して、配信者側・視聴者側のUXや使用感を確認しました。

本実証実験の参加者からは以下のような好意的なフィードバックを得られました。

  • 「ラグ*1など、音声変換を導入したことによる配信者と視聴者の間の双方向性に関する配信体験の違和感はあまり感じなかった」
  • 「男性が女性の声に変換して喋るような場合では、従来の音声変換システムのように変換声質を気にして裏声で喋る必要がないので、気にする箇所が減って会話に集中できた」
  • 「声に自信がない人でも配信に挑戦してみるハードルを下げることに繋がりそう」
  • 「現実から離れてヴァーチャルの世界を選ぶ価値を高められそう」

*1 ラグとは時間の遅れを指します

また、実証実験で行った音声変換を利用した配信の画面録画(視聴者側)を公開いたします。

今後IRIAMアプリ内への本機能の実装については未定となっておりますが、今回の社内実証実験で得られたフィードバックを活かし、音声変換の事業応用をより一層加速させてまいります。

DeNA x AIでは音声変換のビジネス展開を見据え、協業パートナーを募集しております。以下のDeNA x AIお問い合わせフォームからご連絡ください。

実際にリアルタイム音声変換技術を使い IRIAM で配信を行っている様子
社内実証実験で用いた音声変換搭載のIRIAMアプリの画面

project member

Kotaro Onishi AI研究開発エンジニア
ISSEI NAGASAWA データサイエンティスト Kaggle Grandmaster
RYOSUKE SONOBE AI研究開発エンジニア
TAKUMA YOSHIMURA プロダクトマネージャー