金沢工業大学情報工学科OBの鈴木大志さんが学部4年次に取り組んだ研究が情報処理学会論文誌に採録。Any-to-Anyの音声変換をリアルタイムに行う手法の実装と評価で
Digital PR Platform / 2024年2月15日 14時5分
金沢工業大学情報工学科OBの鈴木大志さんが学部4年次のプロジェクトデザインIII(卒業研究。研究指導教員:情報工学科中沢実教授、鷹合大輔准教授)で取り組んだリアルタイム音質変換手法の研究内容の一部が情報処理学会論文誌(Journal)に採録され、2024年2月号に掲載されました。当論文は、厳しい査読結果からアクセプト(掲載許可)されたもので、金沢工業大学における学部4年次の学生の研究水準の高さが評価されたといえます。
【鈴木大志さんについて】
鈴木大志さんは金沢工業大学の併設校である国際高等専門学校グローバル情報学科4年生、5年生の2年間、金沢工業大学AIラボにて大学生とともに深層学習をはじめとする機械学習や音声処理に関するAIスタートアッププロジェクトに参加しました。
2020年に国際高専を卒業後、金沢工業大学情報工学科3年次に編入した後も、AIラボで一貫して音質変換を如何に高精度且つリアルタイムに実現するかについて研究に取り組んできました。
そして学部4年次のプロジェクトデザインIIIでは、深層学習を専門とする中沢実教授と、信号処理を専門とする鷹合大輔准教授の指導のもとで、今回論文誌に掲載された「AutoVCを用いたゼロショットリアルタイム声質変換手法の実装と評価」に取り組んできました。
【鈴木大志さんの研究の概要について】
声質変換は、ある話者の声質を別の話者の声質に変換する技術で、応用先としてはアバターを使ったオンライン会議やボーカロイド、ボイスチャット、電話などでの使用があげられます。
身近な例でいえば、スマートフォンを使った電話も、実は本人そのものの声ではなく、本人に近い合成音声が使われています。
近年、深層学習を用いた声質変換技術の発展により、ある人物の声を、発話内容を変えずに別の人物の声質に高精度で変換することが可能となってきました。
こうした音声変換手法は扱う人数に応じて
(1) One-to-One
(2) Many-to-Many
(3) Any-to-Any
に大きく区分できます。
(1) は、特定の人物Aの声質を特定の人物Bの声質に変換する方式で、学習にはAとBの2人の声質が使われます。
(2)は、学習に用いる人物を複数人でき、手法によってはその双方向を変換できる方式ですが、学習に用いていない声質への変換はできません。
(3)は、学習に目標の声質の音声が含まれているかにかかわらず変換できる方式としてAutoVCがあり、学習用のデータになかった未知の対象を、テキストなどの補助的な情報を用いて予測する"ゼロショット"声質変換法と呼ばれます。
-
- 1
- 2
この記事に関連するニュース
-
VLSIシンポジウム2024プレビュー 第7回 デジタル回路/医用生体回路/データコンバータ回路分野の注目論文
マイナビニュース / 2024年5月16日 6時50分
-
スーパーコンピュータ「富岳」で学習した大規模言語モデル「Fugaku-LLM」を公開
PR TIMES / 2024年5月10日 17時15分
-
2025年4月、金沢工業大学は6学部17学科体制へと進化、文理の枠を超えた社会実装型総合大学へ(2025年4月設置届出中)。【学部学科の詳細と入試がわかる今年度初のオープンキャンパスを開催】2024年5月12日(日)10時から15時まで
Digital PR Platform / 2024年5月7日 20時5分
-
【学部学科の詳細と入試がわかる今年度初のオープンキャンパスを開催】2024年5月12日(日)10時~15時
共同通信PRワイヤー / 2024年5月7日 15時30分
-
【デジタル乗車券で金沢市・野々市市・白山市を自由に散策、地域を理解】県外出身者が7割を占める金沢工業大学の学生向けに「金沢・野々市・白山探索フリープラン」
Digital PR Platform / 2024年4月25日 14時5分
ランキング
-
1庶民は買えない!?マンション高騰は続くのか? 今後のインフレで日本の不動産はどうなるのか
東洋経済オンライン / 2024年5月17日 19時30分
-
2「セブンプレミアム」売上高、累計15兆円を突破…節約志向でPBの存在感高まる
読売新聞 / 2024年5月18日 0時3分
-
3「株価暴落」引き起こしてしまう意外な"きっかけ" 金融危機のきっかけとなった市場急落のケース
東洋経済オンライン / 2024年5月18日 8時40分
-
4住みたい街の特徴 3位「交通の便がいい」、2位「治安がいい」、1位は?
ITmedia ビジネスオンライン / 2024年5月17日 17時15分
-
5血圧・血糖値・コレステロール値…良くない結果に肩を落とすも「健診の数値は気にしなくていい」ってどういうこと?【有名医師が助言】
THE GOLD ONLINE(ゴールドオンライン) / 2024年5月18日 10時0分
複数ページをまたぐ記事です
記事の最終ページでミッション達成してください