ヒライ　シゲユキ   HIRAI SHIGEYUKI
  平井　重行
   所属   京都産業大学  情報理工学部 情報理工学科
   職種   教授
発表年月日 2022/06/18
発表テーマ Transformerを用いたオノマトペ音声からの爆発音合成の試み
会議名 音学シンポジウム2022（情報処理学会 音楽情報科学研究会第134回研究発表会・音声言語情報処理研究会第142回研究発表会）
主催者 情報処理学会 音楽情報科学研究会＆音声言語情報処理研究会
学会区分 研究会・シンポジウム等
発表形式 ポスター
単独共同区分 共同
国名 日本
開催地名 オンライン
開催期間 2022/06/17～2022/06/18
発表者・共同発表者 滝沢力, 平♯重行
概要 アニメや映画, ゲームなどの制作現場で行われる効果音作成は、素人には容易ではないが、口頭でオノマトペ（擬音語）としてニュアンス込みで表現することはある程度可能である。そこで、本研究ではオノマトペ音声を用いた効果音合成手法の確立を目指す。特に、様々な種類やニュアンスの表現が含まれる爆発音について、深層学習の系列変換モデル Transformer を用いて音響合成を試みた。ここでは、爆発音の音響データ多数と、それらを口頭でオノマトペとして発話した音声データ多数を用意し、学習させたところ、発話長や発音の違いによる合成された効果音で、基本的なニュアンス表現ができることを確認できた。