|
ヒライ シゲユキ
HIRAI SHIGEYUKI
平井 重行 所属 京都産業大学 情報理工学部 情報理工学科 職種 教授 |
|
| 発表年月日 | 2023/08/24 |
| 発表テーマ | 生成系AIを活用した効果音制作手法の研究 |
| 会議名 | CEDEC2023 |
| 主催者 | 一般社団法人コンピュータエンターテインメント協会(CESA) |
| 学会区分 | 研究会・シンポジウム等 |
| 発表形式 | 口頭（一般） |
| 単独共同区分 | 共同 |
| 国名 | 日本 |
| 開催地名 | 横浜 |
| 開催期間 | 2023/08/23～2023/08/25 |
| 発表者・共同発表者 | 平＃重行, 滝沢力 |
| 概要 | DALL·E 2や、MidJouney、Stable Diffusion等の画像生成AIや、GPTなどの大規模言語モデル（LLM）による対話型テキスト生成AIなど、AI技術の発展や実利用が広がるなか、ゲームやアニメ・映画制作における効果音制作においても、今後はAI技術の活用が見込まれます。我々は、GPT等の自然言語処理で主に使われている系列変換モデルTransformerを用いて、擬音的な発話音声＊のみ＊から効果音合成する手法について研究しています。文字列や言語の音素に依存しない手法であり、口真似での微妙な表現にも対応できることを確認しています。本セッションでは、Transformerの概要説明と、それをオーディオデータに適用する一手法と音合成技術について紹介します。そして、本研究で具体的な題材としている爆発音を対象とした効果音・擬音発話データセットと合成例を示します。さらに、人とAIがインタラクティブにサウンド制作する今後の制作プロセスについて考察します。 |
| researchmap用URL | https://cedec.cesa.or.jp/2023/session/detail/s6429a8e0ac881 |