渡邊恵太研究室 Interaction Design Laboratory

BCIを用いた感情分類による感情的な擬似発声システム

BCIを用いた感情分類による感情的な擬似発声システム

BCIを用いた感情分類による感情的な擬似発声システム

著者
井上 しいな
平野 怜旺
渡邊 恵太
学会名
発表年

概要

本研究では、​ブレインコンピュータインタフェース​(BCI)を​用いた​感情分類に​よる​感情的な​擬似発声システムを​提案する。​本システムは、​脳波解析に​より​リアルタイムで​ユーザの​感情状態を​分類し、​分類結果を​合成音声の​感情パラメータに​マッピングする​ことで、​ユーザの​感情状態を​反映した合成音声を​実現する。​さらに、​大規模言語モデルGPT-4oを​用いて、​ユーザが​入力した​文章を​感情状態に​応じて​補正する​ことで、​感情表現の​幅を​広げる。​ユーザは​脳波機器を​装着し、​簡易的な​文章を​入力する​ことで、​合成音声に​よる​感情的な​擬似発声を​行うことができる。​本稿では、​本システムの​実用性と​応用​可能性を​検証する​ために、​健常者を​対象とした​ユーザスタディを​行った。​その​結果、​喜怒哀楽の​4感情に​対する​推定精度が​一定の​水準に​達した​ことを​確認した。​さらに、​BCIに​よる​感情分類と​GPT-4oを​組み合わせる​ことで、​言語表現の​多様性が​向上する​可能性を​示唆した。

論文情報

井上 しいな​, 平野 怜旺, 渡邊 恵太. BCIを​用いた​感情分類に​よる​感情的な​擬似発声システム. WISS2024予稿集