Affect Burst合成のサンプル

有本研究室では,叫び声や笑い声などの突発的に感情が表出した音声の合成を目指しています。これまでに学生さんが頑張って作成した声のサンプルを掲載してみました。

叫び声

  1. 女性
  2. 男性

出典: 白鳥恵大, 有本泰子, “低資源な叫び声合成に対するデータ拡張方法の影響,” 音学シンポジウム2023, 2023. (to appear)

笑い声

  1. 女性1
  2. 女性2
  3. 男性1
  4. 男性2

制作: 森山将朝(B4)

どうでしょ?

音声コマンドによる横スクロールアクションゲーム製作(オープンキャンパス2019)

8月3日にオープンキャンパスが新習志野校舎で行われました。
新習志野校舎の体育館に各学科のブースが設けられ,様々な体験イベントが展示されました。

有本研も情報工学科内のブースに出展(?)し,来場した高校生に対し,4年生の金子裕亮君,佐藤亮磨君,小山俊樹君の3名で研究室の説明や大学・学科の説明を行いました。

有本研の展示は「声で遊ぼう」というタイトルで,音声コマンドによる横スクロールアクションゲームです。本ゲームは4年生が企画・製作したもので,Unity+Juliusを使用しています。ゲーム画面の背景やブロック,キャラクターも,4年生の手作りです。今回,オープンキャンパスに参加していない学生も製作の手伝いをしてくれました。

ゲームキャラクターは「マックン」で,本研究室がmac-labであることに由来しています。

マックン
マックン

マックンが最後にあるゴールまでたどり着ければ,ゲーム終了です。

ゴールの旗

当日の会場は来場者が多くいることや他の研究室の展示があることなどから,相当の騒音環境下で音声認識を行う必要があります。そのため,Juliusではネットワーク文法を作成し,認識する単語を限定させることで認識精度を上げる工夫をしました。

Unityでは,Juliusが認識した単語の情報を受け取り,その単語に応じて,キャラクターを動作させたり,背景をキャラクターに連動させたりなど,ゲーム全体を制御しています。

企画から製作,展示まで3週間という短期間でしたが,見事に完成できました。音声認識の知識も,ゲーム製作の知識もほぼないところからのスタートで,よく頑張ったなあと思います。来場してくださった高校生や保護者の方々も楽しんでくださっているようでした。

この経験が今後に生かされることを期待しています。

文責:有本