インタラクティブセッション
講演形式
インタラクティブセッション
講演ルーム
受講スキル
・インタラクティブミュージックに関する興味
・音楽を用いた AR/XR に関する興味
得られる知見
・ゲーム演出におけるインタラクティブミュージックの概念と効果
・自分の身体動作や感情に対する音楽的なフィードバックがもたらす拡張体験
セッションの内容
現実世界における行動や感情に基づいてインタラクティブミュージック演出によるフィードバックを行うことで、日々の生活における情動を拡張するシステムを提案する。非拘束のモーショントラッキングシステムによりユーザーの行動や場所を制限することなく動作を認識し、音楽ブロックの切り替え(横の遷移)によりシチュエーションに応じた楽曲変化を提示する。また、カメラで取得した表情やアプリケーションへの入力テキストから推定した感情の推移に応じて音楽のトラックやパラメーター切り替え(縦の遷移)を行うことで、感情変化の拡張を試みる。