Column
VR で「他人の気持ち」は本当に育てられるか？ ── 顔トラッキングが開く共感の扉
顔トラッキングでプレイヤーの感情をリアルタイム検知し、キャラクターとの感情ループを物語に組み込む VR システムが登場した。感情的視点取得を座学でなく没入体験で習得させる可能性を、感情 AI 研究の観点から読み解く。
こんにちは。Affectosphere Group の井下です。
「他人の気持ちがわからない人」を、どうやって育てればいいのか。
これはハラスメント研修でも、リーダーシップ開発でも、長年解けていない問いです。座学で「相手の立場に立って考えましょう」と言っても、感情は頭で理解するものではなく、身体で感じるものだから。
2026 年 6 月に arXiv で公開された研究（Hector Fan, Casper Hartveld, Mark Sivak ら、arXiv:2606.02425）は、この問いに VR と顔トラッキングで迫ります。プレイヤーの感情状態をリアルタイムに検知して物語の展開そのものを変えるシステム「Rekindle」を通じ、「感情的視点取得（Emotional Perspective-Taking）」を没入体験で養う新しいアプローチを提示しています。
今日の 3 点
- 感情データを「難易度調整」に使うのではなく「物語の形を変える」ために使うという設計思想の転換。
- プレイヤーとキャラクターの感情双方向ループが、共感の深さをどう変えるか。
- VR 共感トレーニングをビジネス・教育現場で設計するときに考えるべきこと。
① 感情を「センシング」するだけでは不十分だった
VR で感情データを使う研究は、これまでもありました。ストレスレベルが上がったらゲームの難易度を下げる。疲れたら休憩を促す。
でもこれは「感情に反応するシステム」であって、「感情を育てるシステム」ではありません。
Rekindle が目指したのは、もっと根本的なことです。プレイヤーが感じている感情と、物語の中のキャラクターが感じている感情を、リアルタイムでループさせることで「一緒に感じる体験」を作る。
具体的には、VR ヘッドセットに内蔵された顔トラッキングカメラがプレイヤーの表情を継続的に解析します。そのデータを元に感情状態を推定し、キャラクターとのインタラクション場面に反映させる。「プレイヤーが悲しそうなとき、キャラクターも悲しみを表現しやすくなる」「プレイヤーが不安な状態で重要な選択場面を迎えると、物語の分岐が変わる」という形です。
ポイントは、感情データが単なる入力情報ではなく、「プレイヤーとキャラクターの感情が共鳴する空間」を作るための設計変数になっていることです。
② 感情的視点取得とは何か
「感情的視点取得」は、認知心理学・社会心理学で長く研究されてきた概念です。日本語では「感情移入」や「共感」と重なりますが、もう少し具体的な認知プロセスを指します。
「この人は今どんな感情を感じているか」を、自分の感情ではなく相手の内的状態として想像する能力です。
これが弱いと何が起きるか。職場でいえば、自分の判断基準だけで他者を評価してしまう、相手のストレスやプレッシャーに気づかない、「なぜこんな反応をするのか」が理解できない、という状況につながります。ハラスメントの多くは、加害者側の感情的視点取得能力の低さと関係しています。
問題は、この能力が「教えて身に付く」ものではないという点です。知識として「相手の立場に立つべきだ」と理解していても、実際の場面では自動的に自分の感情フィルターで解釈してしまう。
VR には「まるでそこにいるような感覚」を生む没入性（presence）があります。この没入性を感情的視点取得のトレーニングに使おうというのが、Rekindle の基本的な発想です。
③ システムの仕組みと実験の設計
Rekindle は、認知症の家族を抱える老年期の物語を舞台に設計されています。プレイヤーは家族の一員として物語に参加し、認知症を患うキャラクターとのやり取りを通じて感情的体験を積んでいく。
テーマの選択は意図的です。認知症ケアの場面では、「なぜこんなことを言うのか」という理解が難しい相手の感情状態を想像する力が特に重要になる。感情的視点取得の難しさが最も問われる文脈を選んでいます。
実験では、顔トラッキングによる感情フィードバックを有効にした条件と、そうでない条件を比較しています。本論文は DIS Companion ‘26（ACM Designing Interactive Systems Conference のコンパニオン論文、シンガポール）として採択されており、インタラクティビティ論文としての位置づけは「体験デモ＋研究仮説」の提示段階です。実証データはまだ限定的ですが、設計思想と実装の詳細が丁寧に記述されています。
感情 AI はいま、何を解こうとしているのか
私が感情 AI を研究している立場から、この論文で特に注目したのは「感情データの使い方の転換」です。
これまでの感情 AI 研究の多くは「感情を認識して分類する」ことを目標にしていました。怒っているか、悲しんでいるか、を判定する。
Rekindle が試みているのは、認識した感情データを「体験の設計変数」として使うことです。感情を外側から観察するのではなく、感情が生まれる場そのものを設計する。
これは感情 AI の応用可能性を大きく広げる発想だと思います。テーマパークの体験設計、映画やゲームの演出、メンタルヘルスサポートツール、職場コミュニケーション研修 ── 「感情を使って場を設計する」という軸は、どの領域にも適用できます。
一方で、懸念点もあります。顔トラッキングによる感情推定には、文化差・個人差・カメラ環境への依存という限界があります。「悲しそう」に見えても実際には無表情なだけ、という誤認識が物語に反映されると、体験が意図と逆に働く可能性がある。
また、感情データをリアルタイムで物語に使うということは、「操作される感情体験」でもあります。ユーザーがそれを認識していない場合のインフォームドコンセントの問題は、設計者が意識すべき倫理課題です。
それでも、「感情的視点取得を没入体験で育てる」という設計の方向性は、従来の共感教育が届かなかった層への新しいアプローチとして、追い続ける価値があると考えています。
では！
参考論文
- Hector Fan, Casper Hartveld, Mark Sivak (2026). Fostering Emotional Perspective-Taking: An Exploration of Affective Face-Tracking Interactions in the VR Narrative Rekindle. arXiv preprint.
※ 本記事は一部 AI により執筆されており、間違った情報が含まれる恐れがあります。