加藤
加藤
俊一
俊一
Toshi KATO
Toshi KATO
ヒューマンメディア工学
ヒューマンメディア工学
Human Media Engineering
Human Media Engineering
ヒューマンインタフェースと
ヒューマンインタフェースと
体感メディア技術
体感メディア技術
[復習]VRの基本的な要件
没入感
全感覚(現状は視聴覚)で感じる外界が、すべ て計算機制御された空間 インタラクティブ性
人間と対象・状況が(相互に)働きかけられる リアルタイム性
(相互)作用した結果を直ちに反映[復習]立体視・遠近感の仕組み
近距離: 輻輳角(両眼視差)
中距離: 運動視差など
遠距離:
vanishing point, vanishing line
[復習]
[復習]
立体視
立体視
両眼視差
(人間)
左目・右目の距離 ×輻輳角 →距離(と大きさ)[復習]奥行きと遠近感
[復習]奥行きと遠近感
運動視差による奥行きの知覚
[復習]
[復習]
奥行きと遠近感
奥行きと遠近感
ポンゾの錯視
奥行き知覚は 「視差」 だけではないVR系アトラクションの秘密を探る
近景: 輻輳角(両眼視差)
→ 立体感
→ 距離感
→ スケール感
遠景: 遠近法など
でも、その前に、、、
[課題1]輻輳角を計算してみる
準備 瞳孔間距離の計測 定規を目の上(眉あたりに固定する。) ※目の近くで定規を使うので、 顔を定規で傷をつけないよう注意。 右目を閉じて、左目の瞳の中心が 定規のメモリ【0】になるように合わせる。 次に反対の目(左目) を閉じて、右目の瞳の 中心がいくつになっているか計測。 計測距離は1mm単位です。 日本人の平均PD: 60~64mm。 (参考) http://item.rakuten.co.jp/eyeweb/c/0000000112/[課題1]輻輳角を計算してみる
対象までの距離と輻輳角の関係
輻輳角θ 瞳孔(カメラ)の間の距離L(m) :対象 対象までの 距離D D L D L D L 2 arctan 2 2 arctan 2 2 2 tan = = = θ θ θ θ/2 L/2[課題1]輻輳角を計算してみる
対象までの距離0.1m刻みで、 0.1m~10.0mまでの 輻輳角の変化を計算する。 対象までの距離と輻輳角の 関係をグラフ化 数値例 瞳孔間距離 6.5cm=0.065mの場合 Excelを使う場合、 角度:radianと度の換算に 注意 2.068789 0.036107 1.8 2.190454 0.038231 1.7 2.327321 0.040619 1.6 2.482429 0.043327 1.5 2.659683 0.04642 1.4 2.864192 0.04999 1.3 3.102763 0.054153 1.2 3.384675 0.059074 1.1 3.722915 0.064977 1 4.136231 0.072191 0.9 4.652724 0.081205 0.8 5.316504 0.092791 0.7 6.200983 0.108228 0.6 7.437988 0.129817 0.5 9.290157 0.162144 0.4 12.36586 0.215825 0.3 18.45977 0.322184 0.2 36.00832 0.628464 0.1 輻輳角(度) ラジアン 距離(m)[課題1]輻輳角を計算してみる
対象までの距離と輻輳角の関係(瞳孔間距離65mmの場合) 0 5 10 15 20 25 30 35 40 0 2 4 6 8 10 12 対象までの距離(m) 輻輳角( 度) 輻輳角(度)[考察1]対象までの距離と輻輳角の関係
距離 輻輳角 距離の解釈(例) ~0.3m 大きく変化 摂食、手で操作する ~1.0m やや大きく変化 手を伸ばして掴む ~2.0m 変化がわかる ジャンプして届く・逃げる ~3.0m 変化がややわかる ジャンプされたら捕まる 5.0m~ 変化がわかりにくい 遠い、ほぼ遠景[考察1]立体感から感じ取るのは?
輻輳角 立体感 両眼視差画像の対応点マッチング 距離感 輻輳角が意味を持つ近距離(~数m) 瞳孔間距離(個人の体)×輻輳角 → 対象までの距離(奥行き方向) を知覚する。 スケール感 & 対象の大きさ(広がり方向) も知覚する。[質問1]立体テレビは成功するか?
技術的な制約 家庭用テレビサイズ(15~17インチ)で 立体映像を表示する技術は (ゴーグル有り、ゴーグル無し) 1990年代中ごろには、既に製品レベル! 立体映像を撮影する技術もあった。 でも、なぜ、立体テレビ・コンテンツが 登場しなかったのだろうか?[質問2]立体テレビは成功するか?
コンテンツ的な制約 「立体で見える」ということは? 近距離での輻輳角 瞳孔間距離(個人の体)×輻輳角 → 対象までの距離(奥行き方向) & 対象の大きさ(広がり方向) を知覚する。 対象は、どのような大きさに見えてしまうか? どんなコンテンツ・対象を立体的に見せるのか? どんな画角(視野)でコンテンツ・対象を見せるのか?[再]
VR系アトラクションの秘密を探る
近景: 輻輳角(両眼視差)
→ 立体感
→ 距離感
→ スケール感
遠景: 遠近法など
Star Tours (Tokyo Disney Land)
Storm Rider (Tokyo Disney Sea)
感覚 没入感・立体感 インタラクティブ性 なぜ、多人数で 乗り込むのか? http://www.tokyodisneyresort.co.jp/tdr/japanese/fun/movie/#/movie/tdl_021 http://www.tokyodisneyresort.co.jp/tdr/japanese/fun/movie/#/movie/tds_014
Star Tours (Tokyo Disney Land)
Storm Rider (Tokyo Disney Sea)
なぜ、多人数で乗り込むのか? イベントは全て遠景で起こっている 感覚 視覚、聴覚、加速度感 没入感・立体感 ゴーグルを使わない(両眼視差無し) 遠景(運動視差、遠近感) 映像からスケール感を推定 インタラクティブ性 なし
Magic Lamp Theater (Tokyo Disney Sea)
感覚 没入感・立体感 インタラクティブ性 なぜ、 主たるコンテンツ (登場人物)が ジーニーなのか? http://www.tokyodisneyresort.co.jp/tdr/japanese/fun/movie/#/movie/tds_028 http://www.fujifilm.co.jp/disneysea/flash_top.html
Magic Lamp Theater (Tokyo Disney Sea)
なぜ主たるコンテンツ(登場人物)がジーニーか? 遠景から近距離まで飛び回る 感覚 視覚、聴覚 没入感・立体感 ゴーグルを使う 大画面(遠景)+輻輳角(近距離) 対象のスケール感(ジーニー>>自分) インタラクティブ性 なし
Micro Adventure (Tokyo Disney Land)
感覚 没入感・立体感 インタラクティブ性 なぜ、観客が 小さくならないと いけないのか?
Micro Adventure (Tokyo Disney Land)
なぜ、観客が小さくなるストーリーなのか? 遠景から近距離まで 感覚 視覚、聴覚、触覚 没入感・立体感 ゴーグルを使う 大画面(遠景)+輻輳角(近距離) 対象のスケール感(博士、犬>>自分) インタラクティブ性
AR: Augmented Reality
AR: Augmented Reality
(強化現実)
(強化現実)
Virtual Reality
計算機内部に現実世界を投影(=仮想空間) 仮想空間を「可感化」 Augmented Reality
計算機内部の情報を現実世界に投影 現実空間を情報で「強化」MR: Mixed Reality
MR: Mixed Reality
(複合現実)
(複合現実)
Mixed Reality
VRを現実世界の情報で強化(高品質化) 現実世界をVR情報などで強化(便利にする) これらの技術の総称[課題2]
[課題2]
AR
AR
、
、
MR
MR
技術と応用可能性
技術と応用可能性
(ビデオ資料を見ながら)
各AR、MRシステムの技術的ポイント
利点と制約
応用可能性
などを整理してみよう。
AR: Augmented Reality
AR: Augmented Reality
(強化現実)
(強化現実)
Augmented Realityを利用した出力・提示
システム→利用者
計算機内部の情報を現実世界に「投影」 視覚: See-through型Head Mount Display、
Digital Desk 聴覚: ?
触覚: ?
AR: Augmented Reality
AR: Augmented Reality
(強化現実)
(強化現実)
Augmented Realityを利用した入力・操作
利用者→システム 現実世界での「普通の動作」 視覚: アイカメラ(視線)、指差し 聴覚: 音声 触覚: 位置(磁気センサ)MR = VR + AR
Mixed Reality
仮想世界と現実世界の密な融合 現実世界のオブジェクト → モデル化して仮想世界に取り込む 仮想世界のリアリティ 仮想世界の情報 → 可感化して現実世界に重畳する 現実世界の情報化・高機能化体感メディア(仮想メディア)
体感メディア(仮想メディア)
五感を通して体で感じるメディア技術
物理的実在 論理的情報 感性的評価 「これらの情報を五感を通して知覚し、また、 操作するためのメディア」を提供する。[宿題
[宿題
1
1
]
]
Virtual Reality
Virtual Reality
技術の応用
技術の応用
Human InterfaceにVR技術を導入すれば、 機器の操作性やサービスの使い勝手・ 品質が改善されると期待できるものを いくつか例示して 「機器・サービス」 「現状」 「VRによる改善点」 「期待される効果」 「技術的な課題」 を説明してみよう。
[宿題
[宿題
2
2
]
]
Augmented Reality
Augmented Reality
技術の応用
技術の応用
生活空間などにAR技術を導入すれば、 格段にその空間での 活動や状態が改善されると期待できるものを いくつか例示し、 「空間・場所」 「現状」 「VRによる改善点」 「期待される効果」 「技術的な課題」 を説明してみよう。