残された課題

クリック動作によるインタフェースに関する今後の課題は，操作環境の影響を受け にくい手指の形状による領域抽出を利用し，更なる頑健な手指領域の抽出の実現や，

クリック動作の認識率の向上がある，また，クリック動作だけでなく，指の動作の状 態遷移により携帯端末の他の操作方法であるタップ動作やドラッグ動作なども認識可 能なシステムへの拡張などがある．これらはいずれも拡張現実感環境における操作性 の向上に貢献すると考えられる．

－82－

クリック動作を検出するアルゴリズムにおいて，画面上の指先座標の変数と指の太 さの変数の係数を本研究では，単純に1 として評価実験を行った．この係数はカメラ と指の関係，カメラの解像度との関係によって決まる．さらなる検出率向上のため，

この係数を環境に合わせて設定できるよう改善を行っていきたい．また，評価実験で は両眼式HMDによってその有効性を検証した．本提案手法は単眼式HMDにも適用可 能であるので，その有効性についてさらに検証を進めたい．

犯罪現場検証用映像の生成システムではマーカ上に被害者オブジェクトと仮想凶器 オブジェクトを表示し，マーカ間の距離と角度を表示する機能しかないが，解剖報告 書や現場検証報告書などの情報を取得し，その情報を注釈表示したり，凶器や人物の 軌跡を表示したりすることで報告書の内容と実際の演技による検証との整合性を検証 することが可能になると考えられる．また，三人称視点のサムネイル表示の有無の制 御はキー入力で行うため演技を中断しなければならない．この処理もクリック動作で 行えることが望ましい．

－83－

謝辞

本研究を遂行し学位論文をまとめるにあたり，多くの御指導，御鞭撻を賜りました 指導教員である茅暁陽教授に心から感謝致します．また，茅暁陽教授には国内外にお きまして多くの研究成果を発表する機会を与えて頂きまして感謝しております．学部 では専攻が異なり修士課程よりコンピュータ・メディア専攻で研究活動をさせて頂き，

情報関連の知識がほぼ皆無だった私に適切に御指導して頂き，このように学位論文を 執筆できるまでに温かく御支援頂きましたことを深く感謝致します．

副指導教員の先生方にも，多くの御指導を頂きました．郷健太郎教授には，インタ フェースやインタラクションについての研究の方向性や位置付けを御教授頂き，学位 論文の意義や構成を御指導頂き感謝申し上げます．小俣昌樹准教授には，本研究の初 期に研究の方向性の重要さを御教授頂き，しっかりと研究の構成を確立することがで きました．研究内容に関しても細部の論点を見出してご指導頂き誠に感謝申し上げま す．

本研究の審査を務めて頂きました渡辺喜道准教授，木下雄一朗准教授には審査にお いて貴重な御意見を下さり，御指導して頂き感謝しております．

本研究の審査をはじめ多くの御指導，御鞭撻を賜りました慶應義塾大学理工学部 藤 代一成教授には心から感謝申し上げます．コンピュータグラフィクスや可視化の分野 において貴重な御意見，御指導を下さりました．研究者としての信条について温かい 御指導も頂きました．また，藤代研究室との研究交流の機会を与えて頂き，私自身の 研究活動に大きな影響を与えて頂き感謝申し上げます．藤代研究室の皆様にも研究交 流会を通して研究内容について議論し，貴重な御意見を頂きましたことを感謝致しま す．研究だけでなく学生生活に関する交流もさせて頂きました．

そして，本研究の全過程におきまして的確な御指導をして頂いた豊浦正広助教に深 く御礼申し上げます．特に研究活動方針や研究に対する姿勢，学外発表の仕方，論文 の添削など，多くの御指導，御助言を頂きました．また，学部とは専攻が異なり修士 課程からコンピュータ・メディア専攻で研究活動をさせて頂き，情報関連の知識がほ ぼ皆無であった私に温かく細かな御指導をして頂き誠に感謝致します．

博士課程，修士課程を通して共に研究活動を行ってきた楊薇さん，澤田友哉さん，

研究内容について議論し，研究生活を過ごせたことを喜ばしく思い感謝致します．ま た，研究活動において評価実験での援助や温かいご助言を頂いた小俣研究室の皆様に 感謝申し上げます，研究活動において議論を交わし，貴重な御意見を頂きました茅・

豊浦研究室の皆様には感謝申し上げます．また，研究活動だけでなく日々の有意義な 学生生活を与えて下さりました．

最後に本研究の間，日々の学生生活を支えてくれた妻，娘をはじめ長い間温かく見 守って下さった家族の方々に感謝申し上げます．

－84－

参考文献

1.

1-01) ARナビゲーション, Pioneer,

http://pioneer.jp/carrozzeria/cybernavi/avic-vh99hud_avic-zh99hud/, 2014/12/04アク セス.

1-02) SkyWare, TIS Direct Web, http://www.tis.jp/service_solution/skyware/, 2014/12/04ア クセス.

2.

2-01) P. Milgram and F. Kishino, “A taxonomy of mixed reality visual display,” IEICE Trans.

Inf. And Syst., Vol. E77-D, No.12, pp.1321-1329, 1994.

2-02) Google Earth, Google, https://www.google.co.jp/intl/ja/earth/, 2014/12/05 アクセス.

2-03) R. Azuma, “A Survey of Augmented Reality,” Teleoperators and Virtual Environments, Vol.4, pp.355-385, 1997.

2-04) CyberGlove, CyberGloveSystems, http://cyberglovesystems.com/, 2014/12/09アクセ ス.

2-05) Gesture Control Armband, Myo, https://www.thalmic.com/en/myo/, 2014/12/09 アク セス.

2-06) H. Kamo, J. Tanaka, ”AIR SURFACE: Virtual Touch Panel Interface By Augmented Reality,” Proceedings of The 73th Annual Convention IPS Japan, pp.“4-299”–“4-230”, 2009.

2-07) H. Kim, G. Albuquerque, S. Havemann, And D. W. Feller, “3D Modeling with Hand Gesture Interaction in a Semi-Immersive Environment,” Technical Report TUBSCG-2004-01, Institute of Computer Graphics, 2004.

2-08) K. Hoshino and M. Tomida, “3D Hand Pose Estimation Using a Single Single Camera for Unspecified Users,” Journal of Robotics and Mechatronics, Vol.21, No.6, pp.749-757, 2009.

2-09) D. Kim, O. Hilliges, S. Izadi, A. Butler, J. Chen, L.Oikonomidis and P. Olivier, “Digits:

freehand 3D interactions anywhere using a wrist-worn gloveless sensor,” ACM Symposium on User Interface Software and Technology (UIST), pp.167-176,2012.

2-10) Z. Xu, C. Xiang, W. Wen, Y. Ji and L. Vuokko, “Hand gesture recognition and virtual game control based on 3D accelerometer and EMG sensors,” Proccedings of the 14th international conference on Inteligent user interfaces, pp.401-406, 2009.

－85－

2-11) M. Sato, I. Poupyrev and C. Harrison, “Touché: Enhancing Touch Interaction on Humans, Screens, Liquids, and Everyday Objects,” In Proceedings of CHI’12, pp.

483-492, 2012.

2-12) A. Akl, S. Edward, Sr. Rogers, “A Novel Accelerometer-Based Gesture Recognition System,” Signal Processing, IEEE Transactions on, Vol. 59, Issue 12, pp. 6197-6205, 2011.

2-13) Wii, Nintendo, http://www.nintendo.co.jp/wii/, 2014/12/09 アクセス.

2-14) ARToolKit. http://www.hitl.washington.edu/artoolkit/, 2014/12/09 アクセス.

2-15) G. Baratoff, A. Neubeck and H. Regendrecht, “Interactive Multi-Marker Calibration for Augmented Reality Applications,” Proceeding of the 1st International Symposium on Mixed and Augmented Reality (ISMAR2002), pp. 107-116, 2002.

2-16) 谷藤誠, 菅谷保之, ”複合現実感システムのためのテクスチャの局所特徴を用い

たマーカー識別と方向推定”, 画像の認識・理解シンポジウム(MIRU2011)講演論 文集, Vol.16, pp.1-8, 2011.

2-17) 立野圭祐, 北原格, 大田友一, ”視点移動自由度の大きい拡張現実感のための入

れ子型マーカ”, 電子情報通信学会技術研究報告, pp.19-24, 2006.

2-18) 吉田友祐, 天目隆平, 柴田史久, 木村朝子, 田村秀行, ”美観と頑健性を両立させ

た複合現実感用半人為的幾何位置合わせマーカの研究（第1報）”, 電子情報通 信学会 技術研究報告, PRMU2006-295, pp.7-12, 2007.

2-19) 玉田裕貴, 西上彰人, 天目隆平, 柴田史久, 木村朝子, 田村秀行, “複合現実感の

ためのポスタを利用した幾何位置合わせ”, 情報処理学会関西支部大会講演論 文集, pp.15-16, 2007.

2-20) H. Park and J. Park, “Invisible marker tracking for AR,” Proceeding 3rd IEEE/ACM International Symposium on Mixed and Augmented Reality (ISMAR04), pp.272-273, 2004.

2-21) 中里祐介, 神原誠之, 横矢直和, “ウェアラブル拡張現実感のための不可視マー

カと赤外線カメラを用いた位置・姿勢推定”, 日本バーチャルリアリティ学会論 文誌, Vol.10, pp.295-304, 2005.

2-22) G. Klein, D. Murray, “Parallel Tracking and Mapping for Small AR Workspaces,”

Proceeding 6th IEEE/ACM International Symposium on Mixed and Augmented Reality (ISMAR07), pp.225-234, 2007.

2-23) PTAMM, http://www.robots.ox.ac.uk/~bob/software/index.html, 2014/12/09 アク セ ス.

2-24) A. State, G. Horita, D. Chen, W. Garrett and M. Livingston, “Superior Augmented Reality Registration by Integrating Landmark Tracking and Magnetic Tracking,”

Proceeding SIGGRAPH’96, pp.429-438, 1996.

2-25) T. Hollerer, S. Feiner and J. Pavlik, “Situated documentaries: Embedding multimedia presentations in the real world,” Proceeding 3rd IEEE International Symposium on

－86－

Wearable Computers (ISWC ’99), pp.79-86, 1999.

2-26) 神原誠之, 横矢直和, “RTK-GPSと慣性航法装置を併用したハイブリッドセンサ

による屋外拡張現実感”, 電子情報通信学会技術研究報告, Vol.104, pp.37-42, 2005.

2-27) 中林拓馬, 江原司, 加戸啓太, 平沢岳人, “大規模空間において実寸大表現が可

能な拡張現実感システムの開発”, 日本建築学会計画系論文集, Vol.76, No.667, pp.1753-1759, 2011.

2-28) 小田島太郎, 神原誠之, 横矢直和, ”拡張現実感技術を用いた屋外型ウェアラブ

ル注釈提示システム”, 画像電子学会誌, Vol.32, No.6, pp.832-840,2003.

2-29) 天目隆平, 神原誠之, 横矢直和, “赤外線ビーコンと歩数計測を用いたウェアラ

ブル型注釈提示システム”, 電子情報通信学会技術研究報告, Vol.102, pp.71-76, 2002.

3.

3-01) GoogleGlass, Google, http://www.google.com/glass/start/, 2014/12/09 アクセス.

3-02) 黒川隆夫, “ノンバーバルインタフェース,” オーム社, 1994.

3-03) L. Taehee, H. Tobias, “Handy AR: Markerless Inspection of Augmented Reality Objects Using Fingertip Tracking,” IEEE Wearable Computers, 2007 11th IEEE International Symposium on, pp.83-90, 2007.

3-04) S. Hashimoto, A. Ishida, M. Inami and T. Igarashi, “TouchMe: Direct Manipulation for Robot Based on Augmented Reality,” The 21st International Conference on Artificial Reality and Telexistence, Proceedings of ICAT2011, 2011.

3-05) T. Murase, A. Moteki, N. Ozawa, N. Hara, T. Nakai and K. Fujimoto, “Gesture Keyboard Requiring Only One Camera,” Proceedings of the 24th annual ACM symposium adjunct on User interface software and technology, pp. 9-10, 2011.

3-06) D. Schmidt, C. Sas and H. Gellersen, “Personal Clipboards for Individual Copy-and-Paste on Shared Multi-User Surfaces,” In Proceedings of CHI 2013, pp.3335-3344, 2013.

3-07) C. Harrison, H. Benko and A. D. Wilson, “OmniTouch: Wearable Multitouch Interaction Everywhere,” Proceedings of the 24th annual ACM symposium on User interface software and technology, pp.441-450, 2011.

3-08) C. Colombo, A. D. Bimbo and A. Valli, “Visual capture and understanding of hand pointing actions in a 3-D environment, Man, and Cybernetics, Part B: Cybernetics,”

IEEE Transactions on, Vol.33, No.4, pp.677-686, 2003.

3-09) Kinect, Microsoft, http://www.xbox.com/ja-JP/Kinect, 2014/12/09 アクセス.

3-10) iPad, Apple, http://store.apple.com/us, 2014/12/09 アクセス.

－87－

3-11) H. Kim, G. Albuquerque, S. Havemann and W. D. Fellner, “Tangible 3D: Immersive 3D Modeling through Hand Gesture Interaction,” Proceedings of the 11th Eurographics conference on Virtual Environments, pp.191-199, 2005.

3-12) A. Wilson, “Robust Computer Vision-Based Detection of Pinching for One and Two-Handed Gesture,” UIST Proceeding of the 19th annual ACM symposium on, pp.255-258, 2006.

3-13) A. Chaudhary, J. L. Raheja, K. Das, & S. Raheja, “Intelligent Approaches to interact with Machines using Hand Gesture Recognition in Natural way: A Survey,”

International Journal of Computer Science & Engineering Survey, Vol.2, No.1, pp.122-133, 2011.

3-14) R. Y. Wang and J. Popovic, “Real-Time Hand-Tracking with a Color Glove,” Journal of ACM Transaction on Graphics, Vol.28, No.3, 2009.

3-15) I. Guskov, S. Klibanov and B. Bryant, “Trackable surfaces,” Proceedings of the ACM SIGGRAPH / Eurographics symposium on Computer animation, pp.251–257, 2003.

3-16) R. White, K. Crane, and D.A. Forsyth, “Capturing and animating occluded cloth,”

Transaction on Graphics, Vol.26, No.3, Article 34, 2007.

3-17) V. Scholz, T. Stich, M. Keckeisen, M. Wacker, and M. Magnor, “Garment motion capture using color-coded patterns,” Computer Graphics Forum, Vol.24, No.3, pp.439–448, 2005.

3-18) M. Lee, R. Green and M. Billinghurst, “3D Natural Hand Interaction for AR Applications,” Image and Vision Computing New Zealand 23rd International Conference, pp.1-6, 2008.

3-19) The Only Fully Augmented Reality, META, https://www.spaceglasses.com/, 2014/12/09 アクセス.

3-20) K. Terajima, T. Komuro and M. Ishikawa, “Fast finger tracking system for in-air typing interface,” In Proceedings of the 27th international conference extended abstracts on Human factors in computing systems, pp.3739-3744, 2009.

3-21) Y. Mizuchi, H. Kawai, Y. Hagiwara, H. Imamura and Y. Choi, “Estimation for Position and Orientation of a Hand Robust to Finger Motions Using a Web Camera,”

Proceedings of International Symposium on Smart Sensing and Actuator System, pp.48-51, 2010.

3-22) M. Kölsch, M. Turk, “Fast 2D Hand Tracking with Flocks of Features and Multi-Cue Integration,” IEEE Workshop on Real-Time Vision for Human-Computer Interaction, Vol.10, pp.158, 2004.

3-23) M. Kölsch, M. Turk, “Analysis of Rotational Robustness of Hand Detection with a Viola-Jones Detector,” International Conference on Pattern Recognition, Vol.3, pp.107-110, 2004.

3-24) T.Lee, T.Höllerer, “Initializing Markerless Tracking Using a Simple Hand Gesture,”