The 28th Annual Conference of the Japanese Society for Artificial Intelligence, 2014
- 1 -
手話翻訳
手形状
識ア
Algorithm of recognizing the state of hands for sign language translation
藤本
美加
*1
Mika Fujimoto
井
聡
*1*2
Satoru Inoue
*1
埼玉工業大学大学院
工学研究科
Graduate School of Engineering， Saitama Institute ofTechnology
*2
埼玉工業大学
Saitama Institute of TechnologyBy obtaining the images around the human hands from external optical device and analyzing the information included in these images， it is intended to obtain the state of hands in this paper. This kind of analysis can be applied to sign language translation and gesture recognition.
1.
じめに
1.1 研究背景
目 見 え ，耳 聞 え いう 当 前 う 思 え
， 先 天 的 ， 後 天 的 身 体 害 持 人 多 い ．
や手話，車い ， 害 持 人々 開発
世 中 多 数 在 ． ， 生 時
自 扱え い．特 害 持 生活 可能
健常者 ，私生活 中 必要 機会 非常
少 い． 健常者 害者 ュニ ョン 必要 場
， 知 識 い い う ュ ニ ョ ン
大 害 ． ，急 害 持 場 ，
知識 一人 身 付 時間 ． 記 う
問 題 解 決 ，視 覚 害 者 健 常 者 同 紙
文 読 う 開発 プ ンタ 開発
い ． 聴 覚 害 者 ュ ニ ョ ン 支 援 開
発 い ， 感 や い 多い． ，支援
近い チ 識 挙 ， チ
識 赤 外 線 ン や 距 画 像 ン 用 い 多
い． 身近 ，入手 困 あ ．家
電量販店 並 い ，価格 万単位 う
決 安価 い． ，手話 学習支援や生
活 役立 あ 向い い い．
1.2 先行研究
先 行 研 究 手 話 翻 訳 指 先 位 置 特 定 必
要 考え，指先位置 特定 研究 行わ い
．手 向 識 機 ，指先 学習 タ 指
先 思 わ 位 置 抽 出 ， 手 重 心 指 先 候 補 位 置
測 ，手 重心 遠い指先候補 5 指先 定 い
． 手法 実験 行 結果 1.2.1 示 ．指先位置
定 ． 指 先 手 首 距 差 あ
い 場 ， 手 首 部 指 先 検 出 う ， ， 指
付 根 指先 検出 誤 識 発生 ．
1.3 本研究 目的
手 話 翻 訳 ， 指 先 位 置 特 定 手
形 状 得 必 要 考 え ． 本 研 究 ， 手
形状 得 ，手 向 ，立 い 指 本数 検出
目的 ．
1.2.1 手 傾 指先位置 検出結果
2.
提案手法
動画 静 画 連続 あ ，今回 静 画
情報 得 指文 へ 翻訳 行え 検証 ．本研
究 提案 手法 処理手順 以 通 あ ．
2.1 提案手法 処理手順 流
連 絡 先 ：藤 本 美 加 ，埼 玉 工 業 大 学 大 学 院 ，埼 玉 県 深 谷 市
済寺 69 番地，E ai ： c 9 @g ai c
The 28th Annual Conference of the Japanese Society for Artificial Intelligence, 2014
- 2 -
2.1 指先位置 検出
手 形 指 立 い 折 い 大 形 変わ ．
手話 い 重要 ，指 立 い 本数 手
形 持 意 味 変 わ ． ， 指 立 い 本 数
把 握 重 要 あ 考 え ． 本 研 究 余 弦 定
理 用 い 指 位 置 把 握 ， 指 立 い ．
入力 画像 肌色抽出 施 ，肌色部 白，肌色以
外 黒 二値化 行う．本研究 肌色抽出 人間 色
彩感覚 近い HSV 値 使用 二値化 手 輪郭 一
定間隔 打 ， 同士 線 ．打 ひ
注目 ，隣 長 計算 ．計算 長
余 弦 定 理 式 当 ， ひ 両 隣 成
角 算出 ，算出 角 設定 閾値内 場 ，指
先 あ 可 能 性 持 標 考 え ． ， 閾 値 設 定
指 付 根 指 先 識 う ， 閾 値 内 角
作 3 重心 白 場 指先 ，黒 場 指
付 根 指 先 以 外 場 所 考 え 指 先 候 補 除 外
．
3.
結論
3.1 結果
記 理論 実験 行 結果 3.1 示 ．今回 開
い 手 画 像 開 い 手 斜 映 画 像 ，手 握 画
像 3 枚 実験 行 ．角 閾値 60
130 設定 ． 3.1 段 入力画像，中段 指先 示
出 力 画 像 ， 段 画 像 内 指 先 位 置 標 あ ． 出 力
画像 緑 部 指先 候補 挙 部 あ ．手
開 い 画 像 ， 先 行 研 究 問 題 視 い 指 付 根
部 誤 識 見 ． 3 枚 手首部
指先 検出 ．
3.1 プ 実行結果
3.2 考察
指 先 問 題 検 出 ， 手 握 起 誤 識 確
． ， 手 首 部 指 先 定
う誤 識 確 ． 本 来 先 腕 続 ，
手部 画像 使用 ，手首 部 閾
値 内 入 う 原 因 考 え ． 問 題 ，手 方
向 指先 検出 標 利用 幅 検出 解決
い 考え い ． ，一 指 指先 定
場所 2 ヵ所確 ． 検出結果 指先
部 出 い 誤 識 い． ，一定範 内
指先 定 部 2ヵ所以 検出 場 ，
一 指 先 解 決 い 考 え い ．
4.
まとめ
4.1 まとめ
手 話 利 用 い 聴 覚 害 者 健 常 者 ュ ニ ョ
ン ，健常者 手話 知識 ュニ ョ
ン 手 間 ， 感 や い 現 状
あ ． う 問 題 解 決 ， 手 話 翻 訳
静 画 画像 得 ，指 何本立 い 識 実験
行 ．二 値 化 手 輪 郭 打 ， 線
余 弦 定 理 用 い 角 算 出 ， 設 定 閾 値 内 角 あ
う ，角 成 3 中心 色 指先 あ う
定 ． 結 果 ，指 先 問 題 検 出 手 首 部
誤 識 確 ．原因 ，手 画像 使用 場
手 首 部 途 ， 結 果 手 首 断 部 閾 値 内 入
あ ． ，一 指先 対 2 ヵ所指先
定 出 ， 立 い 指 本 数 現 実 あ え い
場 あ ． 手 向 や 検 出 指 先 検 出
周 状況 利用 ， 問題 解決 ．
4.2 今後 展開
今後 精 高い手話翻訳 目指 ，手 向 ，
指 立 い 指 本数 加え，最初 識 文 次
文 予 測 ，日 常 会 話 出 現 頻 高 い 選 択 翻
訳 ． 似 う 手 形 状 持 意 味 異 ， 次
文 予 予 測 確 指 文 へ 翻 訳 へ
言え ．
参考文献
[大津展之 81]大津展之:”パタ ン 識 特徴抽出
関 数理的研究”, 電子技術総 研究所研究報告, vol.818,
1981．
[岩井儀雄 97]岩井儀雄, 木康史, 谷内 彦:”単眼動
画像 手 3次元運動 位置 推定”, 信学論(D-II),
J80-D-2(1), pp.44-55, Jan 1997．
[今井彰博 08]今井彰博, 島 伸敬, 白井良明: “複雑背
照 誤 考 慮 手 指 形 状 推 定”,電 子
情報通信学会 Vol. J91-D No.3 pp784-792, 2008．
[藤 弘亘 09]藤 弘亘:”画像局所特徴量 高精
物体 識 ITSへ 応用”, 電気関係学会東海支部連 大会,
2009．
[山 寛 09]山 寛, 松尾直志, 島 伸敬, 白井良明:”手話
識 見え 学習 手領域検出 形状識 ”, 画像
