画像処理によるリアルタイム手掌部動作認識手法に関する研究

基于图像处理的实时手掌动作识别方法研究

• 批准号: 07750526
• 负责人: 辺見 一男
• 金额: $ 0.58万
• 依托单位: Nagasaki Institute of Applied Science
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Encouragement of Young Scientists (A)
• 财政年份: 1995
• 资助国家: 日本
• 起止时间: 1995 至 无数据
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-07750526/
• 关键词: ヒューマンインタフェース; 動作認識; 画像処理

人工現実感などの研究では,手先の動きそのものをコンピュータの操作に用いるインタフェースが広く用いられている.これらの研究で用いられる入力装置は,データグラブなどメカニカルな方法によるものが大部分であるが,画像処理を用いて非接触で手先の動作を認識できれば,手先に何も装着する必要がないので非常に自然な感覚でコンピュータの操作を行うことができる.このように,手先の動作を直接入力するインターフェースを実現しようとすると,操作者が行なった動作に対して瞬時にレスポンスを返す必要があるため,リアルタイムで手先の動きを認識しなければならない.しかしながら,手先の動作を認識するためには手先の各関接の屈曲角を計測する必要があるが,これを画像処理により行おうとすると計算量が膨大となり,リアルタイムで処理するのは極めて困難である.手先の動きは非常に複雑であるが,各関節は完全に独立した動きを行なえるのではなくて,一定の拘束条件の下でしか働くことができない.したがって,手先の動作を,画像処理により検出するのが容易な情報をパラメータとするモデルで表現することができれば,リアルタイムで手先の動作を認識することが可能となる.本研究で,我々は2指(親指と人差指)で物を操作する動作について,その動作を表現するモデルを導出した.このモデルは,2指の指先の座標とその夾角より2指のすべての関節の屈曲角度を計算することができる.さらに,このモデルを用いて2指の運動を画像処理によってリアルタイムで認識可能な方法を提案した.また,この手法を,コンピュータの入力システムに応用し,手先の動きを非接触で認識可能なインタフェースを構築した結果,この方式がマンマシンインタフェースとして有効であることを確認できた.

Artificial now be feeling な ど の research で は, hand の move first き そ の も の を コ ン ピ ュ ー タ の に operation with い る イ ン タ フ ェ ー ス が hiroo く with い ら れ て い る. こ れ ら で の research with い ら れ る device は into force, デ ー タ グ ラ ブ な ど メ カ ニ カ ル な method に よ る も の が most で あ る が, portrait 処 Richard を with い て non-contact を で の first hand movement Know で き れ ば, first hand what に も containing す る necessary が な い の で natural な feeling very に 覚 で コ ン ピ ュ ー タ の operating line を う こ と が で き る. こ の よ う に, hand の action を directly into the first force す る イ ン タ ー フ ェ ー ス を be presently し よ う と す る と, line operator が な っ た action に し seaborne て instantaneous に レ ス ポ ン ス を return す necessary が あ る た め , リ ア ル タ イ ム で hand の move first き を know し な け れ ば な ら な い. し か し な が ら, の first hand を know す る た め に は hand の each masato first pick の を buckling Angle measuring す る necessary が あ る が, こ れ を portrait 処 Richard に よ り line お う と す る と computation が swelled と な り, リ ア ル タ イ ム で 処 Richard す る の は extremely め て difficult で あ る. Hand の move first き は very に complex 雑 で あ る が, each section masato は に completely independent し た dynamic き を line な え る の で は な く て, under a certain の constraint conditions の で し か 働 く こ と が で き な い. し た が っ て, の first hand を, portrait 処 Richard に よ り 検 out す る の が easy な intelligence を パ ラ メ ー タ と す る モ デ ル performance で す る こ と が で き れ ば, リ Youdaoplaceholder0 ア タ ムで ムで ムで ムで first, <s:1> action を recognize する とが とが とが possibly となる. で of this research, I 々 は 2 refers to (close to show difference of と people) で す を operation る action に つ い て, そ の action を performance す る モ デ ル を export し た. こ の モ デ ル は, 2 points at の の coordinates first と そ の Angle よ り 2 refers to の す べ て の masato section の を buckling Angle calculation す る こ と が で き る. さ ら に, こ の モ デ ル を with い て 2 を portraits 処 の movement Richard に よ っ て リ ア ル タ イ ム で may know な method proposed を し た. ま た, こ の を, コ ン ピ ュ ー タ の シ into force ス テ ム に 応 し, hand の move first き を non-contact で understanding might な イ ン タ フ ェ ー ス を build し た results, こ の way が マ ン マ シ ン イ ン タ フ ェ ー ス と し て have sharper で あ る こ と を confirm で き た.

项目成果

Yabin Lee: "A 3D Natural Man-Machine System Using Hand Motion Recognition" IFAC CONFERENCE YOUTH AUTOMATION. 973-978 (1995)

Yabin Lee：“使用手部动作识别的 3D 自然人机系统”IFAC 青年自动化会议。