[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JP2017120575A - 姿勢動作検出装置 - Google Patents

姿勢動作検出装置 Download PDF

Info

Publication number
JP2017120575A
JP2017120575A JP2015257303A JP2015257303A JP2017120575A JP 2017120575 A JP2017120575 A JP 2017120575A JP 2015257303 A JP2015257303 A JP 2015257303A JP 2015257303 A JP2015257303 A JP 2015257303A JP 2017120575 A JP2017120575 A JP 2017120575A
Authority
JP
Japan
Prior art keywords
posture
sensor
acceleration
detection sensor
forearm
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2015257303A
Other languages
English (en)
Other versions
JP6663219B2 (ja
Inventor
和美 纐纈
Kazumi Koketsu
和美 纐纈
茂 和木田
Shigeru Wakita
茂 和木田
伸好 辻内
Nobuyoshi Tsujiuchi
伸好 辻内
彰人 伊藤
Akihito Ito
彰人 伊藤
敬祐 北野
Keisuke Kitano
敬祐 北野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Doshisha Co Ltd
Tec Gihan Co Ltd
Original Assignee
Doshisha Co Ltd
Tec Gihan Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Doshisha Co Ltd, Tec Gihan Co Ltd filed Critical Doshisha Co Ltd
Priority to JP2015257303A priority Critical patent/JP6663219B2/ja
Publication of JP2017120575A publication Critical patent/JP2017120575A/ja
Application granted granted Critical
Publication of JP6663219B2 publication Critical patent/JP6663219B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Position Input By Displaying (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

【課題】どこを中心に動作しているのかを検出できるようにした姿勢動作検出装置を提供する。【解決手段】被験者の前腕部に取り付けられる第一検出部2と、手指に取り付けられる第二検出部3を設ける。この第一検出部2では一定距離離れた位置に、加速度センサやジャイロセンサ・地磁気センサからなる第一検出センサ21第二検出センサ22を設け、これらのセンサ21・22から前腕部の運動状態や回転中心などを算出する。そして、算出部4で前腕部の姿勢や運動状態を算出し、第二検出部3で検出された値から前腕部の姿勢や運動状態を除去し、手指のみの運動と前腕部の運動を分離する。【選択図】図4

Description

本発明は、人間の手指や腕などに装着されて手の動きなどを検出できるようにした姿勢動作検出装置に関するものであり、より詳しくは、人間の動作における回転中心を見つけて腕や手指の運動解析を行えるようにした姿勢動作検出装置に関するものである。
従来より、人間の手指の姿勢や運動状態を解析できるようにした装置として、例えば、下記の特許文献1などに手の甲や指に装着されて手指の動きを検出できるようにした装置が提案されている。
この装置は、手の甲に取り付けられたジャイロセンサや加速度センサによって重力加速度方向に対する手の動きや姿勢を検出する手甲検出手段と、複数の指の先端に装着され、指の第一関節の曲げ動作や姿勢を検出するジャイロセンサからなる指姿勢検出手段とを設けるようにしたものであって、手甲検出手段から得られた情報によって手の甲の相対位置や姿勢を求め、また、指姿勢検出手段から得られた情報によって手の甲に対する指作の角度位置を決定できるようにしたものである。このような装置を用いれば、手の甲や指の姿勢などを検出することによってジェスチャーを解析し、操作入力コマンド情報データへの変換を行うことなどによってコンピューターを制御することが可能となる。
ところで、運動解析を行う分野においては、手や指の動きだけでなく手首を中心とする動きなのか肘や肩を中心とする動きであるのかを解析し、その運動動作の中でどのように手指が動いているのかを解析したい場合がある。このような解析を行うことができれば、生活環境における動作を行う際(例えば、洗濯機から衣類を取り出す際や、棚から物品を出し入れする際)などに、どのような状態で腕や手指を動かしたのかを解析することで、ライフデザインの構築を図ることができるというメリットがある。
特開2008−135033号公報
しかるに、上記特許文献1に記載されるような姿勢動作検出装置では、手の甲の動きや指の角度しか検出することができないため、指の関節を中心とした動きであるのか、あるいは、手首や肘などを中心とした動きであるのかを判断することができない。このため、図3に示すように手首だけを動かしたのか、あるいは、肘などを中心として手を動かしたかなどの判断をすることができない。
そこで、本発明は人間の肢体を含む動作において、どこを中心に動作しているのかを検出できるようにした姿勢動作検出装置を提供することを目的とする。
すなわち、本発明は上記課題を解決するために、前腕部、上腕部、下腿部、上腿部のいずれかに取り付けられ、加速度および角速度を検出する第一検出センサと、当該第一検出センサに対して前腕部、上腕部、下腿部、上腿部の長手方向の離れた位置に取り付けられ、加速度および角速度を検出する第二検出センサと、前記第一検出センサと第二検出センサによって検出された加速度および角速度から動作の回転中心を算出し、前腕部、上腕部、下腿部、上腿部の姿勢および運動状態を算出する算出部とを設けるようにしたものである。
このように構成すれば、例えば、前腕部の長手方向の離れた位置に設けられた複数の検出センサによって、肘を中心とした回転運動であるのか前腕部の並進運動であるのかなどを判断することができるようになる。これにより、この前腕部の運動状態を把握することで、手指のみの運動状態を正確に判断することができる。
また、このような発明において、前記第一検出センサおよび第二検出センサに、さらに、地磁気センサを取り付けるようにする。
このようにすれば、地磁気センサの検出値によって初期状態からの運動を解析することができるとともに、ジャイロ出力の積分値(又は姿勢角)をその地磁気センサで補正することができるようになる。
さらに、前記第一検出センサおよび第二検出センサを、一枚のプレートに取り付けるようにする。
このようにすれば、第一検出センサと第二検出センサの位置関係を固定することができるため、肘を中心とした回転運動や前腕部の並進運動などを正確に判断することができるようになる。
加えて、手の甲や足の甲、各指に加速度および角速度を検出する手足姿勢検出センサを設けるとともに、当該手足姿勢検出センサで検出された加速度および角速度から、手足の姿勢および運動状態を第二算出部で算出し、当該算出された値から前記算出部で算出された前腕部、上腕部、下腿部、上腿部の姿勢および運動状態を除外して手足の姿勢および運動状態を修正するようにする。
このようにすれば、前腕部の動きを除外して、手指のみの運動を抽出して解析することができるようになる。
本発明によれば、前腕部、上腕部、下腿部、上腿部のいずれかに取り付けられ、加速度および角速度を検出する第一検出センサと、当該第一検出センサに対して前腕部、上腕部、下腿部、上腿部の長手方向の離れた位置に取り付けられ、加速度および角速度を検出する第二検出センサと、前記第一検出センサと第二検出センサによって検出された加速度および角速度から、動作の回転中心を算出して、前腕部、上腕部、下腿部、上腿部の姿勢および運動状態を算出する算出部とを設けるようにしたので、例えば、肘を中心とした回転運動であるのか、肩を中心として前腕部を並進させた運動であるのかなどを判断することができるようになる。これにより、この前腕部の運動状態を把握することで、手指のみの運動状態を正確に判断することができるようになる。
本発明の一実施の形態における姿勢動作検出装置を取り付けた状態図 同形態における機能ブロック図 同形態における検出可能な動作例を示した図 同形態における加速度や角速度に基づく動作例を示した図 同形態における2種類の回転動作を行った場合の回転加速度ベクトル、角速度ベクトル、位置ベクトルの関係を示す図 同形態における回転中心を求める際の外積と回転中心までの単位位置ベクトルuとの関係を示す図 同形態におけるセンサ位置と回転中心までの関係を示す図 同形態における手指に取り付けられたセンサの位置関係を示す図 同形態における処理を示すフローチャートを示す図 同形態における処理を示すフローチャートを示す図
以下、本発明の一実施の形態について図面を参照しながら説明する。
この実施の形態における姿勢動作検出装置1は、図1や図2に示すように、人間の前腕部に取り付けられた状態で前腕部の加速度や角速度・地磁気の向きを検出する第一検出部2と、手の甲や指に取り付けられた状態で手指の加速度や角速度・地磁気の向きを検出する第二検出部3とを備え、この第一検出部2の検出結果に基づいて前腕部の回転中心を算出して前腕部の姿勢や運動状態を解析するとともに、その後、その解析結果や第二検出部3の検出結果に基づいて、手指の姿勢や運動状態を解析できるようにしたものである。以下、本実施の形態における姿勢動作検出装置1の構成について詳細に説明する。なお、本実施の形態では、人間の前腕部や手の甲、指などに加速度センサやジャイロセンサ、地磁気センサを取り付けた場合を説明するが、上腕部や下腿部、上腿部、足の甲、足の指などに取り付けるようにした場合についても同様の構成を適用して肢体の姿勢や運動状態を解析することができる。
<検出可能な動作例>
まず、人間の手や腕の動きを検出する場合、図3の左側図に示すように、手首を中心とした回転運動(左上図)であるのか、肘を中心とした回転運動(左下図)であるのか、あるいは、前腕部を並進させる運動であるのかを検出する必要がある。しかしながら、従来のように、加速度センサやジャイロセンサを手の甲や指に取り付けただけである場合、手首を回転させながら手を動かした状態(右上図)や、肘を中心に手を動かした状態(右下図)を判別することができない。このため、これらの運動の違いを判別できるように、前腕部の手首の近い位置に第一検出部2を設けて回転中心を検出できるようにする。
<第一検出部2および第二検出部3の基本構成>
第一検出部2は、前腕部の手首に近い位置に取り付けられるものであって、一枚のプレート23上に二つの第一検出センサ21や第二検出センサ22を取り付けて構成されている。これら第一検出センサ21や第二検出センサ22は、いずれも3軸方向(直交するX軸、Y軸、Z軸方向)の加速度を検出する加速度センサ、3軸方向の角速度を検出するジャイロセンサ、3軸方向の地磁気の向きを検出する地磁気センサからなる9軸のセンサによって構成されており、前腕部の長手方向に沿って所定の距離(例えば、10cm)を隔ててプレート23(図1参照)に取り付けられている。そして、これらの第一検出センサ21や第二検出センサ22の加速度や角速度などを用いて手首を中心とした回転運動や肘を中心とした回転運動、回内運動、回外運動などをそれぞれ検出できるようにしている。
一方、第二検出部3は、手の甲や、各指の先端から第一関節(DIP関節)までの間、第一関節(DIP関節)から第二関節(PIP関節)までの間、第二関節(PIP関節)から第三関節(MP関節)までの間に取り付けられており、同様に3軸方向(直交するX軸、Y軸、Z軸方向)の加速度を検出する加速度センサや、3軸方向の角速度を検出するジャイロセンサ、3軸方向の地磁気の向きを検出する地磁気センサを設けて構成されている。また、これ以外に、第三関節(MP関節)から手首に近い側のCM関節にも同様に3軸方向の加速度センサやジャイロセンサ、地磁気センサからなる9軸のセンサを設けて手掌の湾曲方向の姿勢や運動状態を検出できるようにしている。
これらの複数のセンサを用いて姿勢や運動を推定する場合、まず、手指を静止させた状態で加速度センサの出力値を計測し、重力加速度のみを計測する。また、地磁気センサは、水平面以外では、そのままの出力では地磁気方位を正しく出力することができないため、鉛直方向の重力加速度を用いて地磁気の出力を水平面へ変換して方位を出す。そして、すべてのセンサに共通する重力方向と地磁気方位の2軸からグローバル座標と各センサ座標間の回転行列を作成し、これらを用いて初期姿勢を推定する。
動作中の姿勢を推定する場合は、ジャイロセンサの出力値の角速度を時間積分することにより変位角度を求め、その角度ベクトル回りの回転行列をサンプリング時間毎に作成して直前のサンプリング時間の回転行列に掛け合わせることで、グローバル座標と初期姿勢、初期姿勢と現在の姿勢を結ぶ一つの回転行列とする。これを用いることにより動作中の姿勢を推定する。なお、動作中の姿勢に関してはジャイロセンサの出力を時間積分した角度を用いているため、時間が経過するほど姿勢推定の誤差も大きくなってしまい、適宜重力加速度と方位を使用して補正する必要がある。そこで、加速度センサや地磁気センサを用いてジャイロ出力の積分値(又は姿勢角)を補正する。
<前腕部に取り付けた第一検出部2による動作の判別方法>
第一検出部2では、このような加速度センサやジャイロセンサ、地磁気センサを有する第一検出部2を用いて手首を中心とした動きや、前腕部の並進運動、回内/回外運動の動きを判別する。
このような動きを判別する場合、まず、第一検出センサ21や第二検出センサ22の加速度から重力加速度を除去する。この重力加速度成分を除去する場合、ジャイロセンサから得られた出力値を回転行列を用いて除去する。そして、回内/回外に対する回転加速度成分をジャイロセンサからの出力値によって算出し、これを除外する。この算出後に残った加速度は、並進加速度および肘や肩を中心とした回転による回転加速度となる。
<動作種別の判別方法>
各種動作を判別する場合において、手首を中心とした動きや、前腕部の並進運動、回内/回外運動の動きを判別する場合、第一検出センサ21の回転加速度をa1、第一検出センサ21の角速度をω1、第二検出センサ22の回転加速度をa2、第二検出センサ22の角速度をω2とし、また、pr/suをその回内/回外成分とした場合、これらの検出値によって次のような運動を判別することができる(図4参照)。
1=a2=0 :手首より身体側の動作なし
また、a1=a2≠0である場合において、更に運動を詳しく判別するために、肘を中心とした加速度の回転成分を「el」とすると、回内/回外、肘や肩を中心とした回転は次のように判別することができる。
ω1=ω2=0 :並進運動のみ
ω1=ω1pr/su≠0、ω2=ω2pr/su≠0 であって、
1-pr/su=a1−a1pr/su、a2-pr/su=a2−a2pr/su とした場合、
1-pr/su=0、a2-pr/su=0 :回内/回外のみ
1-pr/su=a2-pr/su :並進と回内/回外
ω1≠ω1pr/su≠0、ω2≠ω2pr/su≠0 であって、
1-pr/su-el=a1-pr/su−a1el、a2-pr/su-el=a2-pr/su−a2el とした場合、
1-pr/su-el=0、a2-pr/su-el=0 :回内/回外と肘の回転
1-pr/su-el=a2-pr/su-el :並進と回内/回外と肘の回転
1-pr/su-el≠a2-pr/su-el :回内/回外と並進および肘/肩の回転の影響あり
ω1≠0、ω2≠0、ω1pr/su=0、ω2pr/su=0 であって、
1-el=a1−a1el、a2-el=a2−a2el とした場合、
1-pr/su-el=0、a2-pr/su-el=0 :肘の回転のみ
1-pr/su-el=a2-pr/su-el :並進と肘の回転
1-pr/su-el≠a2-pr/su-el :並進および肘/肩の回転影響あり
なお、これらの加速度aや角速度ωは、それぞれベクトルとして表されるものである。
また、上記「肩の回転影響あり」と判断される場合においては、上腕部に加速度センサやジャイロセンサ・地磁気センサを取り付ければ、これら肩の回転を検出することができるようになる。
このように前腕部に軸方向に沿った第一検出センサ21や第二検出センサ22を用いて手首を中心とした回転なのか、肘や肩を中心とした回転なのか、あるいは、回内運動であるか回外運動であるかなどを判別することが可能となる。そして、次に、前腕部の姿勢や動作を具体的に算出すべく、回転加速度や回転中心などを算出部4で算出する。
<回転加速度の算出方法>
一般に、この回転加速度を計算する場合、ジャイロセンサの出力値である角速度と回転中心からの位置ベクトルを用いることにより、回転加速度を算出することができる。ただし、角速度は単一の回転軸による成分に分離する必要があり、これを計算するために上腕部に取り付けた第一検出センサ21や第二検出センサ22を利用し、
Figure 2017120575
を用いて回転加速度aを算出する。
<回転中心の算出方法>
また、回転中心の算出は、同一の回転中心を持つ回転軸が2つ(例えば、上下方向の回転軸と左右方向の回転軸)あるという条件下で、各軸まわりの回転をそれぞれ行ったデータを使用することにより算出が可能となる。このとき、センサと中心位置の相対関係が変化しないと仮定する。
この場合、センサ座標系ではセンサ位置と回転中心との距離は変わらないので、上記数1は第1項のみとなり、回転の加速度と位置ベクトルは外積の関係式となる。外積は不可逆な演算式であるが、2軸の回転における平面(加速度ベクトルを法線としたもの)を利用することにより、2つの平面の交線として位置ベクトルの単位ベクトルが算出可能であり、また、このベクトルと角加速度ベクトル(角速度の微分値)を利用することにより、位置ベクトルの大きさが算出される。したがって、この2つの値により位置ベクトルが求められるため、回転中心を算出することができる。
具体的には、第一検出センサ21の加速度センサから算出された回転加速度ベクトルをa1、角速度ベクトルをω1、位置ベクトルをx1、第二検出センサ22の加速度センサから算出された回転加速度ベクトルをa2、角速度ベクトルをω2、位置ベクトルをx2(x1=x2=x)とした場合、回転加速度は数1の関係式が成り立つ。
このとき、センサ座標系では、回転中心とセンサ位置とは時間変化しないため、
Figure 2017120575
となり、回転加速度ベクトルを法線ベクトルとする平面は、角加速度ベクトルと位置ベクトルを含んでいることになる。そして、
Figure 2017120575
とすると、図5に示すような原点を通る平面の方程式は次のように表される。
Figure 2017120575
2つの平面の交線ベクトルは、位置ベクトルと同一方向を指すので、図6に示す交線ベクトルの単位ベクトルuを算出する。
平面上の角加速度ベクトル位置ベクトルのなす角θは、単位交線ベクトルと角加速度ベクトルから算出が可能であり、外積の大きさの関係式を用いることで、位置ベクトルの大きさを次のように算出することができる。
Figure 2017120575
従って、位置ベクトルxは、次のように表される。
Figure 2017120575
つまり、回転中心位置cは、センサ座標原点から考えると、次のように算出することができる。
Figure 2017120575
そして、9軸のセンサが取り付けられている位置の部位の両端側における関節をそれぞれ中心として動作させることで、ベクトル「c」を算出部4で算出することにより、図7に示すように、センサと一端側までのベクトルと、センサと他端側までのベクトルを算出することができ、センサが取り付けられている部位長さやその部位の長手方向ベクトルなどを算出することができる。
以下、指に取り付けられているセンサについても同様の処理を行い、指の部位長さや回転中心(関節)までの長さを第二算出部41で算出する。
なお、指の部位長さやその部位の長手方向ベクトルを算出する場合、指先の末節骨においては、第二関節(DIP関節)しか存在しないため、同様の処理を行うことができない。そこで、この実施の形態では、図8に示すように各関節(DIP関節、PIP関節)を中心として等しい距離にセンサを取り付けるとともに、末節骨については、末節骨の中央に配置するようにする。そして、この状態で関節角を0度に維持した状態(指を真っ直ぐに伸ばした状態)で付け根のMP関節を中心として2軸方向(例えば、上下方向および左右方向)に回転させ、同様にして各センサからMP回転中心までの距離を求める。そして、各指に取り付けられたセンサの配置関係を用いて各回転中心までの長さや部位長さ、その部位の長手方向のベクトルを算出できるようにする。そして、このように算出された回転中心や部位長さと、各センサから出力値を用いて指の姿勢位置や速度・加速度・角速度などの運動状態を第二算出部41で算出する。
<前腕部の運動状態の除外処理>
このようにして算出された回転中心や第一検出部2で検出された加速度や角速度を用いて、並進であれば手指の加速度から並進の加速度を除外、回外および肘の回転であれば手指の第二検出部3に対する位置ベクトルの影響を考慮した加速度を除外することにより、手指の加速度出力から肘の回転などの影響を除外することができる。さらに、前腕部に設けられた第一検出部2の角速度成分を手指における第二検出部3のジャイロセンサの出力値から除外することにより、手指単体の運動に対する加速度を算出する。
このように、前腕部に取り付けられた第一検出部2を利用することにより、手指における加速度出力から重力加速度を抽出でき、この重力加速度を用いることにより、動作中の姿勢の補正が可能となる。
また、従来のように手指のみにセンサを取り付けている場合、手指での撓屈/尺屈あるいは屈曲/伸展した場合と肘で屈曲/伸展した場合の区別を付けることが不可能であるが、前腕部に設けられた第一検出部2による姿勢や運動状態を除外することによって、手指の細かな運動を解析することが可能となる。
次に、このように構成された姿勢動作検出装置1における処理のフローについて、図9や図10を用いて説明する。
まず、キャリブレーションを行う場合、被験者の手首に近い前腕部に第一検出センサ21や第二検出センサ22を有するプレート23を取り付けるとともに、手指の各骨にも加速度センサやジャイロセンサ、地磁気センサからなる第二検出部3を取り付ける。このとき、手指にセンサを取り付ける場合、図8に示すように、DIP関節やPIP関節を中心としてそれぞれ等しい距離にセンサを取り付けるとともに、末節骨については、末節骨の中央にセンサを取り付ける。そして、このようにセンサを取り付けた状態で、手指や前腕部を静止させ、各センサから重力加速度を検出して初期姿勢を算出する(ステップS1)。
次に、各センサが取り付けられている部分の部位長さやその部位の長手方向ベクトル、回転中心などを算出すべく、まず、被験者に肘を中心として前腕部を上下方向や左右方向の2方向に動かしてもらい、第一検出部2のセンサから回転加速度を算出し、数5〜数7を用いてそのセンサから肘までの位置ベクトル(図7の遠位側ベクトル)を算出する(ステップS2)。
また、今度は逆に、その被験者に手首を中心として前腕部を上下方向や左右方向に動かしてもらい、第一検出部2のセンサから回転加速度を算出して、同様に、そのセンサから手首までの位置ベクトル(図7の近位側ベクトル)を算出する(ステップS3)。
そして、このように算出された肘までの位置ベクトルや手首までの位置ベクトルを用いて、前腕部の長さやその部位の長手方向ベクトル(図7の部位の長手方向ベクトルVB)、回転中心などを算出する(ステップS4)。
次に、手指についても部位長さやその部位の長手方向ベクトル、回転中心などを算出すべく、MP関節を中心として真っ直ぐに伸ばした状態の指を上下方向や左右方向に動かしてもらい、回転加速度を算出する。そして、同様に、数5〜数7を用いて、各センサからMP関節までの位置ベクトルを算出する(ステップS5)。
そして、その算出された位置ベクトルと、図8に示すような各センサの取り付け位置の関係から、各指の部位長さやその部位の長手方向ベクトル(VD、VM、VP)、回転中心などを算出する(ステップS6)。
このように部位長さやその部位の長手方向ベクトル、回転中心が算出された状態で、被験者の動作に基づく前腕部や手指の姿勢および動作状態を解析する場合、まず、ステップS1と同様に初期姿勢を推定した後(ステップT1)に、第一検出部2で加速度や角速度を検出し(ステップT2)、前腕部の運動状態を図4に従って判断する(ステップT3)。そして、前腕部の回転中心や部位長さ、部位の長手方向ベクトルと、この検出された加速度や角速度とから手首における姿勢位置や速度、加速度などの運動状態を計算し、肘を中心とする回転運動や回内/回外運動である場合は、その回転中心を軸とする角速度に部位長さを積算して手首位置における姿勢や運動状態を算出する。また、前腕部が並進運動である場合は、加速度から手首位置における速度などを算出する(ステップT4)。
次に、手指に設けられた第二検出部3のセンサから加速度や角速度を検出し(ステップT5)、手指の姿勢や運動状態を計算する(ステップT6)。このとき、各指の部位長さや部位の長手方向ベクトル、回転中心をもとに加速度や角速度を考慮して、それぞれの回転中心に加速度や角速度を積算し、そのセンサが取り付けられている部位の姿勢位置や速度、加速度、回転速度などを算出する。なお、このような検出時においてジャイロセンサで角速度を検出する場合、適宜重力加速度および地磁気を用いて誤差を修正していく。
このように手指を動作させている際に前腕部が動いている場合は、その前腕部の動作を除去する必要があるため、先に求めた手首の位置や速度、加速度などの姿勢や運動状態を除去し(ステップT7)、手指のみによる姿勢や運動状態を抽出する。
そして、このようにして第一検出部2で前腕部の姿勢や運動状態を抽出するとともに、第二検出部3で手指の姿勢や運動状態を判断し、第一検出部2の検出結果を除去することで、手指のみによる姿勢や運動状態を抽出する(ステップT8)。
このように上記実施の形態によれば、被験者の前腕部に取り付けられ、加速度および角速度を検出する第一検出センサ21と、この第一検出センサ21に対して前腕部の長手方向の離れた位置に取り付けられ、加速度および角速度を検出する第二検出センサ22と、これらの第一検出センサ21と第二検出センサ22によって検出された加速度および角速度から、動作の回転中心を算出して、前腕部の姿勢および運動状態(速度、加速度、回転速度など)を算出する算出部4とを設けるようにしたので、肘を中心とした回転運動であるのか、前腕部を並進させた運動であるのかなどを判断することができるようになる。これにより、この前腕部の運動状態を把握することで、手指のみの運動状態を正確に判断することができるようになる。
また、第一検出センサ21および第二検出センサ22に、さらに、地磁気センサを取り付けるようにしたので、地磁気センサの検出値によって初期状態からの運動を解析することができるとともに、ジャイロセンサによって生じる誤差をその重力加速度および地磁気を用いて修正することができるようになる。
さらに、第一検出センサ21および第二検出センサ22を、一枚のプレート23に取り付けるようにしたので、第一検出センサ21と第二検出センサ22の位置関係を固定することができるため、肘を中心とした回転運動や前腕部の並進運動などを正確に判断することができるようになる。
加えて、手指に加速度および角速度を検出するセンサを設けるとともに、これらのセンサによって検出された加速度および角速度から、手指の姿勢および運動状態を第二算出部41で算出し、この第二算出部41で算出された値から前記算出部4で算出された前腕部の姿勢および運動状態を除外して手足の姿勢および運動状態を修正するようにしたので、前腕部の動きを除外して、手指のみの運動を抽出して解析することができるようになる。
なお、本発明は上記実施の形態に限定されることなく種々の態様で実施することができる。
例えば、上記実施の形態では、前腕部に二つの検出センサを設けて手首の姿勢や動作状態を検出する場合について説明したが、上腕部にも同様に複数の検出センサを設け、上腕部の姿勢や運動状態を検出し、その後、前腕部の姿勢や運動状態を検出して上腕部の運動状態などを除去するようにしていってもよい。
また、これらの構成については脚部や足についても同様に適用することができ、下腿部や上腿部に同様の検出センサを複数取り付け、身体に近い側からの運動を計算してその運動状態を除去するようにしていってもよい。
さらに、上記実施の形態では、前腕部や手指の姿勢や運動状態のみを検出する場合について説明したが、指先に力覚センサを取り付けて、その力覚センサからの出力値とともに手指や前腕部の動作なども出力するようにしてもよい。
1・・・姿勢動作検出装置
2・・・第一検出部
21・・・第一検出センサ
22・・・第二検出センサ
23・・・プレート
3・・・第二検出部
4・・・算出部
41・・・第二算出部

Claims (4)

  1. 前腕部、上腕部、下腿部、上腿部のいずれかに取り付けられ、加速度および角速度を検出する第一検出センサと、
    当該第一検出センサに対して前腕部、上腕部、下腿部、上腿部の長手方向の離れた位置に取り付けられ、加速度および角速度を検出する第二検出センサと、
    前記第一検出センサと第二検出センサによって検出された加速度および角速度から、動作の回転中心を算出して、前腕部、上腕部、下腿部、上腿部の姿勢および運動状態を算出する算出部と、
    を備えたことを特徴とする姿勢動作検出装置。
  2. 前記第一検出センサおよび第二検出センサに、さらに、地磁気センサを取り付けた請求項1に記載の姿勢動作検出装置。
  3. 前記第一検出センサおよび第二検出センサが、一枚のプレートに取り付けられたものである請求項1に記載の姿勢動作検出装置。
  4. さらに、手の甲や足の甲、各指に加速度および角速度を検出する手足姿勢検出センサを設け、
    当該手足姿勢検出センサで検出された加速度および角速度から、手足の姿勢および運動状態を第二算出部で算出し、
    当該算出された値から前記算出部で算出された前腕部、上腕部、下腿部、上腿部の姿勢および運動状態を除外して手足の姿勢および運動状態を修正するようにした請求項1に記載の姿勢動作検出装置。
JP2015257303A 2015-12-28 2015-12-28 姿勢動作検出装置 Active JP6663219B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015257303A JP6663219B2 (ja) 2015-12-28 2015-12-28 姿勢動作検出装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015257303A JP6663219B2 (ja) 2015-12-28 2015-12-28 姿勢動作検出装置

Publications (2)

Publication Number Publication Date
JP2017120575A true JP2017120575A (ja) 2017-07-06
JP6663219B2 JP6663219B2 (ja) 2020-03-11

Family

ID=59272041

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015257303A Active JP6663219B2 (ja) 2015-12-28 2015-12-28 姿勢動作検出装置

Country Status (1)

Country Link
JP (1) JP6663219B2 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020049847A1 (ja) * 2018-09-06 2020-03-12 株式会社ソニー・インタラクティブエンタテインメント 推定装置、学習装置、推定方法、学習方法及びプログラム
WO2020085537A1 (ko) * 2018-10-25 2020-04-30 (주)리얼감 동작인식 디바이스 및 이를 이용한 동작인식 방법
WO2020085538A1 (ko) * 2018-10-25 2020-04-30 (주)리얼감 동작인식 시스템 및 이를 이용한 동작인식 방법
JPWO2020250377A1 (ja) * 2019-06-13 2020-12-17

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000132305A (ja) * 1998-10-23 2000-05-12 Olympus Optical Co Ltd 操作入力装置
JP2004264060A (ja) * 2003-02-14 2004-09-24 Akebono Brake Ind Co Ltd 姿勢の検出装置における誤差補正方法及びそれを利用した動作計測装置
JP2008289866A (ja) * 2007-03-15 2008-12-04 Xsens Technologies Bv 較正ユニットを使った動作追跡のためのシステムと方法
JP2011092274A (ja) * 2009-10-27 2011-05-12 Sumitomo Precision Prod Co Ltd 検出装置
JP2013011979A (ja) * 2011-06-28 2013-01-17 Jvc Kenwood Corp 動作指示装置、動作指示システム、動作指示方法、及びプログラム
JP2015077362A (ja) * 2013-10-18 2015-04-23 国立大学法人名古屋大学 計測装置、装着式動作補助装置およびその創傷リスク評価方法
WO2015100333A1 (en) * 2013-12-24 2015-07-02 Polyera Corporation Support structures for an attachable, two-dimensional flexible electronic device
WO2015135981A1 (en) * 2014-03-12 2015-09-17 Movotec A/S System, apparatus and method for measurement of muscle stiffness

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000132305A (ja) * 1998-10-23 2000-05-12 Olympus Optical Co Ltd 操作入力装置
JP2004264060A (ja) * 2003-02-14 2004-09-24 Akebono Brake Ind Co Ltd 姿勢の検出装置における誤差補正方法及びそれを利用した動作計測装置
JP2008289866A (ja) * 2007-03-15 2008-12-04 Xsens Technologies Bv 較正ユニットを使った動作追跡のためのシステムと方法
JP2011092274A (ja) * 2009-10-27 2011-05-12 Sumitomo Precision Prod Co Ltd 検出装置
JP2013011979A (ja) * 2011-06-28 2013-01-17 Jvc Kenwood Corp 動作指示装置、動作指示システム、動作指示方法、及びプログラム
JP2015077362A (ja) * 2013-10-18 2015-04-23 国立大学法人名古屋大学 計測装置、装着式動作補助装置およびその創傷リスク評価方法
WO2015100333A1 (en) * 2013-12-24 2015-07-02 Polyera Corporation Support structures for an attachable, two-dimensional flexible electronic device
WO2015135981A1 (en) * 2014-03-12 2015-09-17 Movotec A/S System, apparatus and method for measurement of muscle stiffness

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020049847A1 (ja) * 2018-09-06 2020-03-12 株式会社ソニー・インタラクティブエンタテインメント 推定装置、学習装置、推定方法、学習方法及びプログラム
JPWO2020049847A1 (ja) * 2018-09-06 2021-08-12 株式会社ソニー・インタラクティブエンタテインメント 推定装置、学習装置、推定方法、学習方法及びプログラム
JP7171745B2 (ja) 2018-09-06 2022-11-15 株式会社ソニー・インタラクティブエンタテインメント 推定装置、学習装置、推定方法、学習方法及びプログラム
US11763464B2 (en) 2018-09-06 2023-09-19 Sony Interactive Entertainment Inc. Estimation apparatus, learning apparatus, estimation method, learning method, and program
WO2020085537A1 (ko) * 2018-10-25 2020-04-30 (주)리얼감 동작인식 디바이스 및 이를 이용한 동작인식 방법
WO2020085538A1 (ko) * 2018-10-25 2020-04-30 (주)리얼감 동작인식 시스템 및 이를 이용한 동작인식 방법
JPWO2020250377A1 (ja) * 2019-06-13 2020-12-17
WO2020250377A1 (ja) * 2019-06-13 2020-12-17 マクセル株式会社 ヘッドマウント情報処理装置およびその制御方法
JP7324843B2 (ja) 2019-06-13 2023-08-10 マクセル株式会社 ヘッドマウント情報処理装置およびその制御方法
US11886629B2 (en) 2019-06-13 2024-01-30 Maxell, Ltd. Head-mounted information processing apparatus and its controlling method

Also Published As

Publication number Publication date
JP6663219B2 (ja) 2020-03-11

Similar Documents

Publication Publication Date Title
Kortier et al. Assessment of hand kinematics using inertial and magnetic sensors
Chang et al. Sensor glove based on novel inertial sensor fusion control algorithm for 3-D real-time hand gestures measurements
CN108268129B (zh) 对动作捕捉手套上的多个传感器进行校准的方法和装置及动作捕捉手套
Du et al. Human–manipulator interface based on multisensory process via Kalman filters
US20190250708A1 (en) Method for tracking hand pose and electronic device thereof
Gunawardane et al. Comparison of hand gesture inputs of leap motion controller & data glove in to a soft finger
Lu et al. A 3-D finger motion measurement system via soft strain sensors for hand rehabilitation
JP6663219B2 (ja) 姿勢動作検出装置
Chen et al. Drift-free and self-aligned IMU-based human gait tracking system with augmented precision and robustness
JP5915112B2 (ja) 状態検出装置、電子機器及びプログラム
JP6927727B2 (ja) ロボットの制御装置
Mohammadi et al. Fingertip force estimation via inertial and magnetic sensors in deformable object manipulation
JP2008135033A (ja) 手姿勢動作検出装置
Lu et al. Measurement of hand joint angle using inertial-based motion capture system
Callejas-Cuervo et al. Capture and analysis of biomechanical signals with inertial and magnetic sensors as support in physical rehabilitation processes
Kitano et al. Hand motion measurement using inertial sensor system and accurate improvement by extended Kalman filter
JP2016206081A (ja) 動作推測装置および動作推測方法
KR20190131417A (ko) 손동작 인식을 이용하여 매크로 기능을 제공하기 위한 장치 및 그 방법
JP2001344053A (ja) 操作入力装置
Wang et al. A sensor glove based on inertial measurement unit for robot teleoperetion
Bennett et al. Motion based acceleration correction for improved sensor orientation estimates
WO2017141573A1 (ja) 演算装置、演算方法及び演算プログラム
JPH11325881A (ja) 関節角の計測方法及びその装置
Widagdo et al. Limb motion tracking with inertial measurement units
Karunarathne et al. A machine-driven process for human limb length estimation using inertial sensors

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20181213

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20181213

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190729

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190904

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190921

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200203

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200214

R150 Certificate of patent or registration of utility model

Ref document number: 6663219

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250