JP3738629B2 - 携帯型電子機器 - Google Patents
携帯型電子機器 Download PDFInfo
- Publication number
- JP3738629B2 JP3738629B2 JP33418999A JP33418999A JP3738629B2 JP 3738629 B2 JP3738629 B2 JP 3738629B2 JP 33418999 A JP33418999 A JP 33418999A JP 33418999 A JP33418999 A JP 33418999A JP 3738629 B2 JP3738629 B2 JP 3738629B2
- Authority
- JP
- Japan
- Prior art keywords
- fingerprint
- sensor
- unit
- fingerprint image
- finger
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Collating Specific Patterns (AREA)
- Image Input (AREA)
Description
【０００１】
【発明の属する技術分野】
この発明は、個人識別機能を有する携帯型電子機器に関するものであり、とくに個人情報として、指紋を検出することにより、個人識別を行うことが可能な携帯型電子機器に関するものである。
【０００２】
【従来の技術】
例えば、図１７は、D.Inglis他、``A Robust、 1.8V 250μW Direct-Contact 500dpi Fingerprint Sensor''、IEEE International Solid-State Circuit Conference、 SA 17.7、 pp284-285、1998に示された、指紋入力センサの原理を示す素子断面図であり、図１８は指紋入力センサの構造を示す図である。
【０００３】
図１７において、９１はセンサ面にあてられた指、９２はセンサ面、９３センサ面９２の下方に位置する複数の感知素子、９４は指紋の凸部分と感知素子との距離、９５は指紋の凹部分と感知素子との距離である。
図１８において、９６は指紋照合センサチップ全体、９７は指紋感知エリアである。
【０００４】
次に動作について説明する。
図１７において、指９１がセンサ面９２にあてられると、感知素子９３と指紋表面との間の距離に応じた静電容量が生じる。
指紋の凸部分と感知素子との距離94は指紋の凹部分と感知素子との距離９５よりも短いため、大きな静電容量を有する。
これら静電容量の値を電気的に読み出すことにより指紋の凹凸を電気信号に変換して取り出す事ができる。
【０００５】
次に、図１８において、感知素子を９６のように二次元アレイ状に並べ、縦横にスキャンすることにより、指紋の感知エリア９７に置かれた指紋の凹凸を画像としてとらえることができる。
【０００６】
【発明が解決しようとする課題】
従来の指紋照合センサは、ワンチップのソリッドステート指紋照合センサとして小型の機器に容易に組み込む事ができるが、全体のサイズの小型化が求められる一方で表示部、操作部の大型化が求められている携帯型電子機器に指紋を検出するための面積を十分に確保することができなかった。
本願発明は上述のような問題を解決するためになされたものであり、携帯型電子機器本来の操作性を損なう事無く指紋照合センサを設けた携帯用電子機器を得ることを目的とする。
【０００７】
【課題を解決するための手段】
この発明に係る携帯型電子機器は、第１の検出面と、第１の検出面の下方に位置し、第１の検出面に指を乗せたとき、第１の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を一次元に配列した第１のライン状センサ、および第２の検出面と、第２の検出面の下方に位置し、第２の検出面に指を乗せたとき、第２の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を第１のライン状センサの感知素子の配列方向とは垂直に一次元に配列した第２のライン状センサを備えたセンサ部と、第１のライン状センサおよび第２のライン状センサ上であって第２のライン状センサの感知素子の配列方向に沿って指を動かすことにより、第１のライン状センサで検出される異なる複数の指紋の凹凸情報を第２のライン状センサで検出される指紋の凹凸情報の変化に基づき繋ぎあわせることにより指紋画像を生成する画像処理部と、前記画像処理部により生成された指紋画像の一部である部分指紋画像と予め用意された指紋画像との一致する部分を調べる指紋照合部、前記指紋照合部により一致する部分が有ると判断された部分指紋画像を記憶する一致度記憶部、前記一致度記憶部に記憶された部分指紋画像を１つの指紋画像となるように合成する一致度合成部、および前記一致度合成部により合成した指紋画像と前記予め用意された指紋画像とが一致するかどうかを判定する照合判定部を有する登録照合部とを備えた指紋照合センサを携帯型電子機器本体に設けたものである。
【０００８】
この発明に係る携帯型電子機器は、第１の検出面と、第１の検出面の下方に位置し、第１の検出面に指を乗せたとき、第１の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を一次元に配列した第１のライン状センサ、および第２の検出面と、第２の検出面の下方に位置し、第２の検出面に指を乗せたとき、第２の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を２次元に配列したアレイ状センサを備えたセンサ部と、第１のライン状センサおよびアレイ状センサ上で指を動かすことにより、第１のライン状センサで検出される異なる複数の指紋の凹凸情報をアレイ状センサで検出される指紋の凹凸情報の変化に基づき繋ぎあわせることにより指紋画像を生成する画像処理部と、前記画像処理部により生成された指紋画像の一部である部分指紋画像と予め用意された指紋画像との一致する部分を調べる指紋照合部、前記指紋照合部により一致する部分が有ると判断された部分指紋画像を記憶する一致度記憶部、前記一致度記憶部に記憶された部分指紋画像を１つの指紋画像となるように合成する一致度合成部、および前記一致度合成部により合成した指紋画像と前記予め用意された指紋画像とが一致するかどうかを判定する照合判定部を有する登録照合部とを備えた指紋照合センサを携帯型電子機器本体に設けたものである。
【００１３】
【発明の実施の形態】
実施の形態１．
図１は実施の形態１の携帯電子機器を示す図である。
携帯型電子機器としては、例えば携帯電話、携帯ＰＣなど種々のものがあるが、ここでは携帯型電子機器として携帯電話を例にし、指紋照合センサを携帯電話に設けたものを例に説明を行う。
図において、２４、２６は携帯型電子機器本体に対応する携帯電話本体であり携帯電話本体２４、２６はそれぞれ例えば液晶画面といった表示画面を有する。
２５、２７は携帯電話本体２４、２６のそれぞれに設けられた指紋照合センサのセンサ部である。
【００１４】
センサ部２５は第１の検出面と、第１の検出面の下方に位置し、第１の検出面に指を乗せたとき、第１の検出面と乗せた指との間の距離に基づき静電容量が変化する感知素子を一次元に配列した第１のライン状センサ、および第２の検出面と、第２の検出面の下方に位置し、第２の検出面に指を乗せたとき、第２の検出面と乗せた指との間の距離に基づき静電容量が変化する感知素子を第１のライン状センサの長手方向と垂直に一次元に配列した第２のライン状センサを備えたものである。
【００１５】
普通人間の指の表面には指紋が形成されており、指紋の凸部は第１の検出面、第２の検出面に接触するものの、指紋の凹部は第１の検出面、第２の検出面には接触しない。
従って、各感知素子を指紋の凹凸の間隔よりも短い間隔で配列すると第１のライン状センサにより第１の検出面上に位置する指紋の凹凸情報の一部を検出することができる。
また第２のライン状センサは、第１のライン状センサ同様、第２の検出面上に位置する指紋の凹凸情報を検出するとともに、第２の検出面上の長手方向に沿って指を動かすことにより検出される指紋の凹凸情報の変化から指の動き（移動速度）を検出する。
【００１６】
センサ部２７は上述した第１のライン状センサ、および第２の検出面と、第２の検出面の下方に位置し、第２の検出面に指を乗せたとき、第２の検出面と乗せた指との間の距離に基づき静電容量が変化する感知素子を２次元に配列したアレイ状センサを備えたものである。
アレイ状センサは、第２の検出面上に位置する指紋の凹凸情報を検出するとともに、第２の検出面上で指を動かすことにより検出される指紋の凹凸情報の変化から指の動き（移動速度、移動する方向）を検出する。
【００１７】
図２は実施の形態1の携帯型電子機器による指紋照合の動作を説明するための図である。
図３は図１（ａ）に示す指紋照合センサの動作を説明するためのブロック図である。
図２において、1は検出の対象となる指であり、この指１の指紋が指紋の登録、照合を行う対象となる。
２は第１のライン状センサに対応するライン状センサである。
３は第２のライン状センサに対応するエンコーダである。
ライン状センサ２、エンコーダ３によりセンサ部２５を構成し、センサ部２５、後述する画像処理部１００、登録指紋データ２００、登録照合部３００により指紋照合センサを構成する。
９はエンコーダで捉えた指の移動速度情報、１０は本指紋照合センサにより最終的に得られる二次元の指紋画像である。
１００は指を動かすことによりライン状センサ２で検出される異なる複数の指紋の凹凸情報を上記エンコーダにより検出された上記指の動きに基づき繋ぎあわせることにより指紋画像を生成する画像処理手段に対応する画像処理部である。
２００は登録指紋データ、３００は画像処理部１００により生成された指紋画像と登録指紋データ２００との一致の度合いを調べることにより指紋の照合を行ったり、画像処理部１００により生成された指紋画像そのものを登録指紋データとして登録する登録照合手段に対応する登録照合部である。
【００１８】
次に図1（ａ）に示す携帯電話における指紋照合の動作について説明する。
ユーザーは指1をエンコーダ３上であって、その長手方向に沿う方向に動かすと同時に、指１を一次元のライン状センサ2上でスライドさせる。
このとき、一次元のライン状センサ2においては、一定間隔の時間毎（例えば内部クロックの周期毎）に一次元のライン状センサ2上に位置する指紋の凹凸情報である指紋画像の一部（指紋画像情報と称す）が取り込まれる。
同時にエンコーダ３では、一次元のライン状センサ2の指紋情報の取り込みサイクルに同期して指紋画像情報を検出するとともに、指紋画像情報の変化を計算することにより指の移動速度を計測し、移動速度情報９を得る。
【００１９】
図２（ｃ）において、一次元のライン状センサ２は、その長手方向と直交する方向にスライドさせた指から指紋画像情報を時系列的に取り込み、エンコーダ３はスライドさせた指の速度情報を時系列的に取り込む。
画像処理手段１００は、エンコーダで捉えた指の移動速度情報９を用いて、一次元のライン状センサ２で捉えた時系列的な指紋画像情報１０を重ね合わせ、二次元の指紋画像を再構成する。
図３において、９はエンコーダで捉えた指の移動速度情報、２２は一次元のライン状センサ２でとらえた指紋画像情報１０を時系列に配列した指紋画像情報列、２３は指紋画像情報列２２の各指紋画像情報１０を移動速度情報９に基づき繋ぎ合わせることにより得られる指紋画像である。
【００２０】
画像処理部１００は図２(d)において、一次元のライン状センサ２でとらえた時系列の指紋画像情報１０はエンコーダで捉えた指の動き、移動速度情報９に基づいた間隔で、この図では縦方向にあたる時間方向に並べられる。
一方隣り合う指紋画像情報１０において移動速度情報９が大きいものに対しては、近傍の情報を用いて平均値計算によって画素を補間した指紋画像情報を生成した後、この指紋画像情報を該当する指紋画像情報の間に入れて繋ぎ合わせることにより、最終的に二次元の指紋画像２３を再構成する。
【００２１】
得られた指紋画像２３登録照合部３００により予め用意された指紋登録データ２００に登録された指紋画像との一致の度合いを調べることにより指紋の照合が行われる。
指紋の照合が行われ、指紋登録データ２００に登録された指紋画像と一致すると判断すると、所定の操作が行われるようにし、そうでない場合は携帯電話の機能を使えなくするまたは携帯電話の一部の機能のみ使えるように構成すれば、装置のセキュリティを高くすることができる。
【００２２】
図１の携帯電話では、センサ部２５に一次元のライン状センサ２を用いることにより、長手方向に限っては二次元のアレイ状センサよりもはるかに低いコストでより分解能が高いものを構成することができる。
更に一次元のライン状センサ２の面積は指の面積（特に指紋の面積）よりも十分小さいので、実装面積も大きく削減することができる。
本実施の形態の携帯型電子機器は限られた実装面積の中で、機器本来の使用の簡便性を損なう事無く、指紋照合センサを実装することを可能にする。
【００２３】
ここではエンコーダは一次元のライン状指紋照合センサと同一構造のライン状センサを指紋照合センサの長手方向と直交する方向にＴ字型に設置する方法で実現しているが、これ以外にも十字型に設置する、あるいはＬ字型に設置する等、様々な方法による実現が可能である（図示せず）。
【００２４】
例えば、ライン状センサ２、エンコーダ３の取り込みサイクルを１／１００００００（ｓｅｃ）とし、指のスライドの速度を１５（ｍｍ／ｓｅｃ）とすると、１サイクルで１５×１０００／１００００００＝０．０１５（μｍ）動く。
通常大人の指紋を捉えるための二次元アレイ状センサの必要分解能は５０（μｍ）と言われているため、十分に所望の分解能を実現することができる。また分解能に余裕があるために、指の動く速さの不均一さを補正するための、例えば平滑化等の処理を精度良く行うことができる。
このような手法により、二次元のアレイ状センサよりもはるかに低いコストでより分解能が高いものを構成することができる。
【００２５】
図4は図１（ｂ）に示す携帯型電子機器の動作を説明するための図である。
図４（ａ）、（ｂ）は指をなぞるときの動作をそれぞれ横方向、上方向から見たときの図である。
図４（ｃ）、（ｄ）は指紋照合センサにより指紋画像が得られる動作を説明するための図である。
図４において、１１は検出の対象となる指であり、この指１１の指紋が指紋の照合、登録を行う対象となる。
１２は第１のライン状センサに対応するライン状センサである。
１３はアレイ状センサに対応するエンコーダである。
エンコーダ１３は指の動き（特に動く方向、移動速度）を検出するものである。
２１はエンコーダ１３で捉えた指の動き（指の動く速度に対応する移動速度情報、指の移動方向情報）を有する移動情報である。
一次元のライン状センサ１２、エンコーダ１３によりセンサ部３０を構成し、センサ部３０、画像処理部１００、登録指紋データ２００、登録照合部３００により指紋照合センサを構成する。この場合において画像処理部１００はエンコーダ１３により得られる指の動き（特に動く方向、移動速度）に基づき一次元のライン状センサ１２より得られる指紋画像情報２０を繋ぎ合わせるものである。
２３は指紋照合センサにより得られる指紋画像である。
【００２６】
次に動作について説明する。
図４（ａ）、（ｂ）において、ユーザーは指１１を一次元のライン状センサ１２上で、一次元のライン状センサ１２と略直交する方向にスライドさせながら指紋画像を取り込む。その際にエンコーダ１３は一次元のライン状センサ１２の指紋画像情報の取り込みサイクルに同期して指紋画像情報を取り込みながら、取り込んだ情報の変化を計測することにより指の移動速度、移動する方向を計測する。
【００２７】
図４（ｃ）において、一次元のライン状センサ１２は、その長手方向と略直交する方向にスライドさせた指から指紋情報を時系列的に取り込み、エンコーダ１３はスライドさせた指の速度情報と移動方向情報を時系列的に取り込む。
図４（ｄ）において画像処理手段１００は、エンコーダ１３で捉えた指の移動情報１９を用いて、一次元のライン状センサ１２で捉えた時系列的な指紋の凹凸情報である指紋画像情報２０を繋ぎ合わせ、指紋画像を再構成する。
【００２８】
エンコーダ１３で指の移動速度情報だけでなく、移動方向情報も捉える事ができる場合は、指のスライドと直交する方向、この図では横方向のずれを考慮し、隣り合う指紋画像情報２０を紙面左右方向にずらしながら、近傍の情報を用いて平均値計算によって画素を補間し、最終的に二次元の指紋画像２３を再構成する。
エンコーダ１３は感知素子を二次元のアレイ状に設けているので、例えば指をスライドさせる際にスライド方向から左右へずれが生じた場合でも、そのずれを考慮して二次元の指紋画像を再構成することが可能である。
【００２９】
このように、本発明に係わる携帯型電子機器は、実装面積の中で、機器本来の使用の簡便性を損なう事無く、指紋照合センサを実装することが可能となる。
【００３０】
図５は本実施の形態の携帯型電子機器を説明するための図であり、より具体的には図５（ａ）は二次元アレイ状センサ部を有する指紋照合センサを携帯電話に搭載したものを示す図であり、図５（ｂ）は指紋照合センサの動作を説明するためのブロック図である。
【００３１】
図において、３０は携帯電話本体２９のそれぞれに設けられた指紋照合センサのセンサ部である。
センサ部３０は第１の検出面と、第１の検出面の下方に位置し、第１の検出面に指を乗せたとき、第１の検出面と乗せた指との間の距離に基づき静電容量が変化する感知素子を２次元に配列したアレイ状センサであり、センサ部３０の第１の検出面は一度に必要な指紋画像の取り込みを行うことのできる程度の面積を有している。
センサ部３０は例えば、携帯電話本体の表示画面と入力ボタンとの間に配置されている。
図５（ａ）においてに示すように、指紋を検出するセンサ部３０に対応する二次元アレイ状センサ２５を携帯電話本体に設けてもよい。
二次元アレイ状センサ２５は指をその上に乗せることにより、感知素子により検出される静電容量の変化を画像処理部１００により指紋画像に変換するものである。
このように構成することにより、上述に説明したように指紋の凹凸情報を繋ぎ合わせる処理が必要なくなるため、正確な指紋画像を一度に取り込むことができる。
【００３２】
図５においては、二次元アレイ状センサを構成する感知素子は例えば５０（μm）ピッチで縦に３００個、横に３００個配置されるため、感知領域だけで理論的には１５×１５（mm2）の実装面積を必要とする。実際には素子のモールド部分や信号取り出し線の面積も含めて２０×２０（mm2）程度の大きさになる。
なお、図１（ａ）、図１（ｂ）においては前述の通常二次元アレイ状センサと比して、半分以下の面積でセンサ部２５、２７を実装する事が可能である。
【００３３】
実施の形態２．
実施の形態２の携帯型電子機器は、センサ部を携帯型電子機器の表示画面の一部に設けたことを特徴とするものである。
図６は実施の形態２の携帯型電子機器を示す図である。
図において、３２、３５、３８は携帯型電子機器本体に対応する携帯電話本体であり、携帯電話本体３２、３５、３８のそれぞれは表示画面を有する表示器を備え、表示画面を構成する透明電極の一部は表示画面表面に指を乗せたとき、表示画面と乗せた指との間の距離に基づき静電容量が変化するものであって、これを一次元のライン状に並べたもの、またはアレイ状に並べたものである。
【００３４】
図６（ａ）では表示画面と乗せた指との間の距離に基づき静電容量が変化する透明電極を一次元のライン状に並べたものが２つ有り、それぞれ長手方向が直交し、一方をライン状センサ、他方をエンコーダとしたセンサ部３３設けたものである。
図６（ｂ）では表示画面と乗せた指との間の距離に基づき静電容量が変化する透明電極を一次元のライン状に並べたものと、アレイ状に並べたものがあり、一次元のライン状に並べたものをライン状センサ、アレイ状に並べたものをエンコーダとしたセンサ部３５を設けたものである。
図６（ｂ）では表示画面と乗せた指との間の距離に基づき静電容量が変化する透明電極をアレイ状に並べたものをセンサ部３９としたものである。
【００３５】
３３は表示画面上に一体形成された二次元のアレイ状センサ、３６は表示画面上に一体形成された一次元のライン状センサと一次元のライン状エンコーダ、３９は表示画面上に一体形成された、一次元のライン状センサと二次元の小型エンコーダである。
このように表示画面の一部をセンサ部とすることにより、表示画面とは別にセンサ部を設ける必要が無くなるため、指紋照合センサを有する携帯電話の小型化に寄与する。
【００３６】
実施の形態３．
図７は実施の形態３の携帯電子機器を示す図である。
図７において、４１は指紋照合センサを搭載する携帯電話本体、４２は表示画面上に形成されたライン状センサとエンコーダとを有するセンサ部、４３は表示画面上に一体形成された携帯型電子機器本体の入力ボタン（この例では携帯電話の入力ボタン）である。
４５は指紋照合センサを搭載する携帯電話本体、４６は表示画面上に一体形成された、一次元のライン状センサ、アレイ状のエンコーダを有するセンサ部、４７は表示画面上に一体形成された携帯型電子機器本体の入力ボタン（この例では携帯電話の入力ボタン）である。
４９は指紋照合センサを搭載する携帯電話本体、５０は表示画面上に一体形成されたライン状センサ、エンコーダを有するセンサ部、５１は表示画面上に一体形成された携帯型電子機器本体の入力ボタン（この例では携帯電話の入力ボタン）である。
【００３７】
このように、本実施の形態の携帯型電子機器は、センサ部を含め、入力ボタン等の入力インターフェースを表示インターフェースと一体化して構成することにより、携帯電話の筐体が入出力兼用インターフェースとすることが可能となるとともに、表示画面の一部または全部を二次元アレイ状センサ、一次元のライン状センサ、エンコーダとすることにより、これらを設けるための容積を必要としないので、指紋照合センサを搭載する携帯電話をより小型にすることができる。
このように、本発明に係わる携帯型電子機器は、限られた実装面積の中で、機器本来の使用の簡便性を損なう事無く、指紋照合センサを実装することを可能にする。
【００３８】
実施の形態４．
図８は実施の形態４の携帯型電子機器を示す図である。
図８において５３、５５は携帯型電子機器に対応する携帯電話本体である。
５４、５６は一次元のライン状センサと、一次元のライン状のエンコーダとを備えたセンサ部であり、センサ部５４、５６それぞれ携帯電話本体５３、５５の側面に設けられている。
【００３９】
センサ部５４は一次元のライン状センサと、一次元のライン状のエンコーダで組み合わされており、エンコーダの長手方向と携帯電話本体の側面の長手方向が同じであり、エンコーダの長手方向に指をスライドさせることにより指紋情報を入力するため、エンコーダの長さを十分に確保する事ができるので、エンコーダによる検出精度を高くすることができる。
一方、センサ部５６は一次元のライン状センサと、エンコーダで組み合わされており、一次元のライン状センサの長手方向と携帯電話本体の側面の長手方向が同じであり、エンコーダの長手方向に指をスライドさせることにより指紋情報を入力するため、一次元のライン状センサの長さを十分に確保する事ができるので、一度に取り込むことができる指紋画像情報の大きさを十分に確保することができるので、得られる指紋画像もこれに応じて大きくなり、画像の照合の精度を高くすることが可能となる。
このように、実施の形態の携帯型電子機器は、センサ部を側面に設けたので、限られた実装面積の中で、機器本来の使用の簡便性を損なう事無く、指紋照合センサを実装することを可能にする。
【００４０】
実施の形態５．
図９、１０は本実施の形態の携帯電子機器を示す図である。
図において、５７は指紋照合センサを搭載する携帯電話本体、５８は携帯電話本体５７のバッテリーを備えたバッテリーパック、５９は携帯電話本体５７の背面に設置されたセンサ部である。
６３は携帯電話上の電極端子、６５は携帯電話のバッテリー上の電極端子である。
【００４１】
図において、指紋照合センサを搭載する携帯電話本体５７の背面（つまり携帯電話の入力ボタンが位置する面に対向する面）にはバッテリーパック５８が搭載されている。
指紋照合センサのセンサ部５９をバッテリーパック５８の奥に搭載し、指紋取り込み時はバッテリーパック５８を図９（ｂ）または図１０（ｄ）のようにスライドさせることによりセンサ部５９が表出するように構成している。
【００４２】
このように構成することにより、携帯型電子機器の表面実装面積を省くとともに、普段使用しない指紋照合センサのセンサ部５９を保護し、さらにバッテリーパック５８をスライドさせることにより形成されるすき間を指置きガイドとなる様にすれば、ユーザーはより指紋を取り易くなる。
【００４３】
図９において、携帯電話本体５７の裏面にはバッテリーとの電極端子６３が搭載されている。
また、バッテリーパック５８側にも電極端子６５が搭載されている。
これらの電極端子６３、６５はバッテリーパックのスライドの際にも携帯型電子機器に必要な電力を滞り無く供給するように、長いレール状の構造を持つ。
【００４４】
また、指紋の取り込みを行わない状態には図９（ａ）、図１０（ｃ）に示すようにバッテリーパック５８が携帯電話５７に嵌め合わされた状態になっている。
指紋の取り込みを行うときには、図９（ｂ）、図１０（ｄ）に示すようにセンサ部５９が表出する程度までバッテリーパック５７をスライドさせる。
この状態において、電極端子６３と電極端子６５とは互いに接触した状態となるように予め設計されており、携帯電話５７には必要な電力が供給される。
また、バッテリー交換時には、図１０（ｅ）に示すようにバッテリーパック５７を携帯電話５７から取り外せばよい。
本実施の形態の携帯型電子機器は上述のように構成されているので、限られた実装面積の中で、機器本来の使用の簡便性を損なう事無く、指紋照合センサを実装することを可能にする。
【００４５】
実施の形態６．
図１１〜図１４は本実施の形態の携帯型電子機器を説明するための図である。
本実施の形態の携帯型電子機器の指紋照合センサは指の位置、移動方向、移動速度、移動量、設置面積、設置面積の変化率等を計測し、計測した情報に基づき所定の動作を行うように構成したものである。
図において、７５は指紋を取り込むユーザーの指、７６は指紋照合センサのセンサ部であり、センサ部７６は2次元のアレイ状センサとしたものである。
７７はセンサ部７６の感知範囲領域、７８はセンサ部７６により取り込まれた二次元の指紋画像である。
【００４６】
７９は指紋を取り込むユーザーの指、８０は指紋照合センサのセンサ部であり、センサ部８０は２次元アレイ状センサである。
８２は感知範囲領域７６に置かれた指の画像である。
８６は感知範囲領域７６に置かれた指の画像である。
９０は感知範囲領域７６に置かれた指の画像である。
【００４７】
次に動作について説明する。
図１１（ａ）において、ユーザーは指紋を取り込むために指７５をセンサ部７６に置く。
センサ部はその感知範囲領域７７全体に置かれた指紋画像を取り込み、図１１（ｂ）に示すように二次元の指紋画像７８を得る。
【００４８】
図１２（ａ）において、ユーザーはボタンの代わりに指７９を立ててセンサ部８０に置く。
センサ部７６はその感知範囲領域７７全体で指紋画像を取り込み、図１２（ｂ）に示すような二次元の画像８２を得て、指の置かれた位置を求め、その位置のボタンが押された事に相当する応答を行う。
【００４９】
図１３（ａ）に示すように、ユーザーはカーソルスクロールポインタの代わりに指８３を立ててセンサ部７６に置き、センサ部の感知領域範囲内７７内の所定の方向に移動させる。
センサ部７６はその感知範囲領域７７全体で指紋画像を取り込み、図１３（ｂ）に示すように時系列的に二次元の画像８６を得て、指の移動した方向、速度を求め、カーソルスクロールやメニュースクロールが行われた事に相当する応答を行う。
【００５０】
図１４（ａ）において、ユーザーはパソコンで使われるマウスボタンの代わりに指８７を立てて指紋照合センサ８８を軽く叩く。
指紋照合センサはその感知範囲領域７７全体で指紋画像を取り込み、図１４（ｂ）に示すように二次元の画像９０を得て、指の置かれた位置と面積の変化または変化率に基づいてボタンがクリック押された事に相当する応答を行う。
【００５１】
このように、通常の指紋取画像の取得モードでは、指紋の取得を行う。
一方指紋照合センサを通常の指紋取得以外の目的、例えば上述の動作を検知し、検知すれば、これに携帯電子機器の機能の一部を行わせるための動作に対応づけることにより、携帯型電子機器の使い勝手をよくするインターフェースとして使う事もできる。
このように、本発明に係わる携帯型電子機器は、指紋照合センサを指紋入力デバイスだけではなく、例えばメニュースクロールやカーソルの移動等のポインティングデバイス、ボタンのオンオフ等に用いることにより、携帯型電子機器使用上の簡便な入力インターフェースとして用いることを可能にする。
【００５２】
実施の形態７．
本実施の形態の携帯型電子機器は、センサ部により一度に取り込むことができる指紋画像が小さい場合（例えば指紋画像を取り込むライン状センサの長手方向の長さが小さい場合、またはアレイ状センサの面積が小さい場合など）であっても、指紋の照合を正確に行えるようにしたことを特徴とする。
図１５は本実施の形態の携帯型電子機器を説明するための図であり、具体的には登録照合部３００のより具体的な構成を説明するための図である。
図において、３０１は画像処理部１００により得られた指紋の一部分の画像である部分指紋画像が登録された指紋画像（登録指紋データ２００）との一致する部分を調べる指紋照合部、３０２は指紋照合部３０１により一致すると判断された部分指紋画像を記憶する一致度記憶部、３０３は一致度記憶部３０２により記憶された部分指紋画像を合成しより１つの指紋画像を生成する一致度合成部、３０４は合成した指紋画像と登録指紋データ２００との一致の度合いを調べることによりセンサ部より取り込んだ画像と、登録指紋データ２００とが一致するかごうかを判定する照合判定部である。
図において、ユーザーは携帯型電子機器の操作において本人の認証を要求されると、センサ部から照合用の指紋を複数回取り込み、それぞれについて画像処理部１００により部分指紋画像を生成した後、指紋照合部３００において、登録指紋データ２００と一致する部分を調べ、一致する部分が有るものは一致度記憶部３０２へ送り、一致する部分が無いものは破棄する。
【００５３】
一致度記憶部３０２は指紋照合部３０１より送られる画像を記憶するとともに、これを一致度合成部３０３へ送る。
一致度合成部３０３は一致する部分がある部分指紋画像を合成し、１つの指紋画像を生成し、これを照合判定部３０４へ送る。
照合判定部３０４は一致度合成部３０３により生成した生成した指紋画像と登録指紋データ２００との一致の度合いを調べ、判定を行う。
このように構成することにより、センサ部より一度に取り込まれる指紋画像が小さなものであっても、指紋の取り込む個所を変えて取り込んだ後に、一致するものを合成しこれを比較することによりセンサ部において取り込むことができる指紋画像が小さなものであっても正確に指紋の照合を行うことが可能となるため小型でかつ照合精度の高い携帯型電子機器を得ることができる。
また複数回の指紋入力においてもなお本人認証が不可能と判定された場合は、指紋の入力を促す命令を携帯型電子機器の表示画面に表示し、これにより更に得られた部分指紋画像と、これまでにより得られた部分指紋画像とを用い照合を行えばより。
【００５４】
次により具体的な指紋照合動作について図１６を用いて説明する。
図１６は本実施の形態の携帯型電子機器を説明するための図であり、具体的には図１５に示す登録照合部３００の動作を説明するための図である。
図において４０１〜４０６はセンサ部より取り込み、画像処理部１００により生成された部分指紋画像である。
４１１〜４１６は部分指紋画像４０１〜４０６のそれぞれと登録指紋データ２００との一致する部分を示す画像であり、４０１ａ〜４０６ａは画像４０１〜４０６のそれぞれと登録指紋データ２００との一致する部分である。
【００５５】
４２０は部分指紋画像４０１〜４０６のすべてと登録指紋データ２００との一致する部分を示す指紋画像であり、指紋画像４２０は一致度合成部３０３により合成された指紋画像である。
図において、記憶されている登録指紋データ２００と第一回目に入力された部分指紋画像４０１との間で位置、回転、伸び縮み等を試行錯誤的に変化させながら、最適な適合位置合わせを行い、第一回目の照合結果である画像４１１（一致する部分４１１ａ）を得るとともに、これを一致度記憶部３０２に記憶する。
【００５６】
以後同様の操作を繰り返すことにより、第二回目〜第四回目の照合結果である画像４０２〜４０４（一致する部分４１２ａ〜４１４ａ）を得るとともに、これを一致度記憶部３０２に記憶する。
記憶されている登録指紋データ２００と第五回目に入力された部分指紋画像４０５との間で位置、回転、伸び縮み等を試行錯誤的に変化させながら、最適な適合位置合わせを行ったものの、指紋登録データ２００との一致の度合いが一定の閾値よりも小さいため、部分指紋画像４０５は破棄される。
【００５７】
記憶されている登録指紋データ２００と第六回目に入力された部分指紋画像４０６との間で位置、回転、伸び縮み等を試行錯誤的に変化させながら、最適な適合位置合わせを行い、第一回目の照合結果である画像４１６（一致する部分４１６ａ）を得るとともに、これを一致度記憶部３０２に記憶する。
【００５８】
各照合結果のうち、一致の度合いが一定の閾値よりも大きなものが一致度記憶部３０２に記憶され、一致度合成部３０３により合成された結果、指紋画像４２０（一致する部分を合成したのは指紋画像４２０ａ）が生成される。
この指紋画像４２０と、登録画像データとを照合判定部３０４により判定を行うことにより、個々の小さな画像の局所的な一致の度合いを調べるのではなく、合成したより大きな指紋画像４２０ａと登録指紋データ２００との一致の度合いを調べることにより、大域的な指紋画像の判定を行うことが可能となるため、一度に取り込める指紋画像が小さなものであっても照合の精度を高くすることができる。
【００５９】
なお、照合判定部３０４の判定には種々のものあるが、例えば部分指紋画像を合成した指紋画像４２０ａがカバーできる領域が登録されている指紋画像（登録指紋データ２００）の領域に対して一定以上の割合になっており、かつ合成に採用された部分指紋画像と登録指紋の一致度の平均がある一定閾値よりも高ければ、個人承認が行われたものなるように構成すればよい。
【００６０】
また、指紋画像４２０ａと登録指紋データ２００との一致する部分の照合は、部分指紋画像中の各画素の輝度値の差の絶対値を合計した値が小さいほど一致度が高いという評価を用いる方法がある。
または例えば、指紋画像４２０ａと登録指紋データ２００との照合は、指紋画像４２０ａ中の指紋隆線の端点、分岐点という特徴点を抽出し、それらの点の位置関係の近いものから順に対応点の組を見つけ出し、各点の距離の合計が小さいほど一致度が高いという評価を用いる方法がある。
【００６１】
または例えば、指紋画像４２０ａと登録指紋データ２００との照合は、指紋画像４２０ａ中の各小領域における指紋隆線のエッジ方向を抽出し、対応する各小領域における指紋隆線のエッジ方向の差の合計が小さいほど一致度が高いという評価を用いる方法がある。
【００６２】
または例えば、指紋画像４２０ａと登録指紋データ２００との照合は、指紋画像４２０ａ中の各小領域における指紋隆線の周波数（ピッチ）を抽出し、対応する各小領域における指紋隆線の周波数の差の合計が小さいほど一致度が高いという評価を用いる方法がある。
【００６３】
または例えば、指紋画像４２０ａと登録指紋データ２００との照合は、前述の、指紋画像４２０ａ中の各画素の輝度値の差の絶対値の合計、指紋画像４２０ａ中の指紋隆線の端点、分岐点という特徴点の位置関係、指紋隆線のエッジ方向角の差の絶対値の合計、指紋隆線の周波数の差の絶対値の合計、等の評価結果を論理積で合成する方法がある。
【００６４】
または例えば、指紋画像４２０ａと登録指紋データ２００との照合は、前述の、指紋画像４２０ａ中の各画素の輝度値の差の絶対値の合計、指紋画像中４２０ａの指紋隆線の端点、分岐点という特徴点の位置関係、指紋隆線のエッジ方向角の差の絶対値の合計、指紋隆線の周波数の差の絶対値の合計、等の評価結果を論理和で合成する方法がある。
【００６５】
または例えば、指紋画像４２０ａと登録指紋データ２００との照合は、前述の、指紋画像４２０ａ中の各画素の輝度値の差の絶対値の合計、指紋画像４２０ａ中の指紋隆線の端点、分岐点という特徴点の位置関係、指紋隆線のエッジ方向角の差の絶対値の合計、指紋隆線の周波数の差の絶対値の合計、等の評価結果を、十分に多くのサンプルを用いた試行錯誤的学習によって決定した各係数を掛けて、線形的に合成する方法がある。
【００６６】
または例えば、指紋画像４２０ａと登録指紋データ２００との照合は、前述の、指紋画像４２０ａ中の各画素の輝度値の差の絶対値の合計、指紋画像４２０ａ中の指紋隆線の端点、分岐点という特徴点の位置関係、指紋隆線のエッジ方向角の差の絶対値の合計、指紋隆線の周波数の差の絶対値の合計、等の評価結果を、各評価結果を多次元のベクトル空間で合成記述する方法がある。
そして、多次元空間中で十分に多くのサンプルを用いた試行錯誤的学習によって決定した一致、不一致領域のいずれに入るかで判定することができる。
【００６７】
なお、この実施の形態では、登録指紋データ２００が携帯型電子機器の内部にあらかじめ組み込まれている構成について説明をしているがこれに限定される必要はない。
たとえば携帯型電子機器とは別体に設けた登録指紋データを得るために指紋を登録する手段を用いこれを通信手段を有する計算機などに格納し、携帯型電子機器の通信手段を用い必要に応じてとり込むように構成すれば携帯型電子機器の内部に登録指紋データを設ける必要は無くなる。
【００６８】
また、指紋を登録する手段を携帯型電子機器購入時の購入場所やメインテナンスセンター等に設置すれば安全性を確保しつつ、利用者にとって便利に使用することができる。
つまり、指紋を登録する手段は携帯型電子機器とは別体に設けたものであって、指紋全体をカバーするような大型のものを用意し、指紋照合時は携帯型電子機器に実装した小型の指紋センサにより取り込まれた指紋画像が、登録されている指紋画像（登録指紋データ）のどの部分に一致するか、位置、回転、伸び縮み等を考慮しながら、最適な適合位置合わせを行い、指紋の一致度を計算する。
さらにこの指紋入力およびそれに引き続いて行われる指紋の一致度の計算を複数回行い、それぞれの指紋と登録指紋との一致度を合成して最終的なユーザーの承認を行うことにより、照合用の指紋センサを大型化することなく、指紋照合性能を向上させることを可能にとなる。
【００６９】
このように、本発明に係わる携帯型電子機器は、小型の指紋センサを用いて、指紋照合性能を低下させることなく、個人認証を実現することを可能にする。
【００７０】
【発明の効果】
この発明に係る携帯型電子機器によれば、第１の検出面と、第１の検出面の下方に位置し、第１の検出面に指を乗せたとき、第１の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を一次元に配列した第１のライン状センサ、および第２の検出面と、第２の検出面の下方に位置し、第２の検出面に指を乗せたとき、第２の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を第１のライン状センサの感知素子の配列方向とは垂直に一次元に配列した第２のライン状センサを備えたセンサ部と、第１のライン状センサおよび第２のライン状センサ上であって第２のライン状センサの感知素子の配列方向に沿って指を動かすことにより、第１のライン状センサで検出される異なる複数の指紋の凹凸情報を第２のライン状センサで検出される指紋の凹凸情報の変化に基づき繋ぎあわせることにより指紋画像を生成する画像処理部と、前記画像処理部により生成された指紋画像の一部である部分指紋画像と予め用意された指紋画像との一致する部分を調べる指紋照合部、前記指紋照合部により一致する部分が有ると判断された部分指紋画像を記憶する一致度記憶部、前記一致度記憶部に記憶された部分指紋画像を１つの指紋画像となるように合成する一致度合成部、および前記一致度合成部により合成した指紋画像と前記予め用意された指紋画像とが一致するかどうかを判定する照合判定部を有する登録照合部とを備えた指紋照合センサを携帯型電子機器本体に設けたので、異なる複数の部分指紋画像を合成することにより、より大きな指紋画像が得られるため、センサ部により一度に取り込める指紋画像が小さいものであっても、照合の精度を高くすることができる。
【００７１】
この発明に係る携帯型電子機器によれば、第１の検出面と、第１の検出面の下方に位置し、第１の検出面に指を乗せたとき、第１の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を一次元に配列した第１のライン状センサ、および第２の検出面と、第２の検出面の下方に位置し、第２の検出面に指を乗せたとき、第２の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を２次元に配列したアレイ状センサを備えたセンサ部と、第１のライン状センサおよびアレイ状センサ上で指を動かすことにより、第１のライン状センサで検出される異なる複数の指紋の凹凸情報をアレイ状センサで検出される指紋の凹凸情報の変化に基づき繋ぎあわせることにより指紋画像を生成する画像処理部と、前記画像処理部により生成された指紋画像の一部である部分指紋画像と予め用意された指紋画像との一致する部分を調べる指紋照合部、前記指紋照合部により一致する部分が有ると判断された部分指紋画像を記憶する一致度記憶部、前記一致度記憶部に記憶された部分指紋画像を１つの指紋画像となるように合成する一致度合成部、および前記一致度合成部により合成した指紋画像と前記予め用意された指紋画像とが一致するかどうかを判定する照合判定部を有する登録照合部とを備えた指紋照合センサを携帯型電子機器本体に設けたので、異なる複数の部分指紋画像を合成することにより、より大きな指紋画像が得られるため、センサ部により一度に取り込める指紋画像が小さいものであっても、照合の精度を高くすることができる。
【図面の簡単な説明】
【図１】 本実施の形態の携帯型電子機器を説明するための図である。
【図２】 本実施の形態の携帯型電子機器を説明するための図である。
【図３】 本実施の形態の携帯型電子機器を説明するための図である。
【図４】 本実施の形態の携帯型電子機器を説明するための図である。
【図５】 本実施の形態の携帯型電子機器を説明するための図である。
【図６】 本実施の形態の携帯型電子機器を説明するための図である。
【図７】 本実施の形態の携帯型電子機器を説明するための図である。
【図８】 本実施の形態の携帯型電子機器を説明するための図である。
【図９】 本実施の形態の携帯型電子機器を説明するための図である。
【図１０】 本実施の形態の携帯型電子機器を説明するための図である。
【図１１】 本実施の形態の携帯型電子機器を説明するための図である。
【図１２】 本実施の形態の携帯型電子機器を説明するための図である。
【図１３】 本実施の形態の携帯型電子機器を説明するための図である。
【図１４】 本実施の形態の携帯型電子機器を説明するための図である。
【図１５】 本実施の形態の携帯型電子機器を説明するための図である。
【図１６】 本実施の形態の携帯型電子機器を説明するための図である。
【図１７】 従来の形態の携帯型電子機器を説明するための図である。
【図１８】 従来の形態の携帯型電子機器を説明するための図である。
【符号の説明】
1：ユーザーの指
2：ライン状センサ
3：エンコーダ
27：センサ部
26：携帯電話本体
【発明の属する技術分野】
この発明は、個人識別機能を有する携帯型電子機器に関するものであり、とくに個人情報として、指紋を検出することにより、個人識別を行うことが可能な携帯型電子機器に関するものである。
【０００２】
【従来の技術】
例えば、図１７は、D.Inglis他、``A Robust、 1.8V 250μW Direct-Contact 500dpi Fingerprint Sensor''、IEEE International Solid-State Circuit Conference、 SA 17.7、 pp284-285、1998に示された、指紋入力センサの原理を示す素子断面図であり、図１８は指紋入力センサの構造を示す図である。
【０００３】
図１７において、９１はセンサ面にあてられた指、９２はセンサ面、９３センサ面９２の下方に位置する複数の感知素子、９４は指紋の凸部分と感知素子との距離、９５は指紋の凹部分と感知素子との距離である。
図１８において、９６は指紋照合センサチップ全体、９７は指紋感知エリアである。
【０００４】
次に動作について説明する。
図１７において、指９１がセンサ面９２にあてられると、感知素子９３と指紋表面との間の距離に応じた静電容量が生じる。
指紋の凸部分と感知素子との距離94は指紋の凹部分と感知素子との距離９５よりも短いため、大きな静電容量を有する。
これら静電容量の値を電気的に読み出すことにより指紋の凹凸を電気信号に変換して取り出す事ができる。
【０００５】
次に、図１８において、感知素子を９６のように二次元アレイ状に並べ、縦横にスキャンすることにより、指紋の感知エリア９７に置かれた指紋の凹凸を画像としてとらえることができる。
【０００６】
【発明が解決しようとする課題】
従来の指紋照合センサは、ワンチップのソリッドステート指紋照合センサとして小型の機器に容易に組み込む事ができるが、全体のサイズの小型化が求められる一方で表示部、操作部の大型化が求められている携帯型電子機器に指紋を検出するための面積を十分に確保することができなかった。
本願発明は上述のような問題を解決するためになされたものであり、携帯型電子機器本来の操作性を損なう事無く指紋照合センサを設けた携帯用電子機器を得ることを目的とする。
【０００７】
【課題を解決するための手段】
この発明に係る携帯型電子機器は、第１の検出面と、第１の検出面の下方に位置し、第１の検出面に指を乗せたとき、第１の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を一次元に配列した第１のライン状センサ、および第２の検出面と、第２の検出面の下方に位置し、第２の検出面に指を乗せたとき、第２の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を第１のライン状センサの感知素子の配列方向とは垂直に一次元に配列した第２のライン状センサを備えたセンサ部と、第１のライン状センサおよび第２のライン状センサ上であって第２のライン状センサの感知素子の配列方向に沿って指を動かすことにより、第１のライン状センサで検出される異なる複数の指紋の凹凸情報を第２のライン状センサで検出される指紋の凹凸情報の変化に基づき繋ぎあわせることにより指紋画像を生成する画像処理部と、前記画像処理部により生成された指紋画像の一部である部分指紋画像と予め用意された指紋画像との一致する部分を調べる指紋照合部、前記指紋照合部により一致する部分が有ると判断された部分指紋画像を記憶する一致度記憶部、前記一致度記憶部に記憶された部分指紋画像を１つの指紋画像となるように合成する一致度合成部、および前記一致度合成部により合成した指紋画像と前記予め用意された指紋画像とが一致するかどうかを判定する照合判定部を有する登録照合部とを備えた指紋照合センサを携帯型電子機器本体に設けたものである。
【０００８】
この発明に係る携帯型電子機器は、第１の検出面と、第１の検出面の下方に位置し、第１の検出面に指を乗せたとき、第１の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を一次元に配列した第１のライン状センサ、および第２の検出面と、第２の検出面の下方に位置し、第２の検出面に指を乗せたとき、第２の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を２次元に配列したアレイ状センサを備えたセンサ部と、第１のライン状センサおよびアレイ状センサ上で指を動かすことにより、第１のライン状センサで検出される異なる複数の指紋の凹凸情報をアレイ状センサで検出される指紋の凹凸情報の変化に基づき繋ぎあわせることにより指紋画像を生成する画像処理部と、前記画像処理部により生成された指紋画像の一部である部分指紋画像と予め用意された指紋画像との一致する部分を調べる指紋照合部、前記指紋照合部により一致する部分が有ると判断された部分指紋画像を記憶する一致度記憶部、前記一致度記憶部に記憶された部分指紋画像を１つの指紋画像となるように合成する一致度合成部、および前記一致度合成部により合成した指紋画像と前記予め用意された指紋画像とが一致するかどうかを判定する照合判定部を有する登録照合部とを備えた指紋照合センサを携帯型電子機器本体に設けたものである。
【００１３】
【発明の実施の形態】
実施の形態１．
図１は実施の形態１の携帯電子機器を示す図である。
携帯型電子機器としては、例えば携帯電話、携帯ＰＣなど種々のものがあるが、ここでは携帯型電子機器として携帯電話を例にし、指紋照合センサを携帯電話に設けたものを例に説明を行う。
図において、２４、２６は携帯型電子機器本体に対応する携帯電話本体であり携帯電話本体２４、２６はそれぞれ例えば液晶画面といった表示画面を有する。
２５、２７は携帯電話本体２４、２６のそれぞれに設けられた指紋照合センサのセンサ部である。
【００１４】
センサ部２５は第１の検出面と、第１の検出面の下方に位置し、第１の検出面に指を乗せたとき、第１の検出面と乗せた指との間の距離に基づき静電容量が変化する感知素子を一次元に配列した第１のライン状センサ、および第２の検出面と、第２の検出面の下方に位置し、第２の検出面に指を乗せたとき、第２の検出面と乗せた指との間の距離に基づき静電容量が変化する感知素子を第１のライン状センサの長手方向と垂直に一次元に配列した第２のライン状センサを備えたものである。
【００１５】
普通人間の指の表面には指紋が形成されており、指紋の凸部は第１の検出面、第２の検出面に接触するものの、指紋の凹部は第１の検出面、第２の検出面には接触しない。
従って、各感知素子を指紋の凹凸の間隔よりも短い間隔で配列すると第１のライン状センサにより第１の検出面上に位置する指紋の凹凸情報の一部を検出することができる。
また第２のライン状センサは、第１のライン状センサ同様、第２の検出面上に位置する指紋の凹凸情報を検出するとともに、第２の検出面上の長手方向に沿って指を動かすことにより検出される指紋の凹凸情報の変化から指の動き（移動速度）を検出する。
【００１６】
センサ部２７は上述した第１のライン状センサ、および第２の検出面と、第２の検出面の下方に位置し、第２の検出面に指を乗せたとき、第２の検出面と乗せた指との間の距離に基づき静電容量が変化する感知素子を２次元に配列したアレイ状センサを備えたものである。
アレイ状センサは、第２の検出面上に位置する指紋の凹凸情報を検出するとともに、第２の検出面上で指を動かすことにより検出される指紋の凹凸情報の変化から指の動き（移動速度、移動する方向）を検出する。
【００１７】
図２は実施の形態1の携帯型電子機器による指紋照合の動作を説明するための図である。
図３は図１（ａ）に示す指紋照合センサの動作を説明するためのブロック図である。
図２において、1は検出の対象となる指であり、この指１の指紋が指紋の登録、照合を行う対象となる。
２は第１のライン状センサに対応するライン状センサである。
３は第２のライン状センサに対応するエンコーダである。
ライン状センサ２、エンコーダ３によりセンサ部２５を構成し、センサ部２５、後述する画像処理部１００、登録指紋データ２００、登録照合部３００により指紋照合センサを構成する。
９はエンコーダで捉えた指の移動速度情報、１０は本指紋照合センサにより最終的に得られる二次元の指紋画像である。
１００は指を動かすことによりライン状センサ２で検出される異なる複数の指紋の凹凸情報を上記エンコーダにより検出された上記指の動きに基づき繋ぎあわせることにより指紋画像を生成する画像処理手段に対応する画像処理部である。
２００は登録指紋データ、３００は画像処理部１００により生成された指紋画像と登録指紋データ２００との一致の度合いを調べることにより指紋の照合を行ったり、画像処理部１００により生成された指紋画像そのものを登録指紋データとして登録する登録照合手段に対応する登録照合部である。
【００１８】
次に図1（ａ）に示す携帯電話における指紋照合の動作について説明する。
ユーザーは指1をエンコーダ３上であって、その長手方向に沿う方向に動かすと同時に、指１を一次元のライン状センサ2上でスライドさせる。
このとき、一次元のライン状センサ2においては、一定間隔の時間毎（例えば内部クロックの周期毎）に一次元のライン状センサ2上に位置する指紋の凹凸情報である指紋画像の一部（指紋画像情報と称す）が取り込まれる。
同時にエンコーダ３では、一次元のライン状センサ2の指紋情報の取り込みサイクルに同期して指紋画像情報を検出するとともに、指紋画像情報の変化を計算することにより指の移動速度を計測し、移動速度情報９を得る。
【００１９】
図２（ｃ）において、一次元のライン状センサ２は、その長手方向と直交する方向にスライドさせた指から指紋画像情報を時系列的に取り込み、エンコーダ３はスライドさせた指の速度情報を時系列的に取り込む。
画像処理手段１００は、エンコーダで捉えた指の移動速度情報９を用いて、一次元のライン状センサ２で捉えた時系列的な指紋画像情報１０を重ね合わせ、二次元の指紋画像を再構成する。
図３において、９はエンコーダで捉えた指の移動速度情報、２２は一次元のライン状センサ２でとらえた指紋画像情報１０を時系列に配列した指紋画像情報列、２３は指紋画像情報列２２の各指紋画像情報１０を移動速度情報９に基づき繋ぎ合わせることにより得られる指紋画像である。
【００２０】
画像処理部１００は図２(d)において、一次元のライン状センサ２でとらえた時系列の指紋画像情報１０はエンコーダで捉えた指の動き、移動速度情報９に基づいた間隔で、この図では縦方向にあたる時間方向に並べられる。
一方隣り合う指紋画像情報１０において移動速度情報９が大きいものに対しては、近傍の情報を用いて平均値計算によって画素を補間した指紋画像情報を生成した後、この指紋画像情報を該当する指紋画像情報の間に入れて繋ぎ合わせることにより、最終的に二次元の指紋画像２３を再構成する。
【００２１】
得られた指紋画像２３登録照合部３００により予め用意された指紋登録データ２００に登録された指紋画像との一致の度合いを調べることにより指紋の照合が行われる。
指紋の照合が行われ、指紋登録データ２００に登録された指紋画像と一致すると判断すると、所定の操作が行われるようにし、そうでない場合は携帯電話の機能を使えなくするまたは携帯電話の一部の機能のみ使えるように構成すれば、装置のセキュリティを高くすることができる。
【００２２】
図１の携帯電話では、センサ部２５に一次元のライン状センサ２を用いることにより、長手方向に限っては二次元のアレイ状センサよりもはるかに低いコストでより分解能が高いものを構成することができる。
更に一次元のライン状センサ２の面積は指の面積（特に指紋の面積）よりも十分小さいので、実装面積も大きく削減することができる。
本実施の形態の携帯型電子機器は限られた実装面積の中で、機器本来の使用の簡便性を損なう事無く、指紋照合センサを実装することを可能にする。
【００２３】
ここではエンコーダは一次元のライン状指紋照合センサと同一構造のライン状センサを指紋照合センサの長手方向と直交する方向にＴ字型に設置する方法で実現しているが、これ以外にも十字型に設置する、あるいはＬ字型に設置する等、様々な方法による実現が可能である（図示せず）。
【００２４】
例えば、ライン状センサ２、エンコーダ３の取り込みサイクルを１／１００００００（ｓｅｃ）とし、指のスライドの速度を１５（ｍｍ／ｓｅｃ）とすると、１サイクルで１５×１０００／１００００００＝０．０１５（μｍ）動く。
通常大人の指紋を捉えるための二次元アレイ状センサの必要分解能は５０（μｍ）と言われているため、十分に所望の分解能を実現することができる。また分解能に余裕があるために、指の動く速さの不均一さを補正するための、例えば平滑化等の処理を精度良く行うことができる。
このような手法により、二次元のアレイ状センサよりもはるかに低いコストでより分解能が高いものを構成することができる。
【００２５】
図4は図１（ｂ）に示す携帯型電子機器の動作を説明するための図である。
図４（ａ）、（ｂ）は指をなぞるときの動作をそれぞれ横方向、上方向から見たときの図である。
図４（ｃ）、（ｄ）は指紋照合センサにより指紋画像が得られる動作を説明するための図である。
図４において、１１は検出の対象となる指であり、この指１１の指紋が指紋の照合、登録を行う対象となる。
１２は第１のライン状センサに対応するライン状センサである。
１３はアレイ状センサに対応するエンコーダである。
エンコーダ１３は指の動き（特に動く方向、移動速度）を検出するものである。
２１はエンコーダ１３で捉えた指の動き（指の動く速度に対応する移動速度情報、指の移動方向情報）を有する移動情報である。
一次元のライン状センサ１２、エンコーダ１３によりセンサ部３０を構成し、センサ部３０、画像処理部１００、登録指紋データ２００、登録照合部３００により指紋照合センサを構成する。この場合において画像処理部１００はエンコーダ１３により得られる指の動き（特に動く方向、移動速度）に基づき一次元のライン状センサ１２より得られる指紋画像情報２０を繋ぎ合わせるものである。
２３は指紋照合センサにより得られる指紋画像である。
【００２６】
次に動作について説明する。
図４（ａ）、（ｂ）において、ユーザーは指１１を一次元のライン状センサ１２上で、一次元のライン状センサ１２と略直交する方向にスライドさせながら指紋画像を取り込む。その際にエンコーダ１３は一次元のライン状センサ１２の指紋画像情報の取り込みサイクルに同期して指紋画像情報を取り込みながら、取り込んだ情報の変化を計測することにより指の移動速度、移動する方向を計測する。
【００２７】
図４（ｃ）において、一次元のライン状センサ１２は、その長手方向と略直交する方向にスライドさせた指から指紋情報を時系列的に取り込み、エンコーダ１３はスライドさせた指の速度情報と移動方向情報を時系列的に取り込む。
図４（ｄ）において画像処理手段１００は、エンコーダ１３で捉えた指の移動情報１９を用いて、一次元のライン状センサ１２で捉えた時系列的な指紋の凹凸情報である指紋画像情報２０を繋ぎ合わせ、指紋画像を再構成する。
【００２８】
エンコーダ１３で指の移動速度情報だけでなく、移動方向情報も捉える事ができる場合は、指のスライドと直交する方向、この図では横方向のずれを考慮し、隣り合う指紋画像情報２０を紙面左右方向にずらしながら、近傍の情報を用いて平均値計算によって画素を補間し、最終的に二次元の指紋画像２３を再構成する。
エンコーダ１３は感知素子を二次元のアレイ状に設けているので、例えば指をスライドさせる際にスライド方向から左右へずれが生じた場合でも、そのずれを考慮して二次元の指紋画像を再構成することが可能である。
【００２９】
このように、本発明に係わる携帯型電子機器は、実装面積の中で、機器本来の使用の簡便性を損なう事無く、指紋照合センサを実装することが可能となる。
【００３０】
図５は本実施の形態の携帯型電子機器を説明するための図であり、より具体的には図５（ａ）は二次元アレイ状センサ部を有する指紋照合センサを携帯電話に搭載したものを示す図であり、図５（ｂ）は指紋照合センサの動作を説明するためのブロック図である。
【００３１】
図において、３０は携帯電話本体２９のそれぞれに設けられた指紋照合センサのセンサ部である。
センサ部３０は第１の検出面と、第１の検出面の下方に位置し、第１の検出面に指を乗せたとき、第１の検出面と乗せた指との間の距離に基づき静電容量が変化する感知素子を２次元に配列したアレイ状センサであり、センサ部３０の第１の検出面は一度に必要な指紋画像の取り込みを行うことのできる程度の面積を有している。
センサ部３０は例えば、携帯電話本体の表示画面と入力ボタンとの間に配置されている。
図５（ａ）においてに示すように、指紋を検出するセンサ部３０に対応する二次元アレイ状センサ２５を携帯電話本体に設けてもよい。
二次元アレイ状センサ２５は指をその上に乗せることにより、感知素子により検出される静電容量の変化を画像処理部１００により指紋画像に変換するものである。
このように構成することにより、上述に説明したように指紋の凹凸情報を繋ぎ合わせる処理が必要なくなるため、正確な指紋画像を一度に取り込むことができる。
【００３２】
図５においては、二次元アレイ状センサを構成する感知素子は例えば５０（μm）ピッチで縦に３００個、横に３００個配置されるため、感知領域だけで理論的には１５×１５（mm2）の実装面積を必要とする。実際には素子のモールド部分や信号取り出し線の面積も含めて２０×２０（mm2）程度の大きさになる。
なお、図１（ａ）、図１（ｂ）においては前述の通常二次元アレイ状センサと比して、半分以下の面積でセンサ部２５、２７を実装する事が可能である。
【００３３】
実施の形態２．
実施の形態２の携帯型電子機器は、センサ部を携帯型電子機器の表示画面の一部に設けたことを特徴とするものである。
図６は実施の形態２の携帯型電子機器を示す図である。
図において、３２、３５、３８は携帯型電子機器本体に対応する携帯電話本体であり、携帯電話本体３２、３５、３８のそれぞれは表示画面を有する表示器を備え、表示画面を構成する透明電極の一部は表示画面表面に指を乗せたとき、表示画面と乗せた指との間の距離に基づき静電容量が変化するものであって、これを一次元のライン状に並べたもの、またはアレイ状に並べたものである。
【００３４】
図６（ａ）では表示画面と乗せた指との間の距離に基づき静電容量が変化する透明電極を一次元のライン状に並べたものが２つ有り、それぞれ長手方向が直交し、一方をライン状センサ、他方をエンコーダとしたセンサ部３３設けたものである。
図６（ｂ）では表示画面と乗せた指との間の距離に基づき静電容量が変化する透明電極を一次元のライン状に並べたものと、アレイ状に並べたものがあり、一次元のライン状に並べたものをライン状センサ、アレイ状に並べたものをエンコーダとしたセンサ部３５を設けたものである。
図６（ｂ）では表示画面と乗せた指との間の距離に基づき静電容量が変化する透明電極をアレイ状に並べたものをセンサ部３９としたものである。
【００３５】
３３は表示画面上に一体形成された二次元のアレイ状センサ、３６は表示画面上に一体形成された一次元のライン状センサと一次元のライン状エンコーダ、３９は表示画面上に一体形成された、一次元のライン状センサと二次元の小型エンコーダである。
このように表示画面の一部をセンサ部とすることにより、表示画面とは別にセンサ部を設ける必要が無くなるため、指紋照合センサを有する携帯電話の小型化に寄与する。
【００３６】
実施の形態３．
図７は実施の形態３の携帯電子機器を示す図である。
図７において、４１は指紋照合センサを搭載する携帯電話本体、４２は表示画面上に形成されたライン状センサとエンコーダとを有するセンサ部、４３は表示画面上に一体形成された携帯型電子機器本体の入力ボタン（この例では携帯電話の入力ボタン）である。
４５は指紋照合センサを搭載する携帯電話本体、４６は表示画面上に一体形成された、一次元のライン状センサ、アレイ状のエンコーダを有するセンサ部、４７は表示画面上に一体形成された携帯型電子機器本体の入力ボタン（この例では携帯電話の入力ボタン）である。
４９は指紋照合センサを搭載する携帯電話本体、５０は表示画面上に一体形成されたライン状センサ、エンコーダを有するセンサ部、５１は表示画面上に一体形成された携帯型電子機器本体の入力ボタン（この例では携帯電話の入力ボタン）である。
【００３７】
このように、本実施の形態の携帯型電子機器は、センサ部を含め、入力ボタン等の入力インターフェースを表示インターフェースと一体化して構成することにより、携帯電話の筐体が入出力兼用インターフェースとすることが可能となるとともに、表示画面の一部または全部を二次元アレイ状センサ、一次元のライン状センサ、エンコーダとすることにより、これらを設けるための容積を必要としないので、指紋照合センサを搭載する携帯電話をより小型にすることができる。
このように、本発明に係わる携帯型電子機器は、限られた実装面積の中で、機器本来の使用の簡便性を損なう事無く、指紋照合センサを実装することを可能にする。
【００３８】
実施の形態４．
図８は実施の形態４の携帯型電子機器を示す図である。
図８において５３、５５は携帯型電子機器に対応する携帯電話本体である。
５４、５６は一次元のライン状センサと、一次元のライン状のエンコーダとを備えたセンサ部であり、センサ部５４、５６それぞれ携帯電話本体５３、５５の側面に設けられている。
【００３９】
センサ部５４は一次元のライン状センサと、一次元のライン状のエンコーダで組み合わされており、エンコーダの長手方向と携帯電話本体の側面の長手方向が同じであり、エンコーダの長手方向に指をスライドさせることにより指紋情報を入力するため、エンコーダの長さを十分に確保する事ができるので、エンコーダによる検出精度を高くすることができる。
一方、センサ部５６は一次元のライン状センサと、エンコーダで組み合わされており、一次元のライン状センサの長手方向と携帯電話本体の側面の長手方向が同じであり、エンコーダの長手方向に指をスライドさせることにより指紋情報を入力するため、一次元のライン状センサの長さを十分に確保する事ができるので、一度に取り込むことができる指紋画像情報の大きさを十分に確保することができるので、得られる指紋画像もこれに応じて大きくなり、画像の照合の精度を高くすることが可能となる。
このように、実施の形態の携帯型電子機器は、センサ部を側面に設けたので、限られた実装面積の中で、機器本来の使用の簡便性を損なう事無く、指紋照合センサを実装することを可能にする。
【００４０】
実施の形態５．
図９、１０は本実施の形態の携帯電子機器を示す図である。
図において、５７は指紋照合センサを搭載する携帯電話本体、５８は携帯電話本体５７のバッテリーを備えたバッテリーパック、５９は携帯電話本体５７の背面に設置されたセンサ部である。
６３は携帯電話上の電極端子、６５は携帯電話のバッテリー上の電極端子である。
【００４１】
図において、指紋照合センサを搭載する携帯電話本体５７の背面（つまり携帯電話の入力ボタンが位置する面に対向する面）にはバッテリーパック５８が搭載されている。
指紋照合センサのセンサ部５９をバッテリーパック５８の奥に搭載し、指紋取り込み時はバッテリーパック５８を図９（ｂ）または図１０（ｄ）のようにスライドさせることによりセンサ部５９が表出するように構成している。
【００４２】
このように構成することにより、携帯型電子機器の表面実装面積を省くとともに、普段使用しない指紋照合センサのセンサ部５９を保護し、さらにバッテリーパック５８をスライドさせることにより形成されるすき間を指置きガイドとなる様にすれば、ユーザーはより指紋を取り易くなる。
【００４３】
図９において、携帯電話本体５７の裏面にはバッテリーとの電極端子６３が搭載されている。
また、バッテリーパック５８側にも電極端子６５が搭載されている。
これらの電極端子６３、６５はバッテリーパックのスライドの際にも携帯型電子機器に必要な電力を滞り無く供給するように、長いレール状の構造を持つ。
【００４４】
また、指紋の取り込みを行わない状態には図９（ａ）、図１０（ｃ）に示すようにバッテリーパック５８が携帯電話５７に嵌め合わされた状態になっている。
指紋の取り込みを行うときには、図９（ｂ）、図１０（ｄ）に示すようにセンサ部５９が表出する程度までバッテリーパック５７をスライドさせる。
この状態において、電極端子６３と電極端子６５とは互いに接触した状態となるように予め設計されており、携帯電話５７には必要な電力が供給される。
また、バッテリー交換時には、図１０（ｅ）に示すようにバッテリーパック５７を携帯電話５７から取り外せばよい。
本実施の形態の携帯型電子機器は上述のように構成されているので、限られた実装面積の中で、機器本来の使用の簡便性を損なう事無く、指紋照合センサを実装することを可能にする。
【００４５】
実施の形態６．
図１１〜図１４は本実施の形態の携帯型電子機器を説明するための図である。
本実施の形態の携帯型電子機器の指紋照合センサは指の位置、移動方向、移動速度、移動量、設置面積、設置面積の変化率等を計測し、計測した情報に基づき所定の動作を行うように構成したものである。
図において、７５は指紋を取り込むユーザーの指、７６は指紋照合センサのセンサ部であり、センサ部７６は2次元のアレイ状センサとしたものである。
７７はセンサ部７６の感知範囲領域、７８はセンサ部７６により取り込まれた二次元の指紋画像である。
【００４６】
７９は指紋を取り込むユーザーの指、８０は指紋照合センサのセンサ部であり、センサ部８０は２次元アレイ状センサである。
８２は感知範囲領域７６に置かれた指の画像である。
８６は感知範囲領域７６に置かれた指の画像である。
９０は感知範囲領域７６に置かれた指の画像である。
【００４７】
次に動作について説明する。
図１１（ａ）において、ユーザーは指紋を取り込むために指７５をセンサ部７６に置く。
センサ部はその感知範囲領域７７全体に置かれた指紋画像を取り込み、図１１（ｂ）に示すように二次元の指紋画像７８を得る。
【００４８】
図１２（ａ）において、ユーザーはボタンの代わりに指７９を立ててセンサ部８０に置く。
センサ部７６はその感知範囲領域７７全体で指紋画像を取り込み、図１２（ｂ）に示すような二次元の画像８２を得て、指の置かれた位置を求め、その位置のボタンが押された事に相当する応答を行う。
【００４９】
図１３（ａ）に示すように、ユーザーはカーソルスクロールポインタの代わりに指８３を立ててセンサ部７６に置き、センサ部の感知領域範囲内７７内の所定の方向に移動させる。
センサ部７６はその感知範囲領域７７全体で指紋画像を取り込み、図１３（ｂ）に示すように時系列的に二次元の画像８６を得て、指の移動した方向、速度を求め、カーソルスクロールやメニュースクロールが行われた事に相当する応答を行う。
【００５０】
図１４（ａ）において、ユーザーはパソコンで使われるマウスボタンの代わりに指８７を立てて指紋照合センサ８８を軽く叩く。
指紋照合センサはその感知範囲領域７７全体で指紋画像を取り込み、図１４（ｂ）に示すように二次元の画像９０を得て、指の置かれた位置と面積の変化または変化率に基づいてボタンがクリック押された事に相当する応答を行う。
【００５１】
このように、通常の指紋取画像の取得モードでは、指紋の取得を行う。
一方指紋照合センサを通常の指紋取得以外の目的、例えば上述の動作を検知し、検知すれば、これに携帯電子機器の機能の一部を行わせるための動作に対応づけることにより、携帯型電子機器の使い勝手をよくするインターフェースとして使う事もできる。
このように、本発明に係わる携帯型電子機器は、指紋照合センサを指紋入力デバイスだけではなく、例えばメニュースクロールやカーソルの移動等のポインティングデバイス、ボタンのオンオフ等に用いることにより、携帯型電子機器使用上の簡便な入力インターフェースとして用いることを可能にする。
【００５２】
実施の形態７．
本実施の形態の携帯型電子機器は、センサ部により一度に取り込むことができる指紋画像が小さい場合（例えば指紋画像を取り込むライン状センサの長手方向の長さが小さい場合、またはアレイ状センサの面積が小さい場合など）であっても、指紋の照合を正確に行えるようにしたことを特徴とする。
図１５は本実施の形態の携帯型電子機器を説明するための図であり、具体的には登録照合部３００のより具体的な構成を説明するための図である。
図において、３０１は画像処理部１００により得られた指紋の一部分の画像である部分指紋画像が登録された指紋画像（登録指紋データ２００）との一致する部分を調べる指紋照合部、３０２は指紋照合部３０１により一致すると判断された部分指紋画像を記憶する一致度記憶部、３０３は一致度記憶部３０２により記憶された部分指紋画像を合成しより１つの指紋画像を生成する一致度合成部、３０４は合成した指紋画像と登録指紋データ２００との一致の度合いを調べることによりセンサ部より取り込んだ画像と、登録指紋データ２００とが一致するかごうかを判定する照合判定部である。
図において、ユーザーは携帯型電子機器の操作において本人の認証を要求されると、センサ部から照合用の指紋を複数回取り込み、それぞれについて画像処理部１００により部分指紋画像を生成した後、指紋照合部３００において、登録指紋データ２００と一致する部分を調べ、一致する部分が有るものは一致度記憶部３０２へ送り、一致する部分が無いものは破棄する。
【００５３】
一致度記憶部３０２は指紋照合部３０１より送られる画像を記憶するとともに、これを一致度合成部３０３へ送る。
一致度合成部３０３は一致する部分がある部分指紋画像を合成し、１つの指紋画像を生成し、これを照合判定部３０４へ送る。
照合判定部３０４は一致度合成部３０３により生成した生成した指紋画像と登録指紋データ２００との一致の度合いを調べ、判定を行う。
このように構成することにより、センサ部より一度に取り込まれる指紋画像が小さなものであっても、指紋の取り込む個所を変えて取り込んだ後に、一致するものを合成しこれを比較することによりセンサ部において取り込むことができる指紋画像が小さなものであっても正確に指紋の照合を行うことが可能となるため小型でかつ照合精度の高い携帯型電子機器を得ることができる。
また複数回の指紋入力においてもなお本人認証が不可能と判定された場合は、指紋の入力を促す命令を携帯型電子機器の表示画面に表示し、これにより更に得られた部分指紋画像と、これまでにより得られた部分指紋画像とを用い照合を行えばより。
【００５４】
次により具体的な指紋照合動作について図１６を用いて説明する。
図１６は本実施の形態の携帯型電子機器を説明するための図であり、具体的には図１５に示す登録照合部３００の動作を説明するための図である。
図において４０１〜４０６はセンサ部より取り込み、画像処理部１００により生成された部分指紋画像である。
４１１〜４１６は部分指紋画像４０１〜４０６のそれぞれと登録指紋データ２００との一致する部分を示す画像であり、４０１ａ〜４０６ａは画像４０１〜４０６のそれぞれと登録指紋データ２００との一致する部分である。
【００５５】
４２０は部分指紋画像４０１〜４０６のすべてと登録指紋データ２００との一致する部分を示す指紋画像であり、指紋画像４２０は一致度合成部３０３により合成された指紋画像である。
図において、記憶されている登録指紋データ２００と第一回目に入力された部分指紋画像４０１との間で位置、回転、伸び縮み等を試行錯誤的に変化させながら、最適な適合位置合わせを行い、第一回目の照合結果である画像４１１（一致する部分４１１ａ）を得るとともに、これを一致度記憶部３０２に記憶する。
【００５６】
以後同様の操作を繰り返すことにより、第二回目〜第四回目の照合結果である画像４０２〜４０４（一致する部分４１２ａ〜４１４ａ）を得るとともに、これを一致度記憶部３０２に記憶する。
記憶されている登録指紋データ２００と第五回目に入力された部分指紋画像４０５との間で位置、回転、伸び縮み等を試行錯誤的に変化させながら、最適な適合位置合わせを行ったものの、指紋登録データ２００との一致の度合いが一定の閾値よりも小さいため、部分指紋画像４０５は破棄される。
【００５７】
記憶されている登録指紋データ２００と第六回目に入力された部分指紋画像４０６との間で位置、回転、伸び縮み等を試行錯誤的に変化させながら、最適な適合位置合わせを行い、第一回目の照合結果である画像４１６（一致する部分４１６ａ）を得るとともに、これを一致度記憶部３０２に記憶する。
【００５８】
各照合結果のうち、一致の度合いが一定の閾値よりも大きなものが一致度記憶部３０２に記憶され、一致度合成部３０３により合成された結果、指紋画像４２０（一致する部分を合成したのは指紋画像４２０ａ）が生成される。
この指紋画像４２０と、登録画像データとを照合判定部３０４により判定を行うことにより、個々の小さな画像の局所的な一致の度合いを調べるのではなく、合成したより大きな指紋画像４２０ａと登録指紋データ２００との一致の度合いを調べることにより、大域的な指紋画像の判定を行うことが可能となるため、一度に取り込める指紋画像が小さなものであっても照合の精度を高くすることができる。
【００５９】
なお、照合判定部３０４の判定には種々のものあるが、例えば部分指紋画像を合成した指紋画像４２０ａがカバーできる領域が登録されている指紋画像（登録指紋データ２００）の領域に対して一定以上の割合になっており、かつ合成に採用された部分指紋画像と登録指紋の一致度の平均がある一定閾値よりも高ければ、個人承認が行われたものなるように構成すればよい。
【００６０】
また、指紋画像４２０ａと登録指紋データ２００との一致する部分の照合は、部分指紋画像中の各画素の輝度値の差の絶対値を合計した値が小さいほど一致度が高いという評価を用いる方法がある。
または例えば、指紋画像４２０ａと登録指紋データ２００との照合は、指紋画像４２０ａ中の指紋隆線の端点、分岐点という特徴点を抽出し、それらの点の位置関係の近いものから順に対応点の組を見つけ出し、各点の距離の合計が小さいほど一致度が高いという評価を用いる方法がある。
【００６１】
または例えば、指紋画像４２０ａと登録指紋データ２００との照合は、指紋画像４２０ａ中の各小領域における指紋隆線のエッジ方向を抽出し、対応する各小領域における指紋隆線のエッジ方向の差の合計が小さいほど一致度が高いという評価を用いる方法がある。
【００６２】
または例えば、指紋画像４２０ａと登録指紋データ２００との照合は、指紋画像４２０ａ中の各小領域における指紋隆線の周波数（ピッチ）を抽出し、対応する各小領域における指紋隆線の周波数の差の合計が小さいほど一致度が高いという評価を用いる方法がある。
【００６３】
または例えば、指紋画像４２０ａと登録指紋データ２００との照合は、前述の、指紋画像４２０ａ中の各画素の輝度値の差の絶対値の合計、指紋画像４２０ａ中の指紋隆線の端点、分岐点という特徴点の位置関係、指紋隆線のエッジ方向角の差の絶対値の合計、指紋隆線の周波数の差の絶対値の合計、等の評価結果を論理積で合成する方法がある。
【００６４】
または例えば、指紋画像４２０ａと登録指紋データ２００との照合は、前述の、指紋画像４２０ａ中の各画素の輝度値の差の絶対値の合計、指紋画像中４２０ａの指紋隆線の端点、分岐点という特徴点の位置関係、指紋隆線のエッジ方向角の差の絶対値の合計、指紋隆線の周波数の差の絶対値の合計、等の評価結果を論理和で合成する方法がある。
【００６５】
または例えば、指紋画像４２０ａと登録指紋データ２００との照合は、前述の、指紋画像４２０ａ中の各画素の輝度値の差の絶対値の合計、指紋画像４２０ａ中の指紋隆線の端点、分岐点という特徴点の位置関係、指紋隆線のエッジ方向角の差の絶対値の合計、指紋隆線の周波数の差の絶対値の合計、等の評価結果を、十分に多くのサンプルを用いた試行錯誤的学習によって決定した各係数を掛けて、線形的に合成する方法がある。
【００６６】
または例えば、指紋画像４２０ａと登録指紋データ２００との照合は、前述の、指紋画像４２０ａ中の各画素の輝度値の差の絶対値の合計、指紋画像４２０ａ中の指紋隆線の端点、分岐点という特徴点の位置関係、指紋隆線のエッジ方向角の差の絶対値の合計、指紋隆線の周波数の差の絶対値の合計、等の評価結果を、各評価結果を多次元のベクトル空間で合成記述する方法がある。
そして、多次元空間中で十分に多くのサンプルを用いた試行錯誤的学習によって決定した一致、不一致領域のいずれに入るかで判定することができる。
【００６７】
なお、この実施の形態では、登録指紋データ２００が携帯型電子機器の内部にあらかじめ組み込まれている構成について説明をしているがこれに限定される必要はない。
たとえば携帯型電子機器とは別体に設けた登録指紋データを得るために指紋を登録する手段を用いこれを通信手段を有する計算機などに格納し、携帯型電子機器の通信手段を用い必要に応じてとり込むように構成すれば携帯型電子機器の内部に登録指紋データを設ける必要は無くなる。
【００６８】
また、指紋を登録する手段を携帯型電子機器購入時の購入場所やメインテナンスセンター等に設置すれば安全性を確保しつつ、利用者にとって便利に使用することができる。
つまり、指紋を登録する手段は携帯型電子機器とは別体に設けたものであって、指紋全体をカバーするような大型のものを用意し、指紋照合時は携帯型電子機器に実装した小型の指紋センサにより取り込まれた指紋画像が、登録されている指紋画像（登録指紋データ）のどの部分に一致するか、位置、回転、伸び縮み等を考慮しながら、最適な適合位置合わせを行い、指紋の一致度を計算する。
さらにこの指紋入力およびそれに引き続いて行われる指紋の一致度の計算を複数回行い、それぞれの指紋と登録指紋との一致度を合成して最終的なユーザーの承認を行うことにより、照合用の指紋センサを大型化することなく、指紋照合性能を向上させることを可能にとなる。
【００６９】
このように、本発明に係わる携帯型電子機器は、小型の指紋センサを用いて、指紋照合性能を低下させることなく、個人認証を実現することを可能にする。
【００７０】
【発明の効果】
この発明に係る携帯型電子機器によれば、第１の検出面と、第１の検出面の下方に位置し、第１の検出面に指を乗せたとき、第１の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を一次元に配列した第１のライン状センサ、および第２の検出面と、第２の検出面の下方に位置し、第２の検出面に指を乗せたとき、第２の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を第１のライン状センサの感知素子の配列方向とは垂直に一次元に配列した第２のライン状センサを備えたセンサ部と、第１のライン状センサおよび第２のライン状センサ上であって第２のライン状センサの感知素子の配列方向に沿って指を動かすことにより、第１のライン状センサで検出される異なる複数の指紋の凹凸情報を第２のライン状センサで検出される指紋の凹凸情報の変化に基づき繋ぎあわせることにより指紋画像を生成する画像処理部と、前記画像処理部により生成された指紋画像の一部である部分指紋画像と予め用意された指紋画像との一致する部分を調べる指紋照合部、前記指紋照合部により一致する部分が有ると判断された部分指紋画像を記憶する一致度記憶部、前記一致度記憶部に記憶された部分指紋画像を１つの指紋画像となるように合成する一致度合成部、および前記一致度合成部により合成した指紋画像と前記予め用意された指紋画像とが一致するかどうかを判定する照合判定部を有する登録照合部とを備えた指紋照合センサを携帯型電子機器本体に設けたので、異なる複数の部分指紋画像を合成することにより、より大きな指紋画像が得られるため、センサ部により一度に取り込める指紋画像が小さいものであっても、照合の精度を高くすることができる。
【００７１】
この発明に係る携帯型電子機器によれば、第１の検出面と、第１の検出面の下方に位置し、第１の検出面に指を乗せたとき、第１の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を一次元に配列した第１のライン状センサ、および第２の検出面と、第２の検出面の下方に位置し、第２の検出面に指を乗せたとき、第２の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を２次元に配列したアレイ状センサを備えたセンサ部と、第１のライン状センサおよびアレイ状センサ上で指を動かすことにより、第１のライン状センサで検出される異なる複数の指紋の凹凸情報をアレイ状センサで検出される指紋の凹凸情報の変化に基づき繋ぎあわせることにより指紋画像を生成する画像処理部と、前記画像処理部により生成された指紋画像の一部である部分指紋画像と予め用意された指紋画像との一致する部分を調べる指紋照合部、前記指紋照合部により一致する部分が有ると判断された部分指紋画像を記憶する一致度記憶部、前記一致度記憶部に記憶された部分指紋画像を１つの指紋画像となるように合成する一致度合成部、および前記一致度合成部により合成した指紋画像と前記予め用意された指紋画像とが一致するかどうかを判定する照合判定部を有する登録照合部とを備えた指紋照合センサを携帯型電子機器本体に設けたので、異なる複数の部分指紋画像を合成することにより、より大きな指紋画像が得られるため、センサ部により一度に取り込める指紋画像が小さいものであっても、照合の精度を高くすることができる。
【図面の簡単な説明】
【図１】 本実施の形態の携帯型電子機器を説明するための図である。
【図２】 本実施の形態の携帯型電子機器を説明するための図である。
【図３】 本実施の形態の携帯型電子機器を説明するための図である。
【図４】 本実施の形態の携帯型電子機器を説明するための図である。
【図５】 本実施の形態の携帯型電子機器を説明するための図である。
【図６】 本実施の形態の携帯型電子機器を説明するための図である。
【図７】 本実施の形態の携帯型電子機器を説明するための図である。
【図８】 本実施の形態の携帯型電子機器を説明するための図である。
【図９】 本実施の形態の携帯型電子機器を説明するための図である。
【図１０】 本実施の形態の携帯型電子機器を説明するための図である。
【図１１】 本実施の形態の携帯型電子機器を説明するための図である。
【図１２】 本実施の形態の携帯型電子機器を説明するための図である。
【図１３】 本実施の形態の携帯型電子機器を説明するための図である。
【図１４】 本実施の形態の携帯型電子機器を説明するための図である。
【図１５】 本実施の形態の携帯型電子機器を説明するための図である。
【図１６】 本実施の形態の携帯型電子機器を説明するための図である。
【図１７】 従来の形態の携帯型電子機器を説明するための図である。
【図１８】 従来の形態の携帯型電子機器を説明するための図である。
【符号の説明】
1：ユーザーの指
2：ライン状センサ
3：エンコーダ
27：センサ部
26：携帯電話本体
Claims (2)
- 第１の検出面と、前記第１の検出面の下方に位置し、前記第１の検出面に指を乗せたとき、前記第１の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を一次元に配列した第１のライン状センサ、および第２の検出面と、前記第２の検出面の下方に位置し、前記第２の検出面に指を乗せたとき、前記第２の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を第１のライン状センサの感知素子の配列方向とは垂直に一次元に配列した第２のライン状センサを備えたセンサ部と、
前記第１のライン状センサおよび前記第２のライン状センサ上であって前記第２のライン状センサの感知素子の配列方向に沿って指を動かすことにより、前記第１のライン状センサで検出される異なる複数の指紋の凹凸情報を前記第２のライン状センサで検出される前記指紋の凹凸情報の変化に基づき繋ぎあわせることにより指紋画像を生成する画像処理部と、
前記画像処理部により生成された指紋画像の一部である部分指紋画像と予め用意された指紋画像との一致する部分を調べる指紋照合部、前記指紋照合部により一致する部分が有ると判断された部分指紋画像を記憶する一致度記憶部、前記一致度記憶部に記憶された部分指紋画像を１つの指紋画像となるように合成する一致度合成部、および前記一致度合成部により合成した指紋画像と前記予め用意された指紋画像とが一致するかどうかを判定する照合判定部を有する登録照合部とを備えた指紋照合センサを携帯型電子機器本体に設けたことを特徴とする携帯型電子機器。 - 第１の検出面と、前記第１の検出面の下方に位置し、前記第１の検出面に指を乗せたとき、前記第１の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を一次元に配列した第１のライン状センサ、および第２の検出面と、前記第２の検出面の下方に位置し、前記第２の検出面に指を乗せたとき、前記第２の検出面に乗せた指との距離に基づき静電容量が変化する感知素子を２次元に配列したアレイ状センサを備えたセンサ部と、
前記第１のライン状センサおよび前記アレイ状センサ上で指を動かすことにより、前記第１のライン状センサで検出される異なる複数の指紋の凹凸情報を前記アレイ状センサで検出される前記指紋の凹凸情報の変化に基づき繋ぎあわせることにより指紋画像を生成する画像処理部と、
前記画像処理部により生成された指紋画像の一部である部分指紋画像と予め用意された指紋画像との一致する部分を調べる指紋照合部、前記指紋照合部により一致する部分が有ると判断された部分指紋画像を記憶する一致度記憶部、前記一致度記憶部に記憶された部分指紋画像を１つの指紋画像となるように合成する一致度合成部、および前記一致度合成部により合成した指紋画像と前記予め用意された指紋画像とが一致するかどうかを判定する照合判定部を有する登録照合部とを備えた指紋照合センサを携帯型電子機器本体に設けたことを特徴とする携帯型電子機器。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP33418999A JP3738629B2 (ja) | 1999-11-25 | 1999-11-25 | 携帯型電子機器 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP33418999A JP3738629B2 (ja) | 1999-11-25 | 1999-11-25 | 携帯型電子機器 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2005084188A Division JP4013962B2 (ja) | 2005-03-23 | 2005-03-23 | 携帯型電子機器 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2001155137A JP2001155137A (ja) | 2001-06-08 |
| JP3738629B2 true JP3738629B2 (ja) | 2006-01-25 |
Family
ID=18274545
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP33418999A Expired - Fee Related JP3738629B2 (ja) | 1999-11-25 | 1999-11-25 | 携帯型電子機器 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3738629B2 (ja) |
Families Citing this family (37)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2006053768A (ja) * | 2004-08-12 | 2006-02-23 | Nec Corp | 指紋装置および指紋法 |
| JP4487430B2 (ja) * | 2001-02-15 | 2010-06-23 | 日本電気株式会社 | 表示機能を備えた指紋画像入力装置 |
| KR100439775B1 (ko) * | 2001-07-12 | 2004-07-12 | (주)니트 젠 | 지문인증 장치 및 방법 |
| JP3902473B2 (ja) * | 2002-01-17 | 2007-04-04 | 富士通株式会社 | 生体情報を用いた本人認証方法 |
| JP4022861B2 (ja) | 2002-04-10 | 2007-12-19 | 日本電気株式会社 | 指紋認証システム、指紋認証方法及び指紋認証プログラム |
| KR20040000954A (ko) * | 2002-06-26 | 2004-01-07 | 삼성전자주식회사 | 이동통신단말기에 있어서 지문인식 방향 선택 방법 |
| WO2004026139A1 (ja) | 2002-09-17 | 2004-04-01 | Fujitsu Limited | 生体情報取得装置および生体情報による認証装置 |
| JP2004138416A (ja) * | 2002-10-16 | 2004-05-13 | Nihon Kaiheiki Industry Co Ltd | 感圧式指紋センサー |
| US7102617B2 (en) | 2002-12-30 | 2006-09-05 | Motorola, Inc. | Compact optical pointing apparatus and method |
| WO2004093005A1 (ja) | 2003-04-15 | 2004-10-28 | Fujitsu Limited | 情報処理装置 |
| GB2401979B (en) * | 2003-05-21 | 2007-03-21 | Research In Motion Ltd | Apparatus and method of input and finger print recognition on a handheld electronic device |
| US20050249386A1 (en) * | 2003-06-30 | 2005-11-10 | Mobisol | Pointing device having fingerprint image recognition function, fingerprint image recognition and pointing method, and method for providing portable terminal service using thereof |
| JP4411152B2 (ja) | 2004-07-05 | 2010-02-10 | Ｎｅｃインフロンティア株式会社 | 指紋読取方法、指紋読取システム及びプログラム |
| TW200632764A (en) | 2004-11-15 | 2006-09-16 | Nec Corp | Biological feature input device |
| US7899216B2 (en) | 2005-03-18 | 2011-03-01 | Sanyo Electric Co., Ltd. | Biometric information processing apparatus and biometric information processing method |
| JP4182987B2 (ja) | 2006-04-28 | 2008-11-19 | 日本電気株式会社 | 画像読取装置 |
| JP4427039B2 (ja) * | 2006-08-18 | 2010-03-03 | 富士通株式会社 | 生体情報取得装置および生体情報による認証装置 |
| WO2008090608A1 (ja) * | 2007-01-24 | 2008-07-31 | Fujitsu Limited | 画像読取装置、画像読取プログラム、画像読取方法 |
| KR20230116073A (ko) | 2007-09-24 | 2023-08-03 | 애플 인크. | 전자 장치 내의 내장형 인증 시스템들 |
| US8600120B2 (en) | 2008-01-03 | 2013-12-03 | Apple Inc. | Personal computing device control using face detection and recognition |
| JP2010140508A (ja) * | 2010-03-01 | 2010-06-24 | Nec Corp | 指紋装置および指紋法 |
| JP5793377B2 (ja) * | 2011-09-09 | 2015-10-14 | 吉郎 山田 | 表面パターンの検出方法及び装置 |
| US9002322B2 (en) | 2011-09-29 | 2015-04-07 | Apple Inc. | Authentication with secondary approver |
| US11209961B2 (en) | 2012-05-18 | 2021-12-28 | Apple Inc. | Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs |
| JP6182830B2 (ja) * | 2012-06-11 | 2017-08-23 | 株式会社モフィリア | 電子機器 |
| JP6179085B2 (ja) * | 2012-09-28 | 2017-08-16 | 富士通株式会社 | 生体情報認証装置、生体情報認証方法及び生体情報認証プログラム |
| US9898642B2 (en) | 2013-09-09 | 2018-02-20 | Apple Inc. | Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs |
| US9483763B2 (en) | 2014-05-29 | 2016-11-01 | Apple Inc. | User interface for payments |
| DK179186B1 (en) | 2016-05-19 | 2018-01-15 | Apple Inc | REMOTE AUTHORIZATION TO CONTINUE WITH AN ACTION |
| DK179471B1 (en) | 2016-09-23 | 2018-11-26 | Apple Inc. | IMAGE DATA FOR ENHANCED USER INTERACTIONS |
| KR102301599B1 (ko) | 2017-09-09 | 2021-09-10 | 애플 인크. | 생체측정 인증의 구현 |
| KR102185854B1 (ko) | 2017-09-09 | 2020-12-02 | 애플 인크. | 생체측정 인증의 구현 |
| US11170085B2 (en) | 2018-06-03 | 2021-11-09 | Apple Inc. | Implementation of biometric authentication |
| US11100349B2 (en) | 2018-09-28 | 2021-08-24 | Apple Inc. | Audio assisted enrollment |
| US10860096B2 (en) | 2018-09-28 | 2020-12-08 | Apple Inc. | Device control using gaze information |
| JP7381997B2 (ja) * | 2018-11-09 | 2023-11-16 | 日本電気株式会社 | 情報処理システム、情報処理方法及びプログラム |
| EP4264460A1 (en) | 2021-01-25 | 2023-10-25 | Apple Inc. | Implementation of biometric authentication |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2971620B2 (ja) * | 1991-05-30 | 1999-11-08 | 郵政大臣 | 個人認証機能付き携帯電話機 |
| JPH103532A (ja) * | 1996-06-17 | 1998-01-06 | Sony Corp | 指紋読み取り装置 |
| US5864296A (en) * | 1997-05-19 | 1999-01-26 | Trw Inc. | Fingerprint detector using ridge resistance sensor |
| NO304766B1 (no) * | 1997-06-16 | 1999-02-08 | Sintef | Fingeravtrykksensor |
| GB9725571D0 (en) * | 1997-12-04 | 1998-02-04 | Philips Electronics Nv | Electronic apparatus comprising fingerprint sensing devices |
-
1999
- 1999-11-25 JP JP33418999A patent/JP3738629B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2001155137A (ja) | 2001-06-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3738629B2 (ja) | 携帯型電子機器 | |
| US8229184B2 (en) | Method and algorithm for accurate finger motion tracking | |
| US8358815B2 (en) | Method and apparatus for two-dimensional finger motion tracking and control | |
| US8811688B2 (en) | Method and apparatus for fingerprint image reconstruction | |
| EP3234863B1 (en) | Fingerprint enrollment using touch sensor data | |
| EP3218849B1 (en) | Fingerprint sensors having in-pixel optical sensors | |
| US9400880B2 (en) | Method and apparatus for biometric-based security using capacitive profiles | |
| US9646193B2 (en) | Fingerprint authentication using touch sensor data | |
| US8605960B2 (en) | Fingerprint sensing device | |
| WO2009079221A2 (en) | Method and algorithm for accurate finger motion tracking | |
| CN101341496B (zh) | 使用扫描型成像器的生物特征信息检测 | |
| US20110257546A1 (en) | Biometric Sensor And Heart Function Monitoring Apparatus | |
| US9785863B2 (en) | Fingerprint authentication | |
| CN106445242A (zh) | 压力触控装置和电子设备 | |
| JP4013962B2 (ja) | 携帯型電子機器 | |
| KR101537211B1 (ko) | 상이한 지문 입력 방식을 지원하는 지문 인증 방법 및 전자 장치 | |
| US10102412B2 (en) | Fingerprint sensing with different capacitive configurations | |
| US11048786B2 (en) | Techniques for fingerprint detection and user authentication | |
| KR20150139396A (ko) | 상이한 지문 입력 방식을 지원하는 지문 인증 방법 및 전자 장치 | |
| KR100629410B1 (ko) | 지문인증기능을 구비한 포인팅 장치 및 방법과, 이를 위한 휴대 단말기 | |
| US20200272249A1 (en) | Mouse with fingerprint identification modules | |
| EP3542309B1 (en) | Fingerprint sensing with voltage pattern configurations | |
| Clausen | A single-line ac capacitive fingerprint swipe sensor |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20040630 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20050117 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20050125 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050323 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20051011 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20051024 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20081111 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091111 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20091111 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101111 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111111 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121111 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121111 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131111 Year of fee payment: 8 |
|
| LAPS | Cancellation because of no payment of annual fees |