JPWO2004021884A1 - Personal recognition device - Google Patents
Personal recognition device Download PDFInfo
- Publication number
- JPWO2004021884A1 JPWO2004021884A1 JP2004534066A JP2004534066A JPWO2004021884A1 JP WO2004021884 A1 JPWO2004021884 A1 JP WO2004021884A1 JP 2004534066 A JP2004534066 A JP 2004534066A JP 2004534066 A JP2004534066 A JP 2004534066A JP WO2004021884 A1 JPWO2004021884 A1 JP WO2004021884A1
- Authority
- JP
- Japan
- Prior art keywords
- hand
- blood vessel
- image
- personal recognition
- vessel image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 210000004204 blood vessel Anatomy 0.000 claims abstract description 155
- 238000000034 method Methods 0.000 claims abstract description 71
- 238000003384 imaging method Methods 0.000 claims abstract description 28
- 230000001678 irradiating effect Effects 0.000 claims abstract description 10
- 238000012937 correction Methods 0.000 claims description 34
- 238000001514 detection method Methods 0.000 claims description 26
- 230000037303 wrinkles Effects 0.000 claims description 11
- 238000004364 calculation method Methods 0.000 claims description 9
- 230000007246 mechanism Effects 0.000 claims description 9
- 238000003780 insertion Methods 0.000 claims description 6
- 230000037431 insertion Effects 0.000 claims description 6
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 claims description 5
- 239000000463 material Substances 0.000 claims description 5
- 210000004247 hand Anatomy 0.000 claims description 4
- 210000000707 wrist Anatomy 0.000 claims description 4
- 239000002131 composite material Substances 0.000 claims 1
- 238000012545 processing Methods 0.000 description 23
- 238000010586 diagram Methods 0.000 description 22
- 230000008569 process Effects 0.000 description 22
- 238000012795 verification Methods 0.000 description 11
- 238000005286 illumination Methods 0.000 description 8
- 238000007726 management method Methods 0.000 description 7
- 210000003811 finger Anatomy 0.000 description 5
- 238000005259 measurement Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 3
- 230000007423 decrease Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000000605 extraction Methods 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 210000000554 iris Anatomy 0.000 description 2
- 229920003023 plastic Polymers 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000003749 cleanliness Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000007257 malfunction Effects 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000000087 stabilizing effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 210000003813 thumb Anatomy 0.000 description 1
Images
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/117—Identification of persons
- A61B5/1171—Identification of persons based on the shapes or appearances of their bodies or parts thereof
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/14—Vascular patterns
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/20—Individual registration on entry or exit involving the use of a pass
- G07C9/22—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder
- G07C9/25—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder using biometric data, e.g. fingerprints, iris scans or voice recognition
- G07C9/257—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder using biometric data, e.g. fingerprints, iris scans or voice recognition electronically
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/30—Individual registration on entry or exit not involving the use of a pass
- G07C9/32—Individual registration on entry or exit not involving the use of a pass in combination with an identity check
- G07C9/37—Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Physics & Mathematics (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Biophysics (AREA)
- Pathology (AREA)
- Human Computer Interaction (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Theoretical Computer Science (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
- Collating Specific Patterns (AREA)
- Image Input (AREA)
Abstract
非接触でも良好な血管像撮影を可能とし、また非接触撮影に適した認識方法を用いて、血管像を用いた認識装置を提供する。利用者に手のかざし方を指示する位置向き形状指示手段と、近赤外光を照射する１つ以上の照射手段と、その近赤外光による画像を撮影する１つ以上の撮影手段とを備え、非接触で手の血管像を撮影可能な撮影機器と、撮影された画像から血管像を検出する血管像検出手段と、利用者の各人毎に登録された手血管像を記憶する血管像記憶手段と、登録血管像と検出血管像とを比較して個人認識を行う認識手段とを備える。Provided is a recognition device that uses a blood vessel image by using a recognition method suitable for non-contact imaging, which enables good blood vessel imaging even without contact. Position direction shape indicating means for instructing the user how to hold the hand, one or more irradiating means for irradiating near infrared light, and one or more photographing means for capturing an image by the near infrared light A non-contact photographing device capable of photographing a blood vessel image of a hand, a blood vessel image detecting means for detecting a blood vessel image from the photographed image, and a blood vessel for storing a hand blood vessel image registered for each user Image storage means, and recognition means for comparing a registered blood vessel image and a detected blood vessel image to perform personal recognition.
Description
本発明は個人認識装置、一般には個人認識番号（ＩＤ）に加えて、個人の身体的特徴、更に詳しくは手の血管像を検出して、個人認識を行う個人認識装置に関する。 The present invention relates to an individual recognition apparatus, and more particularly to an individual recognition apparatus that detects an individual's physical characteristics, more specifically, a blood vessel image of a hand, in addition to an individual identification number (ID), and performs individual recognition.
従来から、例えば施設への入退出などに際して、人手を介さずに本人であることを確認する方法として、磁気カードや暗証番号ＰＩＮ（パーソナル・アイデンティフィケーション・ナンバー）を用いる方法がある。しかしこれらの方法では例えばカードの紛失（忘却）や、盗用の問題がある。紛失（忘却）や盗用の心配がない本人確認方法として、指紋や、顔などの個人の身体的な特徴を用いる方法が研究されている。
身体的な特徴の違いによって、利用者がカードや暗証番号によって表される個人であるかどうかを判定する検証処理や、登録された人の中の特定の１人であると判定する識別処理が行われる。ここでは検証処理と識別処理とを総称して個人認識と称する。
個人認識における身体的な特徴としては指紋、虹彩、顔、手血管などが用いられる。これらの特徴を測定する装置は、測定方法によって接触型と非接触型とに大きく分類される。施設への入退出管理などにおいては、不特定多数の個人認識を行う必要があり、衛生面や利用者の心理的抵抗を考慮すると非接触型であることが望ましい。
現在最もよく用いられている身体的な特徴は指紋であるが、指を押し付ける必要があり、測定装置は接触型になる。虹彩を測定する装置には非接触型もあるが装置が高価であることと、撮影時の利用者の心理的負担が大きいという問題がある。顔の測定は非接触型で、コストの安いカメラを用いて行うことができるが、表情の変化などのために、現状では認識精度をあまり高くすることができない。
手の血管像を利用した個人認識技術は、次の文献１と文献２で基本的に開示された。手の血管像の撮影については、利用者の負担が小さく、認識精度が比較的高く、また近赤外光を用いて撮影を行うために外光の変動に強いという特徴もある。
文献１）英国特許第２，１５６，１２７号．
文献２）米国特許第４，６９９，１４９号．
手の血管像は、撮影装置に手を接触させずに撮影することもできるが、認識精度を向上させる観点からは、利用者の手を装置に固定させて撮影する方が有利である。現在市販されている代表的な製品は、全て装置の一部と手を接触させて血管像の撮影を行う接触型である。例えば次の文献３には手の甲をカメラに押しつけて血管像を撮影する、ある韓国企業の製品に関連する発明が開示されている。この装置は棒を手でにぎり、手の甲を撮影する形式である。また文献４、および文献５には、棒を手でにぎり、手の平を撮影する、ある米国企業の製品の関連発明が開示されている。
文献３）特開平１０−２９５６７４号公報
文献４）特表平１１−５１２２０３号公報
文献５）米国特許第５，７９３，８８１号
以上のように、現在市販されている手の血管像を利用した個人認識装置は、装置に手を押しつける必要がある接触型であるが、衛生面や清潔感という観点からは利用者の負担が大きく、また特に夏季などはベタつきなどの問題があり、非接触で手血管を撮影することが望ましい。しかしながら、非接触で手の血管像の撮影を行う場合には、良好な血管像の獲得が難しいという問題点があった。
非接触で血管像を撮影する場合の問題点としては、第１に手を固定させずに撮影を行うために手の開き方、位置、および向きなどが撮影毎に変化するという問題点がある。第２に例えば近赤外光が十分にあたらないために外光の影響を受けやすいという問題点がある。
更に良好な血管像を撮影するためには皮膚表面にほぼ直角に近赤外光による照明をあてることが好ましく、カメラの光軸も皮膚の表面に直交させることが好ましいが、非接触では手、カメラ、照明が必ずしも最適な位置関係になく、撮影画像の品質が低下しやすいという第３の問題点もある。
本発明の課題は、上述の問題点に鑑み、手を接触することなく手の血管像を撮影することにより、利用者の負担が小さく、衛生的で清潔感のある個人認識装置を実現することである。非接触の条件下では、前述のように良好な血管像の獲得が難しくなるが、装置の形態を工夫して、非接触条件下においても良好な血管像の獲得を可能とし、更に非接触撮影に適した認識方式を用いることで、十分な認識精度を実現することも課題である。Conventionally, there is a method of using a magnetic card or a personal identification number (PIN) as a method for confirming the identity of a person without entering a person when entering or leaving a facility. However, these methods have problems such as card loss (forgetting) and theft. As a method for identifying a person who is not worried about losing (forgetting) or stealing, a method using a physical characteristic of an individual such as a fingerprint or a face has been studied.
Verification processing for determining whether a user is an individual represented by a card or a personal identification number depending on a difference in physical characteristics, and identification processing for determining that the user is a specific one of registered persons Done. Here, the verification process and the identification process are collectively referred to as personal recognition.
Fingerprints, irises, faces, hand blood vessels, etc. are used as physical features in personal recognition. Devices for measuring these characteristics are roughly classified into contact type and non-contact type depending on the measurement method. In entrance / exit management of facilities, it is necessary to recognize an unspecified number of individuals, and it is desirable to be a non-contact type considering hygiene and user psychological resistance.
The physical feature most commonly used at present is a fingerprint, but it is necessary to press the finger, and the measuring device becomes a contact type. Although there are non-contact types of devices for measuring the iris, there are problems that the device is expensive and that the psychological burden on the user during photographing is large. Face measurement can be performed using a low-cost camera that is non-contact type, but recognition accuracy cannot be increased at present due to changes in facial expressions.
The personal recognition technique using the blood vessel image of the hand was basically disclosed in the following
Reference 1) British Patent No. 2,156,127.
Reference 2) US Pat. No. 4,699,149.
The blood vessel image of the hand can be taken without bringing the hand into contact with the photographing apparatus. However, from the viewpoint of improving the recognition accuracy, it is advantageous to photograph with the user's hand fixed to the apparatus. Representative products currently on the market are all contact-type devices that take a blood vessel image by touching a part of the device with a hand. For example, the following
Reference 3) Japanese Patent Application Laid-Open No. 10-295574 Reference 4) Japanese Patent Publication No. 11-512203 Reference 5) US Pat. No. 5,793,881 As described above, the blood vessel image of the hand that is currently on the market was used. The personal recognition device is a contact type that requires a hand to be pressed against the device, but from the viewpoint of hygiene and cleanliness, the burden on the user is heavy, and there are problems such as stickiness especially in the summer, and it is non-contact. It is desirable to photograph hand blood vessels. However, when taking a blood vessel image of a hand without contact, there is a problem that it is difficult to obtain a good blood vessel image.
As a problem when a blood vessel image is photographed in a non-contact manner, first, there is a problem that the manner of opening the hand, the position, the orientation, and the like change every time photographing is performed without fixing the hand. . Secondly, for example, there is a problem that near-infrared light is not sufficient and is easily affected by external light.
In order to capture a better blood vessel image, it is preferable to illuminate the skin surface with near-infrared light at a substantially right angle, and the optical axis of the camera is also preferably orthogonal to the skin surface. There is also a third problem that the camera and the illumination are not necessarily in an optimal positional relationship, and the quality of the captured image tends to deteriorate.
In view of the above-described problems, an object of the present invention is to realize a sanitary and clean personal recognition device with less burden on the user by capturing a blood vessel image of a hand without touching the hand. It is. Although it is difficult to acquire a good blood vessel image under non-contact conditions as described above, it is possible to acquire a good blood vessel image even under non-contact conditions by devising the device configuration, and further non-contact imaging. It is also a problem to achieve sufficient recognition accuracy by using a recognition method suitable for the above.
本発明の個人認識装置は非接触で手の血管像を撮影するために、利用者に手のかざし方を指示する位置向き形状指示手段と、手に近赤外光を照射する１つ以上の照射手段と、近赤外光による画像を撮影する１つ以上の撮影手段とを備え、手と接触することなく血管像を撮影可能な撮影機器を用いる。また撮影された画像から血管像を検出する血管像検出手段と、利用者の各人毎に登録された血管像を記憶する記憶手段と、登録された血管像と検出された血管像とを比較して個人認識を行う認識手段とを備える。
位置向き形状指示手段として、利用者が手をかざすべき面が平面状の形状で構成され、手の適切な位置、向きを図式で表す手段が用いられる。
さらに、本発明の個人認識装置は、血管像の検出毎に手の位置、および／または向きを検出する検出手段と、検出された血管像を補正して、補正結果が適切である場合には補正後の画像を認識手段に与える補正手段とを備え、補正結果が不適切である場合には位置向き形状指示手段がそのことを利用者に通知する。The personal recognition device according to the present invention includes a position-and-orientation instructing unit for instructing a user how to hold the hand in order to capture a blood vessel image of the hand in a non-contact manner, and one or more irradiating the hand with near infrared light An imaging device that includes an irradiation unit and one or more imaging units that capture an image of near-infrared light and that can capture a blood vessel image without contact with a hand is used. Also, the blood vessel image detecting means for detecting the blood vessel image from the photographed image, the storage means for storing the blood vessel image registered for each user, and the registered blood vessel image and the detected blood vessel image are compared. Recognition means for performing personal recognition.
As the position / direction shape instructing means, means in which the surface on which the user is to hold the hand is configured in a planar shape, and an appropriate position and orientation of the hand is represented graphically is used.
Furthermore, the personal recognition device of the present invention corrects the detected blood vessel image by detecting means for detecting the position and / or orientation of the hand for each detection of the blood vessel image, and when the correction result is appropriate. Correction means for providing the corrected image to the recognition means, and when the correction result is inappropriate, the position / orientation shape instruction means notifies the user of the fact.
図１は、本発明の原理構成ブロック図である。
図２は、本実施形態における個人認識装置の構成を示すブロック図である。
図３は、個人認識処理のフローチャートである。
図４は、撮影部の構成例を示す図である。
図５は、血管像の例を示す図である。
図６は、記憶部の記憶内容の例である。
図７は、撮影機器の外観を説明する図である。
図８は、複数のカメラを使う撮影方法の説明図である。
図９は、カメラの前面に透明板、あるいはハーフミラーを設置する例を示す図である。
図１０は、外光の影響を除くための手の入れ方の説明図である。
図１１は、外光の影響を除くためののれんや反射板の利用の説明図である。
図１２は、外光の影響を減少させるための複数の照明の利用を説明する図である。
図１３は、持ち運びが容易な撮影機器の装置形状の例である。
図１４は、手の向きの検出法の説明図である。
図１５は、画像上の手形状抽出処理の説明図である。
図１６は、画像上の手形状と登録された手形状との比較を説明する図である。
図１７は、手形状のステレオ計測を説明する図である。
図１８は、個人認識装置と接触式カード読み取り装置との組合せを示す図である。
図１９は、個人認識装置と挿入式カード読み取り装置との組合せを示す図である。
図２０は、本実施形態におけるプログラムのコンピュータへのローディングを説明する図である。FIG. 1 is a block diagram of the principle configuration of the present invention.
FIG. 2 is a block diagram showing the configuration of the personal recognition apparatus in the present embodiment.
FIG. 3 is a flowchart of the personal recognition process.
FIG. 4 is a diagram illustrating a configuration example of the imaging unit.
FIG. 5 is a diagram illustrating an example of a blood vessel image.
FIG. 6 is an example of the contents stored in the storage unit.
FIG. 7 is a diagram for explaining the external appearance of the photographing apparatus.
FIG. 8 is an explanatory diagram of a photographing method using a plurality of cameras.
FIG. 9 is a diagram illustrating an example in which a transparent plate or a half mirror is installed in front of the camera.
FIG. 10 is an explanatory diagram of how to put a hand to remove the influence of external light.
FIG. 11 is an explanatory diagram of the use of goodwill and a reflector for removing the influence of external light.
FIG. 12 is a diagram illustrating use of a plurality of illuminations for reducing the influence of external light.
FIG. 13 shows an example of the device shape of an imaging device that is easy to carry.
FIG. 14 is an explanatory diagram of a hand orientation detection method.
FIG. 15 is an explanatory diagram of the hand shape extraction process on the image.
FIG. 16 is a diagram illustrating a comparison between the hand shape on the image and the registered hand shape.
FIG. 17 is a diagram for explaining hand-shaped stereo measurement.
FIG. 18 is a diagram illustrating a combination of a personal recognition device and a contact card reader.
FIG. 19 is a diagram showing a combination of a personal recognition device and an insertion type card reader.
FIG. 20 is a diagram for explaining loading of a program into a computer according to the present embodiment.
図１は本発明の個人認識装置の原理構成ブロック図である。同図は手の血管像を検出して個人認識を行う装置の原理を示し、個人認識装置１は撮影機器２、血管像検出手段３、血管像記憶手段４、および認識手段５を備える。
撮影機器２は、利用者に手のかざし方を指示する位置向き形状指示手段６と、手に近赤外光を照射する１以上の照射手段７と、その近赤外光による画像を撮影する１以上の撮影手段８を備え、手と接触することなく血管像を撮影可能な撮影機器である。
血管像検出手段３は、１つ以上の撮影手段８によって撮影された画像から血管像を検出するものであり、血管像記憶手段４は利用者の各人毎に登録された手の血管像を記憶するものであり、認識手段５は登録された血管像と検出された血管像とを比較して、個人認識を行うものである。
発明の実施の形態においては、位置向き形状指示手段６として、利用者が手をかざすべき面を平面状の形状で構成し、手の適切な位置、向きを図式で表すことができる。図式の１例として手型を用いることができる。また、撮影機器の前面に利用者が手をかざすべき透明板またはハーフミラーを備えることや撮影機器を認識装置の穴の中や、認識装置に備えられる溝にそって格納することもできる。
また、個人認識装置の実用性や認識精度を向上させるため様々な技術が用いられる。例えば、利用者が手をかざすべき面に近赤外光を透過し、撮影機器の強度を補強する板が貼られることも、手をかざすべき面を任意の角度に調整可能な取付け台を用いることなどの様々な方法が用いられる。
また実施の形態においては、照射手段を複数備え、１つ以上の撮影手段８への近赤外光以外の外光の入り方に応じて、複数の照射手段７による近赤外光の照射を制御することもできる。次に、認識精度を向上させるために、個人認識装置１は血管像の検出毎に撮影された手の画像から手の位置、および／または向きを検出する検出手段と、検出された手の位置、および／または向きに対応して、検出された血管像を補正して、補正が適切である場合には補正後の画像を認識手段５に与える補正手段を備えることができる。補正が不適切である場合には位置向き形状指示手段６が利用者にそのことを通知することができる。
この場合、検出手段が反射光強度の画像上における非一様性によって手の向きを、画像上での手形状に対応して手の位置、および／または向きを検出することもできる。さらに、個人認識装置１が、手形状に対応して登録されるパラメータを利用者の各人毎に記憶する手形状記憶手段を備え、検出手段が登録されたパラメータと画像上でのパラメータとを比較して、手の向きを求めることもできる。
また検出手段が手を平面で近似して手の向きを検出し、補正手段がその平面を表すパラメータを用いて血管像を補正することもできる。
実施の形態において個人認識装置１は、撮影機器２の上に手がかざされているか否かを判定する手段と、手がかざされていると判定された時に認識手段５に個人認識を行わせる認識制御手段とを更に備えることもできる。
更に本発明の個人認識装置１は撮影手段８を複数備えると共に、複数の撮影手段８によって撮影された手の画像から手の３次元形状を算出する算出手段と、その算出結果に対応して、検出された血管像の補正を行う補正手段とを更に備えることもできる。
次に本発明の個人認識装置は、１つ以上の照射手段７と１つ以上の撮影手段８とを備え、小型で可搬のペン型形状を持ち、手と接触することなく血管像を撮影可能な撮影機器２と、血管像検出手段３、血管像記憶手段４、および認識手段５を備える。
この場合、個人認識装置１は撮影機器２を回転可能とする関節機構、撮影機器を固定する三脚、または撮影機器を計算機の外部接続機構に取り付ける取り付け部を更に備えることもできる。
以上のように本発明によれば、手の血管像を非接触で撮影し、また必要に応じて手の位置や向きを検出し、位置や向きが不適切である場合にはそれを補正して認識精度を向上させることができる。
図２は本発明の実施形態における個人認識装置の構成ブロック図、図３は個人認識処理のフローチャートである。この個人認識装置では手の平、手の甲、手首など、血管を撮影しやすい人体の各部に近赤外光を照射して、反射あるいは、透過した光の強度分布を撮影して、その画像から血管像が検出される。一般に、装置内に記憶された血管像と、撮影された血管像が一致するか否かの判断によって個人認識を行い、結果が出力される。
図２において照射部１０は、例えば近赤外光を発光するＬＥＤ（発光ダイオード）であり、必要に応じて多数のＬＥＤを用いることができる。撮影部１１はＣＣＤカメラ、またはＣＭＯＳカメラであり、必要に応じて複数のカメラが使用される。
位置検出部１２、向き検出部１３は、撮影された画像から手の位置や向きを検出するものであり、位置・向き補正部１４はそれらの検出結果に基づいて血管像の位置や向きを補正し、認識精度を向上させるものである。ただし、補正量が定められた値よりも大きい場合には、補正は不適切と判断し、補正を行なわない。その場合には、位置向き形状指示部１５が、利用者に不適切である旨の通知を行なう。
図２においては、登録された各個人の血管像は、例えばカード１６の形式で記憶されており、カード１６にはその個人のＩＤと血管像のデータ、例えば血管像の各画素に対応するデータが記憶されており、そのデータはカード読み取り部１７によって読み取られ、認識部１８に与えられる。ここでは記憶部１６としてカードを用いるものとしたが、例えばハードディスクなどの外部記憶装置を用いることもできる。
位置検出部１２、向き検出部１３、位置・向き補正部１４、カード読み取り部１７、および認識部１８は一般に計算機、およびそのプログラムとして実現されるが、全てを必ずしも同一の計算機内に置く必要はなく、例えば認識部１８をネットワークでつながれたホストコンピュータ側で実現することも当然可能である
図２では、個人認識装置が自動ドアと組み合わされて入室管理に適用されるものとする。認識部１８によってカードの個人ＩＤと一致する個人であると認識された場合には、制御部１９によってドアのロックが解除され、その個人の入室が可能となる。
図３の認識処理において処理が開始されると、まずステップＳ１で、例えばカード読みとり装置に挿入されたカードのＩＤと、それに対応する登録された血管像が読み込まれる。ステップＳ２で、手のかざし方が指示される。この指示については後述する。ステップＳ３で手に近赤外光が照射され、ステップＳ４で撮影された画像から血管像が検出される。この検出については後述する。
撮影された画像には、一般に手全体の画像が含まれているため、その画像を用いてステップＳ５で手の位置が、ステップＳ６で向きが検出され、ステップＳ７でこれらの検出結果を用いて検出された血管像の位置と向きが、認識精度が向上するように補正される。これらの検出と補正については後述する。補正が不適切な場合にはステップＳ２で手のかざし方が再び指示される。
続いてステップＳ８で、検出され、補正された血管像と、ステップＳ１で読み込まれた血管像とが比較され、ＩＤに対応する登録血管像との比較結果がＯＫである場合には、ステップＳ９でドアのロックが解除され、比較結果がＮＧであればドアのロックは解除されることなく、処理を終了する。
個人認識処理は、前述のようにＩＤに対応する特定の個人を識別する検証処理と、登録された複数の利用者の中の特定の１人であることを判定する識別処理に分類される。これらの処理について、更に詳細に説明する。検証処理の処理手順は以下の通りである。
１．ＩＤの入力 カードや暗証番号によって指定された個人ＩＤを受け付けるただし、同一の個人ＩＤに対して繰り返し検証処理を行なう場合には、ＩＤの入力を省略することができる。
２．登録血管像の獲得 入力された個人ＩＤで指定される登録血管像を記憶部１６から獲得する。繰り返し検証処理を行なう場合には、前回の検証処理における登録血管像を記憶しておき、そのまま用いることができる。
３．撮影血管像の獲得 撮影部１１から撮影血管像を獲得する。
４．類似度の算出 両者の一致の程度を表す量である類似度を算出する。
５．判定 類似度が定められた閾値よりも大きい場合には検証成功であり、利用者は個人ＩＤによって表される個人（本人）であると判断する。そうでない場合には、検証失敗であり、利用者は他人であると判断する。
一方、識別処理を行なう場合の認識部１８の処理手順は以下の通りである。
１．登録血管像の獲得 記憶部１６に登録された複数人の血管像を獲得する。繰り返し識別処理を行なう場合には、前回の識別処理における登録血管像を記憶しておき、そのまま用いることができる。
２．撮影血管像の獲得 撮影部１１から撮影血管像を獲得する。
３．類似度の算出 各人毎に登録血管像と撮影血管像の一致の程度を表す量である類似度を算出する。
４．判定 類似度が最も大きい個人を選出する。類似度の最大値が定められた閾値よりも小さい場合には、該当者なし（登録されていない）と判断する。そうでない場合には、利用者は選出された類似度が最も大きい個人であると判断する
図４は図２の撮影部１１の構成例である。同図において撮影部１１は、入力光から可視光線を遮断する可視光カットフィルタ２０、ＣＭＯＳカメラ２１、ＣＭＯＳカメラ２１の撮影画像から血管像を抽出する画像処理部２２から構成されている。
前述のように、図２の照射部１０としては近赤外光を発光するＬＥＤを利用することが好ましい。カメラとしては、ＣＭＯＳカメラ２１の代わりにＣＣＤカメラを使用することもできる。ＣＭＯＳカメラは小型で価格も安いが、ＣＣＤカメラの方がきれいな画像を撮影することができ、用途に応じていずれかを選択することができる。
血管は、例えばＣＭＯＳカメラ２１によって撮影された画像上で、例えば手全体の画像を背景として暗いパターンによって表されるために、画像処理部２２によって撮影画像に２値化処理を施すことによって抽出される。２値化処理は、例えば画像内の各画素の（濃度）値が定められた値よりも大きい場合には、画素の値を１に、そうでない場合には０とすることで実現される。２値化処理は専用のＩＣ（マイコン）で実現することもでき、あるいは図２の認識部１８による前処理として、計算機内のプログラムとして実現することもできる。図５は検出された血管像の例である。
撮影された血管像と登録された血管像の一致の程度を表す量である類似度は例えば以下のように算出する。
１．初期化 注目画素を画像左上に設定する。一致した画素の個数を保持する変数（カウンタ）を０に初期化する。
２．画素値の比較 注目画素における、２枚の画像の画素の値を獲得して比較する。両者が一致していればカウンタの値を１つ増加させる。
３．注目画素の移動 注目画素を１つ右に移動する。右端の場合には、１つ下の左端に移動する。右下の場合には終了する。
４．繰り返し 再度、画素値の比較を行なう。（２．から繰り返す）
５．類似度出力 カウンタの値を類似度とする。
上述した類似度算出方式は、手を置く位置や向きによって類似度の値が影響を受ける問題がある。類似度の計算方式を改良することで、これらの影響を低減させることができる。また、上の説明では血管像として２値の画像をそのまま用いているが、記憶容量の削減や認識処理の高速化のため、画像から特徴量を算出してそれらを記憶し、認識時には特徴量の比較によって類似度を算出する方法も考えられる。特徴量としては、例えば画像から分岐点や端点等の特徴点を抽出してそれらの位置を用いることが考えられる。本実施形態では、血管像の表現形態や比較方式の詳細には関わらない。
記憶部１６は、個人ＩＤと血管像を対応付けて記憶するものであり、典型的には図６に示すデータ格納形式のデータベースとして計算機内に実現される。血管像は、一定の規則に従ってそれを表す画像の各画素の値や各特徴点の位置等を数字の列に変換して格納される。
血管像の登録処理も同一の装置を用いて行なうことができる。処理手順は以下の通りである。
１．ＩＤの入力 カードや暗証番号によって指定された個人ＩＤを受け付けるただし、個人ＩＤがすでに定められている場合には、ＩＤの入力を省略することができる。
２．撮影血管像の獲得 撮影部１１から撮影血管像を獲得する。
３．血管像の登録 個人ＩＤと撮影血管像を記憶部１６に登録する。
前述のように非接触で手の血管画像を撮影し、個人認識を行う場合には、手の開き方、位置、向きの変化、外光の影響、および手、カメラ、照明の相互関係によって撮影画像の品質が低下し、本人の登録血管画像との類似度が低下する傾向がある。他人と誤って判断されることを避けるため類似度の閾値を下げると、逆に他人が誤って本人と判断される確率が増加し、認識精度が低下する。
本実施形態では、このような認識精度の低下を避けるために、利用者に手のかざし方を指示する位置向き形状指示部１５を設けている。その他に認識方式にも工夫を加えている。まず、位置向き形状指示部１５について詳述する。
手は人体の中で最も自由に動かすことができる器官であるため、利用者に適切な指示を与えればかざし方の変動を最小限に抑えることができる。具体的には、利用者が意識せずに自然に手の平を広げてかざすように、照射部１０（ＬＥＤ等）とカメラを薄い平面状の撮影機器に格納する。これにより、照明の方向とカメラの光軸をほぼ直交化させることが可能となり、撮影画像の品質が向上する。更に、手の開き方を安定化させる効果もある。
手の位置、向きが撮影毎に変化することを防ぐため、利用者が手をかざすべき面に手の適切な位置、向きを図式で表す。図式の例として、手型を使用することができる。あるいは、指の先端位置を点で示すこともできる。手型は、平面的なシールで構成する。あるいは、プラスチック等の素材を用いた立体形状にする。幼児などが利用する環境では、幼児の抵抗感を弱めるために、撮影機器を人気のある人形などの等身大の手の形にして、握手をさせて個人認識を行なうことも考えられる。
後述する補正処理が不適切と判断される場合には、適切な位置、向きを利用者に指示することができる。例えば、指の先端位置にＬＥＤを取り付けて、補正に不適切であった箇所を点滅させる、あるいはＬＥＤを並べて配置し適切な方向を光の流れで表すことができる。その他、利用者への通知を音声、ベル、ランプ点灯等によって行なうことができる。通知内容は単に不適切であるということだけあるいは不適切さの理由、例えば向きが傾いていることを伝える。
撮影機器には、手の平で叩かれる可能性を考慮した強度を持たせることが好ましい。強度を持たせる１つの方法は、撮影を行なう側の面に（近赤外光に関して）透明なプラスチック等の素材を張ることである。この際、可視光に関して不透明な素材を用いれば、内部の構造が隠蔽され防犯対策になる。撮影環境に応じて手をかざしやすい位置に設置できるように、撮影機器は容易に運搬、設置が可能な大きさとする。傾けて設置できるように、取り付け台を装着可能とする。図７に撮影機器の外観を示す。
カメラと手の距離が非常に近い場合には、撮影できる手の範囲が限られるため登録された箇所が写らない可能性がある。この問題を解決する方法として、魚眼レンズのような広角のレンズを使う方法やカメラを複数配置する方法がある（図８）。複数のカメラで撮影された画像は１つの撮影画像に統合して使用される。また、カメラの前面に透明板あるいはハーフミラーを設置して、利用者に手の平を広げさせつつカメラまでの距離を大きくする方法もある（図９）。
近赤外光を照射して撮影を行なうので外光の影響は受けにくいが、屋外等の外光が多量に入る環境では、外光をできるだけ除くことが望ましい。外光を除去する装置形状として、図７の撮影機器を穴や溝の中に格納する以下の形態がある（図１０）。図１０の左では穴の前面と後面に、中央では上面と下面とに撮影機器を設置して手の平と甲とを同時に撮影できる。また、提示する手の後ろにのれん型の遮蔽板を置く形態もある（図１１左）。のれんの内側に反射板を付けて手をのれん内に入れずに済ませることもできる（図１１右）。反射板の角度は可変にすることが好ましい。
外光の影響を減少させる別の手段として、ＬＥＤを複数配置して、照明の照射強度を上げるとともにまんべんなく当てる方法がある（図１２）。外光の影響が小さくなるように照明を調節、あるいは切替えてもよい。例えば、取り付け位置と現在の時刻から太陽光線の向きを計算して、それに近い向きのＬＥＤを点灯する。
また、撮影機器を小型化して容易に運搬可能とし、使用時に外光の入らない場所に設置することで外光の影響を除く方法も考えられる。これを実現する装置形状として、図１３のペン型がある。装置先端にカメラとＬＥＤが格納されている撮影時には、関節を曲げて固定台に乗せて使用する。装置を固定する器具として穴の開いた固定台や三脚を使用する。ノート型の持ち運び可能な計算機とともに使用する場合には、計算機に取り付けて固定させることもできる（クリップで挟む、拡張スロットに挿すなど）。
撮影毎に手の位置、向きを検出し、それに基づいて以下の処理を行なうことで手の位置、向きが撮影毎に変化する問題を解決する。
・位置、向き補正部１４において適切な補正処理を行なう。
・補正が不適切な場合には、位置向き形状指示部１５が利用者に不適切である旨を通知して修正してもらう。
手の向きを検出する方法としては、例えば反射強度の非一様性を検出する方法がある。これは、手の平を傾けてカメラに提示すると、遠い箇所からの反射強度が小さくなる原理に基づく（図１４）。
非一様性の検出は、例えば以下のように行なう。撮影された画像を上下左右に４分割して、それぞれの領域における（部分画像の）画素の値の平均を計算する計算された４つの平均値の差が十分小さい（例えば閾値以下かどうかで判定）場合には、反射強度は一様であり手の向きは平であると判断する。そうでない場合には、平均値が最も高い領域が近くなる方向に傾いていると判断する。
手の向きを検出する別の方法として、画像上での手形状を求める方法がある。この場合、手全体を撮影できるようにカメラの視野を広く設定する。複数のカメラを組み合わせて視野を広げてもよい。手には照明が当るので手に対応する画素の値は大きくなり、背景には照明が当らないので背景に対応する画素の値は小さくなる（図１５）。そこで、２値化処理によって値の大きな画素を抽出することで、画像上での手形状を求めることができる。抽出された手形状と、登録された（あるいは平均的な）手形状を比較することで手の向きを求める。例えば、それぞれの手形状から上下、左右方向の長さを求めて、その比（上下方向長さ／左右方向長さ）を求める。２つの手形状に関して、この比の差があらかじめ定められた閾値よりも小さい場合には、手の向きは平であると判断する。例えば、図１６では抽出された手形状は上下方向に短くなっており、傾いていると判断される。他の比較基準としては、手の周囲長と、例えば１本の指の幅の比などが考えられる。指の幅は手が傾いていてもほぼ一定になるためである。
認識部１８で向きの補正を行なう方法について説明する。検出された手の傾きに基づいて手を正面から見たときの画像を合成することで、向きの補正を行なう例えば手の平を平面で近似して、面の向きを求める。平面はｚ＝ａｘ＋ｂｙ＋ｃのように３つのパラメータａ，ｂ，ｃ（平均距離と上下，左右方向の傾き）で表現される。前述した非一様性の検出に基づいてこれらのパラメータを推定する場合、反射強度と距離の関係として、例えば反射強度は距離の２乗に反比例すると仮定する。この仮定により、画像の各領域での平均的な距離が算出できるので、
平均距離＝ａ＊領域中心の左右方向での座標値＋ｂ＊領域中心の上下方向での座標値＋ｃ
という関係式が領域の数だけ得られる。この方程式を解くことで、パラメータａｂ、ｃが求められる。これらのパラメータを用いれば、射影変換によって手を正面から撮影したときの画像を合成することができる。詳細は例えば次の文献６に記述されている。
文献６）画像解析ハンドブック，東京大学出版会．
求められた平面のパラメータにおいて、ａ，ｂは手の傾きを表している。これらの絶対値は補正の程度を表す。補正の程度が大きい場合には補正後の画像品質は劣化し認識精度が低下する。そこで、例えば｜ａ｜＋｜ｂ｜が与えられた値よりも大きいかどうかで、補正の適切／不適切を判断する。補正が不適切と判断される場合には、補正処理を行なわず利用者に通知する。
なお、前述した画像上での手形状から向きの補正を行なう場合は、上記の平面のパラメータを求めて射影変換を施す方法を用いるか、あるいはより簡単な方法として上下、左右方向の比で画像を拡大する方法を用いる。血管像として画像から抽出した特徴を用いる場合には、正面から撮影した画像を合成せずに、直接、正面から撮影した画像から得られる特徴を合成してもよい。
次に、手の位置を検出する方法を述べる。前述した画像上の手形状を求めることで、手の位置を検出する。手全体を撮影できるようにカメラの視野を広く設定する。複数のカメラを組み合わせて視野を広げてもよい。図１５で述べたように２値化処理によって値の大きな画素を抽出することで、画像上での手形状を求めることができる。手に対応する画素の平均位置を手の平均位置と定める。登録データに対してもあらかじめ手の平均位置を求めておき、認識時に両者の位置ずれを補正する。具体的には、両者の差で表される量の平行移動処理を、撮影画像の画素の値に対して施すことで、位置ずれを補正する。
最後に、認識処理を行なう時刻（タイミング）に関して説明する。入退出等において、個人認識が必要になる時刻は通常定められていないので、基本的には常時撮影部１１を動作させる必要がある。ただし、カード提示や暗証番号入力等の動作が先行する場合には、その後の一定時間だけ撮影部１１を動作させれば十分である。また位置向き形状指示部１５が利用者に手の提示を促してもよい。撮影部１１は、撮影して血管像を抽出する処理を繰り返す。血管像の抽出処理の誤動作を防ぐ観点からは、手がかざされているかどうかを判断して、かざされている場合にのみ血管像を抽出することが好ましい。手がかざされているかどうかは、例えば撮影画像の画素の平均値が閾値以上かどうかで判定する。時間的に連続する複数の撮影画像の中から、最適な画像を選択することもできる。選択基準は、例えば撮影画像の画素の平均値が最大のものを用いる。あるいは画像上の手形状の面積が最大のものを用いる。
続いて非接触であることを生かして、認識精度を更に向上させる方式を説明する。
１）手形状の併用
手の形状や向きを検出することを利用して、これらを認識に併用することで認識精度を向上させる。登録時に手形状も一緒に登録しておき、認識時に手形状の一致も判断材料に加える。登録時の手形状は利用者が自由に定める。例えば、手を握った状態で親指のつけねの血管像を登録する。認識時には、手が握られた状態であるかどうかを、例えば手形状の上下，左右の長さの比から判定する。血管像の類似度が閾値以上で、かつ手が握られた状態である場合にのみ、本人と判断する。
２）複数箇所の認識
手の複数箇所の認識を行なうことで認識精度を向上させる。カメラを複数配置して、広い範囲の撮影を行なう。特に、穴の中に手を入れるタイプの装置では、前述のように手の両面を撮影することができる。認識方法は、例えばそれぞれの箇所で本人と判断される場合に本人と判断する。あるいは類似度の和が最大の人であると判断する。
時間的に連続して撮影する場合には、手の複数箇所を順に認識することで認識精度の向上を図る。手のどの箇所が提示されているかの判断は、例えば画像上の手形状から定める。更に、提示の順番も認識に使用することができる。
その他の認識精度向上方式についてさらに説明する。
１）３次元形状の算出
より高精度の認識が可能となる技術として、撮影画像から手の３次元形状を算出する技術に関して説明する。画像から物体の３次元形状を算出する技術は公知技術であるので、詳細な説明は省略する。例えば文献６を参照されたい。複数のカメラを設置し、ステレオ計測により、手の３次元形状を求める。ステレオ計測は、２枚の画像で対応点を求めることで行なう（図１７）。
算出された３次元形状を利用すれば、撮影画像のより正確な補正処理が可能になる。補正処理の方法は、前述と同様である。また、抽出された血管像に対してステレオ計測を行なうことで、血管の３次元形状が求められる。類似度の計算を３次元で行なうことで、より高精度の認識が可能になる。なお、複数のカメラの代わりに、時間的に連続する複数の画像を使用して、運動視差から３次元形状を算出することができる。また、照明を切替えたり、照明に特定のパターンを持たせることでも、３次元形状を算出することができる。
２）可視光の併用
手の平を撮影する場合には、手の平の表面にあるしわ（手相）も写る。しわは比較的容易に複製する（盗む）ことができるので、個人認識に使用しないことが望ましい。可視光での撮影を併用すれば、しわと血管像を分離できる。可視光での撮影は、例えば別のカメラで行なう。あるいは図４の可視光カットフィルタ２０を部分的に取り除いてもよい。しわは可視光でのみ写るので、赤外光での検出結果から可視光での検出結果を除くことでしわが除去される。しわを除いた血管像を登録し、しわを除いた撮影血管像と比較する。または、除去されたしわの量を算出して、しわが多いときには、利用者に手の開き方を変える警告を表示する
次に利用者の利便性を向上させる方式について説明する。例えば入退出管理等における個人認識では、利用者が最初にカード（ＩＣカード等）で認識装置にＩＤを提示し、次に手をかざしてＩＤを検証する利用形態が主である。非接触型のＩＣカードを使用する場合には、操作上特に問題は生じないが、接触型や挿入型のカードを使用する場合には、カードを手で操作後に再度、手をかざさねばならず、操作が繁雑になる問題がある。以下では、この問題を解決する方法を述べる
１）カードをかざして手首か手の甲を撮影
カード表面をカード読み取り装置に接触させるカード認識機構を使用する場合には、カード読み取り装置の下に個人認識装置のカメラを設置して手首を撮影する（図１８）。あるいはカード読み取り装置の隣にカメラを設置して、カード読み取り処理後に手を回転させて手の甲を撮影する。これにより、１度の操作で個人認識を行なうことができる。
２）カード挿入後に手の平を撮影
カードをカード読み取り装置に挿入するカード認識機構を使用する場合には、カード挿入部あるいは挿入部より上（高い位置）に個人認識装置のカメラを設置して、カード挿入後に手の平を撮影する（図１９）。手を回転させて手の甲を撮影してもよい。これにより、１度の操作で個人認識を行なうことができる。なお、本方式は、挿入部からカードが排出されるカード認識機構に対してだけでなく、利用者がゲート（門）を通り、別の所でカードを受け取るカード認識機構に対しても同様に適用可能である。
個人認識装置の別の利用形態として、会議や授業の出欠を管理する場合、会議室や教室の入口に個人認識装置を設置すると、会議開始前に人が殺到して混乱することが予想される。以下では、この問題を解決する方法を述べる。
出席予定者全員の血管像を記憶した個人認識装置を会議中に回覧して、順次個人認識を行なう。出席者に自分が出席登録されたことを確認させるため、回覧する装置には認識部１８と、結果を表示する表示部を含めることが好ましい。個人認識処理としては、カード提示により個人ＩＤを得て検証処理を行なうか、あるいはカードなしの識別処理を行なう。認識結果は個人認識装置内に格納しておき装置回収後に出欠管理装置にデータを転送して集計を行なう。個人認識装置に暗号化機能を組み込む場合には、認識のたびに出欠管理装置に無線通信機構を用いて送信してもよい。暗号化を行うのは、例えば重要な秘密会議の出席者を明らかにしないためである。
以上において本発明の個人認識装置についてその詳細を説明したが、この個人認識装置は当然撮影機器を含むコンピュータシステムとして構成することが可能である。図２０はそのようなコンピュータシステム、すなわちハードウエア環境の構成ブロック図である。
図２０においてコンピュータシステムは中央処理装置（ＣＰＵ）５０、リードオンリメモリ（ＲＯＭ）５１、ランダムアクセスメモリ（ＲＡＭ）５２、通信インタフェース５３、記憶装置５４、入出力装置５５、可搬型記憶媒体の読み取り装置５６、およびこれらの全てが接続されたバス５７によって構成されている。
記憶装置５４としてはハードディスク、磁気ディスクなど様々な形式の記憶装置を使用することができ、このような記憶装置５４、またはＲＯＭ５１に図３のフローチャートに示されたプログラムや、手の向きや位置の検出、血管像の補正などのプログラムが格納され、そのようなプログラムがＣＰＵ５０によって実行されることにより、本実施形態における非接触で撮影される手血管像を利用した個人認識などが可能となる。
このようなプログラムは、プログラム提供者５８側からネットワーク５９、および通信インタフェース５３を介して、例えば記憶装置５４に格納されることもまた市販され、流通している可搬型記憶媒体６０に格納され、読み取り装置５６にセットされて、ＣＰＵ５０によって実行されることも可能である。可搬型記憶媒体６０としてはＣＤ−ＲＯＭ、フレキシブルディスク、光ディスク、光磁気ディスクなど様々な形式の記憶媒体を使用することができ、このような記憶媒体に格納されたプログラムが読み取り装置５６によって読み取られることにより、本実施形態における手の血管像による個人認識が可能となる。
以上詳細に説明したように本発明によれば、非接触で手の血管画像を撮影することにより、利用者の負担が小さく衛生的で清潔感のある個人認識装置を提供することが可能となる。非接触で撮影することによる認識精度の低下を避けるために、装置形態と認識方式を工夫し、例えば手の位置や向きを検出して、その検出結果に応じて血管画像の補正を行うことにより、手の血管画像を利用した個人認識装置の実用性の向上に寄与するところが大きい。FIG. 1 is a block diagram showing the principle configuration of a personal recognition apparatus according to the present invention. FIG. 1 shows the principle of an apparatus for performing personal recognition by detecting a blood vessel image of a hand. The
The photographing
The blood vessel
In the embodiment of the invention, as the position / orientation shape instructing means 6, the surface on which the user should hold the hand can be configured in a planar shape, and the appropriate position and orientation of the hand can be represented graphically. A hand mold can be used as an example of the diagram. It is also possible to provide a transparent plate or a half mirror that the user should hold in front of the photographing device, or store the photographing device in the hole of the recognition device or along the groove provided in the recognition device.
Various techniques are used to improve the practicality and recognition accuracy of the personal recognition device. For example, a plate that transmits near-infrared light to the surface on which the user holds the hand and reinforces the strength of the photographing device can be attached, or a mounting base that can adjust the surface on which the hand is held to an arbitrary angle is used. Various methods are used.
Further, in the embodiment, a plurality of irradiation means are provided, and near-infrared light is irradiated by the plurality of irradiation means 7 in accordance with how the outside light other than near-infrared light enters one or more photographing
In this case, the detection unit can detect the orientation of the hand based on the non-uniformity of the reflected light intensity on the image, and the position and / or orientation of the hand corresponding to the hand shape on the image. Furthermore, the
Further, the detection means can approximate the hand in a plane to detect the orientation of the hand, and the correction means can correct the blood vessel image using a parameter representing the plane.
In the embodiment, the
Furthermore, the
Next, the personal recognition apparatus of the present invention includes one or more irradiation means 7 and one or more photographing
In this case, the
As described above, according to the present invention, a blood vessel image of a hand is taken in a non-contact manner, the position and orientation of the hand are detected as necessary, and the position and orientation are corrected if they are inappropriate. Recognition accuracy can be improved.
FIG. 2 is a block diagram showing the configuration of the personal recognition apparatus according to the embodiment of the present invention, and FIG. 3 is a flowchart of personal recognition processing. This personal recognition device irradiates each part of the human body, such as the palm, the back of the hand, and the wrist, which is easy to photograph blood vessels, and irradiates near-infrared light to capture the intensity distribution of reflected or transmitted light, and the blood vessel image is obtained from the image Detected. Generally, personal recognition is performed by determining whether or not the blood vessel image stored in the apparatus matches the photographed blood vessel image, and the result is output.
In FIG. 2, the
The
In FIG. 2, the registered blood vessel image of each individual is stored, for example, in the form of a card 16, and the card 16 stores the personal ID and blood vessel image data, for example, data corresponding to each pixel of the blood vessel image. Is stored, and the data is read by the
The
In FIG. 2, it is assumed that the personal recognition device is applied to entrance management in combination with an automatic door. If the
When the processing is started in the recognition processing of FIG. 3, first, in step S1, for example, an ID of a card inserted into the card reader and a registered blood vessel image corresponding thereto are read. In step S2, how to hold the hand is instructed. This instruction will be described later. In step S3, the hand is irradiated with near infrared light, and a blood vessel image is detected from the image taken in step S4. This detection will be described later.
Since the captured image generally includes an image of the entire hand, the position of the hand is detected in step S5 using the image, and the orientation is detected in step S6, and these detection results are used in step S7. The position and orientation of the detected blood vessel image are corrected so that the recognition accuracy is improved. These detection and correction will be described later. If the correction is inappropriate, the hand is again instructed in step S2.
Subsequently, in step S8, the detected and corrected blood vessel image is compared with the blood vessel image read in step S1, and if the comparison result between the registered blood vessel image corresponding to the ID is OK, step S9. If the door is unlocked and the comparison result is NG, the door is not unlocked and the process is terminated.
As described above, the personal recognition process is classified into a verification process for identifying a specific individual corresponding to an ID and an identification process for determining that the user is a specific one of a plurality of registered users. These processes will be described in more detail. The processing procedure of the verification process is as follows.
1. Input of ID Accepts a personal ID specified by a card or a personal identification number. However, when the verification process is repeatedly performed on the same personal ID, the input of the ID can be omitted.
2. Acquisition of registered blood vessel image A registered blood vessel image specified by the inputted personal ID is acquired from the storage unit 16. When the verification process is repeatedly performed, the registered blood vessel image in the previous verification process can be stored and used as it is.
3. Acquisition of imaging blood vessel image An imaging blood vessel image is acquired from the imaging unit 11.
4). Calculation of similarity The similarity that is an amount representing the degree of coincidence between the two is calculated.
5. Determination If the degree of similarity is greater than a predetermined threshold, the verification is successful, and the user is determined to be the individual (person) represented by the personal ID. Otherwise, it is a verification failure and it is determined that the user is another person.
On the other hand, the processing procedure of the
1. Acquisition of registered blood vessel images The blood vessel images of a plurality of persons registered in the storage unit 16 are acquired. When the identification process is repeatedly performed, the registered blood vessel image in the previous identification process can be stored and used as it is.
2. Acquisition of imaging blood vessel image An imaging blood vessel image is acquired from the imaging unit 11.
3. Calculation of similarity The similarity that is an amount representing the degree of coincidence between the registered blood vessel image and the captured blood vessel image is calculated for each person.
4). Judgment The individual with the highest similarity is selected. When the maximum value of the similarity is smaller than a predetermined threshold, it is determined that there is no applicable person (not registered). Otherwise, the user determines that the selected individual is the most similar
FIG. 4 is a configuration example of the photographing unit 11 of FIG. In the figure, the imaging unit 11 includes a visible light cut filter 20 that blocks visible light from input light, a
As described above, it is preferable to use an LED that emits near-infrared light as the
The blood vessel is extracted by performing binarization processing on the photographed image by the
The similarity, which is an amount representing the degree of coincidence between the photographed blood vessel image and the registered blood vessel image, is calculated as follows, for example.
1. Initialization Set the target pixel at the top left of the image. A variable (counter) that holds the number of matched pixels is initialized to zero.
2. Comparison of Pixel Values The pixel values of two images at the target pixel are acquired and compared. If they match, the counter value is incremented by one.
3. Move pixel of interest Move the pixel of interest to the right by one. In the case of the right end, it moves to the lower left one. If it is in the lower right, exit.
4). Repeat the pixel value comparison again. (Repeat from 2)
5. Similarity output The value of the counter is the similarity.
The similarity calculation method described above has a problem in that the similarity value is affected by the position and orientation of the hand. These effects can be reduced by improving the similarity calculation method. In the above description, a binary image is used as a blood vessel image as it is. However, in order to reduce the storage capacity and speed up the recognition process, feature amounts are calculated from the images and stored. A method of calculating the similarity by comparing the above is also conceivable. As the feature amount, for example, it is conceivable to extract feature points such as branch points and end points from an image and use their positions. In the present embodiment, the details of the expression form of the blood vessel image and the comparison method are not concerned.
The storage unit 16 stores the personal ID and the blood vessel image in association with each other, and is typically realized in the computer as a data storage format database shown in FIG. The blood vessel image is stored by converting the value of each pixel of the image representing it, the position of each feature point, and the like into a string of numbers according to a certain rule.
The blood vessel image registration process can also be performed using the same apparatus. The processing procedure is as follows.
1. ID input Accepts a personal ID specified by a card or a personal identification number. However, if a personal ID has already been determined, the input of the ID can be omitted.
2. Acquisition of imaging blood vessel image An imaging blood vessel image is acquired from the imaging unit 11.
3. Registration of blood vessel image The personal ID and the photographed blood vessel image are registered in the storage unit 16.
When taking a blood vessel image of a hand without touching and performing personal recognition as described above, the image is taken based on how the hand opens, changes in position and orientation, the influence of external light, and the relationship between the hand, camera, and lighting. There is a tendency that the quality of the image is lowered and the similarity with the registered blood vessel image of the person is lowered. If the similarity threshold is lowered in order to avoid being erroneously determined to be another person, the probability that the other person is erroneously determined to be the person will increase, and the recognition accuracy will decrease.
In the present embodiment, in order to avoid such a decrease in recognition accuracy, a position / orientation
Since the hand is the organ that can be moved most freely in the human body, if the user is given appropriate instructions, fluctuations in the manner of holding can be minimized. Specifically, the irradiation unit 10 (LED or the like) and the camera are stored in a thin planar photographing device so that the user naturally spreads his / her hand without consciousness. This makes it possible to make the illumination direction and the optical axis of the camera substantially orthogonal, thereby improving the quality of the captured image. Furthermore, there is an effect of stabilizing the opening of the hand.
In order to prevent the position and orientation of the hand from changing every time the image is taken, the appropriate position and orientation of the hand are represented graphically on the surface on which the user should hold his hand. As an example of the diagram, a hand mold can be used. Alternatively, the tip position of the finger can be indicated by a point. The hand mold is composed of a planar seal. Alternatively, a three-dimensional shape using a material such as plastic is used. In an environment used by infants and the like, in order to weaken the sense of resistance of infants, it may be possible to perform personal recognition by taking a handshake in the shape of a life-size hand such as a popular doll.
When it is determined that the correction processing described later is inappropriate, it is possible to instruct the user of an appropriate position and orientation. For example, it is possible to attach an LED to the tip position of a finger and blink a portion that is inappropriate for correction, or arrange LEDs side by side and indicate an appropriate direction by the flow of light. In addition, the user can be notified by voice, bell, lamp lighting, or the like. The notification content simply tells you that it is inappropriate or the reason for the inappropriateness, for example, that it is tilted.
It is preferable to give the photographing device strength in consideration of the possibility of being hit with a palm. One method of providing strength is to put a material such as a transparent plastic (on the near infrared light) on the surface to be photographed. At this time, if a material that is opaque with respect to visible light is used, the internal structure is concealed to provide a security measure. The photographic equipment should be sized so that it can be easily transported and installed so that it can be placed in a position where you can easily hold your hand depending on the shooting environment. A mounting base can be installed so that it can be installed at an angle. FIG. 7 shows the appearance of the photographing device.
If the hand is very close to the camera, the registered part may not be captured because the range of hands that can be taken is limited. As a method for solving this problem, there are a method using a wide-angle lens such as a fisheye lens and a method of arranging a plurality of cameras (FIG. 8). Images taken by a plurality of cameras are integrated into a single taken image. Another method is to install a transparent plate or half mirror on the front of the camera to increase the distance to the camera while allowing the user to widen the palm (FIG. 9).
Although shooting is performed by irradiating near-infrared light, it is difficult to be influenced by external light, but it is desirable to remove external light as much as possible in an environment where a large amount of external light enters, such as outdoors. As an apparatus shape for removing external light, there is the following form in which the photographing apparatus of FIG. 7 is stored in a hole or groove (FIG. 10). In the left of FIG. 10, photographing devices are installed on the front and rear surfaces of the hole and on the upper and lower surfaces in the center, so that the palm and the back can be photographed simultaneously. There is also a form in which a goodwill-type shielding plate is placed behind the hand to be presented (left in FIG. 11). A reflector can be attached to the inside of the goodwill to eliminate the need to put the hand into the goodwill (right in FIG. 11). The angle of the reflector is preferably variable.
As another means for reducing the influence of external light, there is a method in which a plurality of LEDs are arranged to increase the illumination intensity of the illumination and apply it evenly (FIG. 12). The illumination may be adjusted or switched so that the influence of external light is reduced. For example, the direction of sunlight is calculated from the mounting position and the current time, and the LED in the direction close to it is turned on.
Another possible method is to reduce the size of the photographic equipment so that it can be easily transported and to remove the influence of external light by installing it in a place where external light does not enter during use. As a device shape for realizing this, there is a pen type shown in FIG. When photographing with a camera and LED stored at the tip of the device, the joint is bent and used on a fixed base. A fixed base with a hole or a tripod is used as an instrument to fix the device. When used with a notebook-type portable computer, it can also be attached to the computer and fixed (such as clipped or inserted into an expansion slot).
The position and orientation of the hand is detected for each shooting, and the following processing is performed based on the detected position and orientation to solve the problem that the position and orientation of the hand changes for each shooting.
A proper correction process is performed in the position /
If the correction is inappropriate, the position / orientation
As a method for detecting the orientation of the hand, for example, there is a method for detecting non-uniformity of the reflection intensity. This is based on the principle that when the palm is tilted and presented to the camera, the reflection intensity from a distant place is reduced (FIG. 14).
The non-uniformity is detected as follows, for example. The captured image is divided into four parts vertically and horizontally, and the average of the pixel values (partial images) in each region is calculated. The difference between the calculated four average values is sufficiently small (for example, whether or not it is below a threshold value) ), It is determined that the reflection intensity is uniform and the direction of the hand is flat. Otherwise, it is determined that the region with the highest average value is inclined in the direction of approaching.
As another method for detecting the orientation of the hand, there is a method for obtaining a hand shape on an image. In this case, the field of view of the camera is set wide so that the entire hand can be photographed. Multiple cameras may be combined to expand the field of view. Since the hand is illuminated, the value of the pixel corresponding to the hand is large, and since the background is not illuminated, the value of the pixel corresponding to the background is small (FIG. 15). Therefore, a hand shape on the image can be obtained by extracting a pixel having a large value by binarization processing. The orientation of the hand is obtained by comparing the extracted hand shape with the registered (or average) hand shape. For example, the length in the vertical and horizontal directions is obtained from each hand shape, and the ratio (vertical length / horizontal length) is obtained. When the difference between the ratios of the two hand shapes is smaller than a predetermined threshold value, it is determined that the direction of the hand is flat. For example, in FIG. 16, the extracted hand shape is shortened in the vertical direction, and is determined to be inclined. As another comparison standard, the ratio of the circumference of the hand and the width of one finger, for example, can be considered. This is because the finger width is almost constant even when the hand is tilted.
A method for correcting the orientation by the
Average distance = a * Coordinate value in the horizontal direction of the center of the region + b * Coordinate value in the vertical direction of the center of the region + c
The following relational expression is obtained for each region. By solving this equation, the parameters ab and c are obtained. By using these parameters, it is possible to synthesize an image when the hand is photographed from the front by projective transformation. Details are described in the
Reference 6) Image analysis handbook, University of Tokyo Press.
In the obtained plane parameters, a and b represent the inclination of the hand. These absolute values represent the degree of correction. When the degree of correction is large, the image quality after correction deteriorates and the recognition accuracy decreases. Therefore, for example, whether correction is appropriate or inappropriate is determined based on whether or not | a | + | b | is larger than a given value. If it is determined that the correction is inappropriate, the user is notified without performing the correction process.
When correcting the orientation from the above-described hand shape on the image, use the above-mentioned method of obtaining the plane parameters and performing the projective transformation, or as a simpler method, the image in the ratio of the vertical and horizontal directions. The method of enlarging is used. When features extracted from an image are used as a blood vessel image, features obtained from an image photographed from the front may be directly synthesized without synthesizing the image photographed from the front.
Next, a method for detecting the position of the hand will be described. The hand position is detected by obtaining the hand shape on the image. Set the field of view of the camera wide so that you can shoot the entire hand. Multiple cameras may be combined to expand the field of view. As described with reference to FIG. 15, a hand shape on an image can be obtained by extracting a pixel having a large value by binarization processing. The average position of the pixels corresponding to the hand is determined as the average position of the hand. The average position of the hand is also obtained in advance for the registered data, and the positional deviation between the two is corrected at the time of recognition. Specifically, the displacement is corrected by performing a parallel movement process of the amount represented by the difference between the two on the pixel value of the captured image.
Finally, the time (timing) at which recognition processing is performed will be described. In entry / exit, etc., the time at which personal recognition is required is not usually determined, so basically the photographing unit 11 must be operated at all times. However, in the case where operations such as card presentation and password input are preceded, it is sufficient to operate the photographing unit 11 for a certain period thereafter. In addition, the position / orientation
Next, a method for further improving the recognition accuracy by taking advantage of non-contact will be described.
1) Combined hand shape
By detecting the shape and orientation of the hand and using them together for recognition, the recognition accuracy is improved. The hand shape is also registered at the time of registration, and the match of the hand shape is also added to the judgment material at the time of recognition. The user can freely determine the hand shape at the time of registration. For example, a blood vessel image with a thumb attached is registered while holding the hand. At the time of recognition, whether or not the hand is held is determined from, for example, the ratio of the length of the hand shape in the vertical and horizontal directions. Only when the similarity of the blood vessel image is equal to or greater than the threshold value and the hand is held is determined to be the person himself / herself.
2) Recognition of multiple locations
Recognition accuracy is improved by recognizing a plurality of locations of the hand. A plurality of cameras are arranged to shoot a wide range. In particular, in a type of device in which a hand is put in a hole, both sides of the hand can be photographed as described above. For example, the recognition method is determined when the person is determined to be the person at each location. Alternatively, it is determined that the person who has the highest sum of similarities.
When photographing continuously in time, the recognition accuracy is improved by sequentially recognizing a plurality of positions in the hand. The judgment of which part of the hand is presented is determined from the hand shape on the image, for example. Furthermore, the order of presentation can also be used for recognition.
Other recognition accuracy improvement methods will be further described.
1) Calculation of 3D shape
A technique for calculating a three-dimensional shape of a hand from a captured image will be described as a technique that enables more accurate recognition. Since a technique for calculating the three-dimensional shape of an object from an image is a known technique, detailed description thereof is omitted. For example, see
If the calculated three-dimensional shape is used, it is possible to perform more accurate correction processing of the captured image. The correction processing method is the same as described above. Further, a three-dimensional shape of the blood vessel is obtained by performing stereo measurement on the extracted blood vessel image. By performing similarity calculation in three dimensions, recognition with higher accuracy becomes possible. A three-dimensional shape can be calculated from motion parallax using a plurality of temporally continuous images instead of a plurality of cameras. Also, the three-dimensional shape can be calculated by switching the illumination or giving the illumination a specific pattern.
2) Combined use of visible light
When photographing the palm, the wrinkles (palm) on the surface of the palm are also captured. Since wrinkles can be copied (stolen) relatively easily, it is desirable not to use them for personal recognition. If combined with imaging with visible light, wrinkles and blood vessel images can be separated. Shooting with visible light is performed with another camera, for example. Alternatively, the visible light cut filter 20 of FIG. 4 may be partially removed. Since wrinkles are captured only with visible light, wrinkles are removed by removing the detection results with visible light from the detection results with infrared light. A blood vessel image excluding wrinkles is registered and compared with a photographed blood vessel image excluding wrinkles. Alternatively, calculate the amount of wrinkles removed and display a warning to the user about how to open the hand when there are many wrinkles
Next, a method for improving user convenience will be described. For example, in personal recognition in entry / exit management or the like, there is mainly a usage form in which a user first presents an ID to a recognition device with a card (IC card or the like), and then verifies the ID with a hand. When using a non-contact type IC card, there is no particular problem in operation. However, when using a contact type or insertion type card, the user must hold the hand again after operating the card. There is a problem that the operation becomes complicated. The following describes how to solve this problem
1) Hold the card and photograph the wrist or back of the hand
When using a card recognition mechanism that brings the card surface into contact with the card reading device, a camera of the personal recognition device is installed under the card reading device to photograph the wrist (FIG. 18). Alternatively, a camera is installed next to the card reader, and the back of the hand is photographed by rotating the hand after the card reading process. Thereby, individual recognition can be performed by one operation.
2) Take a picture of the palm after inserting the card
When using a card recognition mechanism that inserts the card into the card reader, install the camera of the personal recognition device above the card insertion part or above the insertion part (high position), and photograph the palm after inserting the card (Fig. 19). The back of the hand may be photographed by rotating the hand. Thereby, individual recognition can be performed by one operation. Note that this method applies not only to the card recognition mechanism in which the card is ejected from the insertion section, but also to the card recognition mechanism in which the user passes the gate and receives the card at another place. Applicable.
As another form of use of personal recognition devices, when managing attendance of meetings and classes, if personal recognition devices are installed at the entrance of a conference room or classroom, it is expected that people will be rushed and confused before the start of the conference . In the following, a method for solving this problem will be described.
The personal recognition device storing the blood vessel images of all the prospective attendees is circulated during the meeting, and the personal recognition is sequentially performed. In order to make the attendee confirm that he / she has been registered for attendance, the circulation device preferably includes a
Although the details of the personal recognition apparatus of the present invention have been described above, this personal recognition apparatus can naturally be configured as a computer system including a photographing device. FIG. 20 is a block diagram showing the configuration of such a computer system, that is, a hardware environment.
In FIG. 20, the computer system includes a central processing unit (CPU) 50, a read only memory (ROM) 51, a random access memory (RAM) 52, a
As the
Such a program is stored in, for example, the
As described above in detail, according to the present invention, it is possible to provide a sanitary and clean personal recognition device with a small burden on the user by capturing a blood vessel image of a hand without contact. . In order to avoid degradation of recognition accuracy due to non-contact imaging, devise the device form and recognition method, for example, by detecting the position and orientation of the hand and correcting the blood vessel image according to the detection result This greatly contributes to the improvement of the practicality of the personal recognition device using the blood vessel image of the hand.
以上のように本発明の個人認識装置は、非接触で撮影される手の血管像を利用することにより、施設への入退出管理、会議への出席管理など、個人の検証や識別を必要とするあらゆる産業において利用可能である。 As described above, the personal recognition device of the present invention requires verification and identification of individuals such as entrance / exit management of facilities, attendance management of meetings, etc. by using blood vessel images of hands taken without contact. It can be used in any industry.
Claims (38)
利用者に手のかざし方を指示する位置向き形状指示手段と、手に近赤外光を照射する１以上の照射手段と、該近赤外光による画像を撮影する１以上の撮影手段とを備え、手と接触することなく血管像を撮影可能な撮影機器と、
該１以上の撮影手段によって撮影された画像から血管像を検出する血管像検出手段と、
利用者の各人毎に登録された手の血管像を記憶する血管像記憶手段と、
該登録された血管像と該検出された血管像とを比較して、個人認識を行う認識手段とを備えることを特徴とする個人認識装置。In the device that detects the blood vessel image of the hand and performs personal recognition,
Position orientation shape instructing means for instructing the user how to hold the hand, one or more irradiating means for irradiating the hand with near infrared light, and one or more photographing means for photographing an image by the near infrared light Equipped with a photographing device capable of photographing a blood vessel image without touching the hand,
A blood vessel image detecting means for detecting a blood vessel image from an image photographed by the one or more photographing means;
A blood vessel image storage means for storing a blood vessel image of a hand registered for each user;
A personal recognition apparatus, comprising: a recognition unit that compares the registered blood vessel image with the detected blood vessel image to perform personal recognition.
前記１以上の撮影手段への近赤外光以外の外光の入り方に応じて、該複数の照射手段による近赤外光の照射を制御する制御手段を更に備えることを特徴とする請求項１記載の個人認識装置。With a plurality of the irradiation means,
The apparatus further comprises control means for controlling irradiation of near-infrared light by the plurality of irradiating means in accordance with how external light other than near-infrared light enters the one or more photographing means. The personal recognition apparatus according to 1.
前記検出手段が、該登録されたパラメータと前記画像上での手の形状のパラメータとを比較して、手の向きを求めることを特徴とする請求項１５記載の個人認識装置。The personal recognition device further comprises hand shape storage means for storing a parameter registered corresponding to the shape of the hand for each user.
16. The personal recognition apparatus according to claim 15, wherein the detecting means compares the registered parameter with a hand shape parameter on the image to determine a hand orientation.
前記補正手段が、該平面を表すパラメータを用いて血管像を補正することを特徴とする請求項１３記載の個人認識装置。The detection means detects the orientation of the hand by approximating the hand in a plane;
14. The personal recognition apparatus according to claim 13, wherein the correction unit corrects the blood vessel image using a parameter representing the plane.
該検出された位置、および／または向きが適切か否かを判定する判定手段と、
該位置、および／または向きが適切でない時、該位置および／または向きの不適切性を利用者に通知する通知手段とを更に備えることを特徴とする請求項１記載の個人認識装置。Detecting means for detecting the position and / or orientation of the hand from the photographed hand image for each detection of the blood vessel image;
Determining means for determining whether the detected position and / or orientation is appropriate;
The personal recognition apparatus according to claim 1, further comprising notification means for notifying a user of inappropriateness of the position and / or orientation when the position and / or orientation is not appropriate.
手がかざされていると判定された時に、前記認識手段に個人認識を行わせる認識制御手段とを更に備えることを特徴とする請求項１記載の個人認識装置。A determination means for determining whether or not the user of the photographing device is holding a hand over the surface on which the hand is to be held;
The personal recognition apparatus according to claim 1, further comprising a recognition control unit that causes the recognition unit to perform personal recognition when it is determined that the hand is held over.
前記認識手段が、該記憶されている撮影順に対応して個人認識を行うことを特徴とする請求項２４記載の個人認識装置。The personal recognition device further comprises a shooting order storage means for storing shooting orders of a plurality of locations of the hand,
25. The personal recognition apparatus according to claim 24, wherein the recognition means performs personal recognition corresponding to the stored shooting order.
該複数の撮影手段によって撮影された手の画像から手の３次元形状を算出する算出手段と、
該算出結果に対応して、前記検出された血管像を補正し、前記認識手段に与える補正手段とを更に備えることを特徴とする請求項１記載の個人認識装置。With a plurality of the photographing means,
Calculating means for calculating the three-dimensional shape of the hand from the images of the hands photographed by the plurality of photographing means;
The personal recognition apparatus according to claim 1, further comprising: a correcting unit that corrects the detected blood vessel image and gives the detected blood vessel image to the recognizing unit according to the calculation result.
前記個人認識装置が、該撮影された画像によって運動視差に基づいて手の３次元形状を算出する算出手段と、
該算出結果に対応して、前記検出された血管像を補正し、前記認識手段に与える補正手段とを更に備えることを特徴とする請求項１記載の個人認識装置。The one or more imaging means captures a plurality of temporally continuous images;
The personal recognition device calculates a three-dimensional shape of a hand based on motion parallax from the captured image;
The personal recognition apparatus according to claim 1, further comprising: a correcting unit that corrects the detected blood vessel image and gives the detected blood vessel image to the recognizing unit according to the calculation result.
前記個人認識装置が、前記検出された血管像から該しわの像を除き、前記認識手段に与える手段を備えることを特徴とする請求項１記載の個人認識装置。The one or more photographing means shoots an image including a wrinkle image of a hand in a state irradiated with visible light,
The personal recognition apparatus according to claim 1, further comprising a unit that removes the wrinkle image from the detected blood vessel image and gives the image to the recognition unit.
前記個人認識装置が、出席者に対して順次行われる個人認識の結果を記憶する手段と、
該認識結果を出席者に対して表示する手段と、
該認識結果を外部に転送する手段とを更に備えることを特徴とする請求項１記載の個人認識装置。The blood vessel image storage means stores the registered blood vessel images of all the persons scheduled to attend a meeting,
Means for the personal recognition device to store results of personal recognition performed sequentially for attendees;
Means for displaying the recognition result to attendees;
The personal recognition apparatus according to claim 1, further comprising means for transferring the recognition result to the outside.
手に近赤外光を照射する１以上の照射手段と、該近赤外光による画像を撮影する１以上の撮影手段とを備え、小型で可搬のペン型形状を持ち、手と接触することなく血管像を撮影可能な撮影機器と、
該１以上の撮影手段によって撮影された画像から血管像を検出する血管像検出手段と、
利用者の各人毎に登録された手の血管像を記憶する血管像記憶手段と、
該登録された血管像と該検出された血管像とを比較して、個人認識を行う認識手段とを備えることを特徴とする個人認識装置。In the device that detects the blood vessel image of the hand and performs personal recognition,
One or more irradiating means for irradiating the hand with near-infrared light and one or more photographing means for photographing an image by the near-infrared light, having a small and portable pen shape, and contacting the hand An imaging device capable of taking blood vessel images without
A blood vessel image detecting means for detecting a blood vessel image from an image photographed by the one or more photographing means;
A blood vessel image storage means for storing a blood vessel image of a hand registered for each user;
A personal recognition apparatus, comprising: a recognition unit that compares the registered blood vessel image with the detected blood vessel image to perform personal recognition.
利用者に手のかざし方を指示する手順と、
近赤外光による利用者の手血管画像の入力を受け取る手順と、
利用者の手の血管像を検出する手段と、
手の位置、および／または向きを検出する手順と、
検出された手の位置、および／または向きに対応して血管像を補正する手順と
登録されている血管像と、該補正後の血管像を比較して個人認識を行う手順とを計算機に実行させるためのプログラム。In a program used by a computer that detects the blood vessel image of the hand and performs personal recognition,
A procedure for instructing the user how to hold the hand,
A procedure for receiving input of a user's hand blood vessel image by near-infrared light;
Means for detecting a blood vessel image of the user's hand;
Procedures for detecting hand position and / or orientation;
The computer executes the procedure for correcting the blood vessel image corresponding to the detected position and / or orientation of the hand, the registered blood vessel image, and the procedure for comparing the corrected blood vessel image and performing individual recognition. Program to let you.
利用者に手のかざし方を指示するステップと、
近赤外光による利用者の手血管画像の入力を受け取るステップと、
利用者の手の血管像を検出するステップと、
手の位置、および／または向きを検出するステップと、
検出された手の位置、および／または向きに対応して血管像を補正するステップと、
登録されている血管像と、該補正後の血管像を比較して個人認識を行うステップとを計算機に実行させるためのプログラムを格納した計算機読出し可能可搬型記憶媒体。In a storage medium used by a computer that performs personal recognition by detecting a blood vessel image of a hand,
Instructing the user how to hold the hand,
Receiving an input of a user's hand blood vessel image by near-infrared light;
Detecting a blood vessel image of the user's hand;
Detecting the position and / or orientation of the hand;
Correcting the blood vessel image corresponding to the detected hand position and / or orientation;
A computer-readable portable storage medium storing a program for causing a computer to execute a registered blood vessel image and a step of performing personal recognition by comparing the corrected blood vessel image.
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| PCT/JP2002/008944 WO2004021884A1 (en) | 2002-09-03 | 2002-09-03 | Individual identification device |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2006119286A Division JP4308220B2 (en) | 2006-04-24 | 2006-04-24 | Personal recognition device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPWO2004021884A1 true JPWO2004021884A1 (en) | 2005-12-22 |
| JP3810782B2 JP3810782B2 (en) | 2006-08-16 |
Family
ID=31972296
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2004534066A Expired - Fee Related JP3810782B2 (en) | 2002-09-03 | 2002-09-03 | Personal recognition device |
Country Status (2)
| Country | Link |
|---|---|
| JP (1) | JP3810782B2 (en) |
| WO (1) | WO2004021884A1 (en) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9418275B2 (en) | 2012-05-22 | 2016-08-16 | Fujitsu Limited | Biometric information processing for providing increased authentication precision by guiding a user to place auxiliary information within an imaging range |
Families Citing this family (28)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005353014A (en) * | 2004-05-14 | 2005-12-22 | Sony Corp | Imaging device |
| JP4657668B2 (en) | 2004-10-08 | 2011-03-23 | 富士通株式会社 | Biometric authentication method and biometric authentication device |
| DE602005015057D1 (en) * | 2004-06-28 | 2009-08-06 | Fujitsu Ltd | Biometric authentication with transmission of encrypted data |
| JP4546168B2 (en) * | 2004-06-28 | 2010-09-15 | 富士通株式会社 | Biometric authentication system registration method, biometric authentication system and program thereof |
| JP4515850B2 (en) * | 2004-07-30 | 2010-08-04 | 富士通株式会社 | Biometric device guidance screen control method, biometric device and program thereof |
| JP4601380B2 (en) | 2004-10-08 | 2010-12-22 | 富士通株式会社 | Biometric authentication system registration method, biometric authentication system and program thereof |
| ES2331138T3 (en) * | 2004-06-28 | 2009-12-22 | Fujitsu Limited | BIOMETRIC AUTHENTICATION SYSTEM AND REGISTRATION METHOD. |
| JP4546169B2 (en) * | 2004-06-28 | 2010-09-15 | 富士通株式会社 | An imaging device for palm authentication |
| JP4628722B2 (en) | 2004-08-19 | 2011-02-09 | 富士通株式会社 | Collation system and program check method for collation system |
| CN1770173B (en) * | 2004-11-05 | 2011-05-04 | 株式会社日立制作所 | Finger identification apparatus |
| EP1811452B1 (en) * | 2004-11-08 | 2010-04-21 | Sony Corporation | Information processing system and information processing device |
| JP4851723B2 (en) * | 2005-03-04 | 2012-01-11 | 富士通株式会社 | Internal structure image acquisition device, internal structure image acquisition method, and internal structure image acquisition program |
| JP4640582B2 (en) * | 2005-03-09 | 2011-03-02 | ソニー株式会社 | Collation device, registration device, image correction method, and program |
| JP2007000219A (en) * | 2005-06-22 | 2007-01-11 | Hitachi Ltd | Personal authentication apparatus |
| JP4704185B2 (en) | 2005-10-27 | 2011-06-15 | 富士通株式会社 | Biometric authentication system and biometric authentication method |
| JP4760422B2 (en) * | 2006-02-08 | 2011-08-31 | 株式会社デンソーウェーブ | Biometric identification device |
| WO2007141860A1 (en) | 2006-06-08 | 2007-12-13 | Fujitsu Limited | Guidance device and method |
| JP4786483B2 (en) | 2006-09-14 | 2011-10-05 | 富士通株式会社 | Biometric guidance control method for biometric authentication device and biometric authentication device |
| JP5065965B2 (en) | 2008-03-31 | 2012-11-07 | 富士通株式会社 | Biological guidance control method for non-contact type biometric authentication device and non-contact type biometric authentication device |
| WO2012090312A1 (en) | 2010-12-28 | 2012-07-05 | 富士通株式会社 | Biometric authentication device, biometric authentication method, and biometric authentication program |
| JP5831018B2 (en) | 2011-07-29 | 2015-12-09 | 富士通株式会社 | Biometric authentication device and method for adjusting user's hand position in biometric authentication device |
| CN102622596B (en) * | 2012-02-20 | 2016-07-20 | 哈尔滨工业大学 | Interactive localization method towards living things feature recognition |
| JP2014174644A (en) * | 2013-03-06 | 2014-09-22 | Fujitsu Frontech Ltd | Image recognition target guidance device, guidance method, and program |
| JP6160148B2 (en) | 2013-03-19 | 2017-07-12 | 富士通株式会社 | Biological information input device, biometric information input program, and biometric information input method |
| JP6798285B2 (en) | 2016-11-30 | 2020-12-09 | 富士通株式会社 | Biometric device, biometric method and program |
| CN111738106B (en) * | 2020-06-04 | 2023-09-19 | 东莞市度润光电科技有限公司 | Detection method, detection device and storage medium for infrared lamp shade |
| WO2023233944A1 (en) * | 2022-05-31 | 2023-12-07 | 日本電気株式会社 | Information processing device, authentication system, information processing method, and non-transitory computer-readable medium |
| CN117523684A (en) * | 2022-07-27 | 2024-02-06 | 腾讯科技（深圳）有限公司 | Image acquisition method, device, computer equipment and storage medium |
Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH01503203A (en) * | 1986-12-02 | 1989-11-02 | コダック・リミテッド | Information about an individual's body |
| JP2000259817A (en) * | 1999-03-08 | 2000-09-22 | Oki Electric Ind Co Ltd | Iris recognizer |
| JP2001215109A (en) * | 2000-01-31 | 2001-08-10 | Sky Com:Kk | Iris image input apparatus |
| JP2001273497A (en) * | 2000-03-27 | 2001-10-05 | Sanyo Electric Co Ltd | Personal identification device |
| JP2002015297A (en) * | 2000-06-30 | 2002-01-18 | Toshiba Corp | Multifunctional card |
| JP2002083298A (en) * | 2000-09-06 | 2002-03-22 | Hitachi Ltd | Personal identification device and method |
| JP2002092616A (en) * | 2000-09-20 | 2002-03-29 | Hitachi Ltd | Individual authentication device |
| JP2002133417A (en) * | 2000-10-27 | 2002-05-10 | Mitsubishi Electric Corp | Fingerprint collating apparatus |
| JP2003187235A (en) * | 2001-12-18 | 2003-07-04 | Hitachi Software Eng Co Ltd | Finger vein recognition device |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP3567651B2 (en) * | 1996-11-06 | 2004-09-22 | 株式会社日立製作所 | Biological identification device |
| JP3869545B2 (en) * | 1998-01-19 | 2007-01-17 | 株式会社日立製作所 | Finger feature pattern feature detection device and personal identification device |
| JP4192292B2 (en) * | 1998-06-24 | 2008-12-10 | 株式会社日立製作所 | Personal feature pattern detector |
-
2002
- 2002-09-03 WO PCT/JP2002/008944 patent/WO2004021884A1/en active Application Filing
- 2002-09-03 JP JP2004534066A patent/JP3810782B2/en not_active Expired - Fee Related
Patent Citations (9)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH01503203A (en) * | 1986-12-02 | 1989-11-02 | コダック・リミテッド | Information about an individual's body |
| JP2000259817A (en) * | 1999-03-08 | 2000-09-22 | Oki Electric Ind Co Ltd | Iris recognizer |
| JP2001215109A (en) * | 2000-01-31 | 2001-08-10 | Sky Com:Kk | Iris image input apparatus |
| JP2001273497A (en) * | 2000-03-27 | 2001-10-05 | Sanyo Electric Co Ltd | Personal identification device |
| JP2002015297A (en) * | 2000-06-30 | 2002-01-18 | Toshiba Corp | Multifunctional card |
| JP2002083298A (en) * | 2000-09-06 | 2002-03-22 | Hitachi Ltd | Personal identification device and method |
| JP2002092616A (en) * | 2000-09-20 | 2002-03-29 | Hitachi Ltd | Individual authentication device |
| JP2002133417A (en) * | 2000-10-27 | 2002-05-10 | Mitsubishi Electric Corp | Fingerprint collating apparatus |
| JP2003187235A (en) * | 2001-12-18 | 2003-07-04 | Hitachi Software Eng Co Ltd | Finger vein recognition device |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US9418275B2 (en) | 2012-05-22 | 2016-08-16 | Fujitsu Limited | Biometric information processing for providing increased authentication precision by guiding a user to place auxiliary information within an imaging range |
Also Published As
| Publication number | Publication date |
|---|---|
| WO2004021884A1 (en) | 2004-03-18 |
| JP3810782B2 (en) | 2006-08-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3810782B2 (en) | Personal recognition device | |
| JP4308220B2 (en) | Personal recognition device | |
| US8190239B2 (en) | Individual identification device | |
| US7660442B2 (en) | Method and system for capturing fingerprints, palm prints and hand geometry | |
| US8064647B2 (en) | System for iris detection tracking and recognition at a distance | |
| CN107949863B (en) | Authentication device and authentication method using biometric information | |
| Labati et al. | Toward unconstrained fingerprint recognition: A fully touchless 3-D system based on two views on the move | |
| JP6557222B2 (en) | Iris biometric recognition module and access control assembly | |
| US8260008B2 (en) | Methods for performing biometric recognition of a human eye and corroboration of same | |
| US20150347833A1 (en) | Noncontact Biometrics with Small Footprint | |
| CN104956377B (en) | For acquiring the device of special messenger's data | |
| US20030108223A1 (en) | Method and apparatus for aligning and comparing images of the face and body from different imagers | |
| CN106815914A (en) | A kind of gate control system and unlocking method based on face recognition technology | |
| EA002730B1 (en) | System for contactless recognition of hand and finger lines | |
| JP2017502366A5 (en) | ||
| JP2002514098A (en) | Device for iris acquisition image | |
| JP2010092121A (en) | Imaging device, imaging program, imaging method, authentication device, authentication program and authentication method | |
| JP7192872B2 (en) | Iris authentication device, iris authentication method, iris authentication program and recording medium | |
| JP2022068055A (en) | Biometric authentication device and biometric authentication method | |
| CN206431724U (en) | A kind of gate control system based on face recognition technology | |
| JP5796523B2 (en) | Biological information acquisition apparatus, biological information acquisition method, and biological information acquisition control program | |
| KR101044079B1 (en) | Apparutus for scanning the other person's iris employing wide camera and method thereof | |
| JPH05108808A (en) | Fingerprint inputting device | |
| Hameed et al. | An accurate method to obtain bio-metric measurements for three dimensional skull | |
| KR20230095716A (en) | Apparatus of handheld skin-imaging |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060221 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060424 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20060523 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20060524 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 3810782 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100602 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110602 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120602 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120602 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130602 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130602 Year of fee payment: 7 |
|
| LAPS | Cancellation because of no payment of annual fees |