JP4563741B2 - Image collation device, image collation method, and image collation program. - Google Patents
Image collation device, image collation method, and image collation program. Download PDFInfo
- Publication number
- JP4563741B2 JP4563741B2 JP2004206170A JP2004206170A JP4563741B2 JP 4563741 B2 JP4563741 B2 JP 4563741B2 JP 2004206170 A JP2004206170 A JP 2004206170A JP 2004206170 A JP2004206170 A JP 2004206170A JP 4563741 B2 JP4563741 B2 JP 4563741B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- value
- positive
- negative
- correlation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims description 85
- 238000012545 processing Methods 0.000 claims description 54
- 238000000926 separation method Methods 0.000 claims description 45
- 238000006243 chemical reaction Methods 0.000 claims description 31
- 238000012795 verification Methods 0.000 claims description 10
- 238000004458 analytical method Methods 0.000 claims description 6
- 230000010339 dilation Effects 0.000 claims description 5
- 238000004364 calculation method Methods 0.000 description 36
- 238000000605 extraction Methods 0.000 description 24
- 230000000875 corresponding effect Effects 0.000 description 15
- 230000000694 effects Effects 0.000 description 15
- 238000010586 diagram Methods 0.000 description 14
- 238000010606 normalization Methods 0.000 description 8
- 238000001514 detection method Methods 0.000 description 7
- 230000009466 transformation Effects 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000008961 swelling Effects 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000000630 rising effect Effects 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
Images
Landscapes
- Image Analysis (AREA)
Description
本発明は、円形物体の入力画像とあらかじめ登録された複数のテンプレート画像との間で、画像の特徴を比較することによって画像を照合する画像照合装置、画像照合方法および画像照合プログラムに関し、特に、入力画像とテンプレート画像との照合を効率的におこなって照合率を向上させることができる画像照合装置、画像照合方法および画像照合プログラムに関する。 The present invention relates to an image collation apparatus, an image collation method, and an image collation program that collate images by comparing image characteristics between an input image of a circular object and a plurality of template images registered in advance. The present invention relates to an image collation apparatus, an image collation method, and an image collation program that can efficiently collate an input image and a template image to improve a collation rate.
従来、入金された貨幣をCCD(Charge Coupled Device)カメラ等で撮影した入力画像と、あらかじめ登録されているテンプレート画像とを照合し、かかる貨幣の真偽を判定する画像照合装置が知られている。 2. Description of the Related Art Conventionally, there has been known an image collating apparatus that collates an input image obtained by photographing a deposited money with a CCD (Charge Coupled Device) camera or the like and a template image registered in advance and determines the authenticity of the money. .
たとえば、特許文献1には、硬貨の入力画像と硬貨のテンプレート画像とを対比して相関値を算出し、対比対象となる全体画像のうち所定面積以上の部分において、かかる相関値が閾値を超えている場合には、入力画像に係る硬貨を真正硬貨と判定する画像照合技術が開示されている。
For example, in
しかしながら、この従来技術を用いた場合、閾値を超えた相関値のみを用いて画像照合をおこなうので、たとえば、入力画像とテンプレート画像との照合時の画像のずれや画像変換にともなうノイズの発生などにより、相関値が相対的に低い値をとった場合には、入力された硬貨が真正硬貨であるにもかかわらず偽造硬貨と判定してしまい、画像照合の照合率を向上させることが困難であるという問題があった。 However, when this conventional technique is used, image matching is performed using only the correlation value exceeding the threshold value. For example, image misalignment at the time of matching between the input image and the template image, generation of noise due to image conversion, etc. Thus, if the correlation value is a relatively low value, the input coin is determined to be a forged coin even though it is a genuine coin, and it is difficult to improve the verification rate of image verification. There was a problem that there was.
なお、かかる問題点は、硬貨の画像照合においてのみ発生する問題ではなく、遊戯施設などで用いられるメダル類の画像照合や、FA(Factory Automation)などにおける円形部品や円形製品の画像照合においても同様に発生する問題である。 This problem is not only a problem that occurs only in coin image verification, but also in image verification of medals used in amusement facilities, and image verification of circular parts and circular products in FA (Factory Automation). It is a problem that occurs.
この発明は、上記課題(問題点)に鑑みてなされたものであり、硬貨などの円形物体の画像照合精度を高め、画像照合の照合率を向上させることができる画像照合装置、画像照合方法および画像照合プログラムを提供することを目的とする。 The present invention has been made in view of the above problems (problems), and improves an image matching accuracy of a circular object such as a coin and improves a matching rate of image matching, an image matching method, and An object is to provide an image collation program.
上述した課題を解決し、目的を達成するために、本発明は、照合対象物の入力画像とあらかじめ登録された複数のテンプレート画像との間で、画像の特徴を比較することによって画像を照合する画像照合装置であって、前記入力画像および前記テンプレート画像を極座標変換したうえで、両画像の回転ずれを補正したρ−θ入力画像およびρ−θテンプレート画像を生成する極座標変換画像生成手段と、前記ρ−θ入力画像および前記ρ−θテンプレート画像から相関値画像を生成し、該相関値画像を画素値が閾値以上であるか否かにより正相関値画像と負相関値画像とに分離する相関値画像分離手段と、前記ρ−θテンプレート画像を画素値が閾値以上であるか否かにより正テンプレート画像と負テンプレート画像とに分離するテンプレート画像分離手段と、前記正相関値画像および前記負相関値画像と前記正テンプレート画像および前記負テンプレート画像との組み合わせにより複数の正負分離相関画像を生成する正負分離相関画像生成手段と、前記正負分離相関画像を用いて照合判定をおこなう照合判定手段とを備えたことを特徴とする。 In order to solve the above-described problems and achieve the object, the present invention collates images by comparing image features between an input image of a collation target object and a plurality of template images registered in advance. A polar coordinate conversion image generating means for generating a ρ-θ input image and a ρ-θ template image, wherein the input image and the template image are subjected to polar coordinate conversion, and rotational deviation between both images is corrected; A correlation value image is generated from the ρ-θ input image and the ρ-θ template image, and the correlation value image is separated into a positive correlation value image and a negative correlation value image depending on whether the pixel value is equal to or greater than a threshold value. Correlation value image separating means and a template image for separating the ρ-θ template image into a positive template image and a negative template image depending on whether the pixel value is equal to or greater than a threshold value Separating means, positive / negative separated correlation image generating means for generating a plurality of positive / negative separated correlation images by combining the positive correlation value image and the negative correlation value image and the positive template image and the negative template image, and the positive / negative separated correlation And a collation determining unit that performs collation determination using an image.
また、本発明は、前記正負分離相関画像生成手段は、前記正相関値画像と前記正テンプレート画像との画素ごとの積を算出した値を画素値とする正特徴領域画像と、前記負相関値画像と前記正テンプレート画像との画素ごとの積を算出した値を画素値とする負特徴領域画像とを生成することを特徴とする。 Further, according to the present invention, the positive / negative separated correlation image generating means includes a positive feature region image having a pixel value as a value obtained by calculating a product of each of the positive correlation value image and the positive template image, and the negative correlation value. A negative feature region image having a pixel value as a value obtained by calculating a product for each pixel of the image and the positive template image is generated.
また、本発明は、前記正負分離相関画像生成手段は、前記正相関値画像と前記負テンプレート画像との画素ごとの積を算出した値を画素値とする正背景領域画像と、前記負相関値画像と前記負テンプレート画像との画素ごとの積を算出した値を画素値とする負背景領域画像とを生成することを特徴とする。 Further, according to the present invention, the positive / negative separated correlation image generation unit includes a positive background region image having a pixel value as a value obtained by calculating a product of each pixel of the positive correlation value image and the negative template image, and the negative correlation value. A negative background region image having a pixel value as a value obtained by calculating a product for each pixel of the image and the negative template image is generated.
また、本発明は、前記正負分離相関画像生成手段は、前記正相関値画像と前記正テンプレート画像との画素ごとの積を算出した値を画素値とする正特徴領域画像と、前記負相関値画像と前記正テンプレート画像との画素ごとの積を算出した値を画素値とする負特徴領域画像と、前記正相関値画像と前記負テンプレート画像との画素ごとの積を算出した値を画素値とする正背景領域画像と、前記負相関値画像と前記負テンプレート画像との画素ごとの積を算出した値を画素値とする負背景領域画像とを生成することを特徴とする。 Further, according to the present invention, the positive / negative separated correlation image generating means includes a positive feature region image having a pixel value as a value obtained by calculating a product of each of the positive correlation value image and the positive template image, and the negative correlation value. A pixel value is a value obtained by calculating a product for each pixel of the negative feature region image having a pixel value as a value obtained by calculating a product for each pixel of the image and the positive template image, and the positive correlation value image and the negative template image. And a negative background region image having a pixel value as a value obtained by calculating a product of each pixel of the negative correlation value image and the negative template image.
また、本発明は、前記正負分離相関画像生成手段は、前記負相関値画像を用いて生成される負領域画像内の注目画素と、前記正相関値画像を用いて生成される正領域画像内の該注目画素に対応する対応画素の周囲画素とを対比して、少なくとも一つの該周囲画素の画素値が該注目画素の画素値よりも大きい場合には、該注目画素を該対応画素に移動する膨張処理をおこなうことを特徴とする。 Further, according to the present invention, the positive / negative separated correlation image generating means includes a target pixel in a negative region image generated using the negative correlation value image and a positive region image generated using the positive correlation value image. If the pixel value of at least one of the surrounding pixels is larger than the pixel value of the target pixel in comparison with the surrounding pixels of the corresponding pixel corresponding to the target pixel, the target pixel is moved to the corresponding pixel The expansion process is performed.
また、本発明は、前記ρ−θ入力画像および前記ρ−θテンプレート画像は、エッジ抽出オペレータを用いたエッジ抽出処理により画像変換されたエッジ画像であることを特徴とする。 Further, the present invention is characterized in that the ρ-θ input image and the ρ-θ template image are edge images that have been image-converted by edge extraction processing using an edge extraction operator.
また、本発明は、前記エッジ画像は、抽出されたエッジのエッジ強度を正規化した正規化エッジ画像であることを特徴とする。 Further, the present invention is characterized in that the edge image is a normalized edge image obtained by normalizing the edge strength of the extracted edge.
また、本発明は、前記テンプレート画像は、前記照合対象物の各個体についての画像を平均した平均画像であることを特徴とする。 Further, the present invention is characterized in that the template image is an average image obtained by averaging images for each individual of the verification object.
また、本発明は、前記相関値画像は、前記ρ−θ入力画像および前記ρ−θテンプレートの画素ごとの相関値を正規化した正規化相関値を画素値とする画像であることを特徴とする。 In the invention, it is preferable that the correlation value image is an image having a normalized correlation value obtained by normalizing a correlation value for each pixel of the ρ-θ input image and the ρ-θ template as a pixel value. To do.
また、本発明は、前記照合判定手段は、前記正負分離相関画像をブロック分割して各ブロック内の画素値の総和をブロック値として算出し、該ブロック値と重み係数との積を全ての前記正負分離相関画像について加算することにより照合値を算出して照合判定をおこなうことを特徴とする。 Further, according to the present invention, the collation determination unit divides the positive / negative separated correlation image into blocks, calculates a sum of pixel values in each block as a block value, and calculates a product of the block value and a weight coefficient The collation determination is performed by calculating a collation value by adding the positive and negative separated correlation images.
また、本発明は、前記照合判定手段は、線形判別分析により前記重み係数の値を算出することを特徴とする。 Further, the present invention is characterized in that the collation determining means calculates the value of the weighting coefficient by linear discriminant analysis.
また、本発明は、前記極座標変換画像生成手段は、前記ρ−θ入力画像または前記ρ−θテンプレート画像を平行移動させることにより、両画像の回転ずれを補正することを特徴とする。 Further, the present invention is characterized in that the polar coordinate conversion image generation means corrects the rotational deviation of both images by translating the ρ-θ input image or the ρ-θ template image.
また、本発明は、前記円形物体は硬貨であることを特徴とする。 In the present invention, the circular object is a coin.
また、本発明は、照合対象物の入力画像とあらかじめ登録された複数のテンプレート画像との間で、画像の特徴を比較することによって画像を照合する画像照合方法において、前記入力画像および前記テンプレート画像を極座標変換したうえで、両画像の回転ずれを補正したρ−θ入力画像およびρ−θテンプレート画像を生成する極座標変換画像生成工程と、前記ρ−θ入力画像および前記ρ−θテンプレート画像から相関値画像を生成し、該相関値画像を画素値が閾値以上であるか否かにより正相関値画像と負相関値画像とに分離する相関値画像分離工程と、前記ρ−θテンプレート画像を画素値が閾値以上であるか否かにより正テンプレート画像と負テンプレート画像とに分離するテンプレート画像分離工程と、前記正相関値画像および前記負相関値画像と前記正テンプレート画像および前記負テンプレート画像との組み合わせにより複数の正負分離相関画像を生成する正負分離相関画像生成工程と、前記正負分離相関画像を用いて照合判定をおこなう照合判定工程とを含んだことを特徴とする。 Further, the present invention provides an image collation method for collating an image by comparing image features between an input image of a collation target object and a plurality of template images registered in advance, and the input image and the template image From the polar coordinate conversion image generation step of generating the ρ-θ input image and the ρ-θ template image in which the rotational deviation of both images is corrected, and the ρ-θ input image and the ρ-θ template image. Generating a correlation value image, separating the correlation value image into a positive correlation value image and a negative correlation value image according to whether or not the pixel value is equal to or greater than a threshold value; and the ρ-θ template image A template image separation step for separating a positive template image and a negative template image depending on whether a pixel value is equal to or greater than a threshold value, the positive correlation value image, and the A positive / negative separated correlation image generating step of generating a plurality of positive / negative separated correlation images by combining a correlation value image with the positive template image and the negative template image, and a matching determination step of performing a matching determination using the positive / negative separated correlation image; It is characterized by including.
また、本発明は、照合対象物の入力画像とあらかじめ登録された複数のテンプレート画像との間で、画像の特徴を比較することによって画像を照合する画像照合方法をコンピュータに実行させるプログラムであって、前記入力画像および前記テンプレート画像を極座標変換したうえで、両画像の回転ずれを補正したρ−θ入力画像およびρ−θテンプレート画像を生成する極座標変換画像生成工程と、前記ρ−θ入力画像および前記ρ−θテンプレート画像から相関値画像を生成し、該相関値画像を画素値が閾値以上であるか否かにより正相関値画像と負相関値画像とに分離する相関値画像分離工程と、前記ρ−θテンプレート画像を画素値が閾値以上であるか否かにより正テンプレート画像と負テンプレート画像とに分離するテンプレート画像分離工程と、前記正相関値画像および前記負相関値画像と前記正テンプレート画像および前記負テンプレート画像との組み合わせにより複数の正負分離相関画像を生成する正負分離相関画像生成工程と、前記正負分離相関画像を用いて照合判定をおこなう照合判定工程とをコンピュータに実行させることを特徴とする。 Further, the present invention is a program for causing a computer to execute an image matching method for matching images by comparing image features between an input image of a matching object and a plurality of template images registered in advance. A polar coordinate conversion image generating step for generating a ρ-θ input image and a ρ-θ template image obtained by performing polar coordinate conversion on the input image and the template image and correcting a rotational shift between the two images; and the ρ-θ input image And a correlation value image separation step of generating a correlation value image from the ρ-θ template image, and separating the correlation value image into a positive correlation value image and a negative correlation value image depending on whether or not the pixel value is equal to or greater than a threshold value; , A template image component that separates the ρ-θ template image into a positive template image and a negative template image depending on whether the pixel value is equal to or greater than a threshold value. A positive and negative separated correlation image generating step for generating a plurality of positive and negative separated correlation images by combining the positive correlation value image and the negative correlation value image with the positive template image and the negative template image, and the positive and negative separated correlation image And a collation determination step of performing a collation determination using the computer.
本発明によれば、入力画像およびテンプレート画像を極座標変換したうえで、両画像の回転ずれを補正したρ−θ入力画像およびρ−θテンプレート画像を生成し、ρ−θ入力画像およびρ−θテンプレート画像から相関値画像を生成し、該相関値画像を画素値が閾値以上であるか否かにより正相関値画像と負相関値画像とに分離し、ρ−θテンプレート画像を画素値が閾値以上であるか否かにより正テンプレート画像と負テンプレート画像とに分離し、正相関値画像および負相関値画像と正テンプレート画像および負テンプレート画像との組み合わせにより複数の正負分離相関画像を生成し、該正負分離相関画像を用いて照合判定をおこなうよう構成したので、入力画像とテンプレート画像との相関が高い部分のみならず、相関が低い部分の相関値も用いるとともに、テンプレート画像の特徴部分のみならず、背景部分も用いて画像照合をおこなうことにより、精度の高い画像照合をおこなうことができるという効果を奏する。 According to the present invention, the input image and the template image are subjected to polar coordinate transformation, and then the ρ-θ input image and the ρ-θ template image in which the rotational deviation between the two images is corrected are generated, and the ρ-θ input image and the ρ-θ are generated. A correlation value image is generated from the template image, the correlation value image is separated into a positive correlation value image and a negative correlation value image depending on whether or not the pixel value is equal to or greater than a threshold value, and the ρ-θ template image has a pixel value as a threshold value It is separated into a positive template image and a negative template image depending on whether or not it is above, a plurality of positive and negative separated correlation images are generated by a combination of a positive correlation value image and a negative correlation value image and a positive template image and a negative template image, Since the collation judgment is performed using the positive / negative separated correlation image, not only the portion where the correlation between the input image and the template image is high, but also the portion where the correlation is low Achieved even with use, not only the characteristic portion of the template image, by performing image matching using also the background portion, the effect that it is possible to perform high image matching accuracy.
また、本発明によれば、正相関値画像と正テンプレート画像との画素ごとの積を算出した値を画素値とする正特徴領域画像と、負相関値画像と正テンプレート画像との画素ごとの積を算出した値を画素値とする負特徴領域画像とを生成するよう構成したので、特徴が出るべき部分に特徴が出ている領域画像と特徴が出るべき部分に特徴が出ていない領域画像とを用いて画像照合をおこなうことにより、精度の高い画像照合をおこなうことができるという効果を奏する。 Further, according to the present invention, for each pixel of the positive feature region image having a pixel value as a value obtained by calculating the product of each of the positive correlation value image and the positive template image, and the negative correlation value image and the positive template image. Since it is configured to generate a negative feature region image whose pixel value is a value obtained by calculating the product, a region image in which a feature should appear and a region image in which a feature should not appear By performing image collation using and, there is an effect that image collation with high accuracy can be performed.
また、本発明によれば、正相関値画像と負テンプレート画像との画素ごとの積を算出した値を画素値とする正背景領域画像と、負相関値画像と負テンプレート画像との画素ごとの積を算出した値を画素値とする負背景領域画像とを生成するよう構成したので、背景があるべき部分に背景がある領域画像と背景があるべき部分に背景がない領域画像とを用いて画像照合をおこなうことにより、精度の高い画像照合をおこなうことができるという効果を奏する。 Further, according to the present invention, a positive background region image having a value obtained by calculating a product of each pixel of the positive correlation value image and the negative template image as a pixel value, and each pixel of the negative correlation value image and the negative template image. Since it is configured to generate a negative background area image with the pixel value as the product-calculated value, it uses an area image with a background in the part where the background should be and an area image without a background in the part where the background should be By performing image collation, there is an effect that image collation with high accuracy can be performed.
また、本発明によれば、正相関値画像と正テンプレート画像との画素ごとの積を算出した値を画素値とする正特徴領域画像と、負相関値画像と正テンプレート画像との画素ごとの積を算出した値を画素値とする負特徴領域画像と、正相関値画像と負テンプレート画像との画素ごとの積を算出した値を画素値とする正背景領域画像と、負相関値画像と負テンプレート画像との画素ごとの積を算出した値を画素値とする負背景領域画像とを生成するよう構成したので、特徴が出るべき部分に特徴が出ている領域画像と、特徴が出るべき部分に特徴が出ていない領域画像と、背景があるべき部分に背景がある領域画像と、背景があるべき部分に背景がない領域画像とを用いて画像照合をおこなうことにより、精度の高い画像照合をおこなうことができるという効果を奏する。 Further, according to the present invention, for each pixel of the positive feature region image having a pixel value as a value obtained by calculating the product of each of the positive correlation value image and the positive template image, and the negative correlation value image and the positive template image. A negative feature region image whose pixel value is a value obtained by calculating a product, a positive background region image whose pixel value is a product of each pixel of a positive correlation value image and a negative template image, and a negative correlation value image Since it is configured to generate a negative background region image having a pixel value as a value obtained by calculating the product for each pixel with the negative template image, the region image in which the feature should appear and the feature should appear a region image that does not appear characterized in part, a region image having a background portion should have a background, by performing image matching by using the partial no background region image should have a background, accuracy not high It is performed images matching There is an effect that that.
また、本発明によれば、負相関値画像を用いて生成される負領域画像内の注目画素と、正相関値画像を用いて生成される正領域画像内の該注目画素に対応する対応画素の周囲画素とを対比して、少なくとも一つの該周囲画素の画素値が該注目画素の画素値よりも大きい場合には、該注目画素を該対応画素に移動する膨張処理をおこなうよう構成したので、相関値算出にともなう孤立点の影響を排除して、精度の高い画像照合をおこなうことができるという効果を奏する。 According to the present invention, the target pixel in the negative region image generated using the negative correlation value image and the corresponding pixel corresponding to the target pixel in the positive region image generated using the positive correlation value image In contrast, when the pixel value of at least one surrounding pixel is larger than the pixel value of the target pixel, an expansion process is performed to move the target pixel to the corresponding pixel. , by eliminating the influence of the isolated point accompanied by the correlation value calculation, an effect that it is possible to perform high Ige image matching accuracy.
また、本発明によれば、ρ−θ入力画像およびρ−θテンプレート画像は、エッジ抽出オペレータを用いたエッジ抽出処理により画像変換されたエッジ画像であるよう構成したので、抽出された各画像の特徴部分を対比することにより、精度の高い画像照合をおこなうことができるという効果を奏する。 In addition, according to the present invention, the ρ-θ input image and the ρ-θ template image are configured to be edge images that have been image-converted by edge extraction processing using an edge extraction operator. by comparing the characteristic portion, there is an effect that it is possible to perform high Ige image matching accuracy.
また、本発明によれば、エッジ画像は、抽出されたエッジのエッジ強度を正規化した正規化エッジ画像であるよう構成したので、照合対象物の個体差の影響を排除して、精度の高い画像照合をおこなうことができるという効果を奏する。 In addition, according to the present invention, the edge image is configured to be a normalized edge image obtained by normalizing the edge strength of the extracted edge. an effect that can be performed Ige image matching.
また、本発明によれば、テンプレート画像は、前記照合対象物の各個体についての画像を平均した平均画像であるよう構成したので、照合対象物の個体に固有の模様がある場合であっても、精度の高い画像照合をおこなうことができるという効果を奏する。 In addition, according to the present invention, the template image is configured to be an average image obtained by averaging the images of the individual objects to be collated, so even if there is a unique pattern on the individual objects to be collated. an effect that it is possible to perform high Ige image matching accuracy.
また、本発明によれば、相関値画像は、ρ−θ入力画像およびρ−θテンプレート画像の画素ごとの相関値を正規化した正規化相関値を画素値とする画像であるよう構成したので、相関値のばらつきを抑えて、精度の高い画像照合をおこなうことができるという効果を奏する。 Further, according to the present invention, the correlation value image is configured to be an image having the normalized correlation value obtained by normalizing the correlation value for each pixel of the ρ-θ input image and the ρ-θ template image as the pixel value. , by suppressing the variation of the correlation values, an effect that it is possible to perform high Ige image matching accuracy.
また、本発明によれば、照合判定手段は、正負分離相関画像をブロック分割して各ブロック内の画素値の総和をブロック値として算出し、該ブロック値と重み係数との積を全ての正負分離相関画像について加算することにより照合値を算出して照合判定をおこなうよう構成したので、特徴が出やすい領域の重みと特徴が出にくい領域の重みを調整することができるとともに、算出手順の簡素化により、効率的な画像照合をおこなうことができるという効果を奏する。 Further, according to the present invention, the collation determining unit divides the positive / negative separated correlation image into blocks, calculates the sum of the pixel values in each block as a block value, and calculates the product of the block value and the weight coefficient for all positive / negative values. Since the collation value is calculated by adding the separated correlation images and the collation judgment is performed, the weight of the region where the feature is likely to appear and the weight of the region where the feature is difficult to appear can be adjusted, and the calculation procedure can be simplified. As a result, efficient image matching can be performed.
また、本発明によれば、照合判定手段は、線形判別分析により前記重み係数の値を算出するよう構成したので、学習サンプルに基づいた適正な重み係数を得ることができるので、精度の高い画像照合をおこなうことができるという効果を奏する。 Further, according to the present invention, the collation decision means, since it is configured to calculate the value of the weighting coefficient by a linear discriminant analysis, it is possible to obtain a proper weighting factor based on the learning samples, accuracy not high an effect that it is possible to perform the images match.
また、本発明によれば、極座標変換画像生成手段は、ρ−θ入力画像またはρ−θテンプレート画像を平行移動させることにより、両画像の回転ずれを補正するよう構成したので、かかる補正に伴う計算量を削減して効率の高い画像照合をおこなうことができるという効果を奏する。 In addition, according to the present invention, the polar coordinate conversion image generation means is configured to correct the rotational deviation of both images by translating the ρ-θ input image or the ρ-θ template image. There is an effect that it is possible to reduce the amount of calculation and perform highly efficient image matching.
また、本発明によれば、円形物体は硬貨であるよう構成したので、貨幣の照合に関し、精度の高い画像照合をおこなうことができるという効果を奏する。 Further, according to the present invention exhibits since circular object was configured to be a coin relates collation of money, the effect that it is possible to perform high Ige image matching accuracy.
また、本発明によれば、入力画像およびテンプレート画像を極座標変換したうえで、両画像の回転ずれを補正したρ−θ入力画像およびρ−θテンプレート画像を生成し、ρ−θ入力画像およびρ−θテンプレート画像から相関値画像を生成し、該相関値画像を画素値が閾値以上であるか否かにより正相関値画像と負相関値画像とに分離し、ρ−θテンプレート画像を画素値が閾値以上であるか否かにより正テンプレート画像と負テンプレート画像とに分離し、正相関値画像および負相関値画像と正テンプレート画像および負テンプレート画像との組み合わせにより複数の正負分離相関画像を生成し、該正負分離相関画像を用いて照合判定をおこなうよう構成したので、入力画像とテンプレート画像との相関が高い部分のみならず、相関が低い部分の相関値も用いるとともに、テンプレート画像の特徴部分のみならず、背景部分も用いて画像照合をおこなうことにより、精度の高い画像照合をおこなうことができるという効果を奏する。 In addition, according to the present invention, the input image and the template image are subjected to polar coordinate conversion, and then the ρ-θ input image and the ρ-θ template image in which the rotational deviation of both images is corrected are generated, and the ρ-θ input image and ρ A correlation value image is generated from the -θ template image, the correlation value image is separated into a positive correlation value image and a negative correlation value image depending on whether or not the pixel value is equal to or greater than a threshold value, and the ρ-θ template image is converted into a pixel value Is separated into a positive template image and a negative template image depending on whether or not the threshold value is equal to or greater than a threshold, and a plurality of positive and negative separated correlation images are generated by combining the positive correlation value image and the negative correlation value image with the positive template image and the negative template image. In addition, since the collation determination is performed using the positive / negative separated correlation image, not only the portion where the correlation between the input image and the template image is high but also the portion where the correlation is low It achieved with using the correlation value, not only the characteristic portion of the template image, by performing image matching using also the background portion, the effect that it is possible to perform high image matching accuracy.
また、本発明によれば、入力画像およびテンプレート画像を極座標変換したうえで、両画像の回転ずれを補正したρ−θ入力画像およびρ−θテンプレート画像を生成し、ρ−θ入力画像およびρ−θテンプレート画像から相関値画像を生成し、該相関値画像を画素値が閾値以上であるか否かにより正相関値画像と負相関値画像とに分離し、ρ−θテンプレート画像を画素値が閾値以上であるか否かにより正テンプレート画像と負テンプレート画像とに分離し、正相関値画像および負相関値画像と正テンプレート画像および負テンプレート画像との組み合わせにより複数の正負分離相関画像を生成し、該正負分離相関画像を用いて照合判定をおこなうよう構成したので、入力画像とテンプレート画像との相関が高い部分のみならず、相関が低い部分の相関値も用いるとともに、テンプレート画像の特徴部分のみならず、背景部分も用いて画像照合をおこなうことにより、精度の高い画像照合をおこなうことができるという効果を奏する。 In addition, according to the present invention, the input image and the template image are subjected to polar coordinate conversion, and then the ρ-θ input image and the ρ-θ template image in which the rotational deviation of both images is corrected are generated, and the ρ-θ input image and ρ A correlation value image is generated from the -θ template image, the correlation value image is separated into a positive correlation value image and a negative correlation value image depending on whether or not the pixel value is equal to or greater than a threshold value, and the ρ-θ template image is converted into a pixel value Is separated into a positive template image and a negative template image depending on whether or not the threshold value is equal to or greater than a threshold, and a plurality of positive and negative separated correlation images are generated by combining the positive correlation value image and the negative correlation value image with the positive template image and the negative template image. In addition, since the collation determination is performed using the positive / negative separated correlation image, not only the portion where the correlation between the input image and the template image is high but also the portion where the correlation is low It achieved with using the correlation value, not only the characteristic portion of the template image, by performing image matching using also the background portion, the effect that it is possible to perform high image matching accuracy.
以下に添付図面を参照して、本発明に係る画像照合装置、画像照合方法および画像照合プログラムの好適な実施例を説明する。なお、以下では、硬貨の画像を用いた画像照合の場合について説明する。 Exemplary embodiments of an image collation apparatus, an image collation method, and an image collation program according to the present invention will be described below with reference to the accompanying drawings. In the following, the case of image collation using coin images will be described.
図1は、本実施例に係る画像照合装置の構成を示す機能ブロック図である。同図に示すように、この画像照合装置1は、画像入力部10と、画像切出部20と、エッジ抽出部30と、マッチング処理部40と、登録画像記憶部50と、正負分離相関判定部100とを備えており、かかるマッチング処理部40は、極座標変換部40aと、回転角検出部40bと、表裏判定部40cとを備えており、かかる正負分離相関判定部100は、正規化相関値算出部110と、正負分離相関画像生成部120と、膨張処理部130と、照合値算出部140とを備えている。
FIG. 1 is a functional block diagram illustrating the configuration of the image collating apparatus according to the present embodiment. As shown in the figure, the
画像入力部10は、照合対象となる硬貨の入力画像を装置内に取り込むための入力部であり、入力された画像を画像切出部20に出力する。具体的には、画像入力部10は、入力画像を所定数の画素の集合体として取り扱う。たとえば、入力画像を256階調の濃度値をもつグレースケール画像として認識し、所定の大きさの矩形画像として画像切出部に出力する。
The
画像切出部20は、画像入力部10からかかる矩形画像を取得し、硬貨画像に外接する正方形の領域内の画像のみを切り出して、切り出した画像をエッジ抽出部30に出力する。
The
図2は、この画像切出部20の処理概要を説明するための説明図である。同図に示すように、画像切出部20は、画像入力部10から取得した入力画像11を水平方向に走査して全画素の濃度値を累積し、水平方向射影21を生成する。また、入力画像11を垂直方向に走査して、同様の手順で垂直方向射影22を生成する。そして、画像切出部20は、水平方向射影21および垂直方向射影22を走査し、累積した濃度値の立上り座標と立下り座標を算出する。そして、同図の4本の破線で示したように、算出された各座標に囲まれた領域を切出画像23として切り出し、この切出画像23をエッジ抽出部30に出力する。
FIG. 2 is an explanatory diagram for explaining the processing outline of the
図1の説明に戻り、エッジ抽出部30について説明する。エッジ抽出部30は、画像切出部20から切出画像23を取得し、切出画像23の明るさや色合いなどの個体差に基づく影響を避けるために、切出画像23の濃度変化(エッジ強度)を算出する。また、算出したエッジ強度のばらつきを抑えるために、エッジ強度の正規化をおこなう。具体的には、切出画像23に対してSobelオペレータを用いたエッジ抽出処理をおこなうことによりエッジ強度を算出し、算出結果を正規化する。なお、本実施例においては、Sobelオペレータを用いることとしたが、Robertsオペレータなどを用いてエッジ抽出をおこなうこともできる。
Returning to the description of FIG. 1, the
図3は、Sobelオペレータを説明するための説明図である。同図に示すように、エッジ抽出部30は、水平方向エッジ算出用30aおよび垂直方向エッジ算出用30bの二つのSobelオペレータを用いてエッジ強度の算出をおこなう。具体的には、切出画像23の全画素について、各Sobelオペレータ(30aおよび30b)を走査し、水平方向エッジ算出結果Gxおよび垂直方向エッジ算出結果Gyを取得する。そして、各画素におけるエッジ強度(G)を算出したうえで、かかるエッジ強度を正規化(E)する。
式(1)に示すように、各画素におけるエッジ強度(G)は、水平方向エッジ算出結果Gxの絶対値と垂直方向エッジ算出結果Gyの絶対値との和としてあらわされる。また、式(2)に示すように、各画素における正規化エッジ強度(E)は、硬貨の種別毎に所定の値が設定される定数cとエッジ強度(G)との積を、全画素にわたるエッジ強度(G)の総和で除したものとなる。 As shown in Equation (1), the edge strength (G) in each pixel is expressed as the sum of the absolute value of the horizontal edge calculation result Gx and the absolute value of the vertical edge calculation result Gy. Further, as shown in Expression (2), the normalized edge strength (E) in each pixel is the product of a constant c and an edge strength (G) for which a predetermined value is set for each type of coin, Divided by the sum of the edge strengths (G).
このように、エッジ強度の正規化をおこなうことで、エッジが出やすい新貨と、エッジが出にくい流通貨との間で、エッジ強度のばらつきが発生することを抑えることができるので、硬貨の新旧にかかわらず、種々の硬貨の照合を精度良くおこなうことができる。 In this way, by normalizing the edge strength, it is possible to suppress the occurrence of edge strength variation between a new coin that is easy to produce an edge and a current currency that is difficult to produce an edge. Regardless of old or new, various coins can be verified with high accuracy.
図4は、エッジ抽出部30によりおこなわれるエッジ抽出処理(画像変換処理)の概要を説明するための説明図である。同図に示すように、切出画像23は、Sobelオペレータを用いたエッジ強度算出処理により、エッジ抽出画像31に画像変換される。そして、エッジ抽出画像31は、式(1)および式(2)を用いたエッジ強度正規化処理により、エッジ正規化画像32に画像変換される。エッジ抽出部30は、このエッジ正規化画像32をマッチング処理部40に出力する。
FIG. 4 is an explanatory diagram for explaining the outline of the edge extraction processing (image conversion processing) performed by the
同図に示したエッジ抽出画像31の各画素値は、たとえば、0〜255の値をとり、0が黒に対応し、255が白に対応したグレースケール値をとる。同図のエッジ抽出画像31において、白い部分が抽出されたエッジ部分であり、黒い部分が背景部分である。また、エッジ正規化画像32の各画素値は、たとえば、0〜255の値をとり、0が黒に対応し、255が白に対応したグレースケール値をとる。なお、同図のエッジ正規化画像において、白い部分がエッジ部分に相当し、黒い部分が背景に相当する点はエッジ抽出画像31と同様である。
Each pixel value of the edge extraction image 31 shown in the figure takes a value of 0 to 255, for example, 0 corresponds to black, and 255 takes a gray scale value corresponding to white. In the edge extracted image 31 of FIG. 3, the white part is the extracted edge part, and the black part is the background part. Further, each pixel value of the edge normalized
図1の説明に戻って、マッチング処理部40について説明する。マッチング処理部40は、エッジ抽出部30からエッジ正規化画像32を取得し、登録画像記憶部50からエッジ正規化および極座標変換済のテンプレート画像を取得する。そして、かかるエッジ正規化画像32を極座標変換し、この極座標変換済の画像と、テンプレート画像とのずれ角をテンプレート画像の平行移動により検出するとともに、表裏の判定をおこなって、エッジ正規化画像32およびずれ角補正済テンプレート画像を正負分離相関判定部100に出力する。なお、本実施例においては、テンプレート画像を平行移動させることによりずれ角を検出する場合について説明するが、エッジ正規化画像32を極座標変換した画像を平行移動させることによりずれ角を検出することとしてもよい。
Returning to the description of FIG. 1, the matching
極座標変換部40aは、エッジ正規化画像32を極座標変換する処理部である。具体的には、エッジ正規化画像32の中心点を算出して、かかる中心点を極座標の原点とする。そして、回転角θおよび中心点からの距離ρにより各画素を特定し、各画素をρ−θ空間に移動させることにより、極座標変換をおこなう。かかる変換には、
図5は、かかる極座標変換の処理概要を説明するための説明図である。x−y空間(エッジ正規化画像32)の中心点を原点とし、各画素の座標を(x,y)であらわすと、かかるxおよびyと、上述したρおよびθとは、式(3)および式(4)に示した関係を有する。したがって、エッジ正規化画像32内の各画素(x,y)を、式(3)および(4)の関係を満たす(ρ,θ)に変換することにより、極座標変換部40aは、極座標変換済エッジ正規化画像33を生成する。
FIG. 5 is an explanatory diagram for explaining the processing outline of such polar coordinate conversion. When the center point of the xy space (edge normalized image 32) is the origin and the coordinates of each pixel are represented by (x, y), the x and y and the above-described ρ and θ are expressed by the following equation (3). And the relationship shown in Formula (4). Therefore, by converting each pixel (x, y) in the edge normalized
なお、同図においては、中心点からの距離ρは、10〜100の値をとり、回転角θは、0〜255の値をとる場合について示しているが、これらの値の範囲は任意に設定することができる。 In the figure, the distance ρ from the center point takes a value of 10 to 100, and the rotation angle θ takes a value of 0 to 255, but the range of these values is arbitrary. Can be set.
図1の説明に戻り、回転角検出部40bについて説明する。回転角検出部40bは、極座標変換済エッジ正規化画像33と、同様の極座標変換処理によりあらかじめ極座標変換されたテンプレート画像とのずれ角を検出して、両画像のずれ角を補正する処理をおこなう。図6は、回転角検出部40bの処理概要を説明するための説明図である。
Returning to the description of FIG. 1, the
同図に示すように、ρ−θ空間において、テンプレート画像51をθ座標軸と平行に移動させる。そして、θ座標方向のずらし角(φ)と、各ずらし角(φ)におけるテンプレート画像51とエッジ正規化画像32との一致度M(φ)を算出し、この一致度M(φ)が最大となる回転角φmaxを取得する。なお、かかる一致度M(φ)は、
式(5)に示すように、各ずらし角(φ)における一致度M(φ)は、テンプレート画像51をφだけずらした場合において、テンプレート画像51の各画素の濃度値t(k,θ−φ)と、エッジ正規化画像32の各画素の濃度値s(k,θ)との積を各画素にわたり総和したしたものとなる。ここで、kは、エッジ正規化画像32における中心点からの距離ρのうち、特徴の出やすい距離を選択した選択値である。たとえば、図5に示した極座標変換済エッジ正規化画像33のρ(0〜100)のうち、特徴の出やすいρの値を16個抽出することにより、かかるkを選択しておく。
As shown in Expression (5), the degree of coincidence M (φ) at each shift angle (φ) is the density value t (k, θ−) of each pixel of the
かかるM(φ)の値は、図6に示したように、ある回転角において最大値をもつ山型のグラフとなる。回転角検出部40bは、かかるM(φ)が最大(山型の頂点部分)となるφmaxの値を取得する。このように、回転角検出部40bは、極座標変換を施したρ−θ画像の平行移動によりずれ角を補正するので、x−y画像の回転によりずれ角を補正する方法に比べ計算量を削減することができる。
The value of M (φ) is a mountain graph having a maximum value at a certain rotation angle as shown in FIG. The rotation
図1の説明に戻って、表裏判定部40cについて説明する。まず、表裏判定部40cは、極座標変換済の表用テンプレート画像および裏用テンプレート画像と、極座標変換済エッジ正規化画像33との間で、上述した一致度M(φ)の最大値M(φmax)を算出し、このM(φmax)から正規化相関係数Rを求める。具体的には、この正規化相関係数Rは、
そして、かかる表裏判定部40cは、正規化相関係数Rが大きいほうのテンプレート画像を選択し、極座標変換済エッジ正規化画像33とともに正負分離相関判定部100に出力する。たとえば、裏用テンプレート画像と極座標変換済エッジ正規化画像33との正規化相関係数Rのほうが、表用テンプレート画像と極座標変換済エッジ正規化画像33との正規化相関係数Rよりも大きい場合には、裏用テンプレート画像と極座標変換済エッジ正規化画像33とを正負分離相関判定部100に出力する。ここで、正負分離相関判定部100に出力されるテンプレート画像は、角度φmaxだけ平行移動して極座標変換済エッジ正規化画像33とのずれ角を補正したテンプレート画像である。
Then, the front /
図1の説明に戻り、登録画像記憶部50について説明する。登録画像記憶部50は、あらかじめ登録された各種硬貨に対応した複数のテンプレート画像を記憶し、マッチング処理部40に、これらのテンプレート画像を提供する。かかるテンプレート画像には、硬貨の個体差によるばらつきを抑えるため、同一種類の硬貨の画像を複数合成した平均画像を用いる。かかる平均画像を用いることにより、製造年などの各硬貨に固有の凹凸パターン部分と、テンプレート画像の対応部分との相関値は、平均画像(平均値)についての相関値となるため照合時の影響が出にくくなる。すなわち、真正硬貨であるにもかかわらず、製造年が異なることにより偽造硬貨であると判定することを防止することができる。
Returning to the description of FIG. 1, the registered
かかるテンプレート画像は、極座標変換処理およびエッジ正規化処理が施された入力画像と照合させるため、入力画像と同様に極座標変換処理およびエッジ正規化処理が施された後に、登録画像記憶部50に登録される。また、登録画像記憶部50には、各金種の表面および裏面のテンプレート画像が複数登録される。
Such a template image is registered in the registered
図1の説明に戻って、正負分離相関判定部100について説明する。正負分離相関判定部100は、マッチング処理部40から、図6に示した極座標変換済エッジ正規化画像33(以下「入力画像33」と言う)およびずれ角補正済みのテンプレート画像51(以下「テンプレート画像51」と言う)を取得し、これらの画像を照合することにより入力画像33に係る硬貨が真正硬貨であるか否かを照合判定し、かかる判定結果を出力する。
Returning to the description of FIG. 1, the positive / negative separation
正規化相関値算出部110は、入力画像33およびテンプレート画像51の対応する画素毎の相関値を算出し、かかる相関値を正規化して正規化相関値画像を生成する。具体的には、座標値が(k,θ)の各画素について、入力画像33の濃度値s(k,θ)およびずれ角補正済のテンプレート画像51の濃度値t(k,θ−φmax)を用いて、
そして、正規化相関値算出部110は、かかる正規化相関値画像の画素値が0以上か否かにより、正の正規化相関値画像(r+画像)と負の正規化相関値画像(r−画像)とに分離する。また、テンプレート画像51については、各画素値が所定の閾値(Tt)以上か否かにより、正のテンプレート画像(t+画像)と負のテンプレート画像(t−画像)とに分離する。
Then, the normalized correlation
なお、r+画像の画素値は、たとえば、0.0〜1.0の値をとり、r−画像の画素値は、各画素値の絶対値をとることにより、たとえば、0.0〜1.0の値をとる。また、t+画像およびt−画像の画素値は、たとえば、0か1の二値をとる。すなわち、t+画像およびt−画像は、各正規化相関値画像の画像変換に用いられる画像マスクとしての役割を有する。 The pixel value of the r + image takes a value of 0.0 to 1.0, for example, and the pixel value of the r− image takes an absolute value of each pixel value, for example, 0.0 to 1. Takes a value of zero. Further, the pixel values of the t + image and the t− image take a binary value of 0 or 1, for example. In other words, the t + image and the t− image serve as image masks used for image conversion of each normalized correlation value image.
ここで、それぞれの画像の意味を説明すると、r+画像は照合対象となる画像間に相関がある(似ている)画素を示し、強い相関があれば、かかる画素は大きい値をとる。また、r−画像は照合対象となる画像間に相関がない(似ていない)ことを示し、強い負の相関があれば、かかる画素は大きい値をとる。そして、t+画像はテンプレート画像のエッジ部分を示し、エッジ部分が1、背景部分が0の値をとる。また、t−画像はテンプレート画像の背景部分(エッジでない部分)を示し、背景部分が1、エッジ部分が0の値をとる。 Here, the meaning of each image will be described. The r + image indicates a pixel having a correlation (similarity) between images to be collated, and if there is a strong correlation, the pixel takes a large value. Further, the r-image indicates that there is no correlation (not similar) between the images to be collated, and if there is a strong negative correlation, the pixel takes a large value. The t + image indicates the edge portion of the template image, and the edge portion has a value of 1 and the background portion has a value of 0. Further, the t-image indicates a background portion (a portion that is not an edge) of the template image, and the background portion has a value of 1 and the edge portion has a value of 0.
正負分離相関画像生成部120は、正規化相関値算出部110が生成した、r+画像、r−画像、t+画像およびt−画像の組み合わせにより正負分離相関画像を生成する。具体的には、r+画像とt+画像とからA+領域画像を、r−画像とt+画像とからA−領域画像を、r+画像とt−画像とからB+領域画像を、r−画像とt−画像とからB−領域画像をそれぞれ生成する。
The positive / negative separated correlation image generation unit 120 generates a positive / negative separated correlation image by a combination of the r + image, the r− image, the t + image, and the t− image generated by the normalized correlation
ここで、各領域画像の意味を説明する。図7は、かかる4つの領域を説明するための説明図である。同図に示すように、A+領域画像は、r+画像とt+画像とを重ね合わせた領域画像であり、エッジ部分と相関があること、すなわち、エッジが出るべきところにエッジが出ていることを示し、特許請求の範囲における正特徴領域画像に対応する。A−領域画像は、r−画像とt+画像とを重ね合わせ領域画像であり、エッジ部分と相関がないこと、すなわち、エッジが出るべきところにエッジが出ていないことを示し、特許請求の範囲における負特徴領域画像に対応する。B+領域画像は、r+画像とt−画像とを重ね合わせた領域画像であり、背景部分と相関があること、すなわち、エッジが出るべきでないところにエッジが出ていないことを示し、特許請求の範囲における正背景領域画像に対応する。B−領域画像は、r−画像とt−画像とを重ね合わせ領域画像であり、背景部分と相関がないこと、すなわち、エッジが出るべきでないところにエッジが出ていないことを示し、特許請求の範囲における負背景領域画像に対応する。 Here, the meaning of each area image will be described. FIG. 7 is an explanatory diagram for explaining the four areas. As shown in the figure, the A + region image is a region image obtained by superimposing the r + image and the t + image, and is correlated with the edge portion, that is, the edge is appearing where the edge should appear. And corresponds to the positive feature region image in the claims. The A-region image is a region image in which the r-image and the t + image are overlapped, and indicates that there is no correlation with the edge portion, that is, no edge appears where the edge should appear. Corresponds to the negative feature region image in FIG. The B + region image is a region image obtained by superimposing the r + image and the t− image, and indicates that there is a correlation with the background portion, that is, no edge appears where the edge should not appear. Corresponds to the positive background area image in the range. The B-region image is a region image obtained by superimposing the r-image and the t-image, and indicates that there is no correlation with the background portion, that is, no edge appears where the edge should not appear. Corresponds to a negative background region image in the range of.
図1の説明に戻って、膨張処理部130について説明する。膨張処理部130は、所定の画像マスクを用いて、A−領域画像の画素をA+領域画像に移動させるとともに、B−領域画像の画素をB+領域画像に移動させる。かかる膨張処理をおこなうのは、正規化相関値にはノイズ状に負の相関値をもつ孤立点があらわるためである。すなわち、かかる膨張処理をおこなうことにより、かかる孤立点の影響が照合値の判定結果におよぶことを抑えることができる。
Returning to the description of FIG. 1, the
照合値算出部140は、A+領域画像、A−領域画像、B+領域画像およびB−領域画像のそれぞれを、たとえば、水平方向に16、垂直方向に4の計64ブロックに分割し、
そして、照合値算出部140は、かかる照合値(Z)が閾値以上であれば、入力画像33に係る硬貨は真正硬貨であると判定し、閾値より小さければ偽造硬貨であると判定したうえで、照合結果を出力する。
And the collation
以降では、図1に示した正負分離相関判定部100の処理をさらに具体的に説明する。まず、正規化相関値算出部110がおこなう正規化相関値正負分離処理を、図8および図11を用いて説明する。図8は、正規化相関値正負分離処理のフローチャートであり、図11は、正負分離相関判定部100における画像生成手順を説明するための説明図である。
Hereinafter, the process of the positive / negative separation
図11に示すように、正規化相関値算出部110は、まず、入力画像33とテンプレート画像51から正規化相関値画像111を生成する。そして、生成された正規化相関値画像111を入力として正規化相関値正負分離処理をおこない、かかる正規化相関値画像111を、正の相関値画像であるr+画像111aと、負の相関値画像であるr−画像111bとに分離する。
As shown in FIG. 11, the normalized correlation
図8に示すように、正規化相関値正負分離処理においては、まず、正規化相関値画像111の始点画素に移動する(ステップS501)。かかる始点画素は、たとえば、k=0、θ=0の画素である。そして、かかる画素の正規化相関値r(k,θ)を式(4)を用いて算出し(ステップS502)、算出したr(k,θ)が0以上であれば(ステップS503肯定)、かかる画素値をr+画像111aの同一座標の画素値とする(ステップS504)。一方、算出したr(k,θ)が0より小さければ(ステップS503否定)、かかる画素の画素値の絶対値を、r−画像111bの同一座標の画素値とする(ステップS505)。
As shown in FIG. 8, in the normalized correlation value positive / negative separation process, first, the process moves to the start point pixel of the normalized correlation value image 111 (step S501). Such a start pixel is, for example, a pixel with k = 0 and θ = 0. Then, the normalized correlation value r (k, θ) of the pixel is calculated using the equation (4) (step S502). If the calculated r (k, θ) is 0 or more (Yes in step S503), Such a pixel value is set as a pixel value at the same coordinates of the r +
そして、正規化相関値画像111の全ての画素について未だ正負分離処理が完了していない場合には(ステップS506否定)、次の注目画素に移動して(ステップS507)、ステップS502以下の処理を繰り返す。一方、全ての画素について正負分離処理が終了した場合には(ステップS506肯定)、処理を終了する。かかる正規化相関値正負分離処理により、r+画像111aおよびr−画像111bは、0.0〜1.0の画素値をとる画素を有する画像として生成される。なお、本実施例においては、r−画像111bの画素の画素値は、0.0〜1.0の画素値をとるものとして説明するが、かかる画素値は、−1.0〜0.0の値をとることとしてもよい。
If the positive / negative separation process has not yet been completed for all the pixels of the normalized correlation value image 111 (No at Step S506), the process moves to the next target pixel (Step S507), and the processes after Step S502 are performed. repeat. On the other hand, when the positive / negative separation process has been completed for all the pixels (Yes in step S506), the process ends. By such normalized correlation value positive / negative separation processing, the r +
次に、正規化相関値算出部110がおこなうテンプレート画像正負分離処理を、図9および図11を用いて説明する。図9は、テンプレート画像正負分離処理のフローチャートである。図11に示したように、テンプレート画像正負分離処理では、テンプレート画像51を、正のテンプレート画像であるt+画像51aと、負のテンプレート画像であるt−画像51bとに分離する処理をおこなう。
Next, template image positive / negative separation processing performed by the normalized correlation
図9に示すように、テンプレート画像正負分離処理においては、まず、テンプレート画像51の始点画素に移動する(ステップS601)。かかる始点画素は、たとえば、k=0、θ=0の画素である。そして、かかる画素の濃度値が所定の閾値(Tt)以上であれば(ステップS602肯定)、t+画像51aの同一座標の画素値を1とする(ステップS603)。一方、かかる濃度値が所定の閾値(Tt)より小さければ(ステップS602否定)、t−画像51bの同一座標の画素値を1とする(ステップS604)。
As shown in FIG. 9, in the template image positive / negative separation process, first, the
そして、テンプレート画像51の全ての画素について未だ正負分離処理が完了していない場合には(ステップS605否定)、次の注目画素に移動して(ステップS606)、ステップS602以下の処理を繰り返す。一方、全ての画素について正負分離処理が終了した場合には(ステップS605肯定)、処理を終了する。かかるテンプレート画像正負分離処理により、t+画像51aは、エッジ部分が1、背景部分が0の二値画像として生成され、t−画像51bは、エッジ部分が0、背景部分が1の二値画像として生成される。
If the positive / negative separation process has not yet been completed for all the pixels of the template image 51 (No at Step S605), the process moves to the next pixel of interest (Step S606), and the processes after Step S602 are repeated. On the other hand, when the positive / negative separation process has been completed for all the pixels (Yes in step S605), the process ends. By this template image positive / negative separation processing, the t +
次に、正負分離相関画像生成部120がおこなう正負分離相関画像生成処理を、図10および図11を用いて説明する。図10は、正負分離相関画像生成処理のフローチャートである。 Next, positive / negative separated correlation image generation processing performed by the positive / negative separated correlation image generation unit 120 will be described with reference to FIGS. 10 and 11. FIG. 10 is a flowchart of the positive / negative separated correlation image generation process.
図11に示したように、正負分離相関画像生成処理においては、正規化相関値算出部110において生成した、r+画像111a、r−画像111b、t+画像51aおよびt−画像51bを入力画像として用いて、A+領域画像121、A−領域画像122、B+領域画像123およびB−領域画像124を生成する。
As shown in FIG. 11, in the positive / negative separated correlation image generation process, the r +
たとえば、r+画像111aおよびt+画像51aを入力画像として用いた場合、図10に示すように、まず、それぞれの画像の始点画素に移動する(ステップS701)。そして、かかる画素におけるt+画像51aの画素値が1である場合には(ステップS702肯定)、A+領域画像121の画素値をr+画像111aの画素値とする(ステップS703)。一方、かかる画素におけるt+画像51aの画素値が1でない場合(すなわち、0である場合)には(ステップS702否定)、A+領域画像121の画素値を0とする(ステップS704)。
For example, when the r +
そして、全ての画素について領域画像生成処理が完了していない場合には(ステップS705否定)、次の注目画素に移動して(ステップS706)、ステップS702以下の処理を繰り返す。一方、全ての画素について領域画像生成処理が終了した場合には(ステップS705肯定)、A+領域画像121が生成されるので、処理を終了する。
If the region image generation processing has not been completed for all the pixels (No at Step S705), the process moves to the next pixel of interest (Step S706), and the processing from Step S702 is repeated. On the other hand, when the region image generation processing has been completed for all the pixels (Yes in step S705), the A +
同様に、r−画像111bおよびt+画像51aからA−領域画像122を、r+画像111aおよびt−画像51bからB+領域画像123を、r−画像111bおよびt−画像51bからB−領域画像124を、それぞれ生成する。
Similarly, an
次に、膨張処理部130がおこなう膨張処理を、図12〜図14を用いて説明する。図12は、膨張処理において用いられる画像マスクを説明するための説明図であり、図13は、膨張処理のフローチャートであり、図14は、膨張処理により生成される画像を説明するための説明図である。
Next, the expansion process performed by the
かかる膨張処理においては、負の領域画像(A−領域画像122およびB−領域画像124)に含まれるノイズ状の孤立点(画素)を、正の領域画像(A+領域画像121およびB+領域画像123)に移動する処理をおこなう。かかる処理をおこなうことで、照合値の精度を高めることができる。
In such dilation processing, noise-like isolated points (pixels) included in the negative region images (A−
図12に示すように、かかる膨張処理においては、正領域画像マスク130aおよび負領域画像マスク130b2枚の画像マスクを用いる。各画像マスクは、P5およびM5と、これらの領域を取り囲む8つの領域を有する。たとえば、A−領域画像122からA+領域画像121への膨張処理をおこなう場合には、負領域画像マスク130bのM5をA−領域画像122の注目画素に合わせ、正領域画像マスク130aのP5を注目画素に対応する画素にあわせる。そして、M5の画素値と、P1〜P9の画素値とを順次比較して膨張処理をおこなう。
As shown in FIG. 12, in the expansion process, two image masks of a positive
次に、A−領域画像122からA+領域画像121への膨張処理をおこなう場合を例ににして、かかる膨張処理の処理手順を、図13を用いて説明する。まず、それぞれの画像(121および122)の始点画素に移動する(ステップS801)。かかる始点画素は、たとえば、k=0、θ=0の画素である。そして、正領域マスク130aの9つの領域(P1〜P9)を順次切替えるために、nに1を設定する(ステップS802)。すなわち、ステップS802が完了した時点においては、対象となる正領域画像マスク130aの領域はP1となる。
Next, the procedure of the expansion process will be described with reference to FIG. 13, taking as an example the case where the expansion process from the
そして、Pnの値とM5の値を比較して、P1の値がM5の値よりも大きい場合には(ステップS803肯定)、P5の値をM5で置き換えM5の値を0に設定する(ステップS805)。すなわち、M5の画素をP5の画素に移動する。一方、Pnの値がM5の値以下である場合には(ステップS803否定)、nの値に1を加算して(ステップS804)、nの値が9以下の場合には(ステップS806否定)、再度ステップ803をおこなう。 Then, the value of Pn is compared with the value of M5, and if the value of P1 is larger than the value of M5 (Yes at Step S803), the value of P5 is replaced with M5 and the value of M5 is set to 0 (Step S803). S805). That is, the pixel M5 is moved to the pixel P5. On the other hand, when the value of Pn is less than or equal to the value of M5 (No at Step S803), 1 is added to the value of n (Step S804), and when the value of n is 9 or less (No at Step S806). Step 803 is performed again.
このように、P1〜P9の値のうち一つでもM5の値より大きいものがあれば、M5の画素をP5に移動する。一方、P1〜P9の値のいずれもがM5の値以下である場合には(ステップS806肯定)、画素の移動をおこなわない。 As described above, if any one of the values P1 to P9 is larger than the value M5, the pixel M5 is moved to P5. On the other hand, if any of the values of P1 to P9 is equal to or less than the value of M5 (Yes at step S806), the pixel is not moved.
そして、A−領域画像122のすべての画素について処理が終了していない場合には(ステップS807否定)、次の注目画素に移動して(ステップS808)、ステップS802以降の処理をおこなう。一方、A−領域画像122のすべての画素について処理が終了した場合には(ステップS807肯定)、かかる膨張処理を終了する。 If the process has not been completed for all the pixels of the A-region image 122 (No at Step S807), the process moves to the next target pixel (Step S808), and the processes after Step S802 are performed. On the other hand, when the process is completed for all the pixels of the A-region image 122 (Yes in step S807), the expansion process is terminated.
図14に示したように、かかる膨張処理により、A+領域画像121、A−領域画像122、B+領域画像123およびB−領域画像124は、それぞれ、膨張済A+領域画像131、膨張済A−領域画像132、膨張済B+領域画像133および膨張済B−領域画像134に画像変換される。なお、A−領域画像122上の孤立点は、A+領域画像121に移動するので、膨張済A+領域画像131のエッジ部分は、A+領域画像121と比較して面積が増加している。一方、膨張済A−領域画像132のエッジ部分は、A−領域画像122と比較して面積が減少している。
As shown in FIG. 14, the A +
次に、照合値算出部140がおこなう照合値算出処理を、図15を用いて説明する。図15は、膨張済領域画像(131〜134)のブロック分割について、膨張済A+領域画像131をブロック分割する場合の例を説明するための説明図である。照合値算出処理部140は、まず、同図に示すように、膨張済A+領域画像131を、水平方向に16、垂直方向に4の計64ブロックに分割する。同様に、膨張済A−領域画像132、膨張済B+領域画像133および膨張済B−領域画像134についてもブロック分割をおこなう。
Next, the collation value calculation process performed by the collation
そして、照合値算出部140は、式(8)を用いて、照合値(Z)の算出をおこなう。ここで、式(8)の各係数aij、bij、cijおよびdijは、学習サンプルを用いて線形判別分析などにより最適解を求めておくものとする。具体的には、硬貨の凹凸パターンのデザインの相違により、エッジが出やすい硬貨や出にくい硬貨が存在するので、これらの係数は、硬貨の種別ごとに異なる値をとることになる。これらの係数を学習サンプルにより最適化することで、精度の良い画像照合をおこなうことができる。
And the collation
そして、照合値算出部140は、最適値が設定された、係数aij、bij、cijおよびdijと、各画像ブロックとを用いて照合値(Z)を算出し、かかる照合値が閾値以上である場合には、真正硬貨であると判定し、閾値より小さい場合には偽造硬貨であると判定する。なお、本実施例においては、各画像を64のブロックに分割する場合について説明したが、ブロック数は、任意の数とすることができる。
Then, the matching
なお、式(8)において、係数cijおよびdijを0に設定すれば、A+領域画像ブロックおよびA−領域画像ブロックのみから照合値(Z)を算出することができる。また、係数aijおよびbijを0に設定すれば、B+領域画像ブロックおよびB−領域画像ブロックのみから照合値(Z)を算出することができる。 If the coefficients c ij and d ij are set to 0 in equation (8), the collation value (Z) can be calculated from only the A + area image block and the A− area image block. If the coefficients a ij and b ij are set to 0, the collation value (Z) can be calculated from only the B + region image block and the B− region image block.
このように、照合値算出部140は、硬貨の種別やハードウェアの能力に応じて、画像ブロック数や式(8)の各係数の値を調整することにより、効率良く画像照合をおこなうことができる。
As described above, the matching
なお、本実施例に係る照合値算出部140では、各領域画像をブロック分割したうえで、式(8)により照合値(Z)を算出するよう構成したが、これに限らず、たとえば、多層ニューラルネットワーク、サポートベクトルマシン、二次識別関数等の他の方法を用いることとしてもよい。
Note that the collation
以降では、正規化相関値画像111を正負分離する前に膨張処理をおこなう場合について、図16〜図18を用いて説明する。図16は、かかる膨張処理による画像生成手順について説明した説明図であり、図17は、かかる膨張処理に用いられる画像マスクを説明するための説明図であり、図18は、かかる膨張処理のフローチャートである。
Hereinafter, the case where the expansion process is performed before the normalized
上述した膨張処理は、各領域画像(121〜124)の生成後に、負の領域画像(たとえば、A−領域画像122)から正の領域画像(たとえば、A+領域画像121)に画素を移動していた。しかしながら、かかる膨張処理は、正負分離前の正規化相関値画像111と正負分離前のテンプレート画像51を用いておこなうことができる。
In the expansion processing described above, the pixels are moved from the negative region image (for example, the A−region image 122) to the positive region image (for example, the A + region image 121) after the generation of each region image (121 to 124). It was. However, such expansion processing can be performed using the normalized
図16に示すように、正規化相関値算出部110は、まず、入力画像33とテンプレート画像51から正規化相関値画像111を生成する。そして、かかる膨張処理は、生成された正規化相関値画像111を入力として膨張処理をおこない、膨張済の正規化相関値画像135を生成する。そして、この膨張済の正規化相関値画像135は、膨張済のr+画像135aと膨張済のr−画像135bとに分離される。そして、膨張済のr+画像135a、膨張済のr−画像135b、t+画像51aおよびt−画像51bを入力として、正負分離相関値画像生成部120の処理がおこなわれ、膨張済A+領域画像131、膨張済A−領域画像132、膨張済B+領域画像133および膨張済B−領域画像134が出力される。
As shown in FIG. 16, the normalized correlation
図17に示すように、かかる膨張処理においては、入力画像マスク130cおよびテンプレート画像マスク130dの2枚の画像マスクを用いる。各画像マスクは、S5およびT5と、これらの領域を取り囲む8つの領域を有する。たとえば、テンプレート画像51と正規化相関値画像111とを用いて膨張処理をおこなう場合には、入力画像マスク130cのS5を正規化相関値画像の注目画素に合わせ、テンプレート画像マスク130dのT5を注目画素に対応する画素にあわせる。そして、S1〜S9およびT1〜T9の領域の画素値を参照し比較して膨張処理をおこなう。
As shown in FIG. 17, in such expansion processing, two image masks, an
かかる膨張処理の処理手順を、図18を用いて説明する。まず、それぞれの画像(111および51)の始点画素に移動する(ステップS901)。かかる始点画素は、たとえば、k=0、θ=0の画素である。そして、S5の値が負の場合、すなわち、該当する画素の正規化相関値が負の場合には(ステップS902否定)、入力画像マスク130cの9つの領域(S1〜S9)およびテンプレート画像マスク130dの9つの領域(T1〜T9)を順次切替えるために、nに1を設定する(ステップS903)。
The procedure of the expansion process will be described with reference to FIG. First, it moves to the start point pixel of each image (111 and 51) (step S901). Such a start pixel is, for example, a pixel with k = 0 and θ = 0. When the value of S5 is negative, that is, when the normalized correlation value of the corresponding pixel is negative (No at step S902), the nine regions (S1 to S9) of the
そして、Tnの値が閾値(Tt)よりも大きい場合には(ステップS904肯定)、Snの値が0以上であるか否かを判定し(ステップS905)、Snの値が0以上であれば(ステップS905肯定)、かかるSnの値とS5の絶対値とを比較する(ステップS906)。そして、Snの値がS5の絶対値よりも大きければ(ステップS906肯定)、Snの値をS5の絶対値で置き換える(ステップS907)。 When the value of Tn is larger than the threshold value (T t ) (Yes at Step S904), it is determined whether or not the value of Sn is 0 or more (Step S905), and the value of Sn is 0 or more. If (Yes at step S905), the value of Sn is compared with the absolute value of S5 (step S906). If the value of Sn is larger than the absolute value of S5 (Yes at Step S906), the value of Sn is replaced with the absolute value of S5 (Step S907).
すなわち、S5の周辺のSnにおいて、Tnの値が閾値(Tt)よりも大きく、かつ、Snの値が0以上であり、かつ、Snの値がS5の絶対値よりも大きい領域(Sn)が存在する場合には、かかるS5の画素が孤立点であると判定し、S5の値の絶対値をとってS5の値を反転させる。そして、正規化相関値画像111の全ての画素について膨張処理が終了していなければ(ステップS910否定)、注目画素に移動して(ステップS911)、ステップS902以下の処理を繰り返す。一方、全ての画素について膨張処理が終了した場合には(ステップS910肯定)、かかる膨張処理を終了する。 That is, in Sn around S5, a region (Sn) where the value of Tn is larger than the threshold value (T t ), the value of Sn is 0 or more, and the value of Sn is larger than the absolute value of S5 Is present, it is determined that the pixel of S5 is an isolated point, and the absolute value of the value of S5 is taken to invert the value of S5. If the expansion process has not been completed for all the pixels of the normalized correlation value image 111 (No at Step S910), the process moves to the target pixel (Step S911), and the processes after Step S902 are repeated. On the other hand, when the expansion process is completed for all the pixels (Yes at step S910), the expansion process is ended.
一方、Tnの値が閾値(Tt)以下であるか(ステップS904否定)、Snの値が負であるか(ステップS905否定)、Snの値がS5の絶対値以下である(ステップS906否定)である場合には、nに1を加算し(ステップS908)、nが9以下であれば(ステップS909否定)、ステップS904以下の処理を繰り返す。一方、nが9よりも大きければ(ステップS909肯定)、ステップS910の処理をおこなう。 On the other hand, whether the value of Tn is less than or equal to the threshold value (T t ) (No at Step S904), whether the value of Sn is negative (No at Step S905), or the value of Sn is less than the absolute value of S5 (No at Step S906) ), 1 is added to n (step S908), and if n is 9 or less (No in step S909), the processing from step S904 is repeated. On the other hand, if n is larger than 9 (Yes at step S909), the process of step S910 is performed.
このように、正規化相関値画像111の正負分離前に膨張処理をおこなった場合であっても、膨張済領域画像(131〜134)を取得することができる。かかる場合においては、正負分離前の正規化相関値画像111を用いるので、領域画像(121〜124)生成後の膨張処理と比較して、膨張処理の対象となる画像の数を削減することができるので、より効率的な膨張処理を行なうことができる。
Thus, even if it is a case where an expansion process is performed before positive / negative separation of the normalized
上述してきたように、本実施例にかかる画像照合装置、画像照合方法および画像照合プログラムでは、エッジ抽出処理とエッジ正規化処理を施して特徴抽出をおこなった極座標変換入力画像と、あらかじめエッジ正規化処理が施された極座標変換テンプレート画像とを照合し、両画像のずれ角を補正して正規化相関値画像を生成するとともに、正規化相関値画像およびテンプレート画像を、各画像中の画素値が閾値以上か否かにより、それぞれ、正の正規化相関値画像および負の正規化相関値画像と、正のテンプレート画像および負のテンプレート画像に分離したうえで、かかる画像の組み合わせにより、正の特徴領域画像、負の特徴領域画像、正の背景領域画像および負の背景領域画像を生成し、さらに、負の特徴領域画像から正の特徴領域画像への画素の移動と、負の背景領域画像から正の特徴領域画像への画素の移動をおこなう膨張処理を施し、これらの膨張処理済みの領域画像をブロック分割して線形判別分析により照合値を算出して照合判定をおこなうよう構成したので、入力画像およびテンプレート画像の全画素を照合対象とするとともに、相関値算出に伴う孤立点の影響を排除しつつ、特徴領域のみならず、背景領域の相関値をもバランスよく照合値に反映することができるので、精度のよい画像照合をおこなうことができ、照合率を向上させることができる。 As described above, in the image matching apparatus, the image matching method, and the image matching program according to the present embodiment, the polar coordinate conversion input image subjected to the feature extraction by performing the edge extraction process and the edge normalization process, and the edge normalization in advance Compared with the processed polar coordinate conversion template image, correct the deviation angle of both images to generate a normalized correlation value image, and the normalized correlation value image and the template image, the pixel value in each image Depending on whether or not it is greater than or equal to the threshold value, a positive normalized correlation value image and a negative normalized correlation value image are separated into a positive template image and a negative template image. Generating a region image, a negative feature region image, a positive background region image, and a negative background region image; Perform dilation processing to move the pixels to the image and move the pixels from the negative background area image to the positive feature area image, and divide these dilated area images into blocks and match them by linear discriminant analysis Since all the pixels of the input image and the template image are to be collated, while eliminating the influence of isolated points associated with the correlation value calculation, not only the feature region but also the background region Since the correlation value can be reflected in the collation value in a well-balanced manner, the image collation with high accuracy can be performed and the collation rate can be improved.
なお、本実施例においては、硬貨の入力画像について画像照合をおこなう場合について説明したが、本発明はこれに限定されるものではなく、たとえば、遊戯施設などで用いられるメダル類の画像照合や、FA(Factory Automation)などにおける円形部品や円形製品の画像照合にも適用することができる。また、照合対象物は必ずしも円形である必要はなく、正八角形や正十六角形などの点対称の形状を有する硬貨や部品などにも本発明を適用することができる。 In the present embodiment, the case where the image collation is performed on the input image of the coin has been described, but the present invention is not limited to this, for example, the image collation of medals used in amusement facilities, The present invention can also be applied to image collation of circular parts and circular products in FA (Factory Automation). Further, the object to be collated need not necessarily be circular, and the present invention can also be applied to coins and parts having a point-symmetric shape such as a regular octagon or a regular dodecagon.
本発明にかかる画像照合装置、画像照合方法および画像照合プログラムは、物品の画像照合に有用であり、特に、硬貨などの円形物体の照合に適している。 The image matching apparatus, the image matching method, and the image matching program according to the present invention are useful for image matching of articles, and are particularly suitable for matching circular objects such as coins.
1 画像照合装置
10 画像入力部
11 入力画像
20 画像切出部
21 水平方向射影
22 垂直方向射影
23 切出画像
30 エッジ抽出部
30a Sobelオペレータ(水平方向エッジ算出用)
30b Sobelオペレータ(垂直方向エッジ算出用)
31 エッジ抽出画像
32 エッジ正規化画像
33 極座標変換済エッジ正規化画像
40 マッチング処理部
40a 極座標変換部
40b 回転角検出部
40c 表裏判定部
50 登録画像記憶部
51 テンプレート画像
51a t+画像
51b t−画像
100 正負分離相関判定部
110 正規化相関値算出部
111 正規化相関値画像
111a r+画像
111b r−画像
120 正負分離相関画像生成部
121 A+領域画像
122 A−領域画像
123 B+領域画像
124 B−領域画像
130 膨張処理部
130a 正領域画像マスク
130b 負領域画像マスク
130c 入力画像マスク
130d テンプレート画像マスク
131 膨張済A+領域画像
132 膨張済A−領域画像
133 膨張済B+領域画像
134 膨張済B−領域画像
135 膨張済正規化相関値画像
135a 膨張済r+画像
135b 膨張済r−画像
140 照合値算出部
DESCRIPTION OF
30b Sobel operator (for vertical edge calculation)
31
Claims (10)
前記入力画像および前記テンプレート画像を極座標変換したうえで、両画像の回転ずれを補正したρ−θ入力画像およびρ−θテンプレート画像を生成する極座標変換画像生成手段と、
前記ρ−θ入力画像および前記ρ−θテンプレート画像の対応する画素間の相関値を画素値として有する相関値画像を生成し、前記相関値画像の画素値が閾値以上であるか否かによって当該相関値画像を正相関値画像と負相関値画像とに分離する相関値画像分離手段と、
前記ρ−θテンプレート画像の画素値が閾値以上であるか否かによって当該ρ−θテンプレート画像を正テンプレート画像と負テンプレート画像とに分離するテンプレート画像分離手段と、
前記正相関値画像および前記負相関値画像のいずれかと、前記正テンプレート画像および前記負テンプレート画像のいずれかとの組み合わせについて、対応する画素の画素値同士の積を画素値として有する正負分離相関画像を前記組み合わせごとに生成する正負分離相関画像生成手段と、
事前に学習したパラメータを前記正負分離相関画像生成手段によって生成された各正負分離相関画像の画素値に対して適用することによって算出した照合値に基づいて照合判定をおこなう照合判定手段と
を備えたことを特徴とする画像照合装置。 An image matching device for matching images by comparing image features between an input image of a circular object and a plurality of template images registered in advance,
Polar coordinate conversion image generation means for generating a ρ-θ input image and a ρ-θ template image in which the rotational deviation of both images is corrected after the input image and the template image are converted into polar coordinates,
A correlation value image having a correlation value between corresponding pixels of the ρ-θ input image and the ρ-θ template image as a pixel value is generated, and depending on whether the pixel value of the correlation value image is greater than or equal to a threshold value A correlation value image separating means for separating the correlation value image into a positive correlation value image and a negative correlation value image;
Template image separation means for separating the ρ-θ template image into a positive template image and a negative template image depending on whether or not the pixel value of the ρ-θ template image is equal to or greater than a threshold value ;
For a combination of either the positive correlation value image or the negative correlation value image and either the positive template image or the negative template image, a positive / negative separation correlation image having a product of pixel values of corresponding pixels as a pixel value A positive / negative separated correlation image generating means for generating each combination ;
Collation determination means for performing a collation determination based on a collation value calculated by applying a parameter learned in advance to a pixel value of each positive / negative separation correlation image generated by the positive / negative separation correlation image generation means . An image collating apparatus characterized by that.
前記入力画像および前記テンプレート画像を極座標変換したうえで、両画像の回転ずれを補正したρ−θ入力画像およびρ−θテンプレート画像を生成する極座標変換画像生成工程と、
前記ρ−θ入力画像および前記ρ−θテンプレート画像の対応する画素間の相関値を画素値として有する相関値画像を生成し、前記相関値画像の画素値が閾値以上であるか否かによって当該相関値画像を正相関値画像と負相関値画像とに分離する相関値画像分離工程と、
前記ρ−θテンプレート画像の画素値が閾値以上であるか否かによって当該ρ−θテンプレート画像を正テンプレート画像と負テンプレート画像とに分離するテンプレート画像分離工程と、
前記正相関値画像および前記負相関値画像のいずれかと、前記正テンプレート画像および前記負テンプレート画像のいずれかとの組み合わせについて、対応する画素の画素値同士の積を画素値として有する正負分離相関画像を前記組み合わせごとに生成する正負分離相関画像生成工程と、
事前に学習したパラメータを前記正負分離相関画像生成工程によって生成された各正負分離相関画像の画素値に対して適用することによって算出した照合値に基づいて照合判定をおこなう照合判定工程と
を含んだことを特徴とする画像照合方法。 Between the input image and the previously registered plurality of template images of the circular object, an image matching method for matching image by comparing features of images,
A polar coordinate conversion image generation step of generating a ρ-θ input image and a ρ-θ template image in which the rotational deviation of both images is corrected after the input image and the template image are converted into polar coordinates;
A correlation value image having a correlation value between corresponding pixels of the ρ-θ input image and the ρ-θ template image as a pixel value is generated, and depending on whether the pixel value of the correlation value image is greater than or equal to a threshold value A correlation value image separating step for separating the correlation value image into a positive correlation value image and a negative correlation value image;
A template image separation step of separating the ρ-θ template image into a positive template image and a negative template image depending on whether a pixel value of the ρ-θ template image is equal to or greater than a threshold value ;
For a combination of either the positive correlation value image or the negative correlation value image and either the positive template image or the negative template image, a positive / negative separation correlation image having a product of pixel values of corresponding pixels as a pixel value A positive / negative separated correlation image generation step for each combination , and
A collation determination step for performing collation determination based on a collation value calculated by applying a parameter learned in advance to the pixel value of each positive / negative separation correlation image generated by the positive / negative separation correlation image generation step . An image matching method characterized by the above.
前記入力画像および前記テンプレート画像を極座標変換したうえで、両画像の回転ずれを補正したρ−θ入力画像およびρ−θテンプレート画像を生成する極座標変換画像生成手順と、
前記ρ−θ入力画像および前記ρ−θテンプレート画像の対応する画素間の相関値を画素値として有する相関値画像を生成し、前記相関値画像の画素値が閾値以上であるか否かによって当該相関値画像を正相関値画像と負相関値画像とに分離する相関値画像分離手順と、
前記ρ−θテンプレート画像の画素値が閾値以上であるか否かによって当該ρ−θテンプレート画像を正テンプレート画像と負テンプレート画像とに分離するテンプレート画像分離手順と、
前記正相関値画像および前記負相関値画像のいずれかと、前記正テンプレート画像および前記負テンプレート画像のいずれかとの組み合わせについて、対応する画素の画素値同士の積を画素値として有する正負分離相関画像を前記組み合わせごとに生成する正負分離相関画像生成手順と、
事前に学習したパラメータを前記正負分離相関画像生成手順によって生成された各正負分離相関画像の画素値に対して適用することによって算出した照合値に基づいて照合判定をおこなう照合判定手順と
をコンピュータに実行させることを特徴とする画像照合プログラム。 An image matching program for matching images by comparing image features between an input image of a circular object and a plurality of pre-registered template images,
Polar coordinate conversion image generation procedure for generating a ρ-θ input image and a ρ-θ template image, in which the input image and the template image are subjected to polar coordinate conversion, and rotational deviation of both images is corrected,
A correlation value image having a correlation value between corresponding pixels of the ρ-θ input image and the ρ-θ template image as a pixel value is generated, and depending on whether the pixel value of the correlation value image is greater than or equal to a threshold value A correlation value image separation procedure for separating the correlation value image into a positive correlation value image and a negative correlation value image;
A template image separation procedure for separating the ρ-θ template image into a positive template image and a negative template image depending on whether a pixel value of the ρ-θ template image is equal to or greater than a threshold value ;
For a combination of either the positive correlation value image or the negative correlation value image and either the positive template image or the negative template image, a positive / negative separation correlation image having a product of pixel values of corresponding pixels as a pixel value A positive / negative separated correlation image generation procedure to be generated for each combination ;
A collation determination procedure for performing collation determination based on a collation value calculated by applying a parameter learned in advance to a pixel value of each positive / negative separated correlation image generated by the positive / negative separated correlation image generation procedure. An image collation program characterized by being executed.
Priority Applications (8)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004206170A JP4563741B2 (en) | 2004-07-13 | 2004-07-13 | Image collation device, image collation method, and image collation program. |
KR1020077000193A KR101073944B1 (en) | 2004-07-13 | 2005-06-22 | Image checking device, image checking method, and computer-readable recording medium for storing a image checking program |
PCT/JP2005/011465 WO2006006356A1 (en) | 2004-07-13 | 2005-06-22 | Image checking device, image checking method, and image checking program |
US11/572,070 US7856137B2 (en) | 2004-07-13 | 2005-06-22 | Apparatus and method for verifying image by comparison with template image |
DE602005019884T DE602005019884D1 (en) | 2004-07-13 | 2005-06-22 | PICTURE REVIEW ARRANGEMENT, PICTURE REVIEW PROCESS AND PICTURE REVIEW PROGRAM |
EP05753375A EP1768063B8 (en) | 2004-07-13 | 2005-06-22 | Image checking device, image checking method, and image checking program |
AT05753375T ATE460711T1 (en) | 2004-07-13 | 2005-06-22 | IMAGE REVIEW ARRANGEMENT, IMAGE REVIEW METHOD AND IMAGE REVIEW PROGRAM |
CN2005800237406A CN101014978B (en) | 2004-07-13 | 2005-06-22 | Image checking device, image checking method, and image checking program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2004206170A JP4563741B2 (en) | 2004-07-13 | 2004-07-13 | Image collation device, image collation method, and image collation program. |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2006031166A JP2006031166A (en) | 2006-02-02 |
JP4563741B2 true JP4563741B2 (en) | 2010-10-13 |
Family
ID=35897474
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004206170A Expired - Fee Related JP4563741B2 (en) | 2004-07-13 | 2004-07-13 | Image collation device, image collation method, and image collation program. |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4563741B2 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021193550A1 (en) | 2020-03-23 | 2021-09-30 | グローリー株式会社 | Money information generation device, money processing system, money processing device, money information generation system, money information generation method, and money information generation program |
WO2021193013A1 (en) | 2020-03-23 | 2021-09-30 | グローリー株式会社 | Feature information generation device, coin identification device, feature information generation system, feature information generation method, and feature information generation program |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6357897B2 (en) * | 2014-06-13 | 2018-07-18 | オムロン株式会社 | Medal identification device and medal identification method |
JP2016004333A (en) * | 2014-06-13 | 2016-01-12 | オムロン株式会社 | Model image generation device and model image generation method |
KR101719702B1 (en) * | 2015-12-18 | 2017-03-24 | 인천대학교 산학협력단 | Apparatus, Method and Computer Readable Recording Medium for Processing Image Circular Effect Generation of Color Image |
CN108205643B (en) * | 2016-12-16 | 2020-05-15 | 同方威视技术股份有限公司 | Image matching method and device |
JP2019179342A (en) * | 2018-03-30 | 2019-10-17 | 日本電産サンキョー株式会社 | Image processing device and image processing method |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000322579A (en) * | 1999-05-13 | 2000-11-24 | Sankyo Seiki Mfg Co Ltd | Image recognizing device |
JP2003187289A (en) * | 2001-12-21 | 2003-07-04 | Sankyo Seiki Mfg Co Ltd | Method for identifying circular body to be detected |
-
2004
- 2004-07-13 JP JP2004206170A patent/JP4563741B2/en not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2000322579A (en) * | 1999-05-13 | 2000-11-24 | Sankyo Seiki Mfg Co Ltd | Image recognizing device |
JP2003187289A (en) * | 2001-12-21 | 2003-07-04 | Sankyo Seiki Mfg Co Ltd | Method for identifying circular body to be detected |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021193550A1 (en) | 2020-03-23 | 2021-09-30 | グローリー株式会社 | Money information generation device, money processing system, money processing device, money information generation system, money information generation method, and money information generation program |
WO2021193013A1 (en) | 2020-03-23 | 2021-09-30 | グローリー株式会社 | Feature information generation device, coin identification device, feature information generation system, feature information generation method, and feature information generation program |
Also Published As
Publication number | Publication date |
---|---|
JP2006031166A (en) | 2006-02-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7856137B2 (en) | Apparatus and method for verifying image by comparison with template image | |
JP4563740B2 (en) | Image collation device, image collation method, and image collation program. | |
US7697749B2 (en) | Stereo image processing device | |
JP5372183B2 (en) | Coin classification device and coin classification method | |
CN114022729B (en) | Heterogeneous image matching and positioning method and system based on twin network and supervision training | |
JP4563741B2 (en) | Image collation device, image collation method, and image collation program. | |
US20090116731A1 (en) | Method and system for detection of concha and intertragal notch point in 3D undetailed ear impressions | |
CN109685772B (en) | No-reference stereo image quality evaluation method based on registration distortion representation | |
JP2021068056A (en) | On-road obstacle detecting device, on-road obstacle detecting method, and on-road obstacle detecting program | |
JP4932177B2 (en) | Coin classification device and coin classification method | |
JP2014102810A (en) | Subject recognition device, subject recognition method, and subject recognition program | |
Pan et al. | An adaptive multifeature method for semiautomatic road extraction from high-resolution stereo mapping satellite images | |
US7609877B2 (en) | Tactical image parameter adjustment method for stereo pair correlation | |
CN109344758B (en) | Face recognition method based on improved local binary pattern | |
CN112926557B (en) | Method for training multi-mode face recognition model and multi-mode face recognition method | |
JP3251840B2 (en) | Image recognition device | |
JP4133246B2 (en) | Image deformation information generation apparatus, image deformation information generation method, and image deformation information generation program | |
JP5748472B2 (en) | Object discrimination device, method, and program | |
CN105184803A (en) | Attitude measurement method and device | |
US20240054769A1 (en) | Model generation apparatus, model generation method, and recording medium | |
Chen et al. | A New Objective Evaluation Method on Image Edge Detection | |
JP2024006472A (en) | Information processing device, learning device, and tracking method | |
JP2017138742A (en) | Image processing apparatus, image processing method, and program | |
JP5649943B2 (en) | Object discrimination device, method, and program | |
CN116342976A (en) | Performance-optimized countermeasure sample generation method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20051215 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070525 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100525 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100705 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100727 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100729 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130806 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4563741 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130806 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |