JP2020198559A

JP2020198559A - Image reading device

Info

Publication number: JP2020198559A
Application number: JP2019104034A
Authority: JP
Inventors: 田上　裕也; Hironari Tagami; 裕也田上
Original assignee: Kyocera Document Solutions Inc
Current assignee: Kyocera Document Solutions Inc
Priority date: 2019-06-03
Filing date: 2019-06-03
Publication date: 2020-12-10

Abstract

To accurately detect a document image even when one edge of four edges is not specified, the edges corresponding to four sides of the document image inclined in a read image.SOLUTION: An image reading unit 21 creates a read image in a predetermined size including a document image optically read from a document. A document image detection unit 42 (a) creates an edge image showing edge pixels in the read image, (b) detects straight lines as formulas corresponding to line segments in the edge image, (c) when one of the four straight lines corresponding to the four sides of the document image is not detected, estimates the straight line not detected as a straight line passing through a side corresponding to the straight line not detected and an edge pixel located at the outermost edge in a direction corresponding to the inclination angle of the detected straight lines and parallel or perpendicular to the detected straight lines, and (d) detects a detection area in the read image specified by the detected straight lines and the estimated straight line as the document image.SELECTED DRAWING: Figure 2

Description

本発明は、画像読取装置に関するものである。 The present invention relates to an image reader.

ある複合機では、画像読取装置により得られた読取画像データに基づいて、読取画像のエッジが抽出され、そのエッジに基づいて読取画像が複数の原稿画像に分割され、各原稿画像を回転させることで、読取画像内での原稿画像の傾きが軽減される（例えば特許文献１参照）。 In a certain compound machine, an edge of a scanned image is extracted based on the scanned image data obtained by an image scanning device, the scanned image is divided into a plurality of original images based on the edge, and each original image is rotated. Therefore, the inclination of the original image in the scanned image is reduced (see, for example, Patent Document 1).

特開２００５−５７６０３号公報JP-A-2005-57603

しかしながら、上述の複合機では、エッジに基づいて原稿画像が抽出されているため、原稿画像の４辺に対応する４本のエッジのいずれかが抽出できない場合、原稿画像を抽出することが困難であり、読取画像内での原稿画像の傾きを軽減することが困難である。 However, in the above-mentioned multifunction device, since the original image is extracted based on the edges, it is difficult to extract the original image if any of the four edges corresponding to the four sides of the original image cannot be extracted. Therefore, it is difficult to reduce the inclination of the original image in the scanned image.

また、例えば図１２に示すように、読取画像２００におけるエッジ画素を検出し、エッジ画素が検出された領域（つまり、本来検出されるべき原稿画像２０１）の外接矩形２０２を原稿画像として抽出することが考えられるが、その場合でも、読取画像内での原稿画像の傾きを軽減することが困難である。 Further, for example, as shown in FIG. 12, edge pixels in the scanned image 200 are detected, and the circumscribing rectangle 202 of the region where the edge pixels are detected (that is, the original image 201 that should be originally detected) is extracted as the original image. However, even in that case, it is difficult to reduce the inclination of the original image in the scanned image.

本発明は、上記の問題に鑑みてなされたものであり、読取画像内で傾いている原稿画像の４辺に対応する４本のエッジのうちの一部が特定されない場合でも、原稿画像を正確に検出する画像読取装置を得ることを目的とする。 The present invention has been made in view of the above problems, and even if a part of the four edges corresponding to the four sides of the tilted original image in the scanned image is not specified, the original image can be accurately obtained. The purpose is to obtain an image reader that detects images.

本発明に係る画像読取装置は、原稿から光学的に読み取られた原稿画像を含む所定サイズの読取画像を生成する画像読取部と、（ａ）前記読取画像内のエッジ画素を示すエッジ画像を生成し、（ｂ）前記エッジ画像における線分に対応する数式としての直線を検出し、（ｃ）前記原稿画像の４辺に対応する４本の直線の一部が検出されなかった場合、検出されなかった直線を、前記検出されなかった直線に対応する辺および検出された直線の傾き角に対応する方向における最外縁に位置するエッジ画素を通り、かつ、検出された直線に対して平行または垂直な直線として推定し、（ｄ）前記検出された直線および前記推定された直線で特定される前記読取画像内の検出領域を前記原稿画像として検出する原稿画像検出部とを備える。 The image reading device according to the present invention generates an image reading unit that generates a scanned image of a predetermined size including a document image optically read from a document, and (a) an edge image showing edge pixels in the scanned image. Then, (b) a straight line as a mathematical formula corresponding to a line segment in the edge image is detected, and (c) a part of four straight lines corresponding to four sides of the original image is not detected. The undetected straight line passes through the edge pixel located at the side corresponding to the undetected straight line and the outermost edge in the direction corresponding to the inclination angle of the detected straight line, and is parallel or perpendicular to the detected straight line. It is provided with a document image detection unit that estimates as a straight line and (d) detects the detected straight line and the detection region in the scanned image specified by the estimated straight line as the document image.

本発明によれば、読取画像内で傾いている原稿画像の４辺に対応する４本のエッジのうちの一部のエッジが特定されない場合でも、原稿画像を正確に検出する画像読取装置が得られる。 According to the present invention, an image reading device that accurately detects a document image can be obtained even when some of the edges of the four edges corresponding to the four sides of the document image tilted in the scanned image are not specified. Be done.

本発明の上記又は他の目的、特徴および優位性は、添付の図面とともに以下の詳細な説明から更に明らかになる。 The above or other object, feature and superiority of the present invention will be further clarified from the following detailed description with the accompanying drawings.

図１は、本発明の実施の形態に係る画像読取装置の内部構成を示す側面図である。FIG. 1 is a side view showing an internal configuration of an image reading device according to an embodiment of the present invention. 図２は、図１に示す画像読取装置の電気的構成を示すブロック図である。FIG. 2 is a block diagram showing an electrical configuration of the image reader shown in FIG. 図３は、図１および図２に示す画像読取装置の動作について説明するフローチャートである（１／２）。FIG. 3 is a flowchart illustrating the operation of the image reader shown in FIGS. 1 and 2 (1/2). 図４は、図１および図２に示す画像読取装置の動作について説明するフローチャートである（２／２）。FIG. 4 is a flowchart illustrating the operation of the image reader shown in FIGS. 1 and 2 (2/2). 図５は、傾いた原稿画像を含む読取画像の一例を示す図である。FIG. 5 is a diagram showing an example of a scanned image including a tilted original image. 図６は、図５に示す読取画像において検出される直線を説明する図である。FIG. 6 is a diagram illustrating a straight line detected in the scanned image shown in FIG. 図７は、原稿画像の４辺に対応する直線のうち、検出されなかった直線（１本）の推定について説明する図である（１／２）。FIG. 7 is a diagram for explaining the estimation of the undetected straight line (1 line) among the straight lines corresponding to the four sides of the original image (1/2). 図８は、原稿画像の４辺に対応する直線のうち、検出されなかった直線（１本）の推定について説明する図である（２／２）。FIG. 8 is a diagram for explaining the estimation of the undetected straight line (1 line) among the straight lines corresponding to the four sides of the original image (2/2). 図９は、原稿画像の４辺に対応する直線のうち、検出されなかった直線（２本）の推定について説明する図である（１／２）。FIG. 9 is a diagram illustrating estimation of undetected straight lines (two) among the straight lines corresponding to the four sides of the original image (1/2). 図１０は、原稿画像の４辺に対応する直線のうち、検出されなかった直線（２本）の推定について説明する図である（２／２）。FIG. 10 is a diagram for explaining estimation of undetected straight lines (2 lines) among the straight lines corresponding to the four sides of the original image (2/2). 図１１は、直線が検出されたオブジェクトについて原稿画像として特定される領域が別のオブジェクトの一部を包含している場合について説明する図である。FIG. 11 is a diagram illustrating a case where a region specified as a manuscript image for an object in which a straight line is detected includes a part of another object. 図１２は、読取画像において原稿画像として抽出される外接矩形の一例を示す図である。FIG. 12 is a diagram showing an example of an circumscribing rectangle extracted as a document image in a scanned image.

以下、図に基づいて本発明の実施の形態を説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.

図１は、本発明の実施の形態に係る画像読取装置の内部構成を示す側面図である。図１に示す画像読取装置は、スキャナー、複写機、デジタル複合機などといった装置である。図１において、コンタクトガラス１は、当該画像読取装置本体の上面に設置され、画像読取時に原稿が載置される透明な載置台である。 FIG. 1 is a side view showing an internal configuration of an image reading device according to an embodiment of the present invention. The image reading device shown in FIG. 1 is a device such as a scanner, a copying machine, or a digital multifunction device. In FIG. 1, the contact glass 1 is a transparent mounting table that is installed on the upper surface of the image reading device main body and on which a document is placed when reading an image.

また、キャリッジ２は、図示せぬ駆動源によって副走査方向（つまり、スキャン方向）に移動可能に設置されている。キャリッジ２は、光源１１，１２とミラー１３とを有する。光源１１，１２は、それぞれ、主走査方向に沿ったライン状の光源であって、例えば、主走査方向に沿って配列された複数の発光ダイオードで光を出射する。光源１１，１２の少なくとも一方から出射された光は、キャリッジ２の位置に応じて、コンタクトガラス１上に載置された原稿に照射される。原稿に照射された光は、原稿の表面で反射する。そして、ミラー１３は、原稿からのその反射光をキャリッジ３に向けて反射する。 Further, the carriage 2 is movably installed in the sub-scanning direction (that is, the scanning direction) by a drive source (not shown). The carriage 2 has light sources 11 and 12 and a mirror 13. Each of the light sources 11 and 12 is a line-shaped light source along the main scanning direction, and emits light by, for example, a plurality of light emitting diodes arranged along the main scanning direction. The light emitted from at least one of the light sources 11 and 12 is applied to the document placed on the contact glass 1 according to the position of the carriage 2. The light applied to the document is reflected on the surface of the document. Then, the mirror 13 reflects the reflected light from the document toward the carriage 3.

また、キャリッジ３は、図示せぬ駆動源によってキャリッジ２とともに副走査方向に移動可能に設置されている。キャリッジ３は、ミラー１４，１５を有する。ミラー１４，１５は、キャリッジ２のミラー１３からの光を２度反射して副走査方向に沿って出射する。 Further, the carriage 3 is movably installed together with the carriage 2 in the sub-scanning direction by a drive source (not shown). The carriage 3 has mirrors 14 and 15. The mirrors 14 and 15 reflect the light from the mirror 13 of the carriage 2 twice and emit it along the sub-scanning direction.

結像レンズ４は、キャリッジ３のミラー１５からの光をイメージセンサー５に結像させる。イメージセンサー５は、主走査方向に配列された所定の画素数の受光素子を有する一次元イメージセンサーであり、ラインごとに、その画素数の画素についての受光量に対応する電気信号を出力する。イメージセンサー５としては、例えば、ＣＣＤ（Charge Coupled Device）が使用される。 The imaging lens 4 forms an image of light from the mirror 15 of the carriage 3 on the image sensor 5. The image sensor 5 is a one-dimensional image sensor having light receiving elements having a predetermined number of pixels arranged in the main scanning direction, and outputs an electric signal corresponding to the amount of light received for the pixels of the number of pixels for each line. As the image sensor 5, for example, a CCD (Charge Coupled Device) is used.

キャリッジ２，３、結像レンズ４、イメージセンサー５、原稿カバー６、光源１１，１２、ミラー１３，１４，１５などにより、画像読取部２１が構成されている。 The image reading unit 21 is composed of carriages 2 and 3, an imaging lens 4, an image sensor 5, a document cover 6, light sources 11, 12, mirrors 13, 14, 15, and the like.

画像読取部２１は、原稿から光学的に読み取られた原稿画像を含む所定サイズの読取画像を生成する。例えばコンタクトガラス１の所定領域に対応するサイズの読取画像が生成され、コンタクトガラス１上の原稿に対応するサイズの原稿画像が読取画像に含まれる。 The image scanning unit 21 generates a scanned image of a predetermined size including a document image optically scanned from the document. For example, a scanned image having a size corresponding to a predetermined region of the contact glass 1 is generated, and a document image having a size corresponding to the document on the contact glass 1 is included in the scanned image.

図２は、図１に示す画像読取装置の電気的構成を示すブロック図である。 FIG. 2 is a block diagram showing an electrical configuration of the image reader shown in FIG.

図２において、ユーザーインターフェイス３１は、ユーザー操作を検出するハードキー、タッチパネルなどの入力装置と、ユーザーに対して各種情報を表示する液晶ディスプレイなどの表示装置とを有する。プリント部３２は、原稿画像などを、電子写真方式などで記録用紙などに印刷する内部装置である。 In FIG. 2, the user interface 31 includes an input device such as a hard key and a touch panel for detecting a user operation, and a display device such as a liquid crystal display for displaying various information to the user. The printing unit 32 is an internal device that prints a document image or the like on recording paper or the like by an electrophotographic method or the like.

画像処理装置３３は、画像読取部２１により読み取られた画像に対して画像処理を行う装置である。画像処理装置３３は、例えばＡＳＩＣ（Application Specific Integrated Circuit）や、制御プログラムに従って動作するコンピューターなどで実現される。 The image processing device 33 is a device that performs image processing on the image read by the image reading unit 21. The image processing device 33 is realized by, for example, an ASIC (Application Specific Integrated Circuit), a computer that operates according to a control program, or the like.

画像処理装置３３は、そのＡＳＩＣ、コンピューターなどで、制御部４１、原稿画像検出部４２、およびオートクロップ処理部４３として動作する。 The image processing device 33 operates as a control unit 41, a document image detection unit 42, and an auto crop processing unit 43 in the ASIC, a computer, or the like.

制御部４１は、画像読取部２１、プリント部３２などを制御し、画像読取部２１から読取画像を取得したり、画像処理後の画像をプリント部３２で印刷したりする。 The control unit 41 controls the image reading unit 21, the printing unit 32, and the like, acquires the scanned image from the image reading unit 21, and prints the image after image processing on the printing unit 32.

原稿画像検出部４２は、（ａ）読取画像内のエッジ画素を示すエッジ画像を生成し、（ｂ）エッジ画像における線分に対応する（数式としての）直線を検出する。 The document image detection unit 42 (a) generates an edge image showing edge pixels in the scanned image, and (b) detects a straight line (as a mathematical formula) corresponding to a line segment in the edge image.

具体的には、原稿画像検出部４２は、例えばフィルターを使用して、読取画像内のエッジ画素を検出し、読取画像と同一画素数の２値画像としてのエッジ画像を生成する。つまり、エッジ画像における各画素は、エッジ画素であるか否かを示す画素値を有する。このとき、原稿画像検出部４２は、エッジ画像において、連続するエッジ画素の集合（オブジェクト）に対してラベル付けを行い、所定サイズ未満のオブジェクトを、ゴミなどに起因するノイズとして除去する。 Specifically, the original image detection unit 42 detects edge pixels in the scanned image using, for example, a filter, and generates an edge image as a binary image having the same number of pixels as the scanned image. That is, each pixel in the edge image has a pixel value indicating whether or not it is an edge pixel. At this time, the document image detection unit 42 labels a set (objects) of continuous edge pixels in the edge image, and removes objects smaller than a predetermined size as noise caused by dust or the like.

また、原稿画像検出部４２は、エッジ画像におけるラベル付けされたオブジェクトごとに、例えばハフ変換で、数式としての直線を検出する。これにより、原稿画像の４辺のいずれかを構成する線分に対応する直線が検出される。 Further, the original image detection unit 42 detects a straight line as a mathematical expression for each labeled object in the edge image, for example, by Hough transform. As a result, a straight line corresponding to a line segment constituting any of the four sides of the original image is detected.

そして、原稿画像検出部４２は、原稿画像の４辺に対応する４本の直線がすべて検出された場合には、検出された直線で特定される読取画像内の検出領域を原稿画像として検出する。なお、原稿画像は矩形状を有するため、その４本の直線のうちの２本の直線は、互いに略平行であり、残りの２本の直線は、互いに略平行であり、かつ他の２本の直線に略垂直である。 Then, when all four straight lines corresponding to the four sides of the original image are detected, the original image detection unit 42 detects the detection area in the scanned image identified by the detected straight lines as the original image. .. Since the original image has a rectangular shape, two straight lines out of the four straight lines are substantially parallel to each other, and the remaining two straight lines are substantially parallel to each other, and the other two straight lines. It is almost perpendicular to the straight line of.

一方、原稿画像検出部４２は、原稿画像の４辺に対応する４本の直線の一部が検出されなかった場合、検出されなかった直線を、検出されなかった直線に対応する辺および検出された直線の傾き角に対応する方向における最外縁に位置するエッジ画素を通り、かつ、検出された直線に対して平行または垂直な直線として推定し、検出された直線および推定された直線で特定される読取画像内の検出領域を原稿画像として検出する。 On the other hand, when a part of the four straight lines corresponding to the four sides of the original image is not detected, the original image detection unit 42 detects the undetected straight lines as the sides corresponding to the undetected straight lines. It is estimated as a straight line that passes through the edge pixel located at the outermost edge in the direction corresponding to the inclination angle of the straight line and is parallel or perpendicular to the detected straight line, and is specified by the detected straight line and the estimated straight line. The detection area in the scanned image is detected as a document image.

具体的には、検出された直線に基づき特定される原稿画像の傾き角（傾き角０度の正立状態からの傾き角）が−４５度以下でありかつ０度より大きい場合（つまり、主走査方向の逆方向と原稿画像の上辺または下辺とのなす角度ｘが０度より大きくかつ４５度以下である場合）、原稿画像検出部４２は、（ａ１）検出されなかった直線に対応する辺が上辺であるときには、主走査方向の位置が最小であるエッジ画素を通る直線および副主走査方向の位置が最小であるエッジ画素を通る直線のうちの外側の直線として、検出されなかった直線を推定し、（ａ２）検出されなかった直線に対応する辺が下辺であるときには、主走査方向の位置が最大であるエッジ画素を通る直線および副主走査方向の位置が最大であるエッジ画素を通る直線のうちの外側の直線として、検出されなかった直線を推定し、（ａ３）検出されなかった直線に対応する辺が左辺であるときには、主走査方向の位置が最小であるエッジ画素を通る直線および副主走査方向の位置が最大であるエッジ画素を通る直線のうちの外側の直線として、検出されなかった直線を推定し、（ａ４）検出されなかった直線に対応する辺が右辺であるときには、主走査方向の位置が最大であるエッジ画素を通る直線および副主走査方向の位置が最小であるエッジ画素を通る直線のうちの外側の直線として、検出されなかった直線を推定する。 Specifically, when the tilt angle (tilt angle from the upright state of 0 degree tilt angle) of the original image specified based on the detected straight line is -45 degrees or less and larger than 0 degrees (that is, mainly). When the angle x formed by the opposite direction of the scanning direction and the upper or lower side of the original image is greater than 0 degrees and 45 degrees or less), the original image detection unit 42 (a1) is the side corresponding to the undetected straight line. When is the upper side, the undetected straight line is defined as the outer straight line of the straight line passing through the edge pixel having the minimum position in the main scanning direction and the straight line passing through the edge pixel having the minimum position in the sub-main scanning direction. Estimated, (a2) When the side corresponding to the undetected straight line is the lower side, it passes through the straight line passing through the edge pixel having the maximum position in the main scanning direction and the edge pixel having the maximum position in the sub-main scanning direction. An undetected straight line is estimated as the outer straight line of the straight lines, and (a3) a straight line passing through the edge pixel whose position in the main scanning direction is the smallest when the side corresponding to the undetected straight line is the left side. And, as the outer straight line among the straight lines passing through the edge pixel whose position in the sub-main scanning direction is the maximum, the undetected straight line is estimated, and (a4) when the side corresponding to the undetected straight line is the right side. , The undetected straight line is estimated as the outer straight line among the straight line passing through the edge pixel having the maximum position in the main scanning direction and the straight line passing through the edge pixel having the minimum position in the sub-main scanning direction.

一方、検出された直線に基づき特定される原稿画像の傾き角が０度より大きく４５度未満である場合（つまり、主走査方向と原稿画像の上辺または下辺とのなす角度ｙが０度より大きくかつ４５度未満である場合）、原稿画像検出部４２は、（ｂ１）検出されなかった直線に対応する辺が上辺であるときには、主走査方向の位置が最大であるエッジ画素を通る直線および副主走査方向の位置が最小であるエッジ画素を通る直線のうちの外側の直線として、検出されなかった直線を推定し、（ｂ２）検出されなかった直線に対応する辺が下辺であるときには、主走査方向の位置が最小であるエッジ画素を通る直線および副主走査方向の位置が最大であるエッジ画素を通る直線のうちの外側の直線として、検出されなかった直線を推定し、（ｂ３）検出されなかった直線に対応する辺が左辺であるときには、主走査方向の位置が最小であるエッジ画素を通る直線および副主走査方向の位置が最小であるエッジ画素を通る直線のうちの外側の直線として、検出されなかった直線を推定し、（ｂ４）検出されなかった直線に対応する辺が右辺であるときには、主走査方向の位置が最大であるエッジ画素を通る直線および副主走査方向の位置が最大であるエッジ画素を通る直線のうちの外側の直線として、検出されなかった直線を推定する。 On the other hand, when the tilt angle of the original image specified based on the detected straight line is larger than 0 degrees and less than 45 degrees (that is, the angle y between the main scanning direction and the upper or lower side of the original image is larger than 0 degrees. (And when it is less than 45 degrees), the document image detection unit 42 (b1) when the side corresponding to the undetected straight line is the upper side, the straight line and the sub line passing through the edge pixel whose position in the main scanning direction is the maximum. The undetected straight line is estimated as the outer straight line among the straight lines passing through the edge pixel whose position in the main scanning direction is the smallest. (B2) When the side corresponding to the undetected straight line is the lower side, the main The undetected straight line is estimated as the outer straight line of the straight line passing through the edge pixel having the minimum position in the scanning direction and the straight line passing through the edge pixel having the maximum position in the sub-main scanning direction, and (b3) detected. When the side corresponding to the undrawn straight line is the left side, the outer straight line of the straight line passing through the edge pixel having the smallest position in the main scanning direction and the straight line passing through the edge pixel having the smallest position in the sub-main scanning direction. (B4) When the side corresponding to the undetected straight line is the right side, the straight line passing through the edge pixel having the maximum position in the main scanning direction and the position in the sub-main scanning direction are estimated. The undetected straight line is estimated as the outer straight line among the straight lines passing through the edge pixel having the maximum.

また、オートクロップ処理部４３は、上述のようにして検出された原稿画像を、検出された直線の傾き角に対応して回転して原稿画像の傾きを軽減し、原稿画像を抽出し１つの独立した画像とする。 Further, the auto crop processing unit 43 rotates the original image detected as described above according to the inclination angle of the detected straight line to reduce the inclination of the original image, extracts the original image, and obtains one. Make it an independent image.

次に、上記画像読取装置の動作について説明する。図３および図４は、図１および図２に示す画像読取装置の動作について説明するフローチャートである。 Next, the operation of the image reader will be described. 3 and 4 are flowcharts illustrating the operation of the image reader shown in FIGS. 1 and 2.

ユーザーは、コンタクトガラス１上に原稿（紙媒体の原稿に限定されない）を載置し、ユーザーインターフェイス３１に対して所定のユーザー操作を行い、当該画像読取装置に以下の処理を実行させる。 The user places a document (not limited to a paper-based document) on the contact glass 1, performs a predetermined user operation on the user interface 31, and causes the image reading device to perform the following processing.

制御部４１は、そのユーザー操作に従って、画像読取部２１を制御し、画像読取部２１に、その原稿の原稿画像を光学的に読み取らせ、その原稿画像を含む読取画像を画像読取部２１から取得する（ステップＳ１）。 The control unit 41 controls the image reading unit 21 according to the user operation, causes the image reading unit 21 to optically read the original image of the original, and acquires the scanned image including the original image from the image reading unit 21. (Step S1).

次に、原稿画像検出部４２は、その読取画像に対応するエッジ画像を生成し（ステップＳ２）、エッジ画像内のオブジェクトのラベリングを行い、ノイズとなる小さいオブジェクトを除去する（ステップＳ３）。 Next, the original image detection unit 42 generates an edge image corresponding to the scanned image (step S2), labels the objects in the edge image, and removes small objects that become noise (step S3).

原稿画像検出部４２は、ラベル付けされた１または複数のオブジェクトから順番に注目オブジェクトを選択し、注目オブジェクト以外のオブジェクトをマスクした状態で、ハフ変換などで、そのオブジェクトに含まれる線分に対応する直線を検出する（ステップＳ４）。 The manuscript image detection unit 42 selects an object of interest in order from one or a plurality of labeled objects, masks an object other than the object of interest, and performs a Hough transform or the like to correspond to a line segment included in the object. Detect the straight line to be used (step S4).

そして、原稿画像検出部４２は、検出された直線の空間的分布に基づき、最外縁の直線の１つを第１直線として特定する（ステップＳ５）。 Then, the original image detection unit 42 identifies one of the outermost straight lines as the first straight line based on the spatial distribution of the detected straight lines (step S5).

具体的には、原稿画像検出部４２は、ステップＳ４で検出された直線から順番に注目直線を選択し、検出された直線から注目直線に略平行な１または複数の直線を検出し、注目直線および検出された直線を候補直線とし、それらの候補直線のうち、１つの候補直線を境界とした両側の２つの領域のうちの一方の領域に他の候補直線が含まれず、かつ他方の領域に他の候補直線が含まれている場合（つまり、その候補直線が最外縁に位置している場合）、その候補直線を第１直線として特定する。 Specifically, the document image detection unit 42 selects a straight line of interest in order from the straight line detected in step S4, detects one or a plurality of straight lines substantially parallel to the straight line of interest from the detected straight line, and the straight line of interest. And the detected straight line is used as a candidate straight line, and among those candidate straight lines, one of the two regions on both sides with one candidate straight as the boundary does not include the other candidate straight line, and the other region When another candidate straight line is included (that is, when the candidate straight line is located at the outermost edge), the candidate straight line is specified as the first straight line.

次に、原稿画像検出部４２は、上述の候補直線（第１直線以外）から順番に注目直線を選択し、注目直線を境界とした両側の２つの領域のうちの一方の領域に他の候補直線が含まれず、かつ他方の領域に他の候補直線が含まれているか否か（つまり、注目直線が別の最外縁に位置しているか否か）を判定する。原稿画像検出部４２は、注目直線が別の最外縁に位置している場合、その注目直線を第２直線として特定する。このようにして、原稿画像検出部４２は、第２直線の特定を試みる（ステップＳ６）。 Next, the document image detection unit 42 selects a straight line of interest in order from the above-mentioned candidate straight line (other than the first straight line), and sets another candidate in one of the two regions on both sides with the straight line of interest as the boundary. It is determined whether or not a straight line is included and another candidate straight line is included in the other region (that is, whether or not the straight line of interest is located at another outermost edge). When the line of interest is located at another outermost edge, the document image detection unit 42 specifies the straight line of interest as the second straight line. In this way, the document image detection unit 42 attempts to identify the second straight line (step S6).

また、原稿画像検出部４２は、ステップＳ４で検出された直線から第１直線および／または第２直線に略垂直な１または複数の直線を検出し、検出された直線を候補直線とし、その候補直線から順番に注目直線を選択し、注目直線を境界とした両側の２つの領域のうちの一方の領域に他の候補直線が含まれず、かつ他方の領域に他の候補直線が含まれているか否か（つまり、注目直線が最外縁に位置しているか否か）を判定する。このようにして、原稿画像検出部４２は、注目直線が、互いに対向する最外縁に位置している２つの直線（第３，４直線）の特定を試みる（ステップＳ７）。 Further, the document image detection unit 42 detects one or a plurality of straight lines substantially perpendicular to the first straight line and / or the second straight line from the straight line detected in step S4, sets the detected straight line as a candidate straight line, and sets the candidate straight line as a candidate straight line. Whether the straight line of interest is selected in order from the straight line, and one of the two regions on both sides of the straight line of interest does not contain the other candidate straight line, and the other region contains the other candidate straight line. Whether or not (that is, whether or not the straight line of interest is located at the outermost edge) is determined. In this way, the document image detection unit 42 attempts to identify two straight lines (third and fourth straight lines) in which the straight lines of interest are located on the outermost edges facing each other (step S7).

そして、原稿画像検出部４２は、第１〜第４直線のすべてが特定されたか否かを判定し（ステップＳ８）、第１〜第４直線のすべてが特定された場合、第１〜第４直線で囲まれる矩形の領域を原稿画像として特定する（ステップＳ９）。 Then, the original image detection unit 42 determines whether or not all of the first to fourth straight lines are specified (step S8), and when all of the first to fourth straight lines are specified, the first to fourth straight lines are identified. A rectangular area surrounded by a straight line is specified as a document image (step S9).

一方、第１〜第４直線の少なくとも１つが特定されなかった場合、原稿画像検出部４２は、第１〜第４直線のうちの３本を特定したか否かを判定する（ステップＳ１１）。 On the other hand, when at least one of the first to fourth straight lines is not specified, the document image detection unit 42 determines whether or not three of the first to fourth straight lines have been specified (step S11).

第１〜第４直線のうちの３本が特定されている場合、原稿画像検出部４２は、残りの１本の直線を上述のようにして推定する（ステップＳ１２）。 When three of the first to fourth straight lines are specified, the document image detection unit 42 estimates the remaining one straight line as described above (step S12).

一方、第１〜第４直線の少なくとも２つが特定されなかった場合、原稿画像検出部４２は、第１〜第４直線のうちの２本を特定したか否かを判定する（ステップＳ１３）。 On the other hand, when at least two of the first to fourth straight lines are not specified, the document image detection unit 42 determines whether or not two of the first to fourth straight lines have been specified (step S13).

第１〜第４直線のうちの２本が特定されている場合、原稿画像検出部４２は、残りの２本の直線を１本ずつ上述のようにして推定する（ステップＳ１４）。 When two of the first to fourth straight lines are specified, the document image detection unit 42 estimates the remaining two straight lines one by one as described above (step S14).

そして、ステップＳ１２またはステップＳ１４で残りの１本または２本の直線を推定した後、原稿画像検出部４２は、特定または推定された第１〜第４直線で囲まれる領域を原稿画像として特定する（ステップＳ１５）。 Then, after estimating the remaining one or two straight lines in step S12 or step S14, the document image detection unit 42 specifies the area surrounded by the specified or estimated first to fourth straight lines as the document image. (Step S15).

また、第１〜第４直線の３つが特定されなかった場合、原稿画像検出部４２は、ラベル付けされたオブジェクトをすべて含む外接矩形（各辺が読取画像の各辺に平行な矩形）を原稿画像として特定する（ステップＳ１６）。 When three of the first to fourth straight lines are not specified, the document image detection unit 42 creates an extrinsic rectangle (a rectangle whose sides are parallel to each side of the scanned image) including all the labeled objects. It is specified as an image (step S16).

このようにして、読取画像内の各原稿画像が特定される。 In this way, each original image in the scanned image is specified.

ここで、具体例について説明する。 Here, a specific example will be described.

図５は、傾いた原稿画像を含む読取画像の一例を示す図である。図６は、図５に示す読取画像において検出される直線を説明する図である。 FIG. 5 is a diagram showing an example of a scanned image including a tilted original image. FIG. 6 is a diagram illustrating a straight line detected in the scanned image shown in FIG.

（ａ）４本の直線が特定される場合 (A) When four straight lines are specified

例えば図５に示すように、読取画像１００内に原稿画像１０１が含まれている場合、原稿画像１０１のエッジが明確であれば、図６に示すように、４本の直線１１１〜１１４が特定される。その際、例えば、図６に示すように、互いに略平行な直線として、直線１１１，１２１，１１２が特定され、それらのうちの直線１１１が第１直線として特定され、直線１１２が第２直線として特定される。そして、直線１１１，１１２に略垂直な直線から、直線１１３，１１４が第３直線および第４直線として特定される。 For example, as shown in FIG. 5, when the original image 101 is included in the scanned image 100 and the edge of the original image 101 is clear, four straight lines 111 to 114 are specified as shown in FIG. Will be done. At that time, for example, as shown in FIG. 6, straight lines 111, 121, and 112 are specified as straight lines substantially parallel to each other, the straight line 111 among them is specified as the first straight line, and the straight line 112 is designated as the second straight line. Be identified. Then, the straight lines 113 and 114 are specified as the third straight line and the fourth straight line from the straight lines substantially perpendicular to the straight lines 111 and 112.

（ｂ）３本の直線が特定され、１本の直線が推定される場合 (B) When three straight lines are specified and one straight line is estimated

図７および図８は、原稿画像の４辺に対応する直線のうち、検出されなかった直線（１本）の推定について説明する図である。 7 and 8 are diagrams for explaining the estimation of the undetected straight line (1 line) among the straight lines corresponding to the four sides of the original image.

例えば図７に示すように、検出された直線に基づき特定される原稿画像の傾き角（正立状態からの傾き角）が−４５度以下でありかつ０度より大きい場合（つまり、主走査方向の逆方向と原稿画像の上辺または下辺とのなす角度ｘが０度より大きくかつ４５度以下である場合）において、右辺に対応する直線１１４が検出されなかったとき、当該オブジェクト１３１において主走査方向の位置が最大（ｈ＿ｍａｘ）であるエッジ画素１４１が特定され、そのエッジ画素１４１を通り、かつ、推定すべき直線１１４に対向する直線１１３と同一の傾きを有する第１直線が特定される。また、当該オブジェクト１３１において副主走査方向の位置が最小（ｖ＿ｍｉｎ）であるエッジ画素１４２が特定され、そのエッジ画素１４２を通り、かつ、推定すべき直線１１４に対向する直線１１３と同一の傾きを有する第２直線が特定される。そして、第１直線および第２直線のうちの外側の直線が、検出されなかった直線１１４として推定される。つまり、第１直線および第２直線のうち、対向する直線１１３から遠いほうの直線が、検出されなかった直線１１４として推定される。 For example, as shown in FIG. 7, when the tilt angle (tilt angle from the upright state) of the original image specified based on the detected straight line is -45 degrees or less and larger than 0 degrees (that is, the main scanning direction). When the angle x formed by the opposite direction of the original image and the upper or lower side of the original image is greater than 0 degrees and 45 degrees or less), when the straight line 114 corresponding to the right side is not detected, the main scanning direction in the object 131. The edge pixel 141 having the maximum position (h_max) is specified, and the first straight line passing through the edge pixel 141 and having the same inclination as the straight line 113 facing the straight line 114 to be estimated is specified. Further, in the object 131, the edge pixel 142 whose position in the sub-main scanning direction is the minimum (v_min) is specified, and the inclination is the same as that of the straight line 113 which passes through the edge pixel 142 and faces the straight line 114 to be estimated. The second straight line to have is specified. Then, the outer straight line of the first straight line and the second straight line is estimated as the undetected straight line 114. That is, of the first straight line and the second straight line, the straight line farther from the opposing straight line 113 is estimated as the undetected straight line 114.

なお、直線が検出されなかった辺は、例えば、検出された直線およびその直線に沿ったオブジェクトの形状（直線の交差する位置の頂点の形状など）に基づいて、上辺、下辺、右辺、および左辺のいずれかに特定される。 Note that the sides where no straight line is detected are, for example, the upper side, the lower side, the right side, and the left side based on the detected straight line and the shape of the object along the straight line (such as the shape of the apex at the intersection of the straight lines). It is specified as one of.

また、例えば図８に示すように、検出された直線に基づき特定される原稿画像の傾き角が０度より大きく４５度未満である場合（つまり、主走査方向と原稿画像の上辺または下辺とのなす角度ｙが０度より大きくかつ４５度未満である場合）、右辺に対応する直線１１４が検出されなかったとき、当該オブジェクト１３１において主走査方向の位置が最大（ｈ＿ｍａｘ）であるエッジ画素１５１が特定され、そのエッジ画素１５１を通り、かつ、推定すべき直線１１４に対向する直線１１３と同一の傾きを有する第１直線が特定される。また、当該オブジェクト１３１において副主走査方向の位置が最大（ｖ＿ｍａｘ）であるエッジ画素１５２が特定され、そのエッジ画素１５２を通り、かつ、推定すべき直線１１４に対向する直線１１３と同一の傾きを有する第２直線が特定される。そして、第１直線および第２直線のうちの外側の直線が、検出されなかった直線１１４として推定される。つまり、第１直線および第２直線のうち、対向する直線１１３から遠いほうの直線が、検出されなかった直線１１４として推定される。 Further, for example, as shown in FIG. 8, when the inclination angle of the original image specified based on the detected straight line is larger than 0 degrees and less than 45 degrees (that is, the main scanning direction and the upper side or the lower side of the original image When the angle y formed is greater than 0 degrees and less than 45 degrees), when the straight line 114 corresponding to the right side is not detected, the edge pixel 151 having the maximum position (h_max) in the main scanning direction in the object 131 A first straight line that is specified, passes through the edge pixel 151, and has the same inclination as the straight line 113 facing the straight line 114 to be estimated is specified. Further, in the object 131, the edge pixel 152 whose position in the sub-main scanning direction is the maximum (v_max) is specified, and has the same inclination as the straight line 113 which passes through the edge pixel 152 and faces the straight line 114 to be estimated. The second straight line to have is specified. Then, the outer straight line of the first straight line and the second straight line is estimated as the undetected straight line 114. That is, of the first straight line and the second straight line, the straight line farther from the opposing straight line 113 is estimated as the undetected straight line 114.

（ｃ）２本の直線が特定され、２本の直線が推定される場合 (C) When two straight lines are specified and two straight lines are estimated

図９および図１０は、原稿画像の４辺に対応する直線のうち、検出されなかった直線（２本）の推定について説明する図である。 9 and 10 are diagrams for explaining the estimation of the undetected straight lines (two) among the straight lines corresponding to the four sides of the original image.

例えば図９に示すように、検出された直線に基づき特定される原稿画像の傾き角が−４５度以下でありかつ０度より大きい場合（つまり、角度ｘが０度より大きくかつ４５度以下である場合）において、右辺および下辺に対応する直線１１２，１１４が検出されなかったとき、右辺については、上述した場合（図７）と同様にして直線１１４が推定され、また、下辺については、当該オブジェクト１３１において主走査方向の位置が最大（ｈ＿ｍａｘ）であるエッジ画素１６１が特定され、そのエッジ画素１６１を通り、かつ、推定すべき直線１１２に対向する直線１１１と同一の傾きを有する第１直線が特定される。また、当該オブジェクト１３１において副主走査方向の位置が最大（ｖ＿ｍａｘ）であるエッジ画素１６２が特定され、そのエッジ画素１６２を通り、かつ、推定すべき直線１１２に対向する直線１１１と同一の傾きを有する第２直線が特定される。そして、第１直線および第２直線のうちの外側の直線が、検出されなかった直線１１２として推定される。つまり、第１直線および第２直線のうち、対向する直線１１１から遠いほうの直線が、検出されなかった直線１１２として推定される。 For example, as shown in FIG. 9, when the tilt angle of the original image specified based on the detected straight line is -45 degrees or less and larger than 0 degrees (that is, when the angle x is larger than 0 degrees and 45 degrees or less). In a certain case), when the straight lines 112 and 114 corresponding to the right side and the lower side are not detected, the straight line 114 is estimated for the right side in the same manner as in the case described above (FIG. 7), and the lower side is the same. In the object 131, the edge pixel 161 whose position in the main scanning direction is the maximum (h_max) is specified, and the first straight line passing through the edge pixel 161 and having the same inclination as the straight line 111 facing the straight line 112 to be estimated. Is identified. Further, in the object 131, the edge pixel 162 whose position in the sub-main scanning direction is the maximum (v_max) is specified, and the inclination is the same as that of the straight line 111 which passes through the edge pixel 162 and faces the straight line 112 to be estimated. The second straight line to have is specified. Then, the outer straight line of the first straight line and the second straight line is estimated as the undetected straight line 112. That is, of the first straight line and the second straight line, the straight line farther from the opposing straight line 111 is estimated as the undetected straight line 112.

例えば図１０に示すように、検出された直線に基づき特定される原稿画像の傾き角が−４５度以下でありかつ０度より大きい場合において、上辺および下辺に対応する直線１１３，１１４が検出されなかったとき、下辺については、上述した場合（図９）と同様にして直線１１４が推定され、また、上辺については、当該オブジェクト１３１において主走査方向の位置が最小（ｈ＿ｍｉｎ）であるエッジ画素１７１が特定され、そのエッジ画素１７１を通り、かつ、推定すべき直線１１１に垂直な直線１１３，１１４と９０度異なる角度の傾きを有する第１直線が特定される。また、当該オブジェクト１３１において副主走査方向の位置が最小（ｖ＿ｍａｘ）であるエッジ画素１７２が特定され、そのエッジ画素１７２を通り、かつ、推定すべき直線１１１に垂直な直線１１３，１１４と９０度異なる角度の傾きを有する第２直線が特定される。そして、第１直線および第２直線のうちの外側の直線が、検出されなかった直線１１１として推定される。つまり、第１直線および第２直線のうち、オブジェクト１３１の中心から遠いほうの直線が、検出されなかった直線１１１として推定される。 For example, as shown in FIG. 10, when the inclination angle of the original image specified based on the detected straight line is −45 degrees or less and larger than 0 degrees, straight lines 113 and 114 corresponding to the upper side and the lower side are detected. When not, a straight line 114 is estimated for the lower side in the same manner as in the above case (FIG. 9), and for the upper side, the edge pixel 171 whose position in the main scanning direction is the minimum (h_min) in the object 131. Is specified, and a first straight line passing through the edge pixel 171 and having an inclination of 90 degrees different from the straight lines 113 and 114 perpendicular to the straight line 111 to be estimated is specified. Further, in the object 131, the edge pixel 172 whose position in the sub-main scanning direction is the minimum (v_max) is specified, and the straight lines 113, 114 and 90 degrees which pass through the edge pixel 172 and are perpendicular to the straight line 111 to be estimated. Second straight lines with different angle tilts are identified. Then, the outer straight line of the first straight line and the second straight line is estimated as the undetected straight line 111. That is, of the first straight line and the second straight line, the straight line farther from the center of the object 131 is estimated as the undetected straight line 111.

このようにして、ハフ変換などで検出されなかった直線が推定される。 In this way, a straight line that was not detected by the Hough transform or the like is estimated.

以上のように、上記実施の形態によれば、画像読取部２１は、原稿から光学的に読み取られた原稿画像を含む所定サイズの読取画像を生成し、原稿画像検出部４２は、（ａ）読取画像内のエッジ画素を示すエッジ画像を生成し、（ｂ）エッジ画像における線分に対応する数式としての直線を検出し、（ｃ）原稿画像の４辺に対応する４本の直線の一部が検出されなかった場合、検出されなかった直線を、検出されなかった直線に対応する辺および検出された直線の傾き角に対応する方向における最外縁（上述のｈ＿ｍａｘ，ｈ＿ｍｉｎ，ｖ＿ｍａｘ，ｖ＿ｍｉｎ）に位置するエッジ画素を通り、かつ、検出された直線に対して平行または垂直な直線として推定し、（ｄ）検出された直線および推定された直線で特定される読取画像内の検出領域を原稿画像として検出する。 As described above, according to the above embodiment, the image reading unit 21 generates a scanned image of a predetermined size including the document image optically read from the document, and the document image detecting unit 42 (a) An edge image showing edge pixels in the scanned image is generated, (b) a straight line as a mathematical formula corresponding to a line segment in the edge image is detected, and (c) one of four straight lines corresponding to four sides of the original image. When the part is not detected, the undetected straight line is the outermost edge in the direction corresponding to the side corresponding to the undetected straight line and the inclination angle of the detected straight line (h_max, h_min, v_max, v_min described above). It is estimated as a straight line that passes through the edge pixel located at and is parallel or perpendicular to the detected straight line, and (d) the detected straight line and the detected area in the scanned image identified by the estimated straight line are the original. Detect as an image.

これにより、読取画像内で傾いている原稿画像の４辺に対応する４本のエッジのうちの一部のエッジが特定されない場合でも、傾いた原稿画像が正確に検出される。 As a result, even if some edges of the four edges corresponding to the four sides of the tilted document image in the scanned image are not specified, the tilted document image is accurately detected.

なお、上述の実施の形態に対する様々な変更および修正については、当業者には明らかである。そのような変更および修正は、その主題の趣旨および範囲から離れることなく、かつ、意図された利点を弱めることなく行われてもよい。つまり、そのような変更および修正が請求の範囲に含まれることを意図している。 It should be noted that various changes and modifications to the above-described embodiments will be apparent to those skilled in the art. Such changes and modifications may be made without departing from the intent and scope of the subject and without diminishing the intended benefits. That is, it is intended that such changes and amendments are included in the claims.

例えば、上記実施の形態において、原稿画像検出部４２は、上述の検出領域の内部に、検出された直線に対応するエッジ画素の線分とは別のオブジェクトの一部が存在し、その別のオブジェクトの残りが検出領域外に突出している場合には、当該別のオブジェクトを含むように原稿画像を検出するようにしてもよい。図１１は、直線が検出されたオブジェクトについて原稿画像として特定される領域が別のオブジェクトの一部を包含している場合について説明する図である。例えば図１１に示すように、オブジェクト１８１について領域１８３が原稿画像として特定された場合において、オブジェクト１８１の領域１８３が別のオブジェクト１８２の一部を包含しているときには、領域１８３および別のオブジェクト１８４を含む外接矩形領域が原稿画像として検出される。 For example, in the above-described embodiment, the document image detection unit 42 has a part of an object other than the line segment of the edge pixel corresponding to the detected straight line inside the above-mentioned detection area, and another object thereof. If the rest of the object protrudes outside the detection area, the original image may be detected so as to include the other object. FIG. 11 is a diagram illustrating a case where a region specified as a manuscript image for an object in which a straight line is detected includes a part of another object. For example, as shown in FIG. 11, when the area 183 is specified as the original image for the object 181 and the area 183 of the object 181 includes a part of another object 182, the area 183 and another object 184 The circumscribed rectangular area including is detected as the original image.

本発明は、例えば、画像読取装置に適用可能である。 The present invention is applicable to, for example, an image reader.

２１画像読取部
４２原稿画像検出部
４３オートクロップ処理部 21 Image reading unit 42 Original image detection unit 43 Auto crop processing unit

Claims

An image reading unit that generates a scanned image of a predetermined size including a document image optically read from the document,
(A) An edge image showing the edge pixels in the scanned image is generated, (b) a straight line as a mathematical formula corresponding to a line segment in the edge image is detected, and (c) corresponds to four sides of the original image. When a part of the four straight lines is not detected, the undetected straight line is the edge located at the side corresponding to the undetected straight line and the outermost edge in the direction corresponding to the inclination angle of the detected straight line. It is estimated as a straight line that passes through the pixels and is parallel or perpendicular to the detected straight line, and (d) the detected area in the scanned image identified by the detected straight line and the estimated straight line is the original document. The original image detector that detects as an image and the original image detector
An image reading device comprising.

The original image detection unit is
(A) When the tilt angle of the original image specified based on the detected straight line is -45 degrees or less and larger than 0 degrees.
(A1) When the side corresponding to the undetected straight line is the upper side, the straight line passing through the edge pixel having the minimum position in the main scanning direction and the straight line passing through the edge pixel having the minimum position in the sub-main scanning direction. As the outer straight line, the undetected straight line was estimated and
(A2) When the side corresponding to the undetected straight line is the lower side, the straight line passing through the edge pixel having the maximum position in the main scanning direction and the straight line passing through the edge pixel having the maximum position in the sub-main scanning direction. As the outer straight line, the undetected straight line was estimated and
(A3) When the side corresponding to the undetected straight line is the left side, the straight line passing through the edge pixel having the minimum position in the main scanning direction and the straight line passing through the edge pixel having the maximum position in the sub-main scanning direction. As the outer straight line, the undetected straight line was estimated and
(A4) When the side corresponding to the undetected straight line is the right side, the straight line passing through the edge pixel having the maximum position in the main scanning direction and the straight line passing through the edge pixel having the minimum position in the sub-main scanning direction. As the outer straight line, the undetected straight line was estimated and
(B) When the tilt angle of the original image specified based on the detected straight line is greater than 0 degrees and less than 45 degrees.
(B1) When the side corresponding to the undetected straight line is the upper side, the straight line passing through the edge pixel having the maximum position in the main scanning direction and the straight line passing through the edge pixel having the minimum position in the sub-main scanning direction. As the outer straight line, the undetected straight line was estimated and
(B2) When the side corresponding to the undetected straight line is the lower side, the straight line passing through the edge pixel having the minimum position in the main scanning direction and the straight line passing through the edge pixel having the maximum position in the sub-main scanning direction. As the outer straight line, the undetected straight line was estimated and
(B3) When the side corresponding to the undetected straight line is the left side, the straight line passing through the edge pixel having the minimum position in the main scanning direction and the straight line passing through the edge pixel having the minimum position in the sub-main scanning direction. As the outer straight line, the undetected straight line was estimated and
(B4) When the side corresponding to the undetected straight line is the right side, the straight line passing through the edge pixel having the maximum position in the main scanning direction and the straight line passing through the edge pixel having the maximum position in the sub-main scanning direction. Estimating the undetected straight line as the outer straight line,
The image reading device according to claim 1.

In the original image detection unit, a part of an object different from the line segment of the edge pixel corresponding to the detected straight line exists inside the detection area, and the rest of the other object is the detection area. The image reading device according to claim 1, wherein when the original image is projected outward, the original image is detected so as to include the other object.

The first to third claims, wherein the original image is further provided with an auto crop processing unit that rotates the original image corresponding to the inclination angle of the detected straight line to reduce the inclination of the original image. The image reading device according to any one of the above.