JP2019149114A - データ処理装置、画像解析方法、およびプログラム - Google Patents
データ処理装置、画像解析方法、およびプログラム Download PDFInfo
- Publication number
- JP2019149114A JP2019149114A JP2018034931A JP2018034931A JP2019149114A JP 2019149114 A JP2019149114 A JP 2019149114A JP 2018034931 A JP2018034931 A JP 2018034931A JP 2018034931 A JP2018034931 A JP 2018034931A JP 2019149114 A JP2019149114 A JP 2019149114A
- Authority
- JP
- Japan
- Prior art keywords
- image
- steel pipe
- luminance
- unit
- still
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title description 36
- 229910000831 Steel Inorganic materials 0.000 claims abstract description 284
- 239000010959 steel Substances 0.000 claims abstract description 284
- 238000012545 processing Methods 0.000 claims abstract description 86
- 238000000605 extraction Methods 0.000 claims abstract description 50
- 239000006185 dispersion Substances 0.000 claims description 61
- 238000003384 imaging method Methods 0.000 claims description 37
- 238000003703 image analysis method Methods 0.000 claims description 23
- 238000001514 detection method Methods 0.000 claims description 15
- 239000000284 extract Substances 0.000 abstract description 12
- 238000010586 diagram Methods 0.000 abstract description 8
- 230000007797 corrosion Effects 0.000 description 24
- 238000005260 corrosion Methods 0.000 description 24
- 230000006866 deterioration Effects 0.000 description 19
- 238000004458 analytical method Methods 0.000 description 6
- 238000006243 chemical reaction Methods 0.000 description 6
- 230000010365 information processing Effects 0.000 description 6
- 230000002093 peripheral effect Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000003745 diagnosis Methods 0.000 description 3
- 238000010191 image analysis Methods 0.000 description 3
- 230000002123 temporal effect Effects 0.000 description 3
- 238000005401 electroluminescence Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000015556 catabolic process Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
Landscapes
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
- Image Analysis (AREA)
Abstract
Description
先ず、本願において開示される発明の代表的な実施の形態について概要を説明する。なお、以下の説明では、一例として、発明の構成要素に対応する図面上の参照符号を、括弧を付して記載している。
以下、本発明の実施の形態の具体例について図を参照して説明する。なお、以下の説明において、各実施の形態において共通する構成要素には同一の参照符号を付し、繰り返しの説明を省略する。
図1は、本発明の一実施の形態に係るデータ処理装置の機能ブロック構成を示す図である。
同図に示されるデータ処理装置100は、例えば鋼管鉄塔を構成する各鋼管の内部の劣化状態を診断するための診断装置である。具体的に、データ処理装置100は、工業用内視鏡によって鋼管内部を撮影した画像を解析することにより、鋼管内部の腐食の有無を判定する。
図2に示すように、データ処理装置100は、演算装置101、記憶装置102、入力装置103、I/F(Interface)装置104、出力装置105、およびバス106を主要なハードウェア構成要素として備えている。
画像抽出部2は、所定のフレームレートの画像データ40から、jフレーム毎に1フレームの静止画400_1〜400_kを抽出する。ここで、jは2以上の整数であり、例えば、jは、10〜50の範囲の整数である。また、kは1以上の整数である。
次に、判定部3について詳細に説明する。
図4は、判定部3の機能ブロック構成を示す図である。
同図に示すように、判定部3は、機能ブロックとして、画像変換部30、ブロック分割部31、分散算出部32、画像判定部33、および撮影範囲検出部34を有する。
同図に示すように、ブロック分割部31は、画像抽出部2によって抽出した静止画400を、(n×m)個のブロック401にそれぞれ分割する。同図には、静止画400_1を25(=5×5)個のブロック401_1〜401_25にそれぞれ分割した場合が一例として示されている。
具体的に、少なくとも一つのブロック401の第1輝度分散値43が第1閾値41よりも大きい場合(上記第3のケース)、第1鋼管内部判定部331は、画像抽出部2によって抽出した静止画400が鋼管内部以外(鋼管外部)の画像であると判定する。
その一方で、第1鋼管内部判定部331は、上述した第1のケースの静止画400と第2のケースの静止画400とを判別することはできない。そのため、全てのブロック401の第1輝度分散値43が第1閾値41よりも小さい場合(上記第1のケースおよび上記第2のケース)、第1鋼管内部判定部331は、判定対象の静止画400が鋼管内部の画像であると、“仮に”判定する。
次に、本実施の形態に係るデータ処理装置100による、鋼管内部の劣化状態を診断するための画像解析方法の全体的な流れについて説明する。
次に、上述した鋼管内部判定処理(ステップS2)について詳細に説明する。
図7は、鋼管内部判定処理(ステップS2)の流れを示すフローチャートである。
例えば、上述の図5において、静止画400_1のブロック401_1〜401_25のうち、ブロック401_1の第1輝度分散値43が第1閾値41よりも大きく、ブロック401_2〜401_25の第1輝度分散値43が第1閾値41よりも小さい場合、第1鋼管内部判定部331は、静止画400_1が鋼管外部の画像であると判定する。
例えば、上述の図5において、静止画400_1の全てのブロック401_1〜401_25の第1輝度分散値43が第1閾値41よりも小さい場合、第1鋼管内部判定部331は、静止画400_1が鋼管内部の画像であると仮判定する。
例えば、上述の図5において、静止画400_1のブロック401_1〜401_25のうち、ブロック401_1の第2輝度分散値44が第2閾値42(例えば、20)よりも大きく、ブロック401_2〜401_25の第2輝度分散値44が第2閾値42よりも小さい場合、第2鋼管内部判定部332は、静止画400_1が鋼管外部の画像であると判定する。
例えば、上述した図3において、画像抽出部2によって抽出した3(h=3)枚の静止画400_2〜400_4のそれぞれが鋼管内部の画像であると判定された場合、撮影範囲検出部34は、静止画400_2〜400_4のうち、最も早い時刻に撮影された静止画400_2を鋼管内部の撮影開始点STの画像とする。
例えば、上述した図3において、静止画400_1が鋼管内部の撮影開始点STの画像と検出された後に、連続する3(g=3)枚の静止画400_9〜400_11の全てが鋼管外部の画像であると判定された場合、撮影範囲検出部34は、静止画400_9の直前に撮影された静止画400_8を鋼管内部の撮影終了点EDの画像とする。
図8は、鋼管内部を撮影した動画の輝度分散の時間的変化を示す図である。
同図には、最初に診断対象の鋼管の識別番号が記載されている鋼管の外周面(鋼管外部)を工業用内視鏡によって撮影し、次に、工業用内視鏡を鋼管内部に挿入して、工業用内視鏡を移動させながら鋼管内部を撮影し、その後、工業用内視鏡を鋼管内部から取り出すまでの一連の動画における輝度分散の時間的変化が示されている。同図において、縦軸は輝度分散(例えば、第2輝度分散値44)を表し、横軸は時間を表している。
以上、本実施の形態に係るデータ処理装置100は、複数の時系列の静止画を含む画像データ40から抽出した静止画400の輝度のばらつきに基づいて、当該静止画400が鋼管内部の画像であるか否かを判定するので、診断対象の鋼管を撮影した画像データ40(動画)における鋼管内部が撮影されている範囲を、作業者の目視によらず、自動的に特定することが可能となる。これにより、鋼管内部と鋼管外部が撮影された一連の動画の中から鋼管内部が撮影されている部分だけを特定して、鋼管の腐食の有無を判定する画像解析処理を実行することが可能となるので、鋼管の劣化状態を診断する診断作業の効率を向上させることが可能となる。
以上、本発明者らによってなされた発明を実施の形態に基づいて具体的に説明したが、本発明はそれに限定されるものではなく、その要旨を逸脱しない範囲において種々変更可能であることは言うまでもない。
Claims (11)
- 複数の時系列の静止画を含む画像データを取得する画像データ取得部と、
前記画像データ取得部によって取得した画像データから前記静止画を抽出する画像抽出部と、
前記画像抽出部によって抽出した前記静止画の輝度のばらつきに基づいて、当該静止画が鋼管内部を撮影した画像であるか否かを判定する判定部と、
を備えるデータ処理装置。 - 請求項1に記載のデータ処理装置において、
前記判定部は、
前記画像抽出部によって抽出した前記静止画の領域を複数のブロックに分割するブロック分割部と、
前記ブロック毎に輝度の分散を算出する分散算出部と、
前記分散算出部によって算出した前記ブロック毎の輝度の分散に基づいて、前記画像抽出部によって抽出した前記静止画が鋼管内部を撮影した画像であるか否かを判定する画像判定部と、を有する
ことを特徴とするデータ処理装置。 - 請求項2に記載のデータ処理装置において、
前記分散算出部は、
前記ブロックの輝度の分散を表す第1輝度分散値を算出する第1輝度分散算出部と、
前記ブロックの前記第1輝度分散値の分散を表す第2輝度分散値を算出する第2輝度分散算出部と、を含み、
前記画像判定部は、
少なくとも一つの前記ブロックの前記第1輝度分散値が第1閾値よりも大きい場合に、前記画像抽出部によって抽出した前記静止画が鋼管内部以外を撮影した画像であると判定し、全ての前記ブロックの前記第1輝度分散値が前記第1閾値よりも小さい場合に、前記画像抽出部によって抽出した前記静止画が鋼管内部を撮影した画像であると判定する第1鋼管内部判定部と、
前記第1鋼管内部判定部によって鋼管内部の画像と判定した前記静止画における少なくとも一つの前記ブロックの前記第2輝度分散値が第2閾値よりも大きい場合に、当該静止画が鋼管内部以外の画像であると判定し、前記第1鋼管内部判定部によって鋼管内部の画像と判定した前記静止画における全ての前記ブロックの前記第2輝度分散値が前記第2閾値よりも小さい場合に、当該静止画が鋼管内部を撮影した画像であると判定する第2鋼管内部判定部と、を含む
ことを特徴とするデータ処理装置。 - 請求項3に記載のデータ処理装置において、
前記判定部は、
前記画像抽出部によって抽出した複数の連続する前記静止画に対する前記画像判定部の判定結果に基づいて、前記画像データにおける鋼管内部の撮影開始点と鋼管内部の撮影終了点を検出する撮影範囲検出部を、更に有する
ことを特徴とするデータ処理装置。 - 請求項4に記載のデータ処理装置において、
前記撮影範囲検出部は、前記複数の連続する前記静止画のそれぞれが鋼管内部の画像であると判定された場合に、当該複数の連続する前記静止画の少なくとも一つを鋼管内部の撮影開始点の画像とし、前記撮影開始点の判定後に、前記複数の連続する前記静止画のそれぞれが鋼管外部の画像であると判定された場合に、当該複数の連続する前記静止画よりも前に撮影された前記静止画を鋼管内部の撮影終了点の画像とする
ことを特徴とするデータ処理装置。 - 複数の時系列の静止画を含む画像データを取得する画像データ取得ステップと、
前記画像データ取得ステップによって取得した画像データから前記静止画を抽出する画像抽出ステップと、
前記画像抽出ステップによって抽出した前記静止画の輝度のばらつきに基づいて、当該静止画が鋼管内部を撮影した画像であるか否かを判定する判定ステップと、
を有する画像解析方法。 - 請求項6に記載の画像解析方法において、
前記判定ステップは、
前記画像抽出ステップによって抽出した前記静止画の領域を複数のブロックに分割するブロック分割ステップと、
前記ブロック毎に輝度の分散を算出する分散算出ステップと、
前記分散算出ステップによって算出した前記ブロック毎の輝度の分散に基づいて、前記画像抽出ステップによって抽出した前記静止画が鋼管内部を撮影した画像であるか否かを判定する画像判定ステップと、を有する
ことを特徴とする画像解析方法。 - 請求項7に記載の画像解析方法において、
前記分散算出ステップは、
前記ブロックの輝度の分散を表す第1輝度分散値を算出する第1輝度分散算出ステップと、
前記ブロックの前記第1輝度分散値の分散を表す第2輝度分散値を算出する第2輝度分散算出ステップと、を含み、
前記画像判定ステップは、
少なくとも一つの前記ブロックの前記第1輝度分散値が第1閾値よりも大きい場合に、前記画像抽出ステップによって抽出した前記静止画が鋼管内部以外を撮影した画像であると判定し、全ての前記ブロックの前記第1輝度分散値が前記第1閾値よりも小さい場合に、前記画像抽出ステップによって抽出した前記静止画が鋼管内部を撮影した画像であると判定する第1鋼管内部判定ステップと、
前記第1鋼管内部判定ステップによって鋼管内部の画像と判定した前記静止画における少なくとも一つの前記ブロックの前記第2輝度分散値が第2閾値よりも大きい場合に、当該静止画が鋼管内部以外の画像であると判定し、前記第1鋼管内部判定ステップによって鋼管内部の画像と判定した前記静止画における全ての前記ブロックの前記第2輝度分散値が前記第2閾値よりも小さい場合に、当該静止画が鋼管内部を撮影した画像であると判定する第2鋼管内部判定ステップと、を含む
ことを特徴とする画像解析方法。 - 請求項8に記載の画像解析方法において、
前記判定ステップは、
前記画像抽出ステップによって抽出した複数の連続する前記静止画に対する前記画像判定ステップの判定結果に基づいて、前記画像データにおける鋼管内部の撮影開始点と鋼管内部の撮影終了点を検出する撮影範囲検出ステップを、更に有する
ことを特徴とする画像解析方法。 - 請求項9に記載の画像解析方法において、
前記撮影範囲検出ステップは、前記複数の連続する前記静止画のそれぞれが鋼管内部の画像であると判定された場合に、当該複数の連続する前記静止画の少なくとも一つを鋼管内部の撮影開始点の画像とし、前記撮影開始点の判定後に、前記複数の連続する前記静止画のそれぞれが鋼管外部の画像であると判定された場合に、当該複数の連続する前記静止画よりも前に撮影された前記静止画を鋼管内部の撮影終了点の画像とする
ことを特徴とする画像解析方法。 - 請求項6乃至10の何れか一項に記載の画像解析方法における各ステップをコンピュータに実行させる
プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018034931A JP7210142B2 (ja) | 2018-02-28 | 2018-02-28 | データ処理装置、画像解析方法、およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018034931A JP7210142B2 (ja) | 2018-02-28 | 2018-02-28 | データ処理装置、画像解析方法、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019149114A true JP2019149114A (ja) | 2019-09-05 |
JP7210142B2 JP7210142B2 (ja) | 2023-01-23 |
Family
ID=67849445
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018034931A Active JP7210142B2 (ja) | 2018-02-28 | 2018-02-28 | データ処理装置、画像解析方法、およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7210142B2 (ja) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001264260A (ja) * | 2000-03-16 | 2001-09-26 | Tomoe Corp | 管内面腐食点検における劣化度合評価方法 |
JP2006223377A (ja) * | 2005-02-15 | 2006-08-31 | Olympus Corp | 管腔画像処理装置、管腔画像処理方法及びそのためのプログラム |
JP2010019807A (ja) * | 2008-07-14 | 2010-01-28 | Nippon Telegr & Teleph Corp <Ntt> | 輝度及び色差を用いた管路点検用画像解析方法、画像解析装置、管路点検システム及びプログラム |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5058183B2 (ja) | 2009-01-16 | 2012-10-24 | シャープ株式会社 | 画像処理装置、ならびにそれを備える画像形成装置、画像処理プログラムおよび記録媒体 |
WO2010137387A1 (ja) | 2009-05-27 | 2010-12-02 | シャープ株式会社 | 画像処理装置及びプログラム |
JP6301775B2 (ja) | 2014-08-01 | 2018-03-28 | 株式会社椿本チエイン | ケーブル類保護案内装置 |
-
2018
- 2018-02-28 JP JP2018034931A patent/JP7210142B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001264260A (ja) * | 2000-03-16 | 2001-09-26 | Tomoe Corp | 管内面腐食点検における劣化度合評価方法 |
JP2006223377A (ja) * | 2005-02-15 | 2006-08-31 | Olympus Corp | 管腔画像処理装置、管腔画像処理方法及びそのためのプログラム |
JP2010019807A (ja) * | 2008-07-14 | 2010-01-28 | Nippon Telegr & Teleph Corp <Ntt> | 輝度及び色差を用いた管路点検用画像解析方法、画像解析装置、管路点検システム及びプログラム |
Non-Patent Citations (2)
Title |
---|
ATSUSHI KAKOGAWA ET AL.: ""Anisotropic shadow-based operationassistant for a pipeline-inspection robot using a single illumina", 2017 IEEE/RSJ INTERNATIONAL CONFERENCE ONINTELLIGENT ROBOTS AND SYSTEMS (IROS), JPN6022001475, 24 September 2017 (2017-09-24), US, pages 1305 - 1310, ISSN: 0004687848 * |
堤 富士雄、中島 慶人: ""巡視点検ビデオを迅速にデータベース化"", 電子情報通信学会技術研究報告, vol. 101, no. 205, JPN6022001477, 12 July 2001 (2001-07-12), JP, pages 1 - 8, ISSN: 0004687847 * |
Also Published As
Publication number | Publication date |
---|---|
JP7210142B2 (ja) | 2023-01-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9875409B2 (en) | Abnormality detection apparatus, abnormality detection method, and recording medium storing abnormality detection program | |
US8976242B2 (en) | Visual inspection apparatus and visual inspection method | |
US9367734B2 (en) | Apparatus, control method, and storage medium for setting object detection region in an image | |
CN110572642B (zh) | 显示设备的自动测试方法、显示设备及存储介质 | |
JP4689518B2 (ja) | 火災検出装置 | |
JP2012089929A (ja) | 物体検知装置、物体検知方法、監視カメラシステム、およびプログラム | |
CN110049310B (zh) | 视频图像获取、视频质量检测方法和装置 | |
JP2020087312A (ja) | 行動認識装置、行動認識方法及びプログラム | |
JP2014033429A (ja) | 画像処理プログラムおよび画像処理装置 | |
JP2018077637A (ja) | 情報処理装置、情報処理システム、情報処理方法およびプログラム | |
CN106682676A (zh) | 一种图像测试方法及装置 | |
JPH09293141A (ja) | 移動物体検出装置 | |
JP2016139317A (ja) | ステータス判定システム | |
JP2008009938A (ja) | 動画像データ処理装置、動画像データ処理方法、動画像データ処理プログラム、およびこれを記録した記録媒体 | |
JP2019149114A (ja) | データ処理装置、画像解析方法、およびプログラム | |
CN112528854A (zh) | 振动对象监测方法、装置、计算机设备和存储介质 | |
JP4751871B2 (ja) | 撮像対象検出装置および方法 | |
JP4853657B2 (ja) | 画像処理装置 | |
CN112703725A (zh) | 合成处理系统、合成处理装置以及合成处理方法 | |
US20180150966A1 (en) | System and method for estimating object size | |
CN112073713B (zh) | 视频漏录测试方法、装置、设备及存储介质 | |
JP7305509B2 (ja) | 情報処理装置、その制御方法、プログラム、及び記憶媒体 | |
JP2016099633A (ja) | 携帯端末を利用した保全点検システム | |
CN114359166A (zh) | 屏幕颜色检测方法、装置、设备及存储介质 | |
JP4628851B2 (ja) | 物体検出方法および物体検出装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210212 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220113 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220124 |
|
RD07 | Notification of extinguishment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7427 Effective date: 20220204 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20220204 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220308 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20220412 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220608 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20220608 |
|
C11 | Written invitation by the commissioner to file amendments |
Free format text: JAPANESE INTERMEDIATE CODE: C11 Effective date: 20220628 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220617 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20220706 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20220713 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20220722 |
|
C211 | Notice of termination of reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C211 Effective date: 20220726 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20220830 |
|
C22 | Notice of designation (change) of administrative judge |
Free format text: JAPANESE INTERMEDIATE CODE: C22 Effective date: 20221108 |
|
C23 | Notice of termination of proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C23 Effective date: 20221206 |
|
C03 | Trial/appeal decision taken |
Free format text: JAPANESE INTERMEDIATE CODE: C03 Effective date: 20230105 |
|
C30A | Notification sent |
Free format text: JAPANESE INTERMEDIATE CODE: C3012 Effective date: 20230105 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230111 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7210142 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |