JP2008271329A - 施設監視装置及び施設監視方法 - Google Patents
施設監視装置及び施設監視方法 Download PDFInfo
- Publication number
- JP2008271329A JP2008271329A JP2007113354A JP2007113354A JP2008271329A JP 2008271329 A JP2008271329 A JP 2008271329A JP 2007113354 A JP2007113354 A JP 2007113354A JP 2007113354 A JP2007113354 A JP 2007113354A JP 2008271329 A JP2008271329 A JP 2008271329A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- image
- pixel
- facility
- difference information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Alarm Systems (AREA)
Abstract
【課題】照度計等の付属機器を設置することなく日照による画像への影響を排除できるようにし、これにより安価で高精度の監視を行えるようにする。
【解決手段】カメラ1により1時間おきに毎時0分になった時点で監視対象施設を撮像し、その監視画像データを撮像日時を表すタイムスタンプ情報を付加して記憶ユニット4に順次格納する。そして、最新の監視画像データが得られるごとに、当該最新の監視画像データと前日の同時刻における監視画像データを記憶ユニット4から読み出し、これらの監視画像データをその明るさの平均が任意の共通の値となるように画素ごとに明るさ(濃度)を補正する。次に、上記明るさが補正された後の監視画像データ間の差分を画素ごとに求めて絶対差分画像を生成し、この生成された絶対差分画像を画素ごとにしきい値と比較して、その結果をもとに上記監視画像データ間の変化の有無を判定する。
【選択図】 図2
【解決手段】カメラ1により1時間おきに毎時0分になった時点で監視対象施設を撮像し、その監視画像データを撮像日時を表すタイムスタンプ情報を付加して記憶ユニット4に順次格納する。そして、最新の監視画像データが得られるごとに、当該最新の監視画像データと前日の同時刻における監視画像データを記憶ユニット4から読み出し、これらの監視画像データをその明るさの平均が任意の共通の値となるように画素ごとに明るさ(濃度)を補正する。次に、上記明るさが補正された後の監視画像データ間の差分を画素ごとに求めて絶対差分画像を生成し、この生成された絶対差分画像を画素ごとにしきい値と比較して、その結果をもとに上記監視画像データ間の変化の有無を判定する。
【選択図】 図2
Description
この発明は、例えば屋外における建物や橋梁、プラント設備等の施設の状態をカメラを用いて監視するための装置と方法に関する。
従来、例えば建物や橋梁等の建造物や工業用プラント設備などの施設をカメラにより撮像し、その画像データをもとに施設の異常を監視する装置が使用されている。この種の装置を設置すると、例えば地震や台風、落雷等の天災や、衝突や爆発等の事故によって、施設に損壊等の異常が発生した場合に、その状況を遠隔監視して迅速な対策を講じることが可能となり、大変有用である。
ところで、この種の監視装置では、例えば常時又は一定の時間間隔で監視対象の施設をカメラで撮像してその画像データを順次蓄積し、これらの画像データ間の変化を画像処理により検出することにより、施設の異常を検出するようにしている。しかしながら、画像データ間の変化を検出する場合、これらの画像データの撮像時点の日照条件が異なると、この日照条件の差異により画像データが変化し、この変化を施設の異常として誤検出してしまうことがある。
そこで、例えばカメラの近くに照度計を設置して監視対象の周囲の明るさを検出し、この明るさの検出値に応じて例えば朝、昼、夕の3種類の基準画像を選択し、撮像した画像をこの選択した基準画像と比較することにより画像の変化を検出する技術が提案されている(例えば、特許文献1を参照。)。
ところが、前記特許文献1に記載された技術では照度計を設置しなければならず、設備が高価になる。また、照度の検出値をもとに朝、昼、夕の3種類の代表的な照度に応じた基準画像を選択し比較に供するようにしている。このため、同じ昼であっても季節や天気の変化により適切な照度補正を行うことができず、その結果誤検出が多く十分な判定精度が得られなかった。
この発明は上記事情に着目してなされたもので、その目的とするところは、照度計等の付属機器を設置することなく日照による画像への影響を排除できるようにし、これにより安価で高精度の監視を行い得る施設監視装置及び施設監視方法を提供することにある。
上記目的を達成するためにこの発明の一つの観点は、監視対象の施設を定点においてカメラにより定期的に撮像してその画像データを撮像日時を表すタイムスタンプ情報と対応付けてメモリに記憶する。そして、任意の撮像日時に撮像された第1の画像データと、当該第1の画像データの撮像日より前でかつ同時刻に撮像された第2の画像データを、上記タイムスタンプ情報をもとに上記メモリから選択的に読み出し、先ずこの読み出された第1の画像データと第2の画像データの明るさを等しくするべく当該第1及び第2の画像データに対し画像濃度の規格化処理を施す。次に、上記画像濃度の規格化処理後の第1及び第2の画像データ間の差分情報を求め、この求められた差分情報を予め設定されたしきい値と比較して、その比較結果をもとに監視対象施設の変化の有無を判定するようにしたものである。
したがって、互いに日照条件の近い第1の監視画像データと前日以前の同時刻における第2の監視画像データとの差をもとに監視対象施設の変化の有無が判定され、しかも監視画像データ間の明るさが等しくなるように補正されることにより、天気等の日照条件の変化により第1の画像データと第2の画像データとの間の明るさが異なる場合でも、画像濃度の規格化処理によりこの明るさの差異が補正されたのち差分が求められる。このため、照度計等の付属機器を設置することなく、日照による画像への影響を排除して安価で高精度の監視を行うことが可能となる。
またこの発明は、以下のような具体的な構成又は手順を備えることも特徴とする。
第1の構成又は手順は、画像濃度の規格化処理を施す際に、第1の画像データの各画素又は画素ブロックの画像濃度の平均値を算出すると共に、第2の画像データの各画素又は画素ブロックの画像濃度の平均値を算出する。そして、この算出された第1の画像データの画像濃度の平均値及び第2の画像データの画像濃度の平均値をもとに、これらの平均値を任意の共通値とするべく当該第1及び第2の画像データの各画素又は画素ブロックごとに画像濃度の補正処理を行うものである。
第1の構成又は手順は、画像濃度の規格化処理を施す際に、第1の画像データの各画素又は画素ブロックの画像濃度の平均値を算出すると共に、第2の画像データの各画素又は画素ブロックの画像濃度の平均値を算出する。そして、この算出された第1の画像データの画像濃度の平均値及び第2の画像データの画像濃度の平均値をもとに、これらの平均値を任意の共通値とするべく当該第1及び第2の画像データの各画素又は画素ブロックごとに画像濃度の補正処理を行うものである。
したがって、第1及び第2の画像データの明るさが画素ごと又は画素ブロックごとに補正されたのちその差分がとられる。このため、画像データの全領域にわたって適切な照度補正を行うことが可能となり、これにより監視対象物の全体にわたりその変化を精度良く判定することが可能となる。
第2の構成又は手順は、画像濃度の規格化処理を施す際に、当該規格化処理をR、G、Bの各画素要素ごとに行い、差分情報を求める際には第1及び第2の画像データ間の差分情報を上記R、G、Bの画素要素ごとに求める。そして、この求められた差分情報を上記R、G、Bの画素要素ごとにしきい値と比較して、各画素要素のいずれか一つ又は2つ以上がしきい値以上の場合に監視対象施設に変化があったものと判定するようにしたものである。
したがって、カラー画像をもとに監視対象物の変化を判定する場合に、日照条件の変化による画像データの明るさの変化がR、G、Bの画素要素ごとに補正され、さらにこのR、G、Bの各画素要素の明るさを考慮して画像の変化の有無が判定される。この結果、カラー画像を用いた場合でも日照条件の変化を考慮した最適な判定が可能となる。
したがって、カラー画像をもとに監視対象物の変化を判定する場合に、日照条件の変化による画像データの明るさの変化がR、G、Bの画素要素ごとに補正され、さらにこのR、G、Bの各画素要素の明るさを考慮して画像の変化の有無が判定される。この結果、カラー画像を用いた場合でも日照条件の変化を考慮した最適な判定が可能となる。
第3の構成又は手順は、監視対象施設に変化が有るか否かを判定する際に、第1及び第2の画像データ間の差分情報に対して、先ず差分値が存在する領域の境界を拡げるための膨張フィルタリングを施し、この膨張フィルタリング処理が施された後の差分情報をしきい値と比較するものである。
このようにすると、差分情報に現れた画像変化の領域が拡大されて、より明確な変化として検出することが可能となる。
このようにすると、差分情報に現れた画像変化の領域が拡大されて、より明確な変化として検出することが可能となる。
第4の構成又は手順は、監視対象施設に変化が有るか否かを判定する際に、第1及び第2の画像データ間の差分情報に対して、先ず差分値が存在する領域の境界を縮小するための収縮フィルタリング処理を施し、この収縮フィルタリング処理が施された後の差分情報をしきい値と比較するものである。
このようにすると、差分情報に現れた画像変化の領域が縮小され、これによりノイズと見なすことができる微少な画像変化を排除して、真の画像変化のみを検出することが可能となる。
このようにすると、差分情報に現れた画像変化の領域が縮小され、これによりノイズと見なすことができる微少な画像変化を排除して、真の画像変化のみを検出することが可能となる。
第5の構成又は手順は、監視対象施設の変化が有ると判定された場合に、該当する第1及び第2の画像データをメモリから読み出し、この読み出した第1及び第2の画像データ及びその差分情報を、通知先として予め設定された管理担当者の端末装置へ通信ネットワークを介して送信するものである。
したがって、画像データ中に変化が発見された場合にのみ管理担当者に対し該当する第1及び第2の画像データが送られる。このため、通信ネットワークのトラフィックを抑制できると共に、管理担当者の監視業務に対する負担を軽減することが可能となる。しかも、第1及び第2の画像データに加えその差分情報も送るようにしているので、画面中の変化発生部位を一目で確認することが可能となる。
したがって、画像データ中に変化が発見された場合にのみ管理担当者に対し該当する第1及び第2の画像データが送られる。このため、通信ネットワークのトラフィックを抑制できると共に、管理担当者の監視業務に対する負担を軽減することが可能となる。しかも、第1及び第2の画像データに加えその差分情報も送るようにしているので、画面中の変化発生部位を一目で確認することが可能となる。
要するにこの発明によれば、照度計等の付属機器を設置することなく日照による画像への影響を排除できるようにし、これにより安価で高精度の監視を行い得る施設監視装置及び施設監視方法を提供することができる。
以下、図面を参照してこの発明に係わる実施形態を説明する。
図1は、この発明の一実施形態に係わる施設監視装置を備えた監視システムの概略構成図である。同図において、例えば河川の橋梁やダム、電力設備、公共建築物等の監視対象施設を見渡すことが可能な場所にはそれぞれ、施設監視装置DS1〜DSnが設置されている。これらの施設監視装置DS1〜DSnはいずれも、通信ネットワークNWを介して管理センタCTとの間で通信が可能となっている。
図1は、この発明の一実施形態に係わる施設監視装置を備えた監視システムの概略構成図である。同図において、例えば河川の橋梁やダム、電力設備、公共建築物等の監視対象施設を見渡すことが可能な場所にはそれぞれ、施設監視装置DS1〜DSnが設置されている。これらの施設監視装置DS1〜DSnはいずれも、通信ネットワークNWを介して管理センタCTとの間で通信が可能となっている。
管理センタCTには、例えばパーソナル・コンピュータからなる管理用端末が設けられている。この管理用端末は、上記施設監視装置DS1〜DSnを通信ネットワークNWを介して遠隔制御する機能と、施設監視装置DS1〜DSnから通信ネットワークNWを介して送られた監視画像データをディスプレイに表示する機能等を有する。
通信ネットワークは、例えば例えばインターネットに代表されるIP(Internet Protocol)網と、このIP網にアクセスするための複数のアクセス網とから構成される。アクセス網としては、例えばDSL(Digital Subscriber Line)や光伝送路を使用する有線加入者網、LAN(Local Area Network)、無線LAN、移動通信網、専用線網が用いられる。
ところで、施設監視装置DS1〜DSnは次のように構成される。図2はその構成を示すブロック図である。すなわち、施設監視装置DS1〜DSnはそれぞれ工業用テレビジョンカメラからなるカメラ1と、このカメラ1を動作させるカメラインタフェース(カメラI/F)2と、制御ユニット3と、記憶ユニット4と、画像処理ユニット5と、通信ユニット6を有している。
カメラI/F2は、制御ユニット3の制御の下でカメラ1を動作させて監視対象施設を撮像させ、その撮像画像データを制御ユニット3へ出力する。記憶ユニット4は、例えば記憶媒体としてハードディスク又はNAND型フラッシュメモリを使用したもので、制御ユニット3の制御の下で、上記カメラ1により撮像された監視対象施設の画像データを記憶する。通信ユニット6は、制御ユニット3の制御の下で、通信ネットワークNWで規定される通信方式に従い管理センタCTの管理用端末との間で制御信号及び画像データの送受信を行う。
制御ユニット3は例えばマイクロコンピュータからなるCPU(Central Processing Unit)を有し、施設監視装置の動作を統括的に制御する。その制御機能には、カメラ制御機能と、画像記憶制御機能と、画像処理制御機能と、通信制御機能がある。なお、これらの機能はいずれも、上記CPUにアプリケーション・プログラムを実行させることにより実現される。
カメラ制御機能は、カメラI/F2を介してカメラ1を一定時間間隔(例えば1時間間隔)で起動させて監視対象施設を撮像させる。画像記憶制御機能は、上記カメラ1により監視画像データが得られるごとに、当該監視画像データをその撮像日時を表すタイムスタンプ情報を付して記憶ユニット4に記憶させる。
画像処理制御機能は、上記記憶ユニット4に最新の監視画像データが記憶されるごとに、当該最新の監視画像データと前日の同時刻に撮像された監視画像データを、タイムスタンプ情報をもとに記憶ユニット4から選択的に読み出し、画像処理ユニット5に供給する。
通信制御機能は、画像処理ユニット5の後述する判定処理により最新の監視画像データと前日の同一時刻の監視画像データとの間に変化が検出された場合に、該当する最新の監視画像データ及び前日の同一時刻の監視画像データと、その絶対差分画像データを、電子メールに添付して通信ユニット6から管理センタの管理用端末に送信させる。
画像処理ユニット5は例えばDSP(Digital Signal Processor)を備えたもので、この発明に係わる画像処理機能として、明るさ補正処理部51と、差分検出処理部52と、残差判定処理部53を有している。
明るさ補正処理部51は、上記制御ユニット3から供給された最新の監視画像データの明るさと前日の同一時刻における監視画像データの明るさとを等しくするべく、当該各監視画像データに対し画像濃度の規格化処理を施す。この画像濃度の規格化処理は、上記最新の監視画像データ及び前日の同一時刻の監視画像データのそれぞれについて、R、G、Bの各画素要素ごとに画像濃度の平均値を算出する処理と、この算出された各監視画像データの画像濃度の平均値をもとに、これらの平均値を任意の共通値とするべく当該各監視画像データに対しR、G、Bの各画素要素ごとに画像濃度を補正する処理とからなる。
明るさ補正処理部51は、上記制御ユニット3から供給された最新の監視画像データの明るさと前日の同一時刻における監視画像データの明るさとを等しくするべく、当該各監視画像データに対し画像濃度の規格化処理を施す。この画像濃度の規格化処理は、上記最新の監視画像データ及び前日の同一時刻の監視画像データのそれぞれについて、R、G、Bの各画素要素ごとに画像濃度の平均値を算出する処理と、この算出された各監視画像データの画像濃度の平均値をもとに、これらの平均値を任意の共通値とするべく当該各監視画像データに対しR、G、Bの各画素要素ごとに画像濃度を補正する処理とからなる。
差分検出処理部52は、上記明るさ補正処理部51により画像濃度の規格化処理が施された最新の監視画像データと、同じく画像濃度の規格化処理が施された前日の同一時刻における監視画像データとの間の差分値を、R、G、Bの各画素要素ごとに算出する処理を実行する。
残差判定処理部53は、上記差分検出処理部52によりR、G、Bの各画素要素ごとに算出された差分値をそれぞれ予め設定されたしきい値と比較する。そして、R、G、Bの各画素要素の2以上でその差分値がしきい値以上となり、かつこの差分値がしきい値以上と判定された画素が所定の大きさの領域にわたって検出された場合に、上記最新の監視画像データと前日の同一時刻における監視画像データとの間に変化が検出された旨の通知を制御ユニット3に与える処理を実行する。
次に、以上のように構成された施設監視装置DS1〜DSnにおける監視動作を説明する。図3は、施設監視装置DS1〜DSnの制御ユニット3及び画像処理ユニット5の制御手順と制御内容を示すフローチャートである。
定常状態においてカメラ1は動作停止状態となるように制御されている。この状態で、制御ユニット3はステップS31において監視時刻になったか否かを監視し、監視時刻になるごとにステップS32においてカメラI/F2に対しカメラの起動指示を出力する。例えば、1時間おきに毎時0分になった時点でそれぞれカメラI/F2に対しカメラの起動指示を与える。
定常状態においてカメラ1は動作停止状態となるように制御されている。この状態で、制御ユニット3はステップS31において監視時刻になったか否かを監視し、監視時刻になるごとにステップS32においてカメラI/F2に対しカメラの起動指示を出力する。例えば、1時間おきに毎時0分になった時点でそれぞれカメラI/F2に対しカメラの起動指示を与える。
この結果、カメラI/F2によりカメラ1が起動され、カメラ1により監視対象施設の撮像が行われる。制御ユニット3は、その監視画像データ(静止画データ)をステップS33においてカメラI/F2を介して取り込み、この監視画像データをステップS34により記憶ユニット4に格納する。このとき制御ユニット3は、内蔵時計の計時時刻をもとに上記監視画像データの撮像日時を表すタイムスタンプ情報を生成し、このタイムスタンプ情報を上記監視画像データに付与して格納する。また記憶ユニット4は監視画像データの記憶領域として2日分の記憶領域を有しているので、制御ユニット3は最新の監視画像データが得られるごとに当該画像データを前々日の監視画像データに上書きするかたちで記憶ユニット4に記憶させる。
かくして記憶ユニット4には、1時間おきに毎時0分においてそれぞれ撮像された監視対象施設の監視画像データが、その撮像日時を表すタイムスタンプ情報に対応付けられて最大2日分(48枚分)記憶される。図4はその記憶結果の一例を示すもので、At0〜At23は前日の毎時0分に撮像された監視画像データを、Bt0〜Bt23は本日の毎時0分に撮像された監視画像データを示している。
さて、最新の監視画像データが得られると、制御ユニット3は画像処理ユニット5を使用して以下のように監視画像データの変化の有無を判定する処理を行う。すなわち、制御ユニット3は先ずステップS35により最新の監視画像データを記憶ユニット4から読み出し、さらにステップS36によりタイムスタンプ情報をもとに前日の同時刻における監視画像データを記憶ユニット4から読み出す。そして、この読み出した最新の監視画像データ及び前日の同時刻における監視画像データを画像処理ユニット5の明るさ補正処理部51に供給する。明るさ補正処理部51は、上記最新の監視画像データ及び前日の同時刻における監視画像データに対し、ステップS37において次のように明るさの補正処理を行う。
すなわち、いま例えば画像データの各画素の明るさ(濃度)をL1 〜Ln (16×16画素ならばn=256)とすると、画像データの明るさ(濃度)の平均Mは
M=Σ(L1 〜Ln)/n
と表される。これに従い明るさ補正処理部51は、上記最新の監視画像データB及び前日の同時刻における監視画像データAのそれぞれについて、明るさの平均MB ,MA を算出する。
M=Σ(L1 〜Ln)/n
と表される。これに従い明るさ補正処理部51は、上記最新の監視画像データB及び前日の同時刻における監視画像データAのそれぞれについて、明るさの平均MB ,MA を算出する。
続いて、上記各監視画像データA,Bの明るさの平均MA ,MB が任意の共通の値Nとなるように、上記各監視画像データA,Bの各画素の明るさ(濃度)LA1 〜LAn ,LB1 〜LBn を補正する。この補正処理は、
監視画像データA;LA1×(N/MA )〜LAn×(N/MA )
監視画像データB;LB1×(N/MB )〜LBn×(N/MB )
の演算により行われる。なお、監視画像データA,Bがカラー画像の場合には、R,G,Bの要素ごとに上記明るさの補正処理を行う。
監視画像データA;LA1×(N/MA )〜LAn×(N/MA )
監視画像データB;LB1×(N/MB )〜LBn×(N/MB )
の演算により行われる。なお、監視画像データA,Bがカラー画像の場合には、R,G,Bの要素ごとに上記明るさの補正処理を行う。
次に画像処理ユニット5は、上記明るさ補正処理部51により補正された後の監視画像データAN ,BN を差分検出処理部52に供給する。差分検出処理部52は、ステップS38において、上記明るさが補正された後の監視画像データAN ,BN 間の差分を表す絶対差分画像Cを生成する。この絶対差分画像Cの生成は、画素ごとに
LC1〜LCn=|LA1−LB1|〜|LAn−LBn|
なる減算処理により行われる。なお、上記補正後の監視画像データAN ,BN がカラー画像であってR,G,Bの要素ごとに明るさが補正されている場合には、上記絶対差分画像Cを生成するための減算処理はR,G,Bの要素ごとに行われる。
LC1〜LCn=|LA1−LB1|〜|LAn−LBn|
なる減算処理により行われる。なお、上記補正後の監視画像データAN ,BN がカラー画像であってR,G,Bの要素ごとに明るさが補正されている場合には、上記絶対差分画像Cを生成するための減算処理はR,G,Bの要素ごとに行われる。
次に画像処理ユニット5は、上記差分検出処理部52により生成された絶対差分画像Cを残差判定処理部53に供給する。残差判定処理部53は、ステップS39において上記供給された絶対差分画像Cをその画素ごとに予め設定したしきい値dと比較する。このしきい値dは、例えば明るさが補正された監視画像データAN における明るさの最大値Lmaxの1/10に設定される。
なお、しきい値dは、監視画像AN ,BN 間の微小な変化を検出しようとする場合には上記1/10より小さな値に設定し、一方画像データに含まれるノイズ成分の影響を低減してより確実な変化のみを検出しようとする場合には上記1/10より大きい値に設定すればよい。また、上記差分検出処理部52において絶対差分画像CがR,G,Bの要素ごとに生成される場合には、残差判定処理部53は上記絶対差分画像CをR,G,Bの要素ごとにしきい値dR ,dG ,dB と比較する。
残差判定処理部53は、上記絶対差分画像Cとしきい値dとの比較結果を表す情報を制御ユニット3に通知する。制御ユニット3は、上記上記残差判定処理部53による比較の結果、C>dとなる画素が集まった領域が所定範囲より広範囲にわたって存在する場合に、監視画像に有意な変化が検出されたものと判断する。例えば図5では、12:00及び13:00において撮像された画像データでは前日同時刻の監視画像データとの間に有意な変化は検出されず、14:00において撮像された監視画像データにおいて前日同時刻の画像データとの間に有意な変化が検出された場合を示している。
上記有意な変化が検出されると制御ユニット3はステップS40に移行する。そして、このステップS40において、本文に画像の変化が検出された旨のメッセージを挿入した電子メールを作成する。またそれと共に、該当する最新の監視画像データB及び前日の同一時刻における監視画像データAを記憶ユニット4から読み出し、これらの監視画像データA,Bと、先にステップS38において生成された絶対差分画像Cを、上記電子メールに添付ファイルとして添付する。そして、この電子メールを通信ユニット6へ出力し、管理センタCTに向け送信させる。
なお、上記残差判定処理部53において、絶対差分画像CがR,G,Bの要素ごとにしきい値dR ,dG ,dB と比較される場合には、制御ユニット3は例えばR,G,Bの3要素のうちいずれか1つの要素、或いは2以上の要素がしきい値より大きく、かつその領域が所定範囲より広範囲にわたる場合に、監視画像に変化が検出されたものと判断するようにしてもよい。
以上述べたようにこの実施形態では、カメラ1により1時間おきに毎時0分になった時点で監視対象施設を撮像し、その監視画像データを撮像日時を表すタイムスタンプ情報を付加して記憶ユニット4に格納する。そして、最新の監視画像データが得られるごとに、当該最新の監視画像データBと前日の同時刻における監視画像データAを記憶ユニット4から読み出し、これらの監視画像データB,Aをその明るさの平均MB ,MA が任意の共通の値Nとなるように画素ごとに明るさ(濃度)LB1 〜LBn ,LA1 〜LAn を補正する。続いて、上記明るさが補正された後の監視画像データBN ,AN 間の差分を画素ごとに求めて絶対差分画像Cを生成し、この生成された絶対差分画像Cを画素ごとにしきい値dと比較して、その結果をもとに上記監視画像データA,B間の変化の有無を判定するようにしている。
したがって、互いに日照条件の近い最新の監視画像データBと前日同時刻における監視画像データAとの差をもとに監視対象施設の変化の有無が判定され、しかも監視画像データB,A間の明るさが等しくなるように補正されることにより、天気等の日照条件の変化により本日の監視画像データBと前日の同時刻における監視画像データAとの間の明るさが異なる場合でも、明るさの差異が補正されたのち差分が求められて変化の有無が判定される。このため、照度計等の付属機器を設置することなく、日照による画像への影響を排除して安価で高精度の監視を行うことが可能となる。
また、上記明るさの補正処理、差分の算出処理及び比較判定処理が画像データの画素ごとに行われる。このため、画像データの全領域にわたって適切な照度補正を行うことが可能となり、これにより監視対象物の全体にわたりその変化を精度良く判定することが可能となる。
しかも、日照条件の変化による画像データの明るさの変化がR、G、Bの画素要素ごとに補正され、さらにこのR、G、Bの各画素要素の明るさを考慮して画像の変化の有無が判定される。この結果、カラー画像を用いた場合でも日照条件の変化を考慮した最適な判定が可能となる。
さらにこの実施形態では、監視画像に変化が検出された場合に、本文に画像の変化が検出された旨のメッセージを挿入した電子メールを作成する。そして、該当する最新の監視画像データB及び前日の同一時刻における監視画像データAを記憶ユニット4から読み出して上記電子メールに添付し、さらに差分検出処理部52により生成された絶対差分画像Cを上記電子メールに添付して、この電子メールを通信ユニット6から管理センタCTに向け送信するようにしている。
したがって、監視画像データ中に変化が発見された場合にのみ管理担当者に対し該当する監視画像データが送られる。このため、通信ネットワークNWのトラフィックを抑制できると共に、管理担当者の監視業務に対する負担を軽減することが可能となる。しかも、本日及び前日同時刻における監視画像データに加えてその絶対差分情報も送るようにしているので、管理担当者は画面中の変化発生部位を一目で確認することが可能となる。
なお、この発明は上記実施形態に限定されるものではない。例えば、残差判定処理部53にフィルタリング処理機能を持たせ、差分検出処理部52により求められた絶対差分画像に対して、上記フィルタリング処理機能により差分値が存在する領域の境界を拡げるための膨張処理を施し、この膨張フィルタリング処理が施された後の差分情報をしきい値と比較するようにしてもよい。このようにすると、絶対差分画像に現れた画像変化の領域の境界領域が拡大されて、より明確な変化として検出することが可能となる。
また、残差判定処理部53にフィルタリング処理機能を持たせ、差分検出処理部52により求められた絶対差分画像に対して、上記フィルタリング処理機能により差分値が存在する領域の境界を縮小するための収縮処理を施し、この収縮フィルタリング処理が施された後の差分情報をしきい値と比較するようにしてもよい。このようにすると、絶対差分画像に現れた画像変化の境界領域が縮小され、これによりノイズと見なすことができる微少な画像変化を排除して、真の画像変化のみを検出することが可能となる。
前記実施形態では、最新の監視画像データBと前日同時刻における監視画像データAとの間の絶対差分画像Cをもとに画像変化の有無を判定するようにしたが、最新の監視画像データと前々日又はそれ以前の日の同時刻における監視画像データとの間の絶対差分画像をもとに画像変化の有無を判定するようにしてもよい。
また、監視画像データ中に含まれる可能性がある雲等の形状が不特定の画像パターンをフィルタリング処理により排除した後、画像データ間の差分画像を求めるようにしてもよい。さらに、自動車や航空機等の悲監視対象物の画像パターンを排除するために、画像データ中の監視対象施設が写る領域以外をフィルタリング処理により排除するようにしてもよい。
その他、装置の構成や監視制御手順と制御内容、監視対象施設の撮像時間間隔等についても、この発明の要旨を逸脱しない範囲で種々変形して実施できる。
要するにこの発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
要するにこの発明は、上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合せにより種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態に亘る構成要素を適宜組み合せてもよい。
DS1〜DSn…施設監視装置、CT…管理センタ、NW…通信ネットワーク、1…カメラ、2…カメラインタフェース(カメラI/F)、3…制御ユニット、4…記憶ユニット、5…画像処理ユニット、6…通信ユニット、51…明るさ補正処理部、52…差分検出処理部、53…残差判定処理部。
Claims (12)
- 監視対象の施設を定点において定期的に撮像するカメラと、
前記カメラにより撮像された画像データを、その撮像日時を表すタイムスタンプ情報と対応付けて記憶するメモリと、
任意の撮像日時に撮像された第1の画像データと、当該第1の画像データの撮像日より前でかつ同時刻に撮像された第2の画像データを、前記タイムスタンプ情報をもとに前記メモリから選択的に読み出す手段と、
前記読み出された第1の画像データと第2の画像データの明るさを等しくするべく、当該第1及び第2の画像データに対し画像濃度の規格化処理を施す画像処理手段と、
前記画像濃度の規格化処理後の第1及び第2の画像データ間の差分情報を求める差分演算手段と、
前記求められた差分情報を予め設定されたしきい値と比較し、その比較結果をもとに前記監視対象施設の変化の有無を判定する判定手段と
を具備することを特徴とする施設監視装置。 - 前記画像処理手段は、
前記読み出された第1の画像データの各画素又は画素ブロックの画像濃度の平均値を算出する手段と、
前記読み出された第2の画像データの各画素又は画素ブロックの画像濃度の平均値を算出する手段と、
前記算出された第1の画像データの画像濃度の平均値及び前記算出された第2の画像データの画像濃度の平均値をもとに、これらの平均値を任意の共通値とするべく、当該第1及び第2の画像データの各画素又は画素ブロックごとに画像濃度の補正処理を行う手段と
を備えることを特徴とする請求項1記載の施設監視装置。 - 前記画像処理手段は、前記画像濃度の規格化処理をR、G、Bの各画素要素ごとに行い、
前記差分演算手段は、前記第1及び第2の画像データ間の差分情報を前記R、G、Bの各画素要素ごとに求め、
前記判定手段は、前記求められた差分情報を前記R、G、Bの各画素要素ごとにしきい値と比較し、各画素要素のいずれか一つ又は2つ以上がしきい値以上の場合に監視対象施設に変化があったものと判定することを特徴とする請求項1記載の施設監視装置。 - 前記判定手段は、
前記差分演算手段により求められた差分情報に対して、差分値が存在する領域の境界を拡げるための膨張処理を施すフィルタリング手段と、
前記膨張処理が施された後の差分情報をしきい値と比較する手段と
を備えることを特徴とする請求項1記載の施設監視装置。 - 前記判定手段は、
前記差分演算手段により求められた差分情報に対して、差分値が存在する領域の境界を縮小するための収縮処理を施すフィルタリング手段と、
前記収縮処理が施された後の差分情報をしきい値と比較する手段と
を備えることを特徴とする請求項1記載の施設監視装置。 - 前記判定手段により前記監視対象施設の変化が有ると判定された場合に、該当する第1及び第2の画像データを前記メモリから読み出し、この読み出した第1及び第2の画像データ及び前記差分演算手段により求められたその差分情報を、通知先として予め設定された管理担当者の端末装置へ通信ネットワークを介して送信する手段を、さらに具備することを特徴とする請求項1記載の施設監視装置。
- 監視対象の施設を定点においてカメラにより定期的に撮像する過程と、
前記カメラにより撮像された画像データを、その撮像日時を表すタイムスタンプ情報と対応付けてメモリに記憶する過程と、
前記画像データの記憶後に、任意の撮像日時に撮像された第1の画像データと、当該第1の画像データの撮像日より前でかつ同時刻に撮像された第2の画像データを、前記タイムスタンプ情報をもとに前記メモリから選択的に読み出す過程と、
前記読み出された第1の画像データと第2の画像データの明るさを等しくするべく、当該第1及び第2の画像データに対し画像濃度の規格化処理を施す過程と、
前記画像濃度の規格化処理後の第1及び第2の画像データ間の差分情報を求める過程と、
前記求められた差分情報を予め設定されたしきい値と比較し、その比較結果をもとに前記監視対象施設の変化の有無を判定する過程と
を具備することを特徴とする施設監視方法。 - 前記画像濃度の規格化処理を施す過程は、
前記読み出された第1の画像データの各画素又は画素ブロックの画像濃度の平均値を算出する過程と、
前記読み出された第2の画像データの各画素又は画素ブロックの画像濃度の平均値を算出する過程と、
前記算出された第1の画像データの画像濃度の平均値及び前記算出された第2の画像データの画像濃度の平均値をもとに、これらの平均値を任意の共通値とするべく、当該第1及び第2の画像データの各画素又は画素ブロックごとに画像濃度の補正処理を行う過程と
を備えることを特徴とする請求項6記載の施設監視方法。 - 前記画像濃度の規格化処理を施す過程は、前記画像濃度の規格化処理をR、G、Bの各画素要素ごとに行い、
前記差分情報を求める過程は、前記第1及び第2の画像データ間の差分情報を前記R、G、Bの各画素要素ごとに求め、
前記判定する過程は、前記求められた差分情報を前記R、G、Bの各画素要素ごとにしきい値と比較し、各画素要素のいずれか一つ又は2つ以上がしきい値以上の場合に監視対象施設に変化があったものと判定することを特徴とする請求項6記載の施設監視方法。 - 前記判定する過程は、
前記求められた差分情報に対して、差分値が存在する領域の境界を拡げるための膨張処理をフィルタリングにより施す過程と、
前記膨張処理が施された後の差分情報をしきい値と比較する過程と
を備えることを特徴とする請求項6記載の施設監視方法。 - 前記判定する過程は、
前記求められた差分情報に対して、差分値が存在する領域の境界を縮小するための収縮処理をフィルタリングにより施す過程と、
前記収縮処理が施された後の差分情報をしきい値と比較する過程と
を備えることを特徴とする請求項6記載の施設監視方法。 - 前記判定過程により前記監視対象施設の変化が有ると判定された場合に、該当する第1及び第2の画像データを前記メモリから読み出し、この読み出した第1及び第2の画像データ及びその差分情報を、通知先として予め設定された管理担当者の端末装置へ通信ネットワークを介して送信する過程を、さらに具備することを特徴とする請求項1記載の施設監視方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007113354A JP2008271329A (ja) | 2007-04-23 | 2007-04-23 | 施設監視装置及び施設監視方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007113354A JP2008271329A (ja) | 2007-04-23 | 2007-04-23 | 施設監視装置及び施設監視方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2008271329A true JP2008271329A (ja) | 2008-11-06 |
Family
ID=40050223
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007113354A Pending JP2008271329A (ja) | 2007-04-23 | 2007-04-23 | 施設監視装置及び施設監視方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2008271329A (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013247514A (ja) * | 2012-05-25 | 2013-12-09 | Canon Inc | 画像処理装置、画像処理方法及びプログラム |
JP2015188134A (ja) * | 2014-03-26 | 2015-10-29 | 富士通株式会社 | 映像データ管理装置、映像データ管理プログラム及び映像データ管理方法 |
JPWO2020188905A1 (ja) * | 2019-03-19 | 2020-09-24 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03245299A (ja) * | 1990-02-23 | 1991-10-31 | Tokyo Electric Power Co Inc:The | 異常検知装置 |
JPH04330576A (ja) * | 1991-05-02 | 1992-11-18 | Mitsubishi Electric Corp | 画像監視装置 |
JPH04352592A (ja) * | 1991-05-30 | 1992-12-07 | Hitachi Ltd | 異常監視装置 |
JPH06266840A (ja) * | 1993-03-11 | 1994-09-22 | Hitachi Ltd | 移動物体の状態検出装置 |
JP2003346156A (ja) * | 2002-05-23 | 2003-12-05 | Nippon Telegr & Teleph Corp <Ntt> | 物体検出装置、物体検出方法、プログラムおよび記録媒体 |
-
2007
- 2007-04-23 JP JP2007113354A patent/JP2008271329A/ja active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03245299A (ja) * | 1990-02-23 | 1991-10-31 | Tokyo Electric Power Co Inc:The | 異常検知装置 |
JPH04330576A (ja) * | 1991-05-02 | 1992-11-18 | Mitsubishi Electric Corp | 画像監視装置 |
JPH04352592A (ja) * | 1991-05-30 | 1992-12-07 | Hitachi Ltd | 異常監視装置 |
JPH06266840A (ja) * | 1993-03-11 | 1994-09-22 | Hitachi Ltd | 移動物体の状態検出装置 |
JP2003346156A (ja) * | 2002-05-23 | 2003-12-05 | Nippon Telegr & Teleph Corp <Ntt> | 物体検出装置、物体検出方法、プログラムおよび記録媒体 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2013247514A (ja) * | 2012-05-25 | 2013-12-09 | Canon Inc | 画像処理装置、画像処理方法及びプログラム |
JP2015188134A (ja) * | 2014-03-26 | 2015-10-29 | 富士通株式会社 | 映像データ管理装置、映像データ管理プログラム及び映像データ管理方法 |
JPWO2020188905A1 (ja) * | 2019-03-19 | 2020-09-24 | ||
WO2020188905A1 (ja) * | 2019-03-19 | 2020-09-24 | コニカミノルタ株式会社 | ガス検知装置、該方法および該プログラム |
US20220189279A1 (en) * | 2019-03-19 | 2022-06-16 | Konica Minolta, Inc. | Gas detection device, gas detection method, and gas detection program |
JP7331920B2 (ja) | 2019-03-19 | 2023-08-23 | コニカミノルタ株式会社 | ガス検知装置、該方法および該プログラム |
US12046117B2 (en) * | 2019-03-19 | 2024-07-23 | Konica Minolta, Inc. | Gas detection device, gas detection method, and gas detection program |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2016191973A (ja) | 情報転送装置、学習システム、情報転送方法及びプログラム | |
JP2011081715A (ja) | 監視システム及び監視方法 | |
JP2015028753A (ja) | 画像処理装置、画像処理方法 | |
CN110998654B (zh) | 模型学习装置、学习完成模型的生成方法、程序、学习完成模型、监视装置以及监视方法 | |
JP5128547B2 (ja) | 監視システム用の画像処理プログラム、画像処理装置、及び画像処理方法 | |
CN108139335B (zh) | 图像登录装置、图像登录方法、图像登录系统及摄像终端 | |
US20180082413A1 (en) | Image surveillance apparatus and image surveillance method | |
JP2009217725A (ja) | 監視装置及び監視方法 | |
JP2008271329A (ja) | 施設監視装置及び施設監視方法 | |
JP5950628B2 (ja) | 物体検知装置、物体検知方法及びプログラム | |
JP5009214B2 (ja) | 被災監視装置及び被災監視方法 | |
JP2005149035A (ja) | 浸水監視装置 | |
CA3071957A1 (en) | Real-time computation of an atmospheric precipitation rate from a digital image of an environment where an atmospheric precipitation is taking place | |
CN113038026A (zh) | 图像处理方法和电子设备 | |
CN104378629A (zh) | 一种摄像机故障的检测方法 | |
JP6751062B2 (ja) | 自動点検システムおよび自動点検方法 | |
JP2011061651A (ja) | 不審物検知システム | |
JP5045449B2 (ja) | 画像処理による環境適応型侵入者検知装置 | |
JP2015233202A (ja) | 画像処理装置および画像処理方法、並びにプログラム | |
JP2015130698A (ja) | 情報出力装置、検知装置、プログラム及び情報出力方法 | |
JP2022158339A (ja) | 検出装置、検出方法及びプログラム | |
JP2016134804A (ja) | 撮影範囲異常判定装置、撮影範囲異常判定方法、及び撮影範囲異常判定用コンピュータプログラム | |
CN113064373B (zh) | 基于视频图像识别的工业水电设备逻辑信号控制方法、系统、终端及存储介质 | |
JP5993414B2 (ja) | 監視システム及び監視方法 | |
JP2023038480A (ja) | 監視システム及び監視方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090714 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20110701 |
|
A131 | Notification of reasons for refusal |
Effective date: 20110712 Free format text: JAPANESE INTERMEDIATE CODE: A131 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20111108 |