JP2002063568A - 道路監視装置および道路監視方法 - Google Patents
道路監視装置および道路監視方法Info
- Publication number
- JP2002063568A JP2002063568A JP2000249728A JP2000249728A JP2002063568A JP 2002063568 A JP2002063568 A JP 2002063568A JP 2000249728 A JP2000249728 A JP 2000249728A JP 2000249728 A JP2000249728 A JP 2000249728A JP 2002063568 A JP2002063568 A JP 2002063568A
- Authority
- JP
- Japan
- Prior art keywords
- vehicles
- histogram
- feature points
- electronic camera
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 24
- 238000000034 method Methods 0.000 title claims abstract description 13
- 238000001514 detection method Methods 0.000 claims description 10
- 238000012806 monitoring device Methods 0.000 claims description 7
- 238000012545 processing Methods 0.000 abstract description 20
- 238000005259 measurement Methods 0.000 abstract description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 101000680262 Homo sapiens Transmembrane protein 60 Proteins 0.000 description 1
- 102100022076 Transmembrane protein 60 Human genes 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
Landscapes
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Abstract
渋滞の発生を検出することが可能な道路監視装置および
道路監視方法を提供する。 【解決手段】 背景差分算出部7にて車両の存在しない
背景画像と現在の画像とを比較して、背景差分データを
求め、このデータの特徴点数と車両台数との関係を背景
差分ヒストグラム作成部8がヒストグラム化する。また
その一方で、時間差分算出部10により、所定時間前の
過去の画像と現在の画像とを比較して、時間差分データ
を求め、このデータの特徴点数と車両台数との関係を時
間差分ヒストグラム作成部11がヒストグラム化する。
そして、渋滞判定閾値算出部12が、上記2つのヒスト
グラムを比較して、渋滞判定閾値を決定し、渋滞判定部
13が上記渋滞判定値と、画像処理部5にて検出された
車両台数とを比較して、渋滞が発生の有無を判定するよ
うにしたものである。
Description
をはじめとする種々の道路の交通流諸量を検出するのに
用いられる道路監視装置および道路監視方法に関する。
めとする主要な幹線道路には、その交通状況を把握する
ために、道路監視システムが適用されることがある。従
来の道路監視システムでは、監視対象となる道路を電子
カメラにより撮影し、この撮影データを画像処理して上
記道路における交通量と平均速度をそれぞれ求め、これ
らの測定結果の相関に基づいて渋滞の発生を検出するよ
うにしている。
システムで行われる画像処理では、個別の車両速度を正
確に求めることができなくなって、正確な平均速度が求
められなくなると、正確に渋滞の発生を検出することが
困難になるという問題があった。
速度が求められなくなるような状況では、渋滞の発生を
正確に検出することが困難になるという問題があった。
この発明は上記の問題を解決すべくなされたもので、平
均速度の測定結果を用いることなく正確に渋滞の発生を
検出することが可能な道路監視装置および道路監視方法
を提供することを目的とする。
めに、この発明は、電子カメラにより撮影された映像に
基づいて、交通諸量の検出を行う道路監視装置におい
て、電子カメラにより撮影された映像に基づいて、監視
対象の道路を走行する車両数を求める車両数検出手段
と、予め設定した背景画像と、電子カメラにより撮影さ
れた映像との間の差分データを背景差分データとして求
める背景差分検出手段と、背景差分データの特徴点の数
を求め、この特徴点の数と、この特徴点を求める際に基
となった電子カメラの映像に基づいて車両数検出手段が
求めた車両数とを対応づけて、ヒストグラムを作成する
背景差分ヒストグラム作成手段と、電子カメラにより撮
影された映像と、電子カメラにより所定時間前に撮影さ
れた過去の映像との間の差分データを時間差分データと
して求める時間差分検出手段と、時間差分データの特徴
点の数を求め、この特徴点の数と、この特徴点を求める
際に基となった電子カメラの映像に基づいて車両数検出
手段が求めた車両数とを対応づけて、ヒストグラムを作
成する時間差分ヒストグラム作成手段と、背景差分ヒス
トグラム作成手段にて作成したヒストグラムと、背景差
分ヒストグラム作成手段にて作成したヒストグラムとに
基づいて、車両数による渋滞判定の閾値を求める閾値決
定手段と、この閾値決定手段にて求めた閾値と車両数と
を比較して、車両数が上記閾値以上の場合に、渋滞が発
生していると判定する渋滞判定手段とを具備して構成す
るようにした。
影された映像に基づいて、交通諸量の検出を行う道路監
視方法であって、電子カメラにより撮影された映像に基
づいて、監視対象の道路を走行する車両数を求める車両
数検出工程と、予め設定した背景画像と、電子カメラに
より撮影された映像との間の差分データを背景差分デー
タとして求める背景差分検出工程と、背景差分データの
特徴点の数を求め、この特徴点の数と、この特徴点を求
める際に基となった電子カメラの映像に基づいて車両数
検出工程が求めた車両数とを対応づけて、ヒストグラム
を作成する背景差分ヒストグラム作成工程と、電子カメ
ラにより撮影された映像と、電子カメラにより所定時間
前に撮影された過去の映像との間の差分データを時間差
分データとして求める時間差分検出工程と、時間差分デ
ータの特徴点の数を求め、この特徴点の数と、この特徴
点を求める際に基となった電子カメラの映像に基づいて
車両数検出工程が求めた車両数とを対応づけて、ヒスト
グラムを作成する時間差分ヒストグラム作成工程と、背
景差分ヒストグラム作成工程にて作成したヒストグラム
と、背景差分ヒストグラム作成工程にて作成したヒスト
グラムとに基づいて、車両数による渋滞判定の閾値を求
める閾値決定工程と、この閾値決定工程にて求めた閾値
と車両数とを比較して、車両数が上記閾値以上の場合
に、渋滞が発生していると判定する渋滞判定工程とを具
備して構成するようにした。
法では、背景差分による特徴点と車両台数のヒストグラ
ムと、時間差分による特徴点と車両台数のヒストグラム
とに基づいて、渋滞発生時の車両台数の判定値を求め、
この値と検出した車両台数とを比較して、渋滞の発生の
有無を判定するようにしている。
び道路監視方法によれば、画像処理により通過車両の平
均速度を求めなくても、正確に渋滞の発生を検出するこ
とができる。
の一実施形態について説明する。図1は、この発明の一
実施形態に係わる道路監視システムの構成を示すもので
ある。
影するものである。電子カメラ1によって得られたアナ
ログ撮影信号は、A/D変換部2にてディジタル信号に
変換され、そしてフレーム毎の画像データに変換され
る。この画像データは、画像記憶部3と画像処理部5に
出力される。
される画像データを、所定のフレーム数だけ一時的に蓄
積することができる。そして、画像記憶部3は、蓄積し
ている画像データのうち、後述するコンソールユニット
(CU)4を通じて予めオペレータから受け付けた要求
に応じて、蓄積している画像データを背景画像記憶部6
あるいは過去画像記憶部9に選択的に出力するととも
に、最新のフレームの画像データについては、逐次、背
景差分算出部7と時間差分算出部10に出力する。
ルコンピュータなどの制御端末であって、当該道路監視
システムの各部の設定制御機能を有する。そして、例え
ば、後述する画像処理部5の画像処理に関わる種々のパ
ラメータ設定制御機能や、画像記憶部3に蓄積される画
像データを閲覧し、ここに蓄積される画像データのうち
いずれかを背景画像データとして背景画像記憶部6に記
録する制御機能、画像記憶部3に蓄積される画像データ
のうち、一定時間前の画像データを、過去画像データと
して、逐次、過去画像記憶部9に記録する制御機能など
を備える。
画像処理して、監視対象の道路上を走行する車両の台数
を検出し、この検出結果を後述する背景差分ヒストグラ
ム作成部8、時間差分ヒストグラム作成部11および渋
滞判定部13に出力する。
ニット4を通じてオペレータから要求されたフレームの
画像データを、画像記憶部3から読み込んで背景画像デ
ータとして記憶するものである。ここで記憶される背景
画像データとしては、上記監視対象の道路上に車両が存
在しない画像が望ましい。
力される最新のフレームの画像データと、背景画像記憶
部6に記憶される背景画像データとの間の、対応する画
素間の輝度差を画素毎に求め、この結果を背景差分デー
タとして背景差分ヒストグラム作成部8に出力する。
分算出部7にて求められた背景差分データを、画素単位
で、予め設定した閾値と比較して、その輝度差情報が上
記閾値以上であるか否かを2値判定する。
は、上記2値判定の結果のうち、閾値以上の輝度差があ
った画素の数を計数する。この計数結果(以後、背景差
分特徴点数と称する)と、画像処理部5にて検出された
車両台数の情報を対応づけて、図2に示すような車両台
数と背景差分特徴点数の関係をヒストグラム化する。
上述したようにコンソールユニット4の制御により、画
像記憶部3から定期的に過去画像データを読み込んで記
憶するものである。
入力される最新のフレームの画像データと、過去画像記
憶部9に記憶される過去画像データとの間の、対応する
画素間の輝度差を画素毎に求め、この結果を時間差分デ
ータとして時間差分ヒストグラム作成部11に出力す
る。
差分算出部10にて求められた時間差分データを、画素
単位で、予め設定した閾値と比較して、その輝度差情報
が上記閾値以上であるか否かを2値判定する。
は、上記2値判定の結果のうち、閾値以上の輝度差があ
った画素の数を計数する。この計数結果(以後、時間差
分特徴点数と称する)と、画像処理部5にて検出された
車両台数の情報を対応づけて、図3に示すような車両台
数と時間差分特徴点数の関係をヒストグラム化する。
トグラム作成部8にて作成されたヒストグラムと、時間
差分ヒストグラム作成部11にて作成されたヒストグラ
ムとを比較して、渋滞判定閾値を決定し、この値を渋滞
判定部13に出力する。
ように、背景差分ヒストグラム作成部8にて作成された
ヒストグラムと、時間差分ヒストグラム作成部11にて
作成されたヒストグラムが交差する点のうち、大きい方
の車両台数を渋滞判定閾値とする。
された車両台数と、渋滞判定閾値算出部12にて求めら
れた渋滞判定閾値とを比較し、上記車両台数が渋滞判定
閾値以上の場合に、渋滞が発生していると判定する。こ
の判定結果は、出力部14に入力される。
この道路に通ずる道路などに設けられる電子式の交通情
報表示板や、交通監視センタの表示器であって、渋滞判
定部13が渋滞を検出した場合に、監視対象の道路に渋
滞が発生している旨を表示する。
渋滞検出動作について説明する。まず、渋滞検出動作に
先立つ前処理として、オペレータは、予めコンソールユ
ニット4を操作して、画像処理部5の画像処理に関わる
種々のパラメータ設定制御する。
ット4を操作して、画像記憶部3に記憶される画像デー
タを閲覧し、背景画像データとして好適する画像データ
を背景画像記憶部6に記憶させる。
像データのうち、どれだけ前に撮影された画像データ
を、過去画像データとして過去画像記憶部9に記録する
かを決める遅延時間を設定する。
差分算出部7により、画像記憶部3から出力される最新
のフレームの画像データと、背景画像記憶部6に記憶さ
れる背景画像データとの間の、対応する画素間の輝度差
が画素毎に求められ、この結果は、背景差分データとし
て背景差分ヒストグラム作成部8に出力される。
ヒストグラム作成部8により、画素単位で、予め設定し
た閾値と比較され、その輝度差情報が上記閾値以上であ
るか否かが2値判定される。
部8により、上記2値判定の結果のうち、閾値以上の輝
度差があった画素の数、すなわち背景差分特徴点数が計
数され、この点数は画像処理部5にて検出された車両台
数の情報と対応づけられて、図2に示すようなヒストグ
ラムとして集計される。
部3より入力される最新のフレームの画像データと、過
去画像記憶部9に記憶される所定フレーム前の過去画像
データとの間の、対応する画素間の輝度差が画素毎に求
められ、この結果は時間差分データとして時間差分ヒス
トグラム作成部11に出力される。
ヒストグラム作成部11により、画素単位で、予め設定
した閾値と比較され、その輝度差情報が上記閾値以上で
あるか否かが2値判定される。
部11により、上記2値判定の結果のうち、閾値以上の
輝度差があった画素の数、すなわち時間差分特徴点数が
計数され、この点数は画像処理部5にて検出された車両
台数の情報と対応づけられて、図3に示すようなヒスト
グラムとして集計される。
成部8と、時間差分ヒストグラム作成部11により、2
つのヒストグラムが作成されると、これらのヒストグラ
ムに基づいて、渋滞判定閾値算出部12が渋滞判定閾値
を決定し、この値を渋滞判定部13に出力する。
理部5にて検出された車両台数と、渋滞判定閾値算出部
12にて求められた渋滞判定閾値とを比較し、上記車両
台数が渋滞判定閾値以上の場合には、渋滞が発生してい
るものと判定し、出力部14を通じて渋滞発生を報知す
る。
ムでは、背景差分算出部7にて車両の存在しない背景画
像と現在の画像とを比較して、背景差分データを求め、
このデータの特徴点数と車両台数との関係を背景差分ヒ
ストグラム作成部8がヒストグラム化する。
り、所定時間前の過去の画像と現在の画像とを比較し
て、時間差分データを求め、このデータの特徴点数と車
両台数との関係を時間差分ヒストグラム作成部11がヒ
ストグラム化する。
2つのヒストグラムを比較して、渋滞判定閾値を決定
し、渋滞判定部13が上記渋滞判定値と、画像処理部5
にて検出された車両台数とを比較して、渋滞が発生の有
無を判定するようにしている。
は、背景差分による特徴点と車両台数のヒストグラム
と、時間差分による特徴点と車両台数のヒストグラムと
に基づいて、渋滞発生時の車両台数の判定値を求め、こ
の値と画像処理部5にて検出された車両台数とを比較し
て、渋滞の発生の有無を判定するようにしている。
び道路監視方法によれば、画像処理により通過車両の平
均速度を求めなくても、正確に渋滞の発生を検出するこ
とができる。
るものではない。その他、この発明の要旨を逸脱しない
範囲で種々の変形を施しても同様に実施可能であること
はいうまでもない。
差分による特徴点と車両台数のヒストグラムと、時間差
分による特徴点と車両台数のヒストグラムとに基づい
て、渋滞発生時の車両台数の判定値を求め、この値と検
出した車両台数とを比較して、渋滞の発生の有無を判定
するようにしている。
ば、画像処理により通過車両の平均速度を求めなくて
も、正確に渋滞の発生を検出することが可能な道路監視
装置および道路監視方法を提供できる。
態の構成を示す回路ブロック図。
トグラム作成部にて生成されるヒストグラムの一例を示
す図。
トグラム作成部にて生成されるヒストグラムの一例を示
す図。
算出部による渋滞判定閾値の決定方法の一例を説明する
ための図。
Claims (2)
- 【請求項1】 電子カメラにより撮影された映像に基づ
いて、交通諸量の検出を行う道路監視装置において、 前記電子カメラにより撮影された映像に基づいて、監視
対象の道路を走行する車両数を求める車両数検出手段
と、 予め設定した背景画像と、前記電子カメラにより撮影さ
れた映像との間の差分データを背景差分データとして求
める背景差分検出手段と、 前記背景差分データの特徴点の数を求め、この特徴点の
数と、この特徴点を求める際に基となった前記電子カメ
ラの映像に基づいて前記車両数検出手段が求めた前記車
両数とを対応づけて、ヒストグラムを作成する背景差分
ヒストグラム作成手段と、 前記電子カメラにより撮影された映像と、前記電子カメ
ラにより所定時間前に撮影された過去の映像との間の差
分データを時間差分データとして求める時間差分検出手
段と、 前記時間差分データの特徴点の数を求め、この特徴点の
数と、この特徴点を求める際に基となった前記電子カメ
ラの映像に基づいて前記車両数検出手段が求めた前記車
両数とを対応づけて、ヒストグラムを作成する時間差分
ヒストグラム作成手段と、 前記背景差分ヒストグラム作成手段にて作成したヒスト
グラムと、前記背景差分ヒストグラム作成手段にて作成
したヒストグラムとに基づいて、車両数による渋滞判定
の閾値を求める閾値決定手段と、 この閾値決定手段にて求めた閾値と前記車両数とを比較
して、前記車両数が前記閾値以上の場合に、渋滞が発生
していると判定する渋滞判定手段とを具備することを特
徴とする道路監視装置。 - 【請求項2】 電子カメラにより撮影された映像に基づ
いて、交通諸量の検出を行う道路監視方法であって、 前記電子カメラにより撮影された映像に基づいて、監視
対象の道路を走行する車両数を求める車両数検出工程
と、 予め設定した背景画像と、前記電子カメラにより撮影さ
れた映像との間の差分データを背景差分データとして求
める背景差分検出工程と、 前記背景差分データの特徴点の数を求め、この特徴点の
数と、この特徴点を求める際に基となった前記電子カメ
ラの映像に基づいて前記車両数検出工程が求めた前記車
両数とを対応づけて、ヒストグラムを作成する背景差分
ヒストグラム作成工程と、 前記電子カメラにより撮影された映像と、前記電子カメ
ラにより所定時間前に撮影された過去の映像との間の差
分データを時間差分データとして求める時間差分検出工
程と、 前記時間差分データの特徴点の数を求め、この特徴点の
数と、この特徴点を求める際に基となった前記電子カメ
ラの映像に基づいて前記車両数検出工程が求めた前記車
両数とを対応づけて、ヒストグラムを作成する時間差分
ヒストグラム作成工程と、 前記背景差分ヒストグラム作成工程にて作成したヒスト
グラムと、前記背景差分ヒストグラム作成工程にて作成
したヒストグラムとに基づいて、車両数による渋滞判定
の閾値を求める閾値決定工程と、 この閾値決定工程にて求めた閾値と前記車両数とを比較
して、前記車両数が前記閾値以上の場合に、渋滞が発生
していると判定する渋滞判定工程とを具備することを特
徴とする道路監視方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000249728A JP4301711B2 (ja) | 2000-08-21 | 2000-08-21 | 道路監視装置および道路監視方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2000249728A JP4301711B2 (ja) | 2000-08-21 | 2000-08-21 | 道路監視装置および道路監視方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2002063568A true JP2002063568A (ja) | 2002-02-28 |
JP4301711B2 JP4301711B2 (ja) | 2009-07-22 |
Family
ID=18739429
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2000249728A Expired - Fee Related JP4301711B2 (ja) | 2000-08-21 | 2000-08-21 | 道路監視装置および道路監視方法 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4301711B2 (ja) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009236567A (ja) * | 2008-03-26 | 2009-10-15 | Navitime Japan Co Ltd | 道路交通情報案内システム、サーバおよび端末装置ならびに道路交通情報案内方法 |
CN111369807A (zh) * | 2020-03-24 | 2020-07-03 | 北京百度网讯科技有限公司 | 一种交通事故的检测方法、装置、设备和介质 |
CN112312082A (zh) * | 2020-09-14 | 2021-02-02 | 上海商汤智能科技有限公司 | 道路运行情况确定方法及装置、设备和存储介质 |
-
2000
- 2000-08-21 JP JP2000249728A patent/JP4301711B2/ja not_active Expired - Fee Related
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009236567A (ja) * | 2008-03-26 | 2009-10-15 | Navitime Japan Co Ltd | 道路交通情報案内システム、サーバおよび端末装置ならびに道路交通情報案内方法 |
CN111369807A (zh) * | 2020-03-24 | 2020-07-03 | 北京百度网讯科技有限公司 | 一种交通事故的检测方法、装置、设备和介质 |
CN111369807B (zh) * | 2020-03-24 | 2022-04-12 | 北京百度网讯科技有限公司 | 一种交通事故的检测方法、装置、设备和介质 |
CN112312082A (zh) * | 2020-09-14 | 2021-02-02 | 上海商汤智能科技有限公司 | 道路运行情况确定方法及装置、设备和存储介质 |
CN112312082B (zh) * | 2020-09-14 | 2021-11-30 | 上海商汤智能科技有限公司 | 道路运行情况确定方法及装置、设备和存储介质 |
WO2022052446A1 (zh) * | 2020-09-14 | 2022-03-17 | 上海商汤智能科技有限公司 | 道路运行情况确定方法及装置、设备、存储介质和程序 |
JP2022545322A (ja) * | 2020-09-14 | 2022-10-27 | 上▲海▼商▲湯▼智能科技有限公司 | 道路運行状況決定方法及び装置、デバイス、記憶媒体並びにプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP4301711B2 (ja) | 2009-07-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US7773118B2 (en) | Handheld article with movement discrimination | |
JP2004145852A (ja) | レーンマーカー位置検出方法及びレーンマーカー位置検出装置並びに車線逸脱警報装置 | |
JPH0944670A (ja) | 特定画像領域抽出方法及び特定画像領域抽出装置 | |
JPH1096626A (ja) | 車間距離検知装置 | |
CN104867128A (zh) | 图像模糊检测方法和装置 | |
CN114727024A (zh) | 自动曝光参数调节方法、装置、存储介质及拍摄设备 | |
US10628681B2 (en) | Method, device, and non-transitory computer readable medium for searching video event | |
CN118233603A (zh) | 一种车载视频图像传输系统 | |
EP3023987B1 (en) | Method and apparatus for visualizing information of a digital video stream | |
JP2002063568A (ja) | 道路監視装置および道路監視方法 | |
JP2940582B2 (ja) | 斜め後方走行車検出方法 | |
JP7384158B2 (ja) | 画像処理装置、移動装置、および方法、並びにプログラム | |
JPH07236153A (ja) | 動画像のカット点検出およびカット画面グループ検出装置 | |
JP3771729B2 (ja) | 交通流計測システム | |
JP2000163691A (ja) | 交通流計測装置 | |
JP2001092979A (ja) | 不適切画像検出方法 | |
KR20230073500A (ko) | Cctv 영상 기반 이동 차량 속도 추정 방법 | |
JP2853367B2 (ja) | 車両動態計測装置 | |
CN111325075B (zh) | 一种视频序列目标检测方法 | |
JPH10162288A (ja) | 交差点通過車両監視システム | |
JP2001175872A (ja) | 画像処理装置及び方法並びに画像処理用ソフトウェアを記録した記録媒体 | |
JP2621806B2 (ja) | 背景特徴マスク生成装置および移動物体特徴抽出装置 | |
CN114299309A (zh) | 一种目标跟踪方法、装置和计算机可读介质 | |
JP3126961B2 (ja) | 動画像のカット画面グループ検出装置 | |
JPH09190533A (ja) | 車両検知装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050811 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20081001 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081007 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081208 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090106 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090304 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090331 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090421 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120501 Year of fee payment: 3 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |