JP6761938B2 - 移動方向決定方法および移動方向決定装置 - Google Patents
移動方向決定方法および移動方向決定装置 Download PDFInfo
- Publication number
- JP6761938B2 JP6761938B2 JP2017530997A JP2017530997A JP6761938B2 JP 6761938 B2 JP6761938 B2 JP 6761938B2 JP 2017530997 A JP2017530997 A JP 2017530997A JP 2017530997 A JP2017530997 A JP 2017530997A JP 6761938 B2 JP6761938 B2 JP 6761938B2
- Authority
- JP
- Japan
- Prior art keywords
- camera
- movement
- processor
- image
- moving direction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 134
- 238000003384 imaging method Methods 0.000 claims description 19
- 238000001514 detection method Methods 0.000 description 47
- 238000010586 diagram Methods 0.000 description 21
- 230000001133 acceleration Effects 0.000 description 8
- 238000003909 pattern recognition Methods 0.000 description 5
- 239000000284 extract Substances 0.000 description 3
- 238000007792 addition Methods 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B5/00—Adjustment of optical system relative to image or object surface other than for focusing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/01—Details
- G06K7/015—Aligning or centering of the sensing device with respect to the record carrier
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
- G06K7/10544—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation by scanning of the records by radiation in the optical part of the electromagnetic spectrum
- G06K7/10712—Fixed beam scanning
- G06K7/10722—Photodetector array or CCD scanning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
- G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/681—Motion detection
- H04N23/6811—Motion detection based on the image signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/685—Vibration or motion blur correction performed by mechanical compensation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30244—Camera pose
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Artificial Intelligence (AREA)
- Electromagnetism (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Toxicology (AREA)
- Image Analysis (AREA)
- Studio Devices (AREA)
- User Interface Of Digital Computer (AREA)
Description
以下、図1〜図11を用いて、実施の形態1を説明する。
図1は、実施の形態1における移動方向決定装置およびその使用の様子を説明する図である。
以上のように構成した端末が行う移動方向指示処理を説明する。
以上のように本実施の形態において、本開示の移動方向決定方法及び装置のプロセッサは、多角形の認識対象を撮像するカメラの移動方向を決定する。そしてプロセッサはカメラが備えるセンサが取得したカメラの向きを取得し、カメラが撮像した認識対象の画像を取得し、画像に収まっている認識対象のコーナーの個数を決定し、カメラの向きとコーナーの個数に基づいて、カメラの移動方向を決定する。
以上のように、本出願において開示する技術の例示として、実施の形態1を説明した。しかしながら、本開示における技術は、これに限定されず、適宜、変更、置き換え、付加、省略などを行った実施の形態にも適用可能である。また、上記実施の形態1で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。
110 使用者
120 認識対象
130 貨物
201 プロセッサ
202 ストレージ
203 カメラ
204 センサ
205 スピーカ
206 バイブレータ
207 ディスプレイ
208 入力装置
210 バス
400 画像
610 名刺
611 ダンボール
620 エッジ
621 エッジ
630 平行エッジ
640 多角形
650 多角形
651 コーナー
652 コーナー
653 コーナー
654 コーナー
810 コーナー
1010 コーナー座標
1020 視線方向
1030 撮像方向
Claims (16)
- プロセッサが、多角形の認識対象を撮像するカメラの移動方向を決定する方法であって、
前記プロセッサは、
前記カメラが備えるセンサが取得した前記カメラの向きを取得し、
前記カメラが撮像した前記認識対象の画像を取得し、
前記画像に収まっている前記認識対象のコーナーの個数を決定し、
前記カメラの向きと前記コーナーの個数に基づいて、前記カメラの移動方向を決定する、
移動方向決定方法。 - 前記プロセッサは、
前記画像に収まっている前記認識対象のコーナーの個数が、第1の所定の値以下の場合は、
前記カメラの移動方向を後方に決定する、
請求項1に記載の移動方向決定方法。 - 前記プロセッサは、
前記画像に収まっている前記認識対象のコーナーの個数が、前記認識対象が有するコーナーの数マイナス1個の場合は、
前記画像に収まっていないコーナーの座標を決定し、
前記カメラの向きと前記画像に収まっていないコーナーの座標に基づいて、前記カメラの移動方向を決定する、
請求項1に記載の移動方向決定方法。 - 前記プロセッサは、
前記カメラの使用者の視線方向と、前記カメラの撮像方向とが一致しているか否かを判定し、
前記カメラの使用者の視線方向と、前記カメラの撮像方向とが一致していない場合は、前記カメラの使用者の視線方向と、前記カメラの撮像方向とが一致している場合に比べて前記移動方向の向きを左右反転して決定する、
請求項1に記載の移動方向決定方法。 - 前記プロセッサは、
前回決定した移動方向と、今回決定した移動方向とを比較することで移動方向の変化を決定し、
前記移動方向の変化が反対方向への変化であれば、出力装置に対してカメラの移動の行き過ぎを警告するよう指示を行う、
請求項1に記載の移動方向決定方法。 - 前記プロセッサは、
前記移動方向に関して移動量を算出し、
前記移動量に基づいてカメラを移動させる旨の出力を行うように、出力装置に対して指示を行う、
請求項1に記載の移動方向決定方法。 - 前記プロセッサは、
前記移動方向に関して移動量を算出し、
前回決定した移動方向および移動量と、今回決定した移動方向および移動量とを比較することで移動方向および移動量の変化を決定し、
前記移動方向が変化せず、前記移動量が増大した場合は、出力装置に対してカメラを反対向きに移動させている旨の警告をするよう指示を行う、
請求項1に記載の移動方向決定方法。 - 前記プロセッサは、
前記カメラの使用者の視線方向と、前記カメラの撮像方向とが一致しているか否かを判定し、
前記カメラの使用者の視線方向と、前記カメラの撮像方向とが一致していない場合は、前記カメラの使用者の視線方向と、前記カメラの撮像方向とが一致している場合に比べて前記移動方向の向きを左右反転して決定し、
前記移動方向が左方向あるいは右方向のまま変化せず、前記移動量が増大した場合は、前記カメラの使用者の視線方向と、前記カメラの撮像方向とが一致しているか否かの判定結果を反転させる、
請求項7に記載の移動方向決定方法。 - プロセッサを有し、前記プロセッサが多角形の認識対象を撮像するカメラの移動方向を決定する移動方向決定装置であって、
前記プロセッサは、
前記カメラが備えるセンサが取得した前記カメラの向きを取得し、
前記カメラが撮像した前記認識対象の画像を取得し、
前記画像に収まっている前記認識対象のコーナーの個数を決定し、
前記カメラの向きと前記コーナーの個数に基づいて、前記カメラの移動方向を決定する、
移動方向決定装置。 - 前記プロセッサは、
前記画像に収まっている前記認識対象のコーナーの個数が、第1の所定の値以下の場合は、
前記カメラの移動方向を後方に決定する、
請求項9に記載の移動方向決定装置。 - 前記プロセッサは、
前記画像に収まっている前記認識対象のコーナーの個数が、前記認識対象が有するコーナーの数マイナス1個の場合は、
前記画像に収まっていないコーナーの座標を決定し、
前記カメラの向きと前記画像に収まっていないコーナーの座標に基づいて、前記カメラの移動方向を決定する、
請求項9に記載の移動方向決定装置。 - 前記プロセッサは、
前記カメラの使用者の視線方向と、前記カメラの撮像方向とが一致しているか否かを判定し、
前記カメラの使用者の視線方向と、前記カメラの撮像方向とが一致していない場合は、前記カメラの使用者の視線方向と、前記カメラの撮像方向とが一致している場合に比べて前記移動方向の向きを左右反転して決定する、
請求項9に記載の移動方向決定装置。 - 前記プロセッサは、
前回決定した移動方向と、今回決定した移動方向とを比較することで移動方向の変化を決定し、
前記移動方向の変化が反対方向への変化であれば、出力装置に対してカメラの移動の行き過ぎを警告するよう指示を行う、
請求項9に記載の移動方向決定装置。 - 前記プロセッサは、
前記移動方向に関して移動量を算出し、
前記移動量に基づいてカメラを移動させる旨の出力を行うように、出力装置に対して指示を行う、
請求項9に記載の移動方向決定装置。 - 前記プロセッサは、
前記移動方向に関して移動量を算出し、
前回決定した移動方向および移動量と、今回決定した移動方向および移動量とを比較することで移動方向および移動量の変化を決定し、
前記移動方向が変化せず、前記移動量が増大した場合は、出力装置に対してカメラを反対向きに移動させている旨の警告をするよう指示を行う、
請求項9に記載の移動方向決定装置。 - 前記プロセッサは、
前記カメラの使用者の視線方向と、前記カメラの撮像方向とが一致しているか否かを判定し、
前記カメラの使用者の視線方向と、前記カメラの撮像方向とが一致していない場合は、前記カメラの使用者の視線方向と、前記カメラの撮像方向とが一致している場合に比べて前記移動方向の向きを左右反転して決定し、
前記移動方向が左方向あるいは右方向のまま変化せず、前記移動量が増大した場合は、前記カメラの使用者の視線方向と、前記カメラの撮像方向とが一致しているか否かの判定結果を反転させる、
請求項15に記載の移動方向決定装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015148182 | 2015-07-28 | ||
JP2015148182 | 2015-07-28 | ||
PCT/JP2016/003138 WO2017017898A1 (ja) | 2015-07-28 | 2016-06-30 | 移動方向決定方法および移動方向決定装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017017898A1 JPWO2017017898A1 (ja) | 2018-05-10 |
JP6761938B2 true JP6761938B2 (ja) | 2020-09-30 |
Family
ID=57884246
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017530997A Active JP6761938B2 (ja) | 2015-07-28 | 2016-06-30 | 移動方向決定方法および移動方向決定装置 |
Country Status (4)
Country | Link |
---|---|
US (1) | US10339661B2 (ja) |
JP (1) | JP6761938B2 (ja) |
CN (1) | CN107004111A (ja) |
WO (1) | WO2017017898A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017151493A (ja) * | 2016-02-22 | 2017-08-31 | 富士ゼロックス株式会社 | 画像処理装置、画像読み取り装置及びプログラム |
US9928438B2 (en) * | 2016-03-10 | 2018-03-27 | Conduent Business Services, Llc | High accuracy localization system and method for retail store profiling via product image recognition and its corresponding dimension database |
CN108426566B (zh) * | 2018-02-28 | 2020-09-01 | 中国计量大学 | 一种基于多摄像机的移动机器人定位方法 |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4301775B2 (ja) * | 2002-07-18 | 2009-07-22 | シャープ株式会社 | 2次元コード読み取り装置,2次元コード読み取り方法,2次元コード読み取りプログラム及び該プログラムの記録媒体 |
JP5093968B2 (ja) * | 2003-10-15 | 2012-12-12 | オリンパス株式会社 | カメラ |
JP4049739B2 (ja) | 2003-12-16 | 2008-02-20 | 株式会社東研 | 手持ち式コード読取装置 |
JP4572815B2 (ja) * | 2005-11-18 | 2010-11-04 | 富士フイルム株式会社 | 撮像装置及び撮像方法 |
JP4527671B2 (ja) * | 2006-01-30 | 2010-08-18 | 日星電気株式会社 | 広帯域アンテナエレメント |
JP2007207085A (ja) * | 2006-02-03 | 2007-08-16 | Denso Wave Inc | 光学情報読取装置 |
JP5367241B2 (ja) * | 2007-07-06 | 2013-12-11 | 株式会社Pfu | 画像読取処理装置、画像読取装置、および、画像読取処理方法 |
JP4956375B2 (ja) * | 2007-10-30 | 2012-06-20 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
US8596541B2 (en) * | 2008-02-22 | 2013-12-03 | Qualcomm Incorporated | Image capture device with integrated barcode scanning |
US8270767B2 (en) * | 2008-04-16 | 2012-09-18 | Johnson Controls Technology Company | Systems and methods for providing immersive displays of video camera information from a plurality of cameras |
US9189670B2 (en) * | 2009-02-11 | 2015-11-17 | Cognex Corporation | System and method for capturing and detecting symbology features and parameters |
JP5486298B2 (ja) * | 2009-12-28 | 2014-05-07 | キヤノン株式会社 | 画像処理装置および画像処理方法 |
JP5423406B2 (ja) * | 2010-01-08 | 2014-02-19 | ソニー株式会社 | 情報処理装置、情報処理システム及び情報処理方法 |
EP2395766B1 (en) * | 2010-06-14 | 2016-03-23 | Nintendo Co., Ltd. | Storage medium having stored therein stereoscopic image display program, stereoscopic image display device, stereoscopic image display system, and stereoscopic image display method |
JP2012244196A (ja) * | 2011-05-13 | 2012-12-10 | Sony Corp | 画像処理装置及び方法 |
US9609217B2 (en) * | 2011-11-02 | 2017-03-28 | Mediatek Inc. | Image-based motion sensor and related multi-purpose camera system |
JP2013219541A (ja) * | 2012-04-09 | 2013-10-24 | Seiko Epson Corp | 撮影システムおよび撮影方法 |
JP2014127744A (ja) * | 2012-12-25 | 2014-07-07 | Casio Comput Co Ltd | 撮像装置、撮像制御方法、及びプログラム |
KR102092571B1 (ko) * | 2013-01-04 | 2020-04-14 | 삼성전자 주식회사 | 카메라를 구비하는 장치의 인물 촬영장치 및 방법 |
JP6405891B2 (ja) * | 2014-10-29 | 2018-10-17 | 富士通株式会社 | 位置・姿勢推定装置、位置・姿勢推定方法、及び、プログラム |
-
2016
- 2016-06-30 US US15/526,563 patent/US10339661B2/en active Active
- 2016-06-30 JP JP2017530997A patent/JP6761938B2/ja active Active
- 2016-06-30 WO PCT/JP2016/003138 patent/WO2017017898A1/ja active Application Filing
- 2016-06-30 CN CN201680003724.9A patent/CN107004111A/zh active Pending
Also Published As
Publication number | Publication date |
---|---|
US20170330334A1 (en) | 2017-11-16 |
US10339661B2 (en) | 2019-07-02 |
JPWO2017017898A1 (ja) | 2018-05-10 |
WO2017017898A1 (ja) | 2017-02-02 |
CN107004111A (zh) | 2017-08-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9398210B2 (en) | Methods and systems for dealing with perspective distortion in connection with smartphone cameras | |
US10074179B2 (en) | Image measurement device | |
JP5742399B2 (ja) | 画像処理装置及びプログラム | |
JP6570296B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP5699432B2 (ja) | 画像処理装置 | |
EP3627822B1 (en) | Focus region display method and apparatus, and terminal device | |
JP5765026B2 (ja) | 画像処理装置及びプログラム | |
US9930306B2 (en) | Image processing apparatus, image processing method, and computer-readable storage medium | |
JP6761938B2 (ja) | 移動方向決定方法および移動方向決定装置 | |
US20140049614A1 (en) | Image processing apparatus, imaging apparatus, and image processing method | |
KR20120066567A (ko) | 화상 처리 장치 및 프로그램 | |
CN109543534B (zh) | 一种目标跟踪中目标丢失重检的方法及装置 | |
CN111145153B (zh) | 图像处理方法、电路、视障辅助设备、电子设备及介质 | |
JP6395429B2 (ja) | 画像処理装置、その制御方法及び記憶媒体 | |
US9418286B2 (en) | Information processing device, information processing method, and program | |
JP2010211460A (ja) | 識別モデル生成装置、対象物検出装置、及び識別モデル生成プログラム | |
JP2019012546A (ja) | 情報処理装置、画像処理方法とプログラム、ならびに、pos端末装置 | |
JP2011120076A (ja) | 画像検出装置及び画像検出方法 | |
US10521653B2 (en) | Image processing device, image processing method, and storage medium | |
CN112997217A (zh) | 从视频图像进行文档检测 | |
US9159118B2 (en) | Image processing apparatus, image processing system, and non-transitory computer-readable medium | |
JP5482925B2 (ja) | 画像撮像装置及びプログラム | |
JP6157068B2 (ja) | 情報処理装置及びその制御方法 | |
CN107113380B (zh) | 一种计算系统、方法和机器可读非暂时性存储介质 | |
JP6600090B2 (ja) | 画像処理装置、画像処理方法、および、プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170403 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20190123 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190607 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200721 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200803 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6761938 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |