[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

CN101559600A - 服务机器人抓取引导系统及其方法 - Google Patents

服务机器人抓取引导系统及其方法 Download PDF

Info

Publication number
CN101559600A
CN101559600A CNA2009100507814A CN200910050781A CN101559600A CN 101559600 A CN101559600 A CN 101559600A CN A2009100507814 A CNA2009100507814 A CN A2009100507814A CN 200910050781 A CN200910050781 A CN 200910050781A CN 101559600 A CN101559600 A CN 101559600A
Authority
CN
China
Prior art keywords
robot
radio
image
vision
panoramic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2009100507814A
Other languages
English (en)
Inventor
曹其新
杨扬
张镇
罗伟杭
陈培华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jiaotong University
Original Assignee
Shanghai Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jiaotong University filed Critical Shanghai Jiaotong University
Priority to CNA2009100507814A priority Critical patent/CN101559600A/zh
Publication of CN101559600A publication Critical patent/CN101559600A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Manipulator (AREA)

Abstract

一种机器人技术领域的服务机器人抓取引导系统及其方法，本发明系统包括图像采集装置，射频感应收发装置，视觉与射频信息融合处理装置，图像采集装置安装于机器人头部，视觉与射频信息融合处理装置安装在机器人的车体上，接收图像采集装置传来的全景视觉信息和射频感应收发装置传来的射频信息；本发明方法包括以下步骤：安装无源型射频标签；使用全景CCD摄像机采集图像，建立序列全维图像库；发出到机器人的目标位置取特定物品的指令；实现机器人的自定位；用机器人抓手部安装的射频感应收发器识别待取物品。本发明利用全景视觉实现移动机器人的定位和导航，利用RFID实现待拾取物品的识别，为移动机器人智能取物提供充足信息。

Description

服务机器人抓取引导系统及其方法
技术领域
本发明涉及的是一种机器人技术领域的系统及其方法，具体是一种服务机器人抓取引导系统及其方法。
背景技术
自1954年美国人Devol提出工业机器人的概念并申请专利以来，机器人技术的发展经历了三个阶段，第一阶段的机器人是应用于结构化环境下的示教再现型机械臂，没有传感装置，只能完成既定重复性工作，不能感知环境信息并做出响应；第二阶段的机器人装备了一些传感器，比如力传感器，能够与环境发生简单的交互，但机器人不具备智能；第三阶段的机器人装备了多种传感器，比如视觉传感器、激光传感器、声纳传感器等，并能够对多种传感器的信息进行融合处理，显示出一定的智能。随着机器人传感技术和信息融合处理技术的发展，机器人技术发展的趋势是从结构化环境发展到非结构化环境，从工业进入家庭。
家庭服务机器人通常应具备一定的人机交互功能，自主移动功能和物体识别功能，能够根据人的指令，自主移动到指定位置点，拾取指定物体。机器人自主移动一般通过机器视觉实现。中国专利公开号CN 101308023A，公开日2008年11月19日，专利名称：基于异构视觉传感器系统的导航装置和方法，公开了一种机器人技术领域的基于异构视觉传感器系统的导航装置和方法，装置由立体视觉传感器和全维视觉传感器结合而成，将全局路径规划和局部避障规划有机结合，可实现移动机器人在未知环境下由起始点自主运动到给定的目标点。
经对现有技术文献的检索发现，中国专利授权号CN 100352623C，授权日2007年12月5日，专利名称：一种自动拾取物体的智能移动机器人控制装置及方法，公开了一种用于半结构化环境或非结构化环境下自动拾取物体的智能移动机器人控制装置及方法，通过视觉自动获取目标，自主动态生成路径规划，并将运动信息反馈到图像处理模块，构成视觉闭环运动控制，到达目标位置和目标姿态。但由于光照变化、遮挡等因素，基于视觉的物体识别在实际应用过程中效果较差，识别能力有限，识别准确率较低。而近年来兴起的无线射频识别技术(RFID)，利用射频信号通过空间耦合实现无接触信息传递，能够自动识别目标对象并获取相关数据，识别过程无须人工干预，已广泛应用于零售、物流等产业。
发明内容
本发明的目的在于针对现有技术的不足，提出一种基于机器视觉与RFID传感信息融合的服务机器人抓取引导系统及其方法，利用机器视觉实现移动机器人的定位和导航，利用RFID实现待拾取物品的识别，充分利用两种传感器的长处，为移动机器人智能取物提供充足信息。
本发明是通过以下技术方案实现的：
本发明所涉及的服务机器人抓取引导系统包括图像采集装置，射频感应收发装置，视觉与射频信息融合处理装置。其中：图像采集装置安装于机器人头部，将采集的移动机器人周围的全景视觉信息发送给视觉与射频信息融合处理装置，射频感应收发装置将读取的射频信息发送给视觉给射频信息融合处理装置；视觉与射频信息融合处理装置安装在机器人的车体上，分别与图像采集装置和射频感应收发装置相连。
所述的图像采集装置包含：全景CCD摄像机，图像采集卡。全景CCD摄像机安装于机器人头部，用于采集移动机器人周围的全景视觉信息，供视觉与射频信息融合处理装置利用该信息对机器人定位；图像采集卡安装于计算机上，连接全景CCD摄像机和计算机，将全景CCD摄像机采集的视觉信息传送至计算机。
所述的射频感应收发装置包括：射频标签和射频感应收发器
其中，射频标签安装在待取物品上或盛放待取物品容器上，所述射频标签为无源型射频标签，含有物品种类、大小、重量等信息。
射频感应收发器安装在机器人抓手部安装，用于读取待取物品上或盛放待取物品容器上所安装射频标签的射频信息。
所述的视觉与射频信息融合处理装置与全景CCD摄像机和射频感应收发器分别相连，利用全景CCD摄像机提供的视觉信息对机器人定位，引导机器人运动到指定位置点；继而利用安装在机器人抓手部的射频感应收发器读取待取物品上或盛放待取物品容器上所安装射频卡的射频信息，指导机器人抓取指定物品。
本发明所涉及的服务机器人抓取引导方法，包括以下步骤：
第一步，在待取物品上或盛放待取物品容器上安装无源型射频标签，并在标签中写入物品种类、大小、重量等信息；
第二步，使用全景CCD摄像机顺序采集图像，并将图像序列保存在计算机硬盘上，建立序列全维图像库；
第三步，用户从图像库中指定一幅图像，作为机器人的目标位置，发出到该位置取特定物品的指令；
第四步，接到指令后，机器人触发全景CCD摄像机，在当前位置拍摄一张全维图像；
第五步，通过图像匹配，在图像库中搜寻与当前全围图像相似度最高的图像，确定了当前全围图像在序列全维图像库中的位置，实现了机器人的自定位；
第六步，在序列全维图像库中，以第五步中寻找到的图像为起始图像，以用户指定的图像为目标图像，生成基于序列图像的路径；
第七步，沿第六步生成的基于序列图像的路径，机器人移动到目标图像位置后，用机器人抓手部安装的射频感应收发装置识别待取物品。
与现有技术相比，本发明将机器视觉与RFID融合应用于服务机器人，能够充分发挥两种传感器的长处，为移动机器人智能取物提供充足信息，增强了识别能力，提高了识别准确率。
附图说明
图1为本发明的系统结构框图；
图2为本发明基于序列全维图像库导航流程示意图。
具体实施方式
下面结合附图对本发明的实施例作详细说明：本实施例在以本发明技术方案为前提下进行实施，给出了详细的实施方式和具体的操作过程，但本发明的保护范围不限于下述的实施例。
如图1所示，本实施例涉及的服务机器人抓取引导系统，由图像采集装置，射频感应收发装置，视觉与射频信息融合处理装置组成，其中：
所述的图像采集装置包含全景CCD摄像机，图像采集卡。全景CCD摄像机选用SONY RPU-C2512全景摄像头，200万象素，24位真彩色，安装于机器人头部，镜头距地面1.52米，用于采集移动机器人周围的全景视觉信息，供视觉与射频信息融合处理装置利用该信息对机器人定位；
所述的射频感应收发器选用HID MIFARE RFID读卡器，读写距离为6至10厘米，安装于机器人抓手部，通过USB接口与电脑相连。
所述的视觉与射频信息融合处理装置选用HP Compaq nw8240笔记本电脑，该电脑与全景CCD摄像机和射频感应收发装置分别相连，利用全景CCD摄像机提供的视觉信息对机器人定位，引导机器人运动到指定位置点；继而利用安装在机器人抓手部的射频感应收发装置读取待取物品上或盛放待取物品容器上所安装射频卡的射频信息，指导机器人抓取指定物品。
如图2所示，本实施例以抓取衣柜中指定衣服为例说明服务机器人抓取引导方法。图2为一常见家庭布局示意图，包括餐桌、沙发、电视、衣柜1、衣柜2、冰箱等常见家具及电器。本实施例所述的服务机器人抓取引导方法包括以下步骤：
第一步，在衣柜1中五件衣服的衣架上安装无源型射频标签，并在标签中写入衣服种类、重量信息；
第二步，在房间内人工移动机器人，以1至2米为步长，采集多幅图像。本实施例中，分别将机器人移动到图2所示A、B、C、D、E、F、G、H、I、J点，在每个点使用SONY RPU-C2512全景CCD摄像机采集一副全维图像，并将图像以JPEG格式顺序保存在计算机硬盘上，分别命名为“A.jpg”、“B.jpg”、“C.jpg”、“D.jpg”、“E.jpg”、“F.jpg”、“G.jpg”、“H.jpg”、“I.jpg”、“J.jpg”。图像“A.jpg”至“J.jpg”便构成了序列全维图像库，机器人在后续抓取任务中以该图像库为参考地图。
第三步，用户从图像库中指定一幅图像，本例中为在衣柜1前拍摄的“H.jpg”，作为机器人的目标位置，发出到该位置取特定物品的指令；
第四步，接到指令后，机器人触发全景CCD摄像机，在当前位置，即图2所示的S点拍摄一张全维图像；
第五步，提取S点拍摄图像的SIFT特征点，并与图像库中所有图像的特征点进行匹配，在图像库中搜寻与当前图像相似度最高的图像，在本例中为“D.jpg”，从而确定了当前图像在序列全维图像库中的位置，实现了机器人的自定位；
第六步，在序列全维图像库中，以第五步中寻找到的图像，即全维图像“D.jpg”为起始图像，以用户指定的图像，即全维图像“H.jpg”为目标图像，生成基于序列图像的路径；
第七步，沿第六步生成的基于序列图像的路径，机器人移动到目标图像位置，即全维图像“H.jpg”的位置，用机器人抓手部安装的射频感应收发装置识别待取物品。
本实施例将全维视觉传感器与RFID相结合，全维视觉传感器用于机器人的粗定位与导航，RFID用于抓取物的识别，充分利用两种传感器的长处，实现服务机器人在室内环境下完成常见的抓取任务。

Claims (8)

1、一种服务机器人抓取引导系统，其特征在于，包括图像采集装置，射频感应收发装置，视觉与射频信息融合处理装置，其中：图像采集装置安装于机器人头部，将采集的移动机器人周围的全景视觉信息发送给视觉与射频信息融合处理装置，射频感应收发装置将读取的射频信息发送给视觉给射频信息融合处理装置；视觉与射频信息融合处理装置安装在机器人的车体上，分别与图像采集装置和射频感应收发装置相连。
2、根据权利要求1所述的服务机器人抓取引导系统，其特征是，所述的图像采集装置，包含全景CCD摄像机，图像采集卡，其中：全景CCD摄像机安装于机器人头部，与视觉与射频信息融合处理装置相连接，将采集的移动机器人周围的全景视觉信息，发送给视觉与射频信息融合处理装置；图像采集卡安装于计算机上，连接全景CCD摄像机和计算机，将全景CCD摄像机采集的视觉信息传送至计算机。
3、根据权利要求1所述的服务机器人抓取引导系统，其特征是，所述的射频感应收发装置，包括：射频标签和射频感应收发器，其中射频标签安装在待取物品上或盛放待取物品容器上，射频感应收发器安装在机器人抓手部，与视觉与射频信息融合处理装置相连接，读取射频标签的射频信息，并将信息发送给视觉与射频信息融合处理装置。
4、根据权利要求1所述的服务机器人抓取引导系统，其特征是，所述的视觉与射频信息融合处理装置，利用全景CCD摄像机提供的视觉信息对机器人定位，引导机器人运动到指定位置点；利用安装在机器人抓手部的射频感应收发器读取待取物品上或盛放待取物品容器上所安装射频卡的射频信息，指导机器人抓取指定物品。
5、根据权利要求1所述的服务机器人抓取引导系统，其特征是，所述射频标签为无源型射频标签，含有物品种类、大小、重量信息。
6、一种服务机器人抓取引导方法，其特征在于，包括以下步骤：
第一步，在待取物品上或盛放待取物品容器上安装无源型射频标签，并在标签中写入物品种类、大小、重量信息；
第二步，建立序列全维图像库；
第三步，从序列全维图像库中指定一幅图像，作为机器人的目标位置，发出到该位置取特定物品的指令；
第四步，机器人接到指令后，触发全景CCD摄像机，在当前位置拍摄一张全维图像；
第五步，通过图像匹配，实现机器人的自定位；
第六步，在序列全维图像库中，以第五步中寻找到的图像为起始图像，以用户指定的图像为目标图像，生成基于序列图像的路径；
第七步，沿第六步生成的基于序列图像的路径，机器人移动到目标图像位置，用机器人抓手部安装的射频感应收发器识别待取物品。
7、根据权利要求6所述的服务机器人抓取引导方法，其特征是，所述的建立序列全维图像库，是指使用全景CCD摄像机顺序采集图像，并将图像序列保存在计算机硬盘上。
8、根据权利要求6所述的服务机器人抓取引导方法，其特征是，所述的通过图像匹配，实现机器人的自定位，是指在序列全维图像库中搜寻与当前全围图像相似度最高的图像，确定当前图像在序列全维图像库中的位置。
CNA2009100507814A 2009-05-07 2009-05-07 服务机器人抓取引导系统及其方法 Pending CN101559600A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CNA2009100507814A CN101559600A (zh) 2009-05-07 2009-05-07 服务机器人抓取引导系统及其方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNA2009100507814A CN101559600A (zh) 2009-05-07 2009-05-07 服务机器人抓取引导系统及其方法

Publications (1)

Publication Number Publication Date
CN101559600A true CN101559600A (zh) 2009-10-21

Family

ID=41218660

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2009100507814A Pending CN101559600A (zh) 2009-05-07 2009-05-07 服务机器人抓取引导系统及其方法

Country Status (1)

Country Link
CN (1) CN101559600A (zh)

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102323817A (zh) * 2011-06-07 2012-01-18 上海大学 一种服务机器人控制平台系统及其多模式智能交互与智能行为的实现方法
CN102848388A (zh) * 2012-04-05 2013-01-02 上海大学 基于多传感器的服务机器人定位和抓取方法
CN102902271A (zh) * 2012-10-23 2013-01-30 上海大学 基于双目视觉的机器人目标识别与抓取系统及方法
CN102914303A (zh) * 2012-10-11 2013-02-06 江苏科技大学 多移动机器人的智能空间系统及导航信息获取方法
CN103707305A (zh) * 2013-12-31 2014-04-09 上海交通大学 一种基于云信息库的服务机器人抓取系统及其控制方法
CN103745620A (zh) * 2014-01-24 2014-04-23 成都万先自动化科技有限责任公司 代课服务机器人
CN103792948A (zh) * 2013-09-16 2014-05-14 弗徕威数码科技（上海）有限公司 一种用于酒店及病房的智能服务机器人
CN103869814A (zh) * 2012-12-17 2014-06-18 联想(北京)有限公司 一种终端定位和导航方法以及可移动的终端
CN104626169A (zh) * 2014-12-24 2015-05-20 四川长虹电器股份有限公司 基于视觉与机械综合定位的机器人抓取零件的方法
CN105858565A (zh) * 2016-06-01 2016-08-17 浙江万昇光电科技有限公司 一种智能led路灯维护机械臂
CN106054829A (zh) * 2016-05-27 2016-10-26 山东建筑大学 家庭送水服务机器人系统及其动作方法
CN106372552A (zh) * 2016-08-29 2017-02-01 北京理工大学 人体目标识别定位方法
CN107065861A (zh) * 2017-02-24 2017-08-18 珠海金萝卜智动科技有限公司 机器人集智能搬运、装卸于一体的方法和装置
CN107571263A (zh) * 2017-07-19 2018-01-12 江汉大学 一种具有寻物捡捞功能的机器人
CN108873899A (zh) * 2018-06-27 2018-11-23 杨扬 吸尘机器人的避障方法及建立栅格地图的方法
CN109196434A (zh) * 2016-09-26 2019-01-11 X开发有限责任公司 用于仓库导航的标识信息
CN109389130A (zh) * 2018-09-26 2019-02-26 重庆巴奥科技有限公司 一种视觉识别过程中物品无规则分布抓取融合方法
CN111319044A (zh) * 2020-03-04 2020-06-23 达闼科技（北京）有限公司 物品抓取方法、装置、可读存储介质及抓取机器人
CN113361527A (zh) * 2021-08-09 2021-09-07 浙江华睿科技股份有限公司 多目标对象的识别定位方法及装置、电子设备、存储介质
CN113673925A (zh) * 2021-07-30 2021-11-19 广州佳帆计算机有限公司 物品出库验证方法、装置、设备及存储介质
WO2022089548A1 (zh) * 2020-10-30 2022-05-05 神顶科技（南京）有限公司 服务机器人及其控制方法、移动机器人及其控制方法
CN114435827A (zh) * 2021-12-24 2022-05-06 北京无线电测量研究所 一种智慧仓储系统

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102323817A (zh) * 2011-06-07 2012-01-18 上海大学 一种服务机器人控制平台系统及其多模式智能交互与智能行为的实现方法
CN102848388A (zh) * 2012-04-05 2013-01-02 上海大学 基于多传感器的服务机器人定位和抓取方法
CN102914303B (zh) * 2012-10-11 2015-01-21 江苏科技大学 多移动机器人的智能空间系统及导航信息获取方法
CN102914303A (zh) * 2012-10-11 2013-02-06 江苏科技大学 多移动机器人的智能空间系统及导航信息获取方法
CN102902271A (zh) * 2012-10-23 2013-01-30 上海大学 基于双目视觉的机器人目标识别与抓取系统及方法
CN103869814B (zh) * 2012-12-17 2017-04-19 联想(北京)有限公司 一种终端定位和导航方法以及可移动的终端
CN103869814A (zh) * 2012-12-17 2014-06-18 联想(北京)有限公司 一种终端定位和导航方法以及可移动的终端
CN103792948A (zh) * 2013-09-16 2014-05-14 弗徕威数码科技（上海）有限公司 一种用于酒店及病房的智能服务机器人
CN103707305A (zh) * 2013-12-31 2014-04-09 上海交通大学 一种基于云信息库的服务机器人抓取系统及其控制方法
CN103707305B (zh) * 2013-12-31 2016-02-10 上海交通大学 一种基于云信息库的服务机器人抓取系统及其控制方法
CN103745620A (zh) * 2014-01-24 2014-04-23 成都万先自动化科技有限责任公司 代课服务机器人
CN104626169A (zh) * 2014-12-24 2015-05-20 四川长虹电器股份有限公司 基于视觉与机械综合定位的机器人抓取零件的方法
CN106054829B (zh) * 2016-05-27 2018-12-21 山东建筑大学 家庭送水服务机器人系统的动作方法
CN106054829A (zh) * 2016-05-27 2016-10-26 山东建筑大学 家庭送水服务机器人系统及其动作方法
CN105858565A (zh) * 2016-06-01 2016-08-17 浙江万昇光电科技有限公司 一种智能led路灯维护机械臂
CN106372552B (zh) * 2016-08-29 2019-03-26 北京理工大学 人体目标识别定位方法
CN106372552A (zh) * 2016-08-29 2017-02-01 北京理工大学 人体目标识别定位方法
CN109196434A (zh) * 2016-09-26 2019-01-11 X开发有限责任公司 用于仓库导航的标识信息
CN107065861A (zh) * 2017-02-24 2017-08-18 珠海金萝卜智动科技有限公司 机器人集智能搬运、装卸于一体的方法和装置
CN107571263A (zh) * 2017-07-19 2018-01-12 江汉大学 一种具有寻物捡捞功能的机器人
CN107571263B (zh) * 2017-07-19 2019-07-23 江汉大学 一种具有寻物捡捞功能的机器人
CN108873899A (zh) * 2018-06-27 2018-11-23 杨扬 吸尘机器人的避障方法及建立栅格地图的方法
CN108873899B (zh) * 2018-06-27 2022-03-25 杨扬 吸尘机器人的避障方法
CN109389130A (zh) * 2018-09-26 2019-02-26 重庆巴奥科技有限公司 一种视觉识别过程中物品无规则分布抓取融合方法
CN109389130B (zh) * 2018-09-26 2021-11-19 常州海图电子科技有限公司 一种视觉识别过程中物品无规则分布抓取融合方法
CN111319044A (zh) * 2020-03-04 2020-06-23 达闼科技（北京）有限公司 物品抓取方法、装置、可读存储介质及抓取机器人
WO2022089548A1 (zh) * 2020-10-30 2022-05-05 神顶科技（南京）有限公司 服务机器人及其控制方法、移动机器人及其控制方法
CN113673925A (zh) * 2021-07-30 2021-11-19 广州佳帆计算机有限公司 物品出库验证方法、装置、设备及存储介质
CN113361527A (zh) * 2021-08-09 2021-09-07 浙江华睿科技股份有限公司 多目标对象的识别定位方法及装置、电子设备、存储介质
CN113361527B (zh) * 2021-08-09 2021-11-19 浙江华睿科技股份有限公司 多目标对象的识别定位方法及装置、电子设备、存储介质
CN114435827A (zh) * 2021-12-24 2022-05-06 北京无线电测量研究所 一种智慧仓储系统

Similar Documents

Publication Publication Date Title
CN101559600A (zh) 服务机器人抓取引导系统及其方法
US11049278B2 (en) System and method for visual identification, and system and method for classifying and sorting
CN1984756B (zh) 物品保持系统、机器人以及机器人控制方法
WO2019205760A1 (zh) 一种智能设备，商品盘点方法、装置以及设备
CN102393739B (zh) 智能手推车及其应用方法
US20070124024A1 (en) Article transporting robot
CN102955476A (zh) 一种基于无线射频识别技术的agv路径规划方法
CN109512155B (zh) 一种基于标签的服装智能收纳与分发系统
WO2016032693A1 (en) Apparatus and method for performing an item picking process
CN102062609B (zh) 一种智能物品取放导航系统及导航方法
CN201835671U (zh) 一种指纹智能管理柜
CN104616524A (zh) 一种基于rfid的停车场寻车方法
CN205969038U (zh) 智能机器人系统
CN205028304U (zh) 一种用于二维码扫描的机器人
CN108256604A (zh) 一种智能盘点装置
CN107423927A (zh) 一种rfid智能仓储寻货系统及其方法
CN108614564A (zh) 一种基于信息素导航的智能集群仓储机器人系统
CN109272628A (zh) 无人便利店控制系统
CN204731793U (zh) 一种条码rfid自动绑定系统
CN107784306A (zh) 一种基于OpenCV的自动购物车
CN109461268A (zh) 一种基于物联网的图书馆自助管理系统
TW200924926A (en) Autonomous robot and position system and method thereof
CN114675558A (zh) 智能家居设备定位方法、系统及存储介质
CN203606847U (zh) 一种用于汽车生产线缓冲区车身的智能识别系统
CN208584540U (zh) 一种用于图书收纳编排的移动式机械手臂

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20091021