CN114160926A - 一种用于焊缝跟踪的单斜线激光视觉传感方法及系统 - Google Patents
一种用于焊缝跟踪的单斜线激光视觉传感方法及系统 Download PDFInfo
- Publication number
- CN114160926A CN114160926A CN202111570543.3A CN202111570543A CN114160926A CN 114160926 A CN114160926 A CN 114160926A CN 202111570543 A CN202111570543 A CN 202111570543A CN 114160926 A CN114160926 A CN 114160926A
- Authority
- CN
- China
- Prior art keywords
- welding seam
- image
- laser
- welding
- vision sensing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003466 welding Methods 0.000 title claims abstract description 107
- 238000000034 method Methods 0.000 title claims abstract description 32
- 238000012545 processing Methods 0.000 claims abstract description 28
- 238000001914 filtration Methods 0.000 claims abstract description 8
- 230000000694 effects Effects 0.000 claims abstract description 4
- 239000002131 composite material Substances 0.000 claims description 7
- 230000008569 process Effects 0.000 claims description 6
- 238000012937 correction Methods 0.000 claims description 5
- 238000009826 distribution Methods 0.000 claims description 4
- 238000010330 laser marking Methods 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 7
- 239000003550 marker Substances 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000002829 reductive effect Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000011217 control strategy Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000007123 defense Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010891 electric arc Methods 0.000 description 1
- 230000003628 erosive effect Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000009776 industrial production Methods 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 230000000877 morphologic effect Effects 0.000 description 1
- 230000036961 partial effect Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 239000000779 smoke Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000003860 storage Methods 0.000 description 1
- 210000003462 vein Anatomy 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B23—MACHINE TOOLS; METAL-WORKING NOT OTHERWISE PROVIDED FOR
- B23K—SOLDERING OR UNSOLDERING; WELDING; CLADDING OR PLATING BY SOLDERING OR WELDING; CUTTING BY APPLYING HEAT LOCALLY, e.g. FLAME CUTTING; WORKING BY LASER BEAM
- B23K9/00—Arc welding or cutting
- B23K9/12—Automatic feeding or moving of electrodes or work for spot or seam welding or cutting
- B23K9/127—Means for tracking lines during arc welding or cutting
- B23K9/1272—Geometry oriented, e.g. beam optical trading
- B23K9/1274—Using non-contact, optical means, e.g. laser means
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Optics & Photonics (AREA)
- Geometry (AREA)
- Plasma & Fusion (AREA)
- Mechanical Engineering (AREA)
- Laser Beam Processing (AREA)
Abstract
本发明提供了一种用于焊缝跟踪的单斜线激光视觉传感方法及系统,所述方法包括:对摄像机采集到的投影在工件上的单斜线激光条纹初始图像采用ROI,提取目标区域图像;对目标区域图像进行中值滤波,改善尖峰性干扰效果,保持边缘的陡峭,去除干扰;对中值滤波后的图像进行灰度化处理和二值化处理,提高图像处理效率;采用开操作处理所述二值化后的焊缝图像;以及根据处理后的焊缝图像计算得到焊缝信息以及判断焊缝空间位置。本发明的用于焊缝跟踪的单斜线激光视觉传感方法及系统用于自动焊接时焊缝空间位置识别和焊缝跟踪,可提升焊接质量。
Description
技术领域
本发明涉及焊缝跟踪技技术领域,具体地,涉及一种用于焊缝跟踪的单斜线激光视觉传感方法及系统。
背景技术
目前国内的人防工程对接焊缝焊接多数还是采用手工焊接方法,存在工人工作条件恶劣,工作强度大的问题,同时焊缝成型、焊接效率以及焊接质量等都有待提高。焊接自动化技术以其优良的工作效率被广泛地应用到工业生产中,是焊接技术发展的必然趋势,是实现更安全、高效、智能生产的重要手段。
目前在自动焊接上采用的传感器主要是电弧传感器、机械传感器及视觉传感器等。电弧传感器是从焊接电弧自身直接提取焊缝位置偏差信号,不需要在焊枪上附加任何装置,因此其实时性好,可达性及焊枪运动的灵活性都非常好,尤其符合焊接过程低成本自动化的要求。它是利用电弧自身电参数的动静态变化作为特征信号,通过一定的控制策略实现高低及水平两个方向的跟踪控制。然而,电弧传感器只适用于V型、单V型、U型和角焊缝,能够获得的信息量较少,具有局限性,不适用于薄板对接焊接。
典型的机械接触式传感器是依导轮或者导杆在焊炬前方检测焊缝位置,通过焊缝形状对导杆或者导轮的强制力来导向,将焊缝偏差信息反映到检测器内,从而实现焊缝跟踪。机械接触式传感器结构简单,操作方便,价格便宜且不受电弧烟及飞溅等干扰。但是,由于机械式传感器信息量少,在自动焊接中,主要是与其它传感器配合来完成焊缝跟踪任务,一般不独立使用。
基于激光视觉的焊缝跟踪技术在焊接制造业中拥有很好的发展前景。激光视觉传感器采用非接触的传感方式,可以获取高质量的焊缝图像,有效提高焊缝跟踪的灵敏度和检测精度。激光光源具有亮度高、单色性好的优点,可以有效地削弱弧光对图像质量的影响,很好地保护焊缝特征信息,降低后续图像处理的难度。然而,单激光标线器照射工件,只能判别焊缝的中心特征点,无法检测焊缝的空间位置。而双激光标线器的外设过于繁琐,不如单个的精简。
发明内容
针对现有技术中的缺陷,本发明的目的在于提供一种可提升焊接质量的用于自动焊接时焊缝空间位置识别和焊缝跟踪的单斜线激光传感方法及系统。
为解决上述问题,本发明的技术方案为:
一种用于焊缝跟踪的单斜线激光视觉传感方法,所述方法包括以下步骤:
对摄像机采集到的投影在工件上的单斜线激光条纹初始图像采用ROI,提取目标区域图像;
对目标区域图像进行中值滤波,改善尖峰性干扰效果,保持边缘的陡峭,去除干扰;
对中值滤波后的图像进行灰度化处理和二值化处理,提高图像处理效率;
采用开操作处理所述二值化后的焊缝图像;以及
根据处理后的焊缝图像计算得到焊缝信息以及判断焊缝空间位置。
可选地,所述根据处理后的焊缝图像计算得到焊缝信息以及判断焊缝空间位置的步骤具体包括:通过激光标线器产生单斜线激光条纹,通过单斜线激光条纹的分布信息计算出当前焊枪与焊缝的位置关系,引导焊枪自动跟踪焊缝。
可选地,所述根据处理后的焊缝图像计算得到焊缝信息以及判断焊缝空间位置的步骤具体包括:根据单斜线激光条纹焊缝图像,通过计算机计算出对接焊缝的宽度、深度和纠偏量。
进一步地,本发明还提供一种用于焊缝跟踪的单斜线激光视觉传感系统,所述系统包括CCD摄像机、复合滤光片、激光标线器以及工件,所述激光器标线器倾斜于水平方向放置,以产生斜激光折线条纹,发射的激光条纹投影在工件上,通过复合滤光片采集到CCD摄像机上,经过图像处理后获得焊缝信息和偏移量,并判断出焊缝的空间位置。
可选地,以焊接方向为参考,所述激光标线器以20°的角度倾斜放置在CCD摄像机的后侧,所述激光标线器与竖直方向的夹角为20°。
与现有技术相比,本发明的激光器标线器倾斜于水平方向放置,采用单线激光传感器在黑暗环境下采集焊缝,实时扫描焊接坡口横截面,检测坡口的形状,获取焊缝图像简单、高效,响应速度快,实时性强,能满足智能控制的需要;采用单斜线激光判别焊缝空间位置,当激光条纹投影到墙面与平面连接处时产生折线,从而判别接近焊缝边界位置,不需要多个激光标线器即可以实现焊缝空间位置判定。
另外,可以自动判断焊接的空间位置,减少人工干预,提高焊接的自动化水平,提高焊接效率;具备连续提取焊缝特征点的能力,降低自动化焊接设备成本,减少外设,提升焊接的连续性和准确性。
附图说明
通过阅读参照以下附图对非限制性实施例所作的详细描述,本发明的其它特征、目的和优点将会变得更明显:
图1为本发明实施例提供的用于焊缝跟踪的单斜线激光视觉传感系统示意图;
图2为本发明实施例提供的单斜线边界位置示意图;
图3为本发明实施例提供的用于焊缝跟踪的单斜线激光视觉传感方法流程框图;
图4为本发明实施例提供的部分焊缝图像示意图;
图5为本发明实施例提供的焊缝信息计算示意图。
具体实施方式
下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明,但不以任何形式限制本发明。应当指出的是,对本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变化和改进。这些都属于本发明的保护范围。
具体地,图1为本发明实施例提供的用于焊缝跟踪的单斜线激光视觉传感系统示意图,图2为本发明实施例提供的单斜线边界位置示意图,如图1和图2所示,所述系统包括:CCD摄像机1、复合滤光片2、激光标线器3以及工件4,采用激光器标线器3倾斜照射,CCD摄像机1垂直摄取图像,经过图像处理后获得焊缝信息和偏移量,以及判断焊缝的空间位置。
所述激光标线器3以20°的角度倾斜放置在CCD摄像机1的后侧,激光器标线器3倾斜于水平方向放置,以产生斜激光条纹,激光条纹投影在工件4上,通过复合滤光片2采集到CCD摄像机1上。以焊接方向为参考,激光标线器3位于CCD摄像机1的后方,激光标线器3与竖直方向的夹角为20°,并倾斜于水平方向放置,以产生斜激光条纹。
对投影在工件1上的单斜线激光条纹进行灰度处理、取目标区域、二值化、形态学开操作以及提取焊缝中心线,利用水平方向中线与条纹的交点,求出焊缝特征点的位置,同时判断焊缝的空间位置。
图3为本发明实施例提供的一种用于焊缝跟踪的单斜线激光视觉传感方法流程框图,如图3所示,所述方法包括以下步骤:
S1:对摄像机采集到的投影在工件上的单斜线激光条纹初始图像采用ROI,提取目标区域图像;
具体地,通过将激光标线器倾斜于水平方向放置,产生斜激光折线条纹,所述激光标线器发射的激光条纹投影在工件上,通过复合滤光片采集到CCD摄像机,再经过后续图像处理。
S2:对目标区域图像进行中值滤波,改善尖峰性干扰效果,保持边缘的陡峭,去除干扰;
S3:对中值滤波后的图像进行灰度化处理和二值化处理,提高图像处理效率;
具体地,阈值分割不仅可以大量压缩数据,减少存储容量,而且能够大大简化后续的分析和处理步骤。当焊缝与周围灰度差较大、层次比较分明时,运用这种方法能够较好地检测出焊缝位置。所述二值化处理的二值函数为:
其中,T为指定的阈值。图片像素中比灰度T大就为白,比T小则为黑。二值化过程中,根据图像的统计分布性质,采用最大方差阈值法选取最优阈值。
S4:采用开操作处理所述二值化后的焊缝图像;
具体地,为了消除细小物体,在纤细处分离物体和平滑较大物体边界,既可以去除折线边缘毛刺,又能分离折线之间的连接,为中心线提取做准备。开操作一般会平滑物体的轮廓,断开较窄的狭颈并消除细的突出物。结构元B对集合A的开操作,表示为
因此,B对A的开操作就是B对A的腐蚀,紧接着用B对结果进行膨胀。
在本实施例中,为了更好地检测图像条纹和计算,对折线条纹的中心线提取显得格外重要,将条纹同一纵向坐标的边缘值相加除以2得到中心值的纵坐标,再将除中心点以外的点全部变为黑色或背景色。
S5:根据处理后的焊缝图像计算得到焊缝信息以及判断焊缝空间位置。
对接焊缝激光条纹的处理,是要通过激光条纹的分布信息计算出当前焊枪与焊缝的位置关系,引导焊枪自动跟踪焊缝。确定各特征点在象素平面上的位置之后,通过计算机计算出纠偏量。
由于摄像机一直处于正中位置,所拍图像左右对称。所以取处于图像中心的折线部分做图像处理,提升图像处理实时性。图4为截取部分焊缝图像示意图,如图4所示,首先确定1、2、3、4、5、6这6点的坐标位置,其基本思想是:从上往下沿y轴正方向的顺序搜索图像,第一和最后一列的黑点便是起始点1和结束点6。因为每一列最多只有一个像素点为黑,从起始点开始找起,若左三邻域或右三邻域的像素点为空白,则为特征点,由此判断折线点2、3、4、5、6。这样可以确定6个点的x、y值。
逐列搜索特征点时,若斜率发生明显变化,且并非特征点折线处,则判断为到达焊缝边界处,停止焊接。
接下来通过计算机计算对接焊缝的宽度、深度和纠偏量,焊缝宽度为x3-x2。
因此焊丝与焊缝的对中偏差可由ROI后的焊缝两边未折线光纹的差的一半求得,即偏移量
如果Δx<0,则焊枪偏右;如果Δx>0,则焊抢偏左;如果Δx=0,则焊枪正好对准焊缝的中心。
如图5所示,图5中的虚线长度反应了深度信息,令其为h1,则
h1不是焊缝的深度,是焊缝深度与像面深度信息之间的关系,h2是实际焊缝深度,激光片以与CCD光轴成α角投向工件。实际焊缝深度h2与激光的投射角度α及h1有关。
从而,h2=h1cotα,便可以计算出对接焊缝的宽度、深度和纠偏量。
与现有技术相比,本发明的激光器标线器倾斜于水平方向放置,采用单线激光传感器在黑暗环境下采集焊缝,实时扫描焊接坡口横截面,检测坡口的形状,获取焊缝图像简单、高效,响应速度快,实时性强,能满足智能控制的需要;采用单斜线激光判别焊缝空间位置,当激光条纹投影到墙面与平面连接处时产生折线,从而判别接近焊缝边界位置,不需要多个激光标线器即可以实现焊缝空间位置判定。
另外,可以自动判断焊接的空间位置,减少人工干预,提高焊接的自动化水平,提高焊接效率;具备连续提取焊缝特征点的能力,降低自动化焊接设备成本,减少外设,提升焊接的连续性和准确性。
以上对本发明的具体实施例进行了描述。需要理解的是,本发明并不局限于上述特定实施方式,本领域技术人员可以在权利要求的范围内做出各种变化或修改,这并不影响本发明的实质内容。在不冲突的情况下,本申请的实施例和实施例中的特征可以任意相互组合。
Claims (8)
1.一种用于焊缝跟踪的单斜线激光视觉传感方法,其特征在于,所述方法包括以下步骤:
对摄像机采集到的投影在工件上的单斜线激光条纹初始图像采用ROI,提取目标区域图像;
对目标区域图像进行中值滤波,改善尖峰性干扰效果,保持边缘的陡峭,去除干扰;
对中值滤波后的图像进行灰度化处理和二值化处理,提高图像处理效率;
采用开操作处理所述二值化后的焊缝图像;以及
根据处理后的焊缝图像计算得到焊缝信息以及判断焊缝空间位置。
5.根据权利要求1所述的用于焊缝跟踪的单斜线激光视觉传感方法,其特征在于,所述根据处理后的焊缝图像计算得到焊缝信息以及判断焊缝空间位置的步骤具体包括:通过激光标线器产生单斜线激光条纹,通过单斜线激光条纹的分布信息计算出当前焊枪与焊缝的位置关系,引导焊枪自动跟踪焊缝。
6.根据权利要求5所述的用于焊缝跟踪的单斜线激光视觉传感方法,其特征在于,所述根据处理后的焊缝图像计算得到焊缝信息以及判断焊缝空间位置的步骤具体包括:根据单斜线激光条纹焊缝图像,通过计算机计算出对接焊缝的宽度、深度和纠偏量。
7.一种用于焊缝跟踪的单斜线激光视觉传感系统,其特征在于,所述系统包括CCD摄像机、复合滤光片、激光标线器以及工件,所述激光器标线器倾斜于水平方向放置,以产生斜激光折线条纹,发射的激光条纹投影在工件上,通过复合滤光片采集到CCD摄像机上,经过图像处理后获得焊缝信息和偏移量,并判断出焊缝的空间位置。
8.根据权利要求7所述的用于焊缝跟踪的单斜线激光视觉传感系统,其特征在于,以焊接方向为参考,所述激光标线器以20°的角度倾斜放置在CCD摄像机的后侧,所述激光标线器与竖直方向的夹角为20°。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111570543.3A CN114160926A (zh) | 2021-12-21 | 2021-12-21 | 一种用于焊缝跟踪的单斜线激光视觉传感方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111570543.3A CN114160926A (zh) | 2021-12-21 | 2021-12-21 | 一种用于焊缝跟踪的单斜线激光视觉传感方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114160926A true CN114160926A (zh) | 2022-03-11 |
Family
ID=80487647
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111570543.3A Pending CN114160926A (zh) | 2021-12-21 | 2021-12-21 | 一种用于焊缝跟踪的单斜线激光视觉传感方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114160926A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115255565A (zh) * | 2022-07-07 | 2022-11-01 | 江苏科技大学 | 全局模式识别的窄间隙焊接坡口边缘视觉传感检测方法及应用 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5481085A (en) * | 1994-09-09 | 1996-01-02 | University Of Kentucky Research Foundation | Apparatus and method for measuring 3-D weld pool shape |
CN1782659A (zh) * | 2004-12-02 | 2006-06-07 | 中国科学院自动化研究所 | 一种基于激光结构光的焊缝跟踪视觉传感器 |
CN102780845A (zh) * | 2012-06-14 | 2012-11-14 | 清华大学 | 一种光源交替频闪同步摄像方法及视觉检测系统 |
CN107186319A (zh) * | 2017-07-03 | 2017-09-22 | 江苏科技大学 | 一种基于激光传感器的焊接机器人盖面焊在线跟踪方法 |
CN107824940A (zh) * | 2017-12-07 | 2018-03-23 | 淮安信息职业技术学院 | 基于激光结构光的焊缝视觉跟踪系统及方法 |
-
2021
- 2021-12-21 CN CN202111570543.3A patent/CN114160926A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5481085A (en) * | 1994-09-09 | 1996-01-02 | University Of Kentucky Research Foundation | Apparatus and method for measuring 3-D weld pool shape |
CN1782659A (zh) * | 2004-12-02 | 2006-06-07 | 中国科学院自动化研究所 | 一种基于激光结构光的焊缝跟踪视觉传感器 |
CN102780845A (zh) * | 2012-06-14 | 2012-11-14 | 清华大学 | 一种光源交替频闪同步摄像方法及视觉检测系统 |
CN107186319A (zh) * | 2017-07-03 | 2017-09-22 | 江苏科技大学 | 一种基于激光传感器的焊接机器人盖面焊在线跟踪方法 |
CN107824940A (zh) * | 2017-12-07 | 2018-03-23 | 淮安信息职业技术学院 | 基于激光结构光的焊缝视觉跟踪系统及方法 |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115255565A (zh) * | 2022-07-07 | 2022-11-01 | 江苏科技大学 | 全局模式识别的窄间隙焊接坡口边缘视觉传感检测方法及应用 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103759648B (zh) | 一种基于激光双目视觉的复杂角焊缝位置检测方法 | |
CN105571502B (zh) | 搅拌摩擦焊接中焊缝间隙的测量方法 | |
CN107424144B (zh) | 基于激光视觉的焊缝跟踪图像处理方法 | |
CN105678776B (zh) | 一种基于激光视觉传感器焊缝图像特征点提取方法 | |
CN110480127B (zh) | 一种基于结构光视觉传感的焊缝跟踪系统及方法 | |
CN108132017A (zh) | 一种基于激光视觉系统的平面焊缝特征点提取方法 | |
US20130070095A1 (en) | Fast obstacle detection | |
CN114240944B (zh) | 一种基于点云信息的焊接缺陷检测方法 | |
JP5175528B2 (ja) | トンネル覆工のひび割れ検査装置 | |
CN105844622A (zh) | 一种基于激光视觉的v型坡口焊缝检测方法 | |
CN112529858A (zh) | 一种基于机器视觉的焊缝图像处理方法 | |
CN110064819A (zh) | 基于结构光的柱面纵向焊缝特征区域提取、焊缝跟踪方法及系统 | |
CN108907526A (zh) | 一种具有高鲁棒性的焊缝图像特征识别方法 | |
CN107909571A (zh) | 一种焊缝图像处理方法、系统、设备及计算机存储介质 | |
CN104458764B (zh) | 基于大景深条带图像投影的弯曲粗糙表面缺陷鉴别方法 | |
CN102519387B (zh) | 一种电子束焊接熔池形状参数的视觉检测方法 | |
CN114283139A (zh) | 一种基于面阵结构光3d视觉的焊缝检测分割方法及装置 | |
WO2017188158A1 (ja) | 路面状態検出装置 | |
CN114160926A (zh) | 一种用于焊缝跟踪的单斜线激光视觉传感方法及系统 | |
CN106141382B (zh) | 焊接坡口边缘位置视觉传感检测方法 | |
KR100677762B1 (ko) | 곡주판 레이져 비젼 장치 및 그 구현 방법 | |
Naji et al. | Square groove detection based on Förstner with Canny edge operator using laser vision sensor | |
CN114309889B (zh) | 一种用于焊缝跟踪的激光视觉传感系统及方法 | |
CN116673597B (zh) | 用于双v复合型坡口的激光线图像特征提取系统及方法 | |
CN107914067A (zh) | 一种基于被动视觉传感的薄板焊接的焊枪偏差三维提取方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20220311 |
|
RJ01 | Rejection of invention patent application after publication |