CN108716982B - 光学元件检测方法、装置、电子设备和存储介质 - Google Patents
光学元件检测方法、装置、电子设备和存储介质 Download PDFInfo
- Publication number
- CN108716982B CN108716982B CN201810403817.1A CN201810403817A CN108716982B CN 108716982 B CN108716982 B CN 108716982B CN 201810403817 A CN201810403817 A CN 201810403817A CN 108716982 B CN108716982 B CN 108716982B
- Authority
- CN
- China
- Prior art keywords
- zero
- region
- mean value
- speckle pattern
- brightness mean
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 230000003287 optical effect Effects 0.000 title claims abstract description 151
- 238000001514 detection method Methods 0.000 title claims abstract description 70
- 230000002093 peripheral effect Effects 0.000 claims abstract description 126
- 230000002159 abnormal effect Effects 0.000 claims abstract description 50
- 238000000034 method Methods 0.000 claims abstract description 43
- 230000005856 abnormality Effects 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 10
- 238000007689 inspection Methods 0.000 claims description 4
- 238000012545 processing Methods 0.000 description 57
- 238000000605 extraction Methods 0.000 description 18
- 230000008569 process Effects 0.000 description 17
- 238000010586 diagram Methods 0.000 description 9
- 238000003384 imaging method Methods 0.000 description 7
- 230000001678 irradiating effect Effects 0.000 description 7
- 230000006378 damage Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000001360 synchronised effect Effects 0.000 description 3
- 238000003705 background correction Methods 0.000 description 2
- 239000005337 ground glass Substances 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000010146 3D printing Methods 0.000 description 1
- 208000027418 Wounds and injury Diseases 0.000 description 1
- 230000002547 anomalous effect Effects 0.000 description 1
- 239000000872 buffer Substances 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 238000001559 infrared map Methods 0.000 description 1
- 208000014674 injury Diseases 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
- G01M11/00—Testing of optical apparatus; Testing structures by optical methods not otherwise provided for
Landscapes
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Image Processing (AREA)
Abstract
本申请涉及一种光学元件检测方法、装置、电子设备和计算机可读存储介质。所述方法包括:获取红外图和散斑图,根据散斑图获取散斑图的第一零级区域及第一零级区域的亮度均值,检测散斑图在第一零级区域周围的第一周围区域的亮度均值,获取红外图中与散斑图的第一零级区域和第一周围区域对应的第二零级区域和第二周围区域的亮度均值,当第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值且第一零级区域的亮度均值与第二零级区域的亮度均值的比值大于第一周围区域的亮度均值与第二周围区域的亮度均值的比值时,则判定光学元件异常。由于根据散斑图及红外图的亮度均值对光学元件进行检测,可以提高检测的准确性。
Description
技术领域
本申请涉及计算机技术领域,特别是涉及一种光学元件检测方法、装置、电子设备和计算机可读存储介质。
背景技术
随着计算机技术的发展,深度图像技术广泛应用于智能电子设备。电子设备可以通过激光摄像头采集激光通过衍射光学元件照射到物体上所形成的散斑图,获取图像物体的深度信息,从而应用于人脸或物体识别、3D打印、人机交互等场景。
然而,当衍射光学损坏时,激光照射到人眼时会对人眼造成严重的伤害,传统技术中对光学元件的检测容易受到物体红外发射率的影响,存在检测准确性低的问题。
发明内容
本申请实施例提供一种光学元件检测方法、装置、电子设备和计算机可读存储介质,可以提高光学元件检测的准确性。
一种光学元件检测方法,所述方法包括:
获取红外图和散斑图,所述散斑图是投射器中光源产生的激光通过光学元件后所形成的图像;
根据所述散斑图获取所述散斑图的第一零级区域及第一零级区域的亮度均值,所述零级区域为亮度最大的区域;
检测所述散斑图在所述第一零级区域周围的第一周围区域的亮度均值;
获取所述红外图中与所述散斑图的第一零级区域对应的第二零级区域的亮度均值,以及与所述散斑图的第一周围区域对应的第二周围区域的亮度均值;
当所述第一零级区域的亮度均值与所述第一周围区域的亮度均值的比值大于第一预设值且零级区域比值大于周围区域比值时,则判定所述光学元件异常;其中,所述零级区域比值为所述第一零级区域的亮度均值与第二零级区域的亮度均值的比值,所述周围区域比值为所述第一周围区域的亮度均值与第二周围区域的亮度均值的比值。
一种光学元件检测装置,所述装置包括:
图像获取模块,用于获取红外图和散斑图,所述散斑图是投射器中光源产生的激光通过光学元件后所形成的图像;
零级区域获取模块,用于根据所述散斑图获取所述散斑图的第一零级区域及第一零级区域的亮度均值,所述零级区域为亮度最大的区域;
第一亮度检测模块,用于检测所述散斑图在所述第一零级区域周围的第一周围区域的亮度均值;
第二亮度检测模块,用于获取所述红外图中与所述散斑图的第一零级区域对应的第二零级区域的亮度均值,以及与所述散斑图的第一周围区域对应的第二周围区域的亮度均值;
判定模块,用于当所述第一零级区域的亮度均值与所述第一周围区域的亮度均值的比值大于第一预设值且零级区域比值大于周围区域比值时,则判定所述光学元件异常;其中,所述零级区域比值为所述第一零级区域的亮度均值与第二零级区域的亮度均值的比值,所述周围区域比值为所述第一周围区域的亮度均值与第二周围区域的亮度均值的比值。
一种电子设备,包括存储器和处理器,所述存储器中存储有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如下步骤:
获取红外图和散斑图,所述散斑图是投射器中光源产生的激光通过光学元件后所形成的图像;
根据所述散斑图获取所述散斑图的第一零级区域及第一零级区域的亮度均值,所述零级区域为亮度最大的区域;
检测所述散斑图在所述第一零级区域周围的第一周围区域的亮度均值;
获取所述红外图中与所述散斑图的第一零级区域对应的第二零级区域的亮度均值,以及与所述散斑图的第一周围区域对应的第二周围区域的亮度均值;
当所述第一零级区域的亮度均值与所述第一周围区域的亮度均值的比值大于第一预设值且零级区域比值大于周围区域比值时,则判定所述光学元件异常;其中,所述零级区域比值为所述第一零级区域的亮度均值与第二零级区域的亮度均值的比值,所述周围区域比值为所述第一周围区域的亮度均值与第二周围区域的亮度均值的比值。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如下步骤:
获取红外图和散斑图,所述散斑图是投射器中光源产生的激光通过光学元件后所形成的图像;
根据所述散斑图获取所述散斑图的第一零级区域及第一零级区域的亮度均值,所述零级区域为亮度最大的区域;
检测所述散斑图在所述第一零级区域周围的第一周围区域的亮度均值;
获取所述红外图中与所述散斑图的第一零级区域对应的第二零级区域的亮度均值,以及与所述散斑图的第一周围区域对应的第二周围区域的亮度均值;
当所述第一零级区域的亮度均值与所述第一周围区域的亮度均值的比值大于第一预设值且零级区域比值大于周围区域比值时,则判定所述光学元件异常;其中,所述零级区域比值为所述第一零级区域的亮度均值与第二零级区域的亮度均值的比值,所述周围区域比值为所述第一周围区域的亮度均值与第二周围区域的亮度均值的比值。
上述光学元件检测方法、装置、电子设备和计算机可读存储介质,可以获取红外图和投射器中光源产生的激光通过光学元件后所形成的散斑图,根据散斑图获取散斑图的第一零级区域及对应的第一零级区域亮度均值,检测散斑图在第一零级区域周围的第一周围的亮度均值,获取红外图中与散斑图的第一零级区域和第一周围区域对应的第二零级区域和第二周围区域的亮度均值,当第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值且第一零级区域与第二零级区域的亮度均值的比值大于第一周围区域与第二周围区域的亮度均值的比值时,则判定光学元件异常。由于可以根据散斑图的零级区域与周围区域的亮度均值及红外图对应的零级区域和周围区域的亮度均值对光学元件进行检测,可以提高检测的准确性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为一个实施例中光学元件检测方法的应用场景图;
图2为一个实施例中光学元件检测方法的流程图;
图3为一个实施例中获取散斑图零级区域的流程图;
图4为一个实施例中检测散斑图的流程图;
图5为一个实施例中获取散斑图零级区域的周围区域的示意图;
图6为一个实施例中获取红外图不同区域亮度均值的流程图;
图7为另一个实施例中光学元件检测方法的流程图;
图8为一个实施例中光学元件检测装置的结构框图;
图9为一个实施例中图像处理电路的示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
可以理解,本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件,但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说,在不脱离本申请的范围的情况下,可以将第一客户端称为第二客户端,且类似地,可将第二客户端称为第一客户端。第一客户端和第二客户端两者都是客户端,但其不是同一客户端。
图1为一个实施例中光学元件检测方法的应用场景图。如图1所示,电子设备10可包括摄像头模组110、第二处理单元120,第一处理单元130。上述第二处理单元120可为CPU(Central Processing Unit,中央处理器)模块。上述第一处理单元130可为MCU(Microcontroller Unit,微控制单元)模块130等。其中,第一处理单元130连接在第二处理单元120和摄像头模组110之间,上述第一处理单元130可控制摄像头模组110中激光摄像头112、泛光灯114和镭射灯118,上述第二处理单元120可控制摄像头模组110中RGB摄像头116。
摄像头模组110中包括激光摄像头112、泛光灯114、RGB(Red/Green/Blue,红/绿/蓝色彩模式)摄像头116和镭射灯118。上述激光摄像头112为红外摄像头,用于获取红外图像。上述泛光灯114为可发生红外光的面光源;上述镭射灯118为可发生激光的点光源且为带有图案的点光源。其中,当泛光灯114发射面光源时,激光摄像头112可根据反射回的光线获取红外图像。当镭射灯118发射点光源时,激光摄像头112可根据反射回的光线获取散斑图像。上述散斑图像是镭射灯118发射的带有图案的点光源被反射后图案发生形变的图像。
第一处理单元130包括PWM(Pulse Width Modulation,脉冲宽度调制)模块132、SPI/I2C(Serial Peripheral Interface/Inter-Integrated Circuit,串行外设接口/双向二线制同步串行接口)接口134、RAM(Random Access Memory,随机存取存储器)模块136和深度引擎138。上述PWM模块132可向摄像头模组发射脉冲,控制泛光灯114或镭射灯118开启,使得激光摄像头112可采集到红外图像或散斑图像。上述SPI/I2C接口134用于接收第二处理单元120发送的人脸采集指令。上述深度引擎138可对散斑图像进行处理得到深度视差图。
当第二处理单元120接收到应用程序的数据获取请求时,例如,当应用程序需要进行人脸解锁、人脸支付时,可通过运行在TEE环境下的CPU内核向第一处理单元130发送人脸采集指令。当第一处理单元130接收到人脸采集指令后,可通过PWM模块132发射脉冲波控制摄像头模组110中泛光灯114开启并通过激光摄像头112采集红外图像、控制摄像头模组110中镭射灯118开启并通过激光摄像头112采集散斑图像。摄像头模组110可将采集到的红外图像和散斑图像发送给第一处理单元130。第一处理单元130可对接收到的红外图像进行处理得到红外视差图;对接收到的散斑图像进行处理得到散斑视差图或深度视差图。其中,第一处理单元130对上述红外图像和散斑图像进行处理是指对红外图像或散斑图像进行校正,去除摄像头模组110中内外参数对图像的影响。其中,第一处理单元130可设置成不同的模式,不同模式输出的图像不同。当第一处理单元130设置为散斑图模式时,第一处理单元130对散斑图像处理得到散斑视差图,根据上述散斑视差图可得到目标散斑图像;当第一处理单元130设置为深度图模式时,第一处理单元130对散斑图像处理得到深度视差图,根据上述深度视差图可得到深度图像,上述深度图像是指带有深度信息的图像。第一处理单元130可将上述红外视差图和散斑视差图发送给第二处理单元120,第一处理单元130也可将上述红外视差图和深度视差图发送给第二处理单元120。第二处理单元120可根据上述红外视差图获取目标红外图像、根据上述深度视差图获取深度图像。进一步的,第二处理单元120可根据目标红外图像、深度图像来进行人脸识别、人脸匹配、活体检测以及获取检测到的人脸的深度信息。
第一处理单元130与第二处理单元120之间通信是通过固定的安全接口,用以确保传输数据的安全性。如图1所示,第二处理单元120发送给第一处理单元130的数据是通过安全串行外设接口或双向二线制同步串行接口(SECURE SPI/I2C)140,第一处理单元130发送给第二处理单元120的数据是通过安全移动产业处理器接口(SECURE MIPIMobile,Industry Processor Interface)150。
在一个实施例中,第一处理单元130通过控制摄像头模组110中泛光灯114和镭射灯118开启并通过激光摄像头112采集对应的红外图和散斑图,摄像头模组110可将采集的红外图和散斑图发送给第一处理单元130,第一处理单元130可以根据散斑图获取散斑图中亮度最大的区域即第一零级区域及第一零级区域的亮度均值,并检测散斑图在第一零级区域周围的第一周围区域的亮度均值,第一处理单元130还可以获取红外图中与散斑图的第一零级区域和第一周围区域对应的第二零级区域和第二周围区域的亮度均值,当第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值且零级区域比值大于周围区域比值时,第一处理单元130判定光学元件异常,其中零级区域比值为第一零级区域的亮度均值与第二零级区域的亮度均值的比值,周围区域比值为第一周围区域的亮度均值与第二周围区域的亮度均值的比值。
图2为一个实施例中光学元件检测方法的流程图。如图2所示,该光学元件检测方法包括步骤202至步骤210。
步骤202,获取红外图和散斑图,散斑图是投射器中光源产生的激光通过光学元件后所形成的图像。
红外图是指电子设备通过控制泛光灯发射红外光照射到物体上,并通过激光摄像头根据反射回的光线采集的红外图像。泛光灯是可发生红外光的面光源。散斑图是指激光摄像头采集的由投射器中光源产生的激光通过光学元件照射到物体上所形成的散斑图像。电子设备的投射器可以是镭射灯。投射器包括光源、准直镜和光学元件。其中,光源可为面发射激光、垂直腔面激光(VCSEL,Vertical Cavity Surface Emitting Laser)阵列。光学元件可以是DOE(Diffractive Optical Elements,衍射光学元件)、毛玻璃或者里面两者组合等。激光摄像头包括图像传感器、透镜等,图像传感器可以是CMOS(Complementary MetalOxide Semiconductor,互补金属氧化物半导体)、CCD(Charge-coupled Device,电荷耦合元件)等。
电子设备通过激光摄像头采集泛光灯照射到物体上反射的光线所形成的红外图和投射器中光源产生的激光通过光学元件照射到物体上所形成的散斑图。
步骤204,根据散斑图获取散斑图的第一零级区域及第一零级区域的亮度均值,零级区域为亮度最大的区域。
零级区域是指散斑图中亮度值最大的区域。在光学元件发生异常的情况下,由于激光的光学特性,会导致图像中心区域的亮度异常。具体地,受拍摄距离的影响,散斑图的零级区域可能位于散斑图的中心,也可能位于散斑图的中心偏右的位置。具体地,电子设备可以通过设定预设大小的搜索框对散斑图进行遍历,将亮度值最大的搜索框所在的区域作为散斑图的第一零级区域,并获取第一零级区域的亮度均值。第一零级区域的亮度均值是指第一零级区域内各像素点的亮度的平均值。
电子设备通过搜索散斑图中亮度最大的区域作为散斑图的零级区域,并获取零级区域的亮度均值。
步骤206,检测散斑图在第一零级区域周围的第一周围区域的亮度均值。
散斑图在第一零级区域周围的第一周围区域是指散斑图中除了零级区域所在的区域外的其他区域。具体地,电子设备可以检测散斑图在第一零级区域周围的全部区域的亮度均值,还可以通过提取第一零级区域周围的部分区域,获取第一零级区域周围的部分区域的亮度均值。电子设备对零级区域周围的区域的提取数量可以根据实际应用的需求和检测效果来确定。具体地,电子设备对零级区域周围的区域的提取数量可以为4个、8个、12个等不限于此。
电子设备通过获取散斑图在零级区域周围的区域,检测零级区域周围的区域各像素点的亮度值,并计算各像素点的亮度的平均值作为零级区域周围的区域的亮度均值。
步骤208,获取红外图中与散斑图的第一零级区域对应的第二零级区域的亮度均值,以及与散斑图的第一周围区域对应的第二周围区域的亮度均值。
电子设备获取红外图中与散斑图的第一零级区域所在位置相对应的第二零级区域的亮度均值。电子设备获取红外图中与散斑图的第一周围区域所在位置相对应的第二周围区域的亮度均值。具体地,当电子设备获取散斑图的第一零级区域外的全部区域作为散斑图的第一周围区域时,则对应的获取红外图的第二零级区域外的全部区域的亮度均值作为第二周围区域的亮度均值。当电子设备获取散斑图在第一零级区域外的部分区域作为第一周围区域时,则对应的获取红外图的第二零级区域外的部分区域的亮度均值。电子设备对红外图的第二周围区域的提取数量、提取区域大小等与散斑图第一周围区域的提取数量、提取区域大小等一一对应。电子设备通过获取红外图中与第一零级区域和第一周围区域所在位置相对应的各像素点的亮度值计算第二零级区域和第二周围区域的亮度均值。
步骤210,当第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值且零级区域比值大于周围区域比值时,则判定光学元件异常;其中,零级区域比值为第一零级区域的亮度均值与第二零级区域的亮度均值的比值,周围区域比值为第一周围区域的亮度均值与第二周围区域的亮度均值的比值。
第一预设值可以根据实验数据和实际应用效果来确定。第一预设值可以是当光学元件上存在穿孔或存在划痕时,投射器中光源产生的激光通过光学元件照射到物体上时所形成的散斑图中零级区域与周围区域的亮度均值的比值。电子设备在当第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值且零级区域比值大于周围区域比值时,则判定光学元件异常,此时光学元件可能存在穿孔或划痕,电子设备可以对用户进行提醒并将检测结果上传至服务器。当第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值但零级区域比值没有大于周围区域比值时,此时第一零级区域的亮度均值与第一周围区域亮度均值的比值大于第一预设值可能是由于散斑图中存在对红外光发射率高的材质等原因引起的,则电子设备判定光学元件没有异常。
本申请实施例中的光学元件检测方法,通过获取红外图和投射器中光源产生的激光通过光学元件后所形成的散斑图,根据散斑图获取散斑图的第一零级区域及对应的第一零级区域亮度均值,检测散斑图在第一零级区域周围的第一周围的亮度均值,获取红外图中与散斑图的第一零级区域和第一周围区域对应的第二零级区域和第二周围区域的亮度均值,当第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值且第一零级区域与第二零级区域的亮度均值的比值大于第一周围区域与第二周围区域的亮度均值的比值时,则判定光学元件异常。由于可以根据散斑图的零级区域与周围区域的亮度均值及红外图对应的零级区域和周围区域的亮度均值对光学元件进行检测,避免因存在红外发射率高的物体等引起的散斑图零级区域亮度变化影响光学元件的检测结果,可以提高检测的准确性。
在一个实施例中,提供了一种光学元件检测方法中获取散斑图的零级区域及零级区域的亮度均值的过程可以包括:
步骤302,采用预设大小的定位框在散斑图的预设区域内遍历。
散斑图的预设区域是指预先设定的零级区域所在区域的最大范围。预设大小的定位框是指根据零级区域的大小设定的搜索框。具体地,散斑图的预设区域的大小和定位框的预设大小可以根据实验数据或实际应用中的需求来确定。定位框在散斑图的预设区域内遍历方式可以是横向遍历,也可以是竖向遍历。电子设备还可以根据遍历过程中定位框所在位置的亮度值预先判断零级区域所在的位置,根据判断结果确定在预设区域内不同区域的遍历次数。例如,一张1000*1000像素的散斑图中,预设区域可以是像素值为600*600且中心点与散斑图重合的区域,预设大小的定位框可以是像素值为30*30的定位框,电子设备可以将30*30的定位框在预设区域内遍历,若正常情况下横向遍历的次数为100次,在一次横向遍历的过程中,电子设备根据遍历过程中定位框位于右侧的亮度值大于定位框位于左侧时的亮度值,可以判断零级区域所在位置为散斑图的右侧,并根据判断结果对遍历次数进行调整,减少左侧区域的遍历次数。
步骤304,将亮度均值最大的定位框所在区域作为散斑图的第一零级区域。
电子设备采用预设大小的定位框在散斑图的预设区域的遍历并获取遍历过程中定位框所在区域的亮度均值,将亮度均值最大的定位框所在的区域作为散斑图的第一零级区域,同时获取第一零级区域的亮度均值。
通过采用预设大小的定位框在散斑图的预设区域内遍历,将亮度值最大的定位框所在区域作为散斑图的第一零级区域并获取第一零级区域的亮度均值,可以提高获取零级区域的效率。
如图4所示,在一个实施例中,提供的一种光学元件检测方法还可以包括:
步骤402,获取散斑图的第一零级区域周围的第一数量个区域。
具体地,零级区域周围的第一数量个区域可以是与零级区域的大小相同的区域,也可以是与零级区域大小的不同的区域,例如可以是比零级区域大小大一倍的区域,也可以是比零级区域小的区域等。电子设备获取零级区域的周围区域的第一数量可以4个、8个、10个等不限于此。
步骤404,当第一零级区域的亮度均值与第一数量个区域的亮度均值的比值均大于第一预设值时,则判定第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值。
当电子设备获取第一零级区域周围的区域有多个时,若第一零级区域的亮度均值与周围多个区域的亮度均值均大于第一预设值时,则判定第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值。当第一零级区域的亮度均值与周围多个区域的亮度均值的比值有一个小于第一预设值,则判定第一零级区域的亮度均值与第一周围区域的亮度均值不大于第一预设值。例如,电子设备获取第一零级区域周围的4个区域的亮度均值分别为80、88、93、100,第一预设值为2,若第一零级区域的亮度均值为220,则第一零级区域与周围4个区域的亮度均值的比值分别为2.75、2.50、2.44、2.2,均大于第一预设值,则判定第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值,若第一零级区域的亮度均为180,则第一零级区域与周围4个区域的亮度均值的比值分别为2.25、2.05、1.94、1.8,由于存在亮度均值的比值小于2,则判定第一零级区域的亮度均值与第一周围区域的亮度均值不大于第一预设值。
通过提取第一零级区域周围的第一数量个区域,当零级区域的亮度均值与第一数量个区域的亮度均值的比值大于第一预设值时,则判定第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值,可以避免因曝光时间、物体反射等造成部分周围区域的亮度过大而检测错误的问题,提高检测的准确性。
在一个实施例中,提供的一种光学元件检测方法中获取散斑图的第一零级区域周围的第一数量个区域包括:获取与散斑图的第一零级区域的水平距离和垂直距离不超过0的第一数量个区域
与散斑图的第一零级区域的水平距离不超过0是指在水平方向上,获取区域的边缘与第一零级区域或第一零级区域的边缘重合。同样的,与散斑图的第一零级区域的垂直距离不超过0是指在垂直方向上,获取区域的边缘与第一零级区域或第一零级区域的边缘重合。获取与散斑图的第一零级区域的水平距离和垂直距离不超过0的第一数量个区域所在的位置不可以与第一零级区域所在的位置重合。电子设备获取的第一个数量个区域可以是2个区域、4个区域、8个区域等不限于此。电子设备获取的第一数量个区域的大小可以与第一零级区域的大小一致,也可以大于或小于第一零级区域的大小。当第一零级区域的亮度均值与第一数量个区域的亮度均值均大于第一预设值时,则判定第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值。当第一零级区域的亮度均值与第一数量个区域的亮度均值的比值中有一个小于第一预设值,则判定第一零级区域的亮度均值与第一周围区域的亮度均值不大于第一预设值。
如图5所示,为一个实施例中电子设备获取与散斑图的第一零级区域周围的区域的示意图。第一零级区域502为散斑图中亮度均值最大的区域,周围8个区域504为与第一零级区域的水平距离和垂直距离不超过0、且大小与第一零级区域一致的8个区域。电子设备可以检测周围8个区域504的亮度均值,当周围8个区域504的亮度均值与第一零级区域502的亮度均值的比值均大于第一预设值时,则判定第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值。在其他实施例中,电子设备获取的第一周围区域可以是其中的4个区域、6个区域等不限于此。
如图6所示,在一个实施例中,提供的一种光学元件检测方法中获取红外图的第二零级区域和第二周围区域的亮度均值的过程包括:
步骤602,根据红外图获取与散斑图的第一零级区域和第一周围区域对应的第二零级区域和第二周围区域。
电子设备获取红外图中与散斑图的第一零级区域所在位置相对应的第二零级区域。红外图的第二零级区域的位置信息与散斑图的第一零级区域的位置信息是一一对应的。电子设备获取红外图中与散斑图的第一周围区域所在位置相对应的第二周围区域。当电子设备获取散斑图的第一零级区域外的全部区域作为散斑图的第一周围区域时,则对应的获取红外图的第二零级区域外的全部区域作为红外图的第二周围区域。当电子设备获取散斑图在第一零级区域外的部分区域作为第一周围区域时,则对应的获取红外图的第二零级区域外的部分区域作为红外图的第二周围区域。电子设备对红外图的第二周围区域的提取数量、提取区域大小等与散斑图第一周围区域的提取数量、提取区域大小等一一对应。
步骤604,检测第二零级区域和第二周围区域的亮度均值。
亮度均值是指所要检测区域的全部像素点的亮度平均值。电子设备在获取红外图的第二零级区域和第二周围区域后,可以获取第二零级区域中各像素点的亮度值计算第二零级区域的亮度均值,及获取第二周围区域中各像素点的亮度值计算第二周围区域的亮度均值。
在一个实施例中,提供的一种光学元件检测方法中,判定光学元件异常之后,还可以包括:当判定光学元件异常时,将光学元件的异常次数增加1。
光学元件异常次数是指电子设备根据散斑图对光学元件进行异常检测时,判定光学元件异常的次数。电子设备获取散斑图对光学元件进行检测,可以在接收三维图像采集请求时获取散斑图进行异常检测,还可以在人脸识别过程中活体检测通过时获取散斑图进行异常检测,还可以在活体检测不通过时在人脸信息与摄像头大于预设距离值时获取散斑图对光学元件进行异常检测等。电子设备可以记录不同情况下对光学元件的异常检测结果。
当判定光学元件异常时,电子设备可以记录光学元件的异常次数,将光学元件异常次数增加1。
如图7所示,在一个实施例中,提供的一种光学元件检测方法还可以包括:
步骤702,当判定光学元件异常时,将光学元件的异常次数增加1。
步骤704,当光学元件的异常次数大于预设次数时,禁止投射器的使用。
投射器包括光源、准直镜和光学元件。激光通过光学元件照射到物体上形成散斑图像,当光学元件损坏时,照射到物体的激光强度增加,当照射到人眼时会对人眼造成严重的伤害。电子设备在光学元件异常次数大于预设次数时,禁止投射器的使用,可以减少因光学元件异常而造成对人眼的伤害。当光学元件异常次数小于预设次数时,电子设备可以对用户发出光学元件损坏提醒,减少用户对三维图像采集功能或人脸识别功能等的使用,并记录光学元件的异常次数,将光学元件异常的结果上传至服务器。预设次数可以根据实际使用过程中的需求来确定。具体地,为了提高使用安全性,预设次数可以为一个较小的数值,例如3次,5次不限于此。
当光学元件的异常次数大于预设次数时,禁止投射器的使用。由于可以在多次检测确定光学元件异常并且在异常次数超过预设次数时禁止投射器的使用,可以在兼顾检测准确性的同时提高投射器的使用安全性。
在一个实施例中,提供了一种光学元件检测方法,实现该方法的具体步骤如下所述:
首先,电子设备获取红外图和散斑图,散斑图是投射器中光源产生的激光通过光学元件后所形成的图像。红外图是指电子设备通过控制泛光灯发射红外光照射到物体上,并通过激光摄像头根据反射回的光线采集的红外图像。泛光灯是可发生红外光的面光源。散斑图是指激光摄像头采集的由投射器中光源产生的激光通过光学元件照射到物体上所形成的散斑图像。电子设备的投射器可以是镭射灯。投射器包括光源、准直镜和光学元件。其中,光源可为面发射激光、垂直腔面激光阵列。光学元件可以是DOE、毛玻璃或者里面两者组合等。激光摄像头包括图像传感器、透镜等,图像传感器可以是CMOS、CCD等。
接着,电子设备根据散斑图获取散斑图的第一零级区域及第一零级区域的亮度均值,零级区域为亮度最大的区域。在光学元件发生异常的情况下,由于激光的光学特性,会导致图像中心区域的亮度异常。受拍摄距离的影响,散斑图的零级区域可能位于散斑图的中心,也可能位于散斑图的中心偏右的位置。电子设备可以通过设定预设大小的搜索框对散斑图进行遍历,将亮度值最大的搜索框所在的区域作为散斑图的第一零级区域,并获取第一零级区域的亮度均值。第一零级区域的亮度均值是指第一零级区域内各像素点的亮度的平均值。
可选地,电子设备可以采用预设大小的定位框在散斑图的预设区域内遍历,将亮度值最大的定位框所在区域作为散斑图的第一零级区域。散斑图的预设区域是指预先设定的零级区域所在区域的最大范围。预设大小的定位框是指根据零级区域的大小设定的搜索框。定位框在散斑图的预设区域内遍历方式可以是横向遍历,也可以是竖向遍历。电子设备还可以根据遍历过程中定位框所在位置的亮度值预先判断零级区域所在的位置,根据判断结果确定在预设区域内不同区域的遍历次数,并获取遍历过程中定位框所在区域的亮度值,将亮度值最大的定位框所在的区域作为散斑图的第一零级区域。
可选地,电子设备还可以获取散斑图在预设区域内的亮度值,缩小预设区域,并获取缩小后的预设区域的亮度值,当缩小后的预设区域的亮度值与相邻上一次预设区域的亮度值差值小于预设差值时,将缩小后的预设区域作为散斑图的第一零级区域。散斑图的预设区域是预先设定的散斑图中零级区域所在区域的最大范围。电子设备可以通过获取散斑图在预设区域内各个像素点的亮度值来获取散斑图在预设区域内的亮度值,循环缩小预设区域从而缩小零级区域所在区域范围,当缩小后的预设区域的亮度值与相邻上一次预设区域的亮度值差值小于预设差值时,也就是缩小后的预设区域的亮度值与相邻上一次预设区域的亮度值相同或接近,将缩小后的预设区域作为散斑图的第一零级区域。
接着,电子设备检测散斑图在第一零级区域周围的第一周围区域的亮度均值。散斑图在第一零级区域周围的第一周围区域是指散斑图中除了零级区域所在的区域外的其他区域。具体地,电子设备可以检测散斑图在第一零级区域周围的全部区域的亮度均值,还可以通过提取第一零级区域周围的部分区域,获取第一零级区域周围的部分区域的亮度均值。电子设备对零级区域周围的区域的提取数量可以根据实际应用的需求和检测效果来确定。具体地,电子设备对零级区域周围的区域的提取数量可以为4个、8个、12个等不限于此。
可选地,电子设备可以获取散斑图的第一零级区域周围的第一数量个区域。第一零级区域周围的第一数量个区域可以是与第一零级区域的大小相同的区域,也可以是与第一零级区域大小的不同的区域,例如可以是比第一零级区域大小大一倍的区域,也可以是比第一零级区域小的区域等。
可选地,电子设备还可以获取与散斑图的第一零级区域的水平距离和垂直距离不超过0的第一数量个区域。与散斑图的第一零级区域的水平距离不超过0是指在水平方向上,获取区域的边缘与第一零级区域或第一零级区域的边缘重合。同样的,与散斑图的零级区域的垂直距离不超过0是指在垂直方向上,获取区域的边缘与第一零级区域或第一零级区域的边缘重合。获取与散斑图的第一零级区域的水平距离和垂直距离不超过0的第一数量个区域所在的位置不可以与第一零级区域所在的位置重合。
接着,电子设备获取红外图中与散斑图的第一零级区域对应的第二零级区域的亮度均值,以及与散斑图的第一周围区域对应的第二周围区域的亮度均值。电子设备通过获取红外图中与第一零级区域和第一周围区域所在位置相对应的各像素点的亮度值计算第二零级区域和第二周围区域的亮度均值。具体地,当电子设备获取散斑图的第一零级区域外的全部区域作为散斑图的第一周围区域时,则对应的获取红外图的第二零级区域外的全部区域的亮度均值作为第二周围区域的亮度均值。当电子设备获取散斑图在第一零级区域外的部分区域作为第一周围区域时,则对应的获取红外图的第二零级区域外的部分区域的亮度均值。电子设备对红外图的第二周围区域的提取数量、提取区域大小等与散斑图第一周围区域的提取数量、提取区域大小等一一对应。
可选地,电子设备根据红外图获取与散斑图的第一零级区域和第一周围区域对应的第二零级区域和第二周围区域,检测第二零级区域和第二周围区域的亮度均值。电子设备获取红外图中与散斑图的第一零级区域所在位置相对应的第二零级区域。红外图的第二零级区域的位置信息与散斑图的第一零级区域的位置信息是一一对应的。电子设备获取红外图中与散斑图的第一周围区域所在位置相对应的第二周围区域。当电子设备获取散斑图的第一零级区域外的全部区域作为散斑图的第一周围区域时,则对应的获取红外图的第二零级区域外的全部区域作为红外图的第二周围区域。当电子设备获取散斑图在第一零级区域外的部分区域作为第一周围区域时,则对应的获取红外图的第二零级区域外的部分区域作为红外图的第二周围区域。亮度均值是指所要检测区域的全部像素点的亮度平均值。电子设备在获取红外图的第二零级区域和第二周围区域后,可以获取第二零级区域中各像素点的亮度值计算第二零级区域的亮度均值,及获取第二周围区域中各像素点的亮度值计算第二周围区域的亮度均值。
接着,当第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值且零级区域比值大于周围区域比值时,电子设备判定光学元件异常;其中,零级区域比值为第一零级区域的亮度均值与第二零级区域的亮度均值的比值,周围区域比值为第一周围区域的亮度均值与第二周围区域的亮度均值的比值。第一预设值可以是当光学元件上存在穿孔或存在划痕时,投射器中光源产生的激光通过光学元件照射到物体上时所形成的散斑图中零级区域与周围区域的亮度均值的比值。电子设备在当第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值且零级区域比值大于周围区域比值时,则判定光学元件异常,此时光学元件可能存在穿孔或划痕,电子设备可以对用户进行提醒并将检测结果上传至服务器。当第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值但零级区域比值没有大于周围区域比值时,此时第一零级区域的亮度均值与第一周围区域亮度均值的比值大于第一预设值可能是由于散斑图中存在对红外光发射率高的材质等原因引起的,则电子设备判定光学元件没有异常。
可选地,电子设备还可以在当第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值且零级区域比值与周围区域比值的比值比大于第二预设值时,则判定光学元件异常。第二预设值可以根据实验数据的确定,例如可以是1.1、1.2等。在第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值且零级区域比值与周围区域比值的比值比大于第二预设值时,判定光学元件异常,可以减少因环境影响或检测误差造成的散斑图第一零级区域比红外图第二零级区域亮的情况,提高检测的准确性。
可选地,当判定光学元件异常时,电子设备可以将光学元件的异常次数增加1。光学元件异常次数是指电子设备根据散斑图对光学元件进行异常检测时,判定光学元件异常的次数。电子设备获取散斑图对光学元件进行检测,可以在接收三维图像采集请求时获取散斑图进行异常检测,还可以在人脸识别过程中活体检测通过时获取散斑图进行异常检测,还可以在活体检测不通过时在人脸信息与摄像头大于预设距离值时获取散斑图对光学元件进行异常检测等。电子设备可以记录不同情况下对光学元件的异常检测结果。
可选地,电子设备还可以在当光学元件的异常次数大于预设次数时,禁止投射器的使用。投射器包括光源、准直镜和光学元件。预设次数可以根据实际使用过程中的需求来确定。具体地,为了提高使用安全性,预设次数可以为一个较小的数值,例如3次,5次不限于此。激光通过光学元件照射到物体上形成散斑图像,当光学元件损坏时,照射到物体的激光强度增加,当照射到人眼时会对人眼造成严重的伤害。电子设备在光学元件异常次数大于预设次数时,禁止投射器的使用,可以减少因光学元件异常而造成对人眼的伤害。当光学元件异常次数小于预设次数时,电子设备可以对用户发出光学元件损坏提醒,减少用户对三维图像采集功能或人脸识别功能等的使用,并记录光学元件的异常次数,将光学元件异常的结果上传至服务器。
应该理解的是,虽然图2-5、7的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,图2-5、7中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
图8为一个实施例的光学元件检测装置的结构框图。如图8所示,该装置包括:
图像获取模块802,用于获取红外图和散斑图,散斑图是投射器中光源产生的激光通过光学元件后所形成的图像;
零级区域获取模块804,用于根据散斑图获取散斑图的第一零级区域及第一零级区域的亮度均值,零级区域为亮度最大的区域;
第一亮度检测模块806,用于检测散斑图在第一零级区域周围的第一周围区域的亮度均值;
第二亮度检测模块808,用于获取红外图中与散斑图的第一零级区域对应的第二零级区域的亮度均值,以及与散斑图的第一周围区域对应的第二周围区域的亮度均值;
判定模块810,用于当第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值且零级区域比值大于周围区域比值时,则判定光学元件异常;其中,零级区域比值为第一零级区域的亮度均值与第二零级区域的亮度均值的比值,周围区域比值为第一周围区域的亮度均值与第二周围区域的亮度均值的比值。
在一个实施例中,零级区域获取模块804还可以用于采用预设大小的定位框在散斑图的预设区域内遍历,将亮度均值最大的定位框所在的区域作为散斑图的第一零级区域。
在一个实施例中,第一亮度检测模块806还可以用于获取散斑图的第一零级区域周围的第一数量个区域,判定模块810还用于当第一零级区域的亮度均值与第一数量个区域的亮度均值的比值均大于第一预设值时,则判定第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值。
在一个实施例中,第一亮度检测模块806还可以用于获取与散斑图的第一零级区域的水平距离和垂直距离不超过0的第一数量个区域。
在一个实施例中,第二亮度检测模块808还可以用于根据红外图获取与散斑图的第一零级区域和第一周围区域对应的第二零级区域和第二周围区域,检测第二零级区域和第二周围区域的亮度均值。
在一个实施例中,提供的一种光学元件检测装置还包括异常处理模块812异常处理模块用于当判定光学元件异常时,将光学元件的异常次数增加1。
在一个实施例中,异常处理模块812可以用于当光学元件的异常次数大于预设次数时,禁止投射器的使用。
上述光学元件检测装置可以获取红外图和投射器中光源产生的激光通过光学元件后所形成的散斑图,根据散斑图获取散斑图的第一零级区域及对应的第一零级区域亮度均值,检测散斑图在第一零级区域周围的第一周围的亮度均值,获取红外图中与散斑图的第一零级区域和第一周围区域对应的第二零级区域和第二周围区域的亮度均值,当第一零级区域的亮度均值与第一周围区域的亮度均值的比值大于第一预设值且第一零级区域与第二零级区域的亮度均值的比值大于第一周围区域与第二周围区域的亮度均值的比值时,则判定光学元件异常。由于可以根据散斑图的零级区域与周围区域的亮度均值及红外图对应的零级区域和周围区域的亮度均值对光学元件进行检测,可以提高检测的准确性。
上述光学元件检测装置中各个模块的划分仅用于举例说明,在其他实施例中,可将光学元件检测装置按照需要划分为不同的模块,以完成上述光学元件检测装置的全部或部分功能。
关于光学元件检测装置的具体限定可以参见上文中对于光学元件检测方法的限定,在此不再赘述。上述光学元件检测装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于电子设备中的处理器中,也可以以软件形式存储于电子设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
本申请实施例中提供的光学元件检测装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时,实现本申请实施例中所描述方法的步骤。
本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当所述计算机可执行指令被一个或多个处理器执行时,使得所述处理器执行光学元件检测方法的步骤。
一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行光学元件检测方法。
本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路,图像处理电路可以利用硬件和/或软件组件实现,可包括定义ISP(Image Signal Processing,图像信号处理)管线的各种处理单元。图9为一个实施例中图像处理电路的示意图。如图9所示,为便于说明,仅示出与本申请实施例相关的图像处理技术的各个方面。
如图9所示,图像处理电路包括ISP处理器940和控制逻辑器950。成像设备910捕捉的图像数据首先由ISP处理器940处理,ISP处理器940对图像数据进行分析以捕捉可用于确定和/或成像设备910的一个或多个控制参数的图像统计信息。成像设备910可包括具有一个或多个透镜912和图像传感器914的照相机。图像传感器914可包括色彩滤镜阵列(如Bayer滤镜),图像传感器914可获取用图像传感器914的每个成像像素捕捉的光强度和波长信息,并提供可由ISP处理器940处理的一组原始图像数据。传感器920(如陀螺仪)可基于传感器920接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器940。传感器920接口可以利用SMIA(Standard Mobile Imaging Architecture,标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
此外,图像传感器914也可将原始图像数据发送给传感器920,传感器920可基于传感器920接口类型把原始图像数据提供给ISP处理器940,或者传感器920将原始图像数据存储到图像存储器930中。
ISP处理器940按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,ISP处理器940可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
ISP处理器940还可从图像存储器930接收图像数据。例如,传感器920接口将原始图像数据发送给图像存储器930,图像存储器930中的原始图像数据再提供给ISP处理器940以供处理。图像存储器930可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自图像传感器914接口或来自传感器920接口或来自图像存储器930的原始图像数据时,ISP处理器940可进行一个或多个图像处理操作,如时域滤波。处理后的图像数据可发送给图像存储器930,以便在被显示之前进行另外的处理。ISP处理器940从图像存储器930接收处理数据,并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。ISP处理器940处理后的图像数据可输出给显示器970,以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit,图形处理器)进一步处理。此外,ISP处理器940的输出还可发送给图像存储器930,且显示器970可从图像存储器930读取图像数据。在一个实施例中,图像存储器930可被配置为实现一个或多个帧缓冲器。此外,ISP处理器940的输出可发送给编码器/解码器960,以便编码/解码图像数据。编码的图像数据可被保存,并在显示于显示器970设备上之前解压缩。编码器/解码器960可由CPU或GPU或协处理器实现。
ISP处理器940确定的统计数据可发送给控制逻辑器950单元。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜912阴影校正等图像传感器914统计信息。控制逻辑器950可包括执行一个或多个例程(如固件)的处理器和/或微控制器,一个或多个例程可根据接收的统计数据,确定成像设备910的控制参数及ISP处理器940的控制参数。例如,成像设备910的控制参数可包括传感器920控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、透镜912控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵,以及透镜912阴影校正参数。
在本申请实施例中,该电子设备执行存储在存储器上的计算机程序时实现本申请实施例中光学元件检测方法的步骤。
本申请所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM),它用作外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种光学元件检测方法,所述方法包括:
获取红外图和散斑图,所述散斑图是激光摄像头采集的由投射器中光源产生的激光通过光学元件后所形成的图像,所述红外图是激光摄像头根据泛光灯发射红外光照射到物体上反射回的光线采集的红外图像;
根据所述散斑图获取所述散斑图的第一零级区域及第一零级区域的亮度均值,所述零级区域为亮度最大的区域;
检测所述散斑图在所述第一零级区域周围的第一周围区域的亮度均值,所述第一周围区域是所述散斑图中除了所述第一零级区域外的区域;
获取所述红外图中与所述散斑图的第一零级区域对应的第二零级区域的亮度均值,以及与所述散斑图的第一周围区域对应的第二周围区域的亮度均值;
当所述第一零级区域的亮度均值与所述第一周围区域的亮度均值的比值大于第一预设值且零级区域比值大于周围区域比值时,则判定所述光学元件异常;其中,所述零级区域比值为所述第一零级区域的亮度均值与第二零级区域的亮度均值的比值,所述周围区域比值为所述第一周围区域的亮度均值与第二周围区域的亮度均值的比值。
2.根据权利要求1所述的方法,其特征在于,所述根据所述散斑图获取所述散斑图的第一零级区域及第一零级区域的亮度均值,所述零级区域为亮度最大的区域,包括:
采用预设大小的定位框在所述散斑图的预设区域内遍历;
将亮度均值最大的定位框所在的区域作为所述散斑图的第一零级区域。
3.根据权利要求1所述的方法,其特征在于,所述方法还包括:
获取所述散斑图的第一零级区域周围的第一数量个区域;
当所述第一零级区域的亮度均值与所述第一数量个区域的亮度均值的比值均大于第一预设值时,则判定所述第一零级区域的亮度均值与所述第一周围区域的亮度均值的比值大于第一预设值。
4.根据权利要求3所述的方法,其特征在于,所述获取所述散斑图的第一零级区域周围的第一数量个区域,包括:
获取与所述散斑图的第一零级区域的水平距离和垂直距离不超过0的第一数量个区域。
5.根据权利要求1所述的方法,其特征在于,所述获取所述红外图与所述散斑图的第一零级区域和第一周围区域对应的第二零级区域的亮度均值和第二周围区域的亮度均值,包括:
根据所述红外图获取与所述散斑图的第一零级区域和第一周围区域对应的第二零级区域和第二周围区域;
检测所述第二零级区域和第二周围区域的亮度均值。
6.根据权利要求1所述的方法,其特征在于,所述方法还包括:
当判定所述光学元件异常时,将所述光学元件的异常次数增加1。
7.根据权利要求6所述的方法,其特征在于,所述方法还包括:
当所述光学元件的异常次数大于预设次数时,禁止对所述投射器的使用。
8.一种光学元件检测装置,其特征在于,所述装置包括:
图像获取模块,用于获取红外图和散斑图,所述散斑图是激光摄像头采集的由投射器中光源产生的激光通过光学元件后所形成的图像,所述红外图是激光摄像头根据泛光灯发射红外光照射到物体上反射回的光线采集的红外图像;
零级区域获取模块,用于根据所述散斑图获取所述散斑图的第一零级区域及第一零级区域的亮度均值,所述零级区域为亮度最大的区域;
第一亮度检测模块,用于检测所述散斑图在所述第一零级区域周围的第一周围区域的亮度均值,所述第一周围区域是所述散斑图中除了所述第一零级区域外的区域;
第二亮度检测模块,用于获取所述红外图中与所述散斑图的第一零级区域对应的第二零级区域的亮度均值,以及与所述散斑图的第一周围区域对应的第二周围区域的亮度均值;
判定模块,用于当所述第一零级区域的亮度均值与所述第一周围区域的亮度均值的比值大于第一预设值且零级区域比值大于周围区域比值时,则判定所述光学元件异常;其中,所述零级区域比值为所述第一零级区域的亮度均值与第二零级区域的亮度均值的比值,所述周围区域比值为所述第一周围区域的亮度均值与第二周围的亮度均值的比值。
9.一种电子设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至7中任一项所述的方法的步骤。
Priority Applications (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810403817.1A CN108716982B (zh) | 2018-04-28 | 2018-04-28 | 光学元件检测方法、装置、电子设备和存储介质 |
EP19736569.5A EP3567851A4 (en) | 2018-03-12 | 2019-02-18 | PROJECTOR, DETECTION METHOD AND DEVICE THEREFOR, IMAGE DETECTING DEVICE, ELECTRONIC DEVICE AND READABLE STORAGE MEDIUM |
PCT/CN2019/075386 WO2019174435A1 (zh) | 2018-03-12 | 2019-02-18 | 投射器及其检测方法和装置、图像获取装置、电子设备、可读存储介质 |
TW108108335A TWI696391B (zh) | 2018-03-12 | 2019-03-12 | 投射器及其檢測方法和裝置、圖像獲取裝置、電子設備、可讀儲存媒介 |
US16/684,299 US11348217B2 (en) | 2018-03-12 | 2019-11-14 | Projector, detection method thereof, and electronic device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810403817.1A CN108716982B (zh) | 2018-04-28 | 2018-04-28 | 光学元件检测方法、装置、电子设备和存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108716982A CN108716982A (zh) | 2018-10-30 |
CN108716982B true CN108716982B (zh) | 2020-01-10 |
Family
ID=63899485
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810403817.1A Expired - Fee Related CN108716982B (zh) | 2018-03-12 | 2018-04-28 | 光学元件检测方法、装置、电子设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108716982B (zh) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3567851A4 (en) | 2018-03-12 | 2020-07-29 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | PROJECTOR, DETECTION METHOD AND DEVICE THEREFOR, IMAGE DETECTING DEVICE, ELECTRONIC DEVICE AND READABLE STORAGE MEDIUM |
CN109726708B (zh) * | 2019-03-13 | 2021-03-23 | 东软睿驰汽车技术(沈阳)有限公司 | 一种车道线识别方法及装置 |
CN109948504B (zh) * | 2019-03-13 | 2022-02-18 | 东软睿驰汽车技术(沈阳)有限公司 | 一种车道线识别方法及装置 |
CN110012206A (zh) * | 2019-05-24 | 2019-07-12 | Oppo广东移动通信有限公司 | 图像获取方法、图像获取装置、电子设备和可读存储介质 |
WO2020237658A1 (zh) | 2019-05-31 | 2020-12-03 | Oppo广东移动通信有限公司 | 电子设备的控制方法、电子设备和计算机可读存储介质 |
CN112784649B (zh) * | 2019-11-11 | 2024-08-06 | 北京君正集成电路股份有限公司 | 一种红外活体检测设备及检测其是否正常工作的方法 |
CN113138067B (zh) * | 2021-04-20 | 2024-05-03 | 奥比中光科技集团股份有限公司 | 一种衍射光学器件的检测方法、装置及设备 |
CN113515022B (zh) * | 2021-07-28 | 2023-12-01 | 华虹半导体(无锡)有限公司 | 光刻机照明系统损伤检测方法 |
CN113936315B (zh) * | 2021-10-14 | 2022-03-25 | 北京的卢深视科技有限公司 | Doe脱落检测方法、装置、电子设备和存储介质 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013188520A2 (en) * | 2012-06-12 | 2013-12-19 | Yale University | Multimode optical fiber spectrometer |
US10078049B2 (en) * | 2016-05-18 | 2018-09-18 | The Boeing Company | Apparatus, system, and method for non-destructive testing of an object using a laser beam directed out of a plurality of apertures |
CN106529545B (zh) * | 2016-09-26 | 2019-11-26 | 北京林业大学 | 一种基于图像特征描述的散斑图像质量识别方法及系统 |
CN107911584A (zh) * | 2017-11-28 | 2018-04-13 | 信利光电股份有限公司 | 一种图像采集设备和一种终端 |
-
2018
- 2018-04-28 CN CN201810403817.1A patent/CN108716982B/zh not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
CN108716982A (zh) | 2018-10-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108716982B (zh) | 光学元件检测方法、装置、电子设备和存储介质 | |
CN108600740B (zh) | 光学元件检测方法、装置、电子设备和存储介质 | |
CN108716983B (zh) | 光学元件检测方法和装置、电子设备、存储介质 | |
EP3849170B1 (en) | Image processing method, electronic device, and computer-readable storage medium | |
CN109767467B (zh) | 图像处理方法、装置、电子设备和计算机可读存储介质 | |
CN108769509B (zh) | 控制摄像头的方法、装置、电子设备及存储介质 | |
CN107948519B (zh) | 图像处理方法、装置及设备 | |
CN107977940B (zh) | 背景虚化处理方法、装置及设备 | |
TWI696391B (zh) | 投射器及其檢測方法和裝置、圖像獲取裝置、電子設備、可讀儲存媒介 | |
CN108734676B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN108111749B (zh) | 图像处理方法和装置 | |
CN113766125B (zh) | 对焦方法和装置、电子设备、计算机可读存储介质 | |
KR102281149B1 (ko) | 고 조도 환경 및 저 조도 환경에서 동작 가능한 시점 추적 장치 및 그 방법 | |
CN109712192B (zh) | 摄像模组标定方法、装置、电子设备及计算机可读存储介质 | |
EP3614659A1 (en) | Image processing method, electronic apparatus, and computer-readable storage medium | |
CN108717530B (zh) | 图像处理方法、装置、计算机可读存储介质和电子设备 | |
CN108924426B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN109040745B (zh) | 摄像头自校准方法和装置、电子设备、计算机存储介质 | |
CN107948617B (zh) | 图像处理方法、装置、计算机可读存储介质和计算机设备 | |
WO2020024576A1 (zh) | 摄像头校准方法和装置、电子设备、计算机可读存储介质 | |
CN108198175B (zh) | 检测方法、检测装置、计算机设备和计算机可读存储介质 | |
CN108760245B (zh) | 光学元件检测方法和装置、电子设备、可读存储介质 | |
CN109559353B (zh) | 摄像模组标定方法、装置、电子设备及计算机可读存储介质 | |
CN108322651A (zh) | 拍摄方法和装置、电子设备、计算机可读存储介质 | |
US11218650B2 (en) | Image processing method, electronic device, and computer-readable storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20200110 |
|
CF01 | Termination of patent right due to non-payment of annual fee |