[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

CN115113752A - 屏幕控制方法、装置、电子设备、存储介质 - Google Patents

屏幕控制方法、装置、电子设备、存储介质 Download PDF

Info

Publication number
CN115113752A
CN115113752A CN202110298287.0A CN202110298287A CN115113752A CN 115113752 A CN115113752 A CN 115113752A CN 202110298287 A CN202110298287 A CN 202110298287A CN 115113752 A CN115113752 A CN 115113752A
Authority
CN
China
Prior art keywords
determining
matrix
distance
target object
obstruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110298287.0A
Other languages
English (en)
Inventor
陈朝喜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Xiaomi Mobile Software Co Ltd
Original Assignee
Beijing Xiaomi Mobile Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Xiaomi Mobile Software Co Ltd filed Critical Beijing Xiaomi Mobile Software Co Ltd
Priority to CN202110298287.0A priority Critical patent/CN115113752A/zh
Publication of CN115113752A publication Critical patent/CN115113752A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/0418—Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Geophysics And Detection Of Objects (AREA)

Abstract

本公开是关于屏幕控制方法、装置、电子设备、存储介质。该方法包括：确定各个接收单元接收到的反射信号的能量值，所述反射信号为所述发射单元发射出的原始信号经遮挡物反射回的信号；确定所述发射单元发射所述原始信号至所述各个接收单元接收到所述反射信号的延迟时长；根据所述能量值和所述延迟时长确定所述遮挡物是否为目标对象，以及根据所述延迟时长确定所述遮挡物与所述电子设备之间的距离；在确定所述遮挡物为所述目标对象且所述遮挡物与所述电子设备之间距离在预设距离范围内的情况下，控制所述触控屏处于灭屏状态。从而，能够准确识别遮挡物是否为会导致触控屏的触控操作的目标对象，避免屏幕误触。

Description

屏幕控制方法、装置、电子设备、存储介质
技术领域
本公开涉及电子产品技术领域，尤其涉及屏幕控制方法、装置、电子设备、存储介质。
背景技术
目前，愈来愈多电子设备采用触控式屏幕取代传统按键与屏幕，以作为电子设备的输入/输出装置。随着触控式屏幕制程愈来愈成熟，电子设备所配备的触控式屏幕尺寸也愈装愈大，因此使用者误触问题愈来愈多。譬如：使用电子设备打电话时，当用户将电子设备贴靠在耳边，使用者通话过程中将脸部贴着电子设备的触控屏会照成挂断电话等误操作，影响通话体验。
发明内容
本公开提供一种屏幕控制方法、装置、电子设备、存储介质，以解决相关技术中的不足。
根据本公开实施例的第一方面，提供了一种屏幕控制方法，应用于电子设备，所述电子设备包括触控屏和TOF传感器，所述TOF传感器包括发射单元和阵列排列的多个接收单元；
所述方法包括：
确定各个接收单元接收到的反射信号的能量值，所述反射信号为所述发射单元发射出的原始信号经遮挡物反射回的信号；
确定所述发射单元发射所述原始信号至所述各个接收单元接收到所述反射信号的延迟时长；
根据所述能量值和所述延迟时长确定所述遮挡物是否为目标对象，以及根据所述延迟时长确定所述遮挡物与所述电子设备之间的距离；
在确定所述遮挡物为所述目标对象且所述遮挡物与所述电子设备之间距离在预设距离范围内的情况下，控制所述触控屏处于灭屏状态。
可选地，根据所述能量值和所述延迟时长确定所述遮挡物是否为目标对象，包括：
根据所述能量值确定所述遮挡物的生理特征信息；
根据所述延迟时长确定所述遮挡物的轮廓信息；
在确定所述遮挡物的轮廓信息与所述目标对象的轮廓信息相匹配且所述遮挡物的生理特征信息与所述目标对象的生理特征信息相匹配的情况下，确定所述遮挡物为所述目标对象。
可选地，根据所述延迟时长确定所述遮挡物的轮廓信息，包括：
根据各个接收单元对应的延迟时长确定各个接收单元与所述遮挡物之间的距离，并构建距离矩阵；
将所述距离矩阵与轮廓模板矩阵的乘积结果确定为所述遮挡物的轮廓信息。
可选地，还包括：
获取多个目标对象的测试距离矩阵，所述测试距离矩阵由所述发射单元发出的原始信号经所述目标对象反射回的发射信号而确定；
对多个测试距离矩阵中对应位置的元素求均值，得到距离均值矩阵；
对所述距离均值矩阵中的元素进行归一化处理，将归一化处理的结果确定为所述轮廓模板矩阵。
可选地，还包括：
根据预设运算规则处理表征所述遮挡物的轮廓信息的轮廓矩阵，所述预设运算规则包括以下至少之一：计算矩阵的行列式、计算矩阵的所有元素之和、计算矩阵的特征值；
在处理结果在预设结果范围内的情况下，确定所述遮挡物的轮廓信息与所述目标对象的轮廓信息相匹配，其中，所述预设结果范围根据预先训练的目标对象识别模型而确定。
可选地，根据所述能量值确定所述遮挡物的生理特征信息，包括：
确定接收到的反射信号的能量值在预设能量范围的目标接收单元的数量，使用所述目标接收单元的数量表征所述生理特征信息。
根据本公开实施例的第二方面，提供了一种屏幕控制装置，应用于电子设备，所述电子设备包括触控屏和TOF传感器，所述TOF传感器包括发射单元和阵列排列的多个接收单元；
所述装置包括：
第一确定模块，用于确定各个接收单元接收到的反射信号的能量值，所述反射信号为所述发射单元发射出的原始信号经遮挡物反射回的信号；以及用于确定所述发射单元发射所述原始信号至所述各个接收单元接收到所述反射信号的延迟时长；
第二确定模块，用于根据所述能量值和所述延迟时长确定所述遮挡物是否为目标对象，以及根据所述延迟时长确定所述遮挡物与所述电子设备之间的距离；
控制模块，用于在确定所述遮挡物为所述目标对象且所述遮挡物与所述电子设备之间距离在预设距离范围内的情况下，控制所述触控屏处于灭屏状态。
可选地，在根据所述能量值和所述延迟时长确定所述遮挡物是否为目标对象，所述第二确定模块用于：
根据所述能量值确定所述遮挡物的生理特征信息；
根据所述延迟时长确定所述遮挡物的轮廓信息；
在确定所述遮挡物的轮廓信息与所述目标对象的轮廓信息相匹配且所述遮挡物的生理特征信息与所述目标对象的生理特征信息相匹配的情况下，确定所述遮挡物为所述目标对象。
可选地，在根据所述延迟时长确定所述遮挡物的轮廓信息时，所述第二确定模块用于：
根据各个接收单元对应的延迟时长确定各个接收单元与所述遮挡物之间的距离，并构建距离矩阵；
将所述距离矩阵与轮廓模板矩阵的乘积结果确定为所述遮挡物的轮廓信息。
可选地，还包括：
获取模块，用于获取多个目标对象的测试距离矩阵，所述测试距离矩阵由所述发射单元发出的原始信号经所述目标对象反射回的发射信号而确定；
处理模块，用于对多个测试距离矩阵中对应位置的元素求均值，得到距离均值矩阵，并对所述距离均值矩阵中的元素进行归一化处理，将归一化处理的结果确定为所述轮廓模板矩阵。
可选地，还包括：
处理模块，用于根据预设运算规则处理表征所述遮挡物的轮廓信息的轮廓矩阵，所述预设运算规则包括以下至少之一：计算矩阵的行列式、计算矩阵的所有元素之和、计算矩阵的特征值；
在处理结果在预设结果范围内的情况下，所述第二确定模块确定所述遮挡物的轮廓信息与所述目标对象的轮廓信息相匹配，其中，所述预设结果范围根据预先训练的目标对象识别模型而确定。
可选地，在根据所述能量值确定所述遮挡物的生理特征信息时，所述第二确定模块用于：
确定接收到的反射信号的能量值在预设能量范围的目标接收单元的数量，使用所述目标接收单元的数量表征所述生理特征信息。
根据本公开实施例的第三方面，提供了一种电子设备，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行所述可执行指令以实现上述任一项所述的屏幕控制方法。
根据本公开实施例的第四方面，提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述任一项所述的屏幕控制方法中的步骤。
本公开的实施例提供的技术方案可以包括以下有益效果：
本公开实施例中，借助阵列式TOF传感器进行遮挡物的识别，相较于相关技术中采用接近传感器识别遮挡物的方式，TOF传感器通过遮挡物的生理特征信息和轮廓信息两个维度的信息能够准确识别遮挡物是否为会导致触控屏的触控操作的目标对象，只有在确定遮挡物为目标对象且遮挡物与电子设备之间距离小于距离阈值的情况下，也即有误触风险的情况下，才控制触控屏处于灭屏状态，避免目标对象误触触控屏。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。
图1是根据本公开的实施例示出的一种电子设备的结构示意图；
图2是根据本公开的实施例示出的一种屏幕控制方法的流程图；
图3是根据本公开的实施例示出的一种屏幕控制方法使用的TOF传感器的工作状态图；
图4是根据本公开的实施例示出的一种图3中步骤202的具体流程图；
图5是根据本公开的实施例示出的一种屏幕控制装置的模块示意图；
图6是根据本公开的实施例示出的一种用于屏幕控制的装置的框图。
具体实施方式
这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。
图1是根据本公开的实施例示出的一种电子设备的结构示意图，电子设备包括触控屏11和TOF(Time of flight，飞行时间)传感器12。触控屏11可以但不限于是利用电流感应进行工作的电容式触控屏。TOF传感器12不限于设置于图1示出的触控屏11的上方，TOF传感器12还可以设于触控屏11的下方或者侧面。TOF传感器12的数量也不限于是图1示出的1个，TOF传感器12的数量还可以是2个、3个、甚至更多。
本公开实施例中，采用阵列式TOF传感器，该阵列式TOF传感器包括至少一个发射单元和阵列排列的多个接收单元，能够实现多点检测，基于该阵列式TOF传感器可以准确识别靠近触控屏的遮挡物是否为目标对象，是否会发生误触情形，并在确定目标对象靠近触控屏且目标对象与电子设备之间的距离在预设距离范围内的情况下，控制触控屏处于灭屏状态，以避免因目标对象太靠近触控屏导致的误触情形发生。其中，目标对象例如可以是人脸等会导致触控屏的触控操作的对象。
下面结合图1，对电子设备的屏幕控制过程进行详细说明。
图2是根据本公开的实施例示出的一种屏幕控制方法的流程图，参见图2，该方法可以包括以下步骤：
步骤201、确定发射单元发射原始信号至各个接收单元接收到反射信号的延迟时长，以及各个接收单元接收到的反射信号的能量值。
参见图3，TOF传感器的发射单元发射出原始信号，该原始信号可以是对光源(例如人眼不可见的红外光源)进行调制之后的调制光源信号，在附近存在遮挡物的情况下，该原始信号经遮挡物反射，回到TOF传感器的接收单元，该接收单元为感光元件，可以将经遮挡物反射回的反射信号转换为电信号，由电子设备根据该电信号确定各个接收单元接收到的反射信号的能量值。
TOF技术在发展过程中演化为两种不同的分支，分别为间接式indirect ToF(iToF)和直接式direct ToF(dToF)，主要的区别是对延迟时长的测量方式的不同。iToF技术通过原始信号与反射信号的相位差，将相位差转换为延迟时长(飞行时间)，以此确定发射单元发射原始信号至各个接收单元接收到反射信号的延迟时长。dToF技术是直接记录发射单元发射出原始信号的时刻以及各个接收单元接收到反射信号的时刻，将两个时刻作差，以确定发射单元发射原始信号至各个接收单元接收到反射信号的延迟时长。在实际使用过程中，可以根据实际需求自行选择延迟时长的确定方式，本公开对此不作特别限定。
上述原始信号可以但不限于是连续波(CW)信号或者脉冲信号。发射单元可以周期性发射出原始信号，原始信号的发射周期可以根据实际需求自行设置。
由于屏幕误触一般是在触控屏处于亮屏状态的情况下发生的，因此可以只在触控屏处于亮屏状态的情况下，识别靠近触控屏的是否为目标对象，也即在触控屏处于亮屏状态的情况下，电子设备控制TOF传感器的发射单元发射出原始信号，并根据接收单元接收到的反射信号确定能量值和延迟时长；而在触控屏处于灭屏状态的情况下，控制TOF传感器处于休眠状态，以节省功耗。
步骤202、根据能量值和延迟时长确定遮挡物是否为目标对象，以及根据延迟时长确定遮挡物与电子设备之间的距离。
本公开实施例中，通过遮挡物的生理特征信息和轮廓信息两个维度的信息确定该遮挡物是否为目标对象，参见图4，根据能量值和延迟时长确定遮挡物是否为目标对象，包括以下步骤：
步骤202-1、根据能量值确定遮挡物的生理特征信息。
不同类型的遮挡物具有不同的生理特征，而接收到反射信号的能量值可以反应生理特征，因此可以根据能量值确定遮挡物的生理特征信息，作为确定目标对象的一个判断条件。
本公开实施例中，将接收到的反射信号的能量值在预设能量范围内的目标接收单元的数量来表征遮挡物的生理特征信息。举例来说，假设TOF传感器包含n*m个接收单元，根据各个接收单元接收到的反射信号的能量值，构建能量矩阵如下：
Figure BDA0002985131100000071
其中，e11表示第1行第1列的接收单元接收到的反射信号的能量值；e1n表示第1行第n列的接收单元接收到的反射信号的能量值；em1表示第m行第1列的接收单元接收到的反射信号的能量值；emn表示第m行第n列的接收单元接收到的反射信号的能量值。
若上述能量矩阵的所有元素中，元素值落入预设能量范围的元素为k个，说明所有接收单元中有k个目标接收单元接收到能量值在预设能量范围内的反射信号，使用k表征遮挡物的生理特征信息；其中，k≤n*m。
可以理解地，预设能量范围根据目标对象的不同而不同。
下面以目标对象为活体人脸为例，介绍确定预设能量范围的一种实现方式：
获取多个测试能量矩阵，每个测试能量矩阵为TOF传感器的发射单元朝活体人脸(目标对象)发射原始信号，根据接收单元接收到的经活体人脸反射回的反射信号的能量值构建的。对a张活体人脸发射原始信号，即可得到a个测试能量矩阵，使用该a个测试能量矩阵构建用于确定预设能量范围的能量矩阵。可以理解的，测试能量矩阵的数量越多，类型(包括不同年龄段的男性、女性)越丰富，由此得到的预设能量范围越准确。
具体的，确定预设能量范围时，可以将a个测试能量矩阵中对应位置的元素求均值，也即将a个测试能量矩阵中所有第1行第1列的元素相加之后除以a，所有第1行第2列的元素相加之后除以a，所有第1行第3列的元素相加之后除以a，以此类推，得到能量均值矩阵如下：
Figure BDA0002985131100000081
分析能量均值矩阵，根据能量均值矩阵中各元素大小，确定预设能量范围，例如，将能量均值矩阵的所有元素中的最小值确定为该预设能量范围的最小值，将所有元素中的最大值确定为该预设能量范围的最大值；或者，将所有元素的均值作为预设能量范围的最大值。
步骤202-2、根据延迟时长确定遮挡物的轮廓信息。
参见图3，各个接收单元对应的延迟时长ΔT与接收单元到遮挡物之间的两倍距离(往返)成正比，各个接收单元与遮挡物之间的距离d可以估算为：
Figure BDA0002985131100000091
其中，c表示信号传输速度。
根据上述公式可以确定各个接收单元与遮挡物之间的距离d，若遮挡物不是一个平面，以活体人脸为例，活体人脸具有凹凸特征，各个接收单元接收到反射信号的延迟时长必然不同，计算得到的各个距离也是不同的，以此构建距离矩阵如下：
Figure BDA0002985131100000092
其中，d11表示第1行第1列的接收单元根据延迟时长确定的距离；d1n表示第1行第n列的接收单元根据延迟时长确定的距离；dm1表示第m行第1列的接收单元根据延迟时长确定的距离；dmn表示第m行第n列的接收单元根据延迟时长确定的距离。
由于距离矩阵表征的是各个接收单元根据延迟时长确定与遮挡物之间的距离，其无法很好地体现遮挡物的凹凸特征，也即轮廓信息，需要将其乘以轮廓模板矩阵进行转化，将乘积结果确定为表征遮挡物的轮廓信息的轮廓矩阵，表示如下：
Figure BDA0002985131100000093
其中，轮廓模板矩阵用于将距离矩阵转换为表征遮挡物凹凸特征的轮廓矩阵。
下面以目标对象为活体人脸为例，介绍确定轮廓模板矩阵的一种实现方式：
获取多个目标对象的测试距离矩阵，测试距离矩阵由发射单元发出的原始信号经活体人脸(目标对象)反射回接收单元的延迟时长而确定。对b张活体人脸发射原始信号，即可得到b个测试距离矩阵，使用该b个测试距离矩阵确定轮廓模板矩阵。其中，b与a可以相同，也可以不同。可以理解的，测试距离矩阵的数量越多，由此得到的轮廓模板矩阵越能准确转换出表征轮廓信息的轮廓矩阵。
具体的，确定轮廓模板矩阵时，对b个测试距离矩阵中对应位置的元素求均值，也即将b个测试距离矩阵中所有第1行第1列的元素相加之后除以b，所有第1行第2列的元素相加之后除以b，所有第1行第3列的元素相加之后除以b，以此类推，得到距离均值矩阵；对距离均值矩阵中的元素进行归一化处理，将归一化处理的结果确定为轮廓模板矩阵。进行归一化处理是为了将有量纲的矩阵，经过变换，化为无量纲的矩阵，消除距离的影响。可以但不限于将距离均值矩阵中各个元素均除以距离均值矩阵中的最大值元素，实现距离均值矩阵的归一化，得到如下轮廓模板矩阵：
Figure BDA0002985131100000101
步骤202-3、在确定遮挡物的轮廓信息与目标对象的轮廓信息相匹配且遮挡物的生理特征信息与目标对象的生理特征信息相匹配的情况下，确定遮挡物为目标对象。
步骤202-1中使用目标接收单元的数量表征遮挡物的生理特征信息，为了实现匹配，也使用接收单元的数量表征目标对象的生理特征信息。下面介绍确定目标对象的生理特征信息一种实现方式：
确定目标对象的生理特征信息可以借助上述能量均值矩阵实现，将能量均值矩阵中落入预设能量范围的元素个数确定为目标对象的生理特征信息，使用该目标对象的生理特征信息与遮挡物的生理特征信息进行匹配。
步骤202-2中使用轮廓矩阵表征轮廓信息，两个轮廓矩阵难以直接匹配，为了实现匹配可以根据预设运算规则对轮廓矩阵作进一步处理，例如计算轮廓矩阵的行列式、计算轮廓矩阵的所有元素之和、计算轮廓矩阵的特征值，使用计算结果进行匹配。在处理结果在预设结果范围内的情况下，确定遮挡物的轮廓信息与目标对象的轮廓信息相匹配，其中，预设结果范围根据预先训练的目标对象识别模型而确定。
预设运算规则需要根据表征目标对象的轮廓信息的参数匹配，举例来说，若目标对象的轮廓信息由轮廓矩阵的行列式表征，则预设运算规则为计算矩阵的行列式；若目标对象的轮廓信息由轮廓矩阵的所有元素之和表征，则预设运算规则为计算矩阵的所有元素之和；若目标对象的轮廓信息由轮廓矩阵的特征值表征，则预设运算规则为计算矩阵的特征值。
下面以目标对象的轮廓信息由轮廓矩阵的所有元素之和为例，介绍确定目标对象的轮廓信息的一种实现方式：
确定目标对象的轮廓信息可以借助b个测试距离矩阵实现，将每个测试距离矩阵的所有元素相加，将相加结果和设置的轮廓阈值均输入目标对象识别模型，若目标对象识别模型的识别结果为不是目标对象，则调整轮廓阈值；直至将所有测试距离矩阵均输入目标对象识别模型，且识别结果均为目标对象，将此时的轮廓阈值确定为目标对象的轮廓信息，使用该目标对象的轮廓信息与遮挡物的轮廓信息进行匹配。
步骤202-3中，若确定遮挡物的轮廓信息与目标对象的轮廓信息相匹配且遮挡物的生理特征信息与目标对象的生理特征信息相匹配的情况下，可以确定遮挡物属于目标对象，例如，在目标对象为活体人脸的情况下，确定遮挡物为活体人脸，活体人脸会造成屏幕误触，需要进一步判断遮挡物是否距离电子设备太近，是否有误触风险，则执行步骤203。若确定遮挡物的轮廓信息与目标对象的轮廓信息不匹配，和/或遮挡物的生理特征信息与目标对象的生理特征信息不匹配的情况下，说明即便遮挡物触控触控屏也不会发生误触情形，则不执行步骤203，可返回步骤201。
本公开实施例中，可以但不限于将距离矩阵中最小元素确定为遮挡物与电子设备之间的距离d’，或者将距离矩阵中所有元素的均值确定为遮挡物与电子设备之间的距离。
步骤203、在确定遮挡物为目标对象且遮挡物与电子设备之间距离小于距离阈值的情况下，控制触控屏处于灭屏状态。
其中，距离阈值可根据实际情况自行设置。可以理解地，当目标对象距离触控屏较远时，不会出现误触情形；当目标对象距离触控屏很接近时，用户很可能不是观看触控屏的内容，可能正处于打电话、语音通话等场景，容易出现误触情形；为了避免误触，距离阈值可以设置得较小些。
上述任一实施例中，借助阵列式TOF传感器进行遮挡物的识别，相较于相关技术中采用接近传感器识别遮挡物的方式，TOF传感器通过遮挡物的生理特征信息和轮廓信息两个维度的信息能够准确识别遮挡物是否为会导致触控屏的触控操作的目标对象，只有在确定遮挡物为目标对象且遮挡物与电子设备之间距离小于距离阈值的情况下，也即有误触风险的情况下，才控制触控屏处于灭屏状态，避免目标对象误触触控屏。
与前述的屏幕控制方法的实施例相对应，本公开还提供了屏幕控制装置的实施例。
图5是根据本公开的实施例示出的一种屏幕控制装置的模块示意图，应用于电子设备，所述电子设备包括触控屏和TOF传感器，所述TOF传感器包括发射单元和阵列排列的多个接收单元；
所述装置包括：
第一确定模块51，用于确定各个接收单元接收到的反射信号的能量值，所述反射信号为所述发射单元发射出的原始信号经遮挡物反射回的信号；以及用于确定所述发射单元发射所述原始信号至所述各个接收单元接收到所述反射信号的延迟时长；
第二确定模块52，用于根据所述能量值和所述延迟时长确定所述遮挡物是否为目标对象，以及根据所述延迟时长确定所述遮挡物与所述电子设备之间的距离；
控制模块53，用于在确定所述遮挡物为所述目标对象且所述遮挡物与所述电子设备之间距离在预设距离范围内的情况下，控制所述触控屏处于灭屏状态。
可选地，在根据所述能量值和所述延迟时长确定所述遮挡物是否为目标对象，所述第二确定模块用于：
根据所述能量值确定所述遮挡物的生理特征信息；
根据所述延迟时长确定所述遮挡物的轮廓信息；
在确定所述遮挡物的轮廓信息与所述目标对象的轮廓信息相匹配且所述遮挡物的生理特征信息与所述目标对象的生理特征信息相匹配的情况下，确定所述遮挡物为所述目标对象。
可选地，在根据所述延迟时长确定所述遮挡物的轮廓信息时，所述第二确定模块用于：
根据各个接收单元对应的延迟时长确定各个接收单元与所述遮挡物之间的距离，并构建距离矩阵；
将所述距离矩阵与轮廓模板矩阵的乘积结果确定为所述遮挡物的轮廓信息。
可选地，还包括：
获取模块，用于获取多个目标对象的测试距离矩阵，所述测试距离矩阵由所述发射单元发出的原始信号经所述目标对象反射回的发射信号而确定；
处理模块，用于对多个测试距离矩阵中对应位置的元素求均值，得到距离均值矩阵，并对所述距离均值矩阵中的元素进行归一化处理，将归一化处理的结果确定为所述轮廓模板矩阵。
可选地，还包括：
处理模块，用于根据预设运算规则处理表征所述遮挡物的轮廓信息的轮廓矩阵，所述预设运算规则包括以下至少之一：计算矩阵的行列式、计算矩阵的所有元素之和、计算矩阵的特征值；
在处理结果在预设结果范围内的情况下，所述第二确定模块确定所述遮挡物的轮廓信息与所述目标对象的轮廓信息相匹配，其中，所述预设结果范围根据预先训练的目标对象识别模型而确定。
可选地，在根据所述能量值确定所述遮挡物的生理特征信息时，所述第二确定模块用于：
确定接收到的反射信号的能量值在预设能量范围的目标接收单元的数量，使用所述目标接收单元的数量表征所述生理特征信息。
关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在相关方法的实施例中进行了详细描述，此处将不做详细阐述说明。
对于装置实施例而言，由于其基本对应于方法实施例，所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理模块，即可以位于一个地方，或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性劳动的情况下，即可以理解并实施。
本公开的实施例还提出一种电子设备，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为实现上述任一实施例所述的屏幕控制方法。
本公开的实施例还提出一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述任一实施例所述的屏幕控制方法中的步骤。
图6是根据本公开的实施例示出的一种用于屏幕控制的装置的框图。该装置可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。
如图6所示，装置600可以包括以下一个或多个组件：处理组件602，存储器604，电源组件606，多媒体组件608，音频组件610，输入/输出(I/O)的接口612，传感器组件614，通信组件616和TOF传感器(图中未示出)。
处理组件602通常控制装置600的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件602可以包括一个或多个处理器620来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件602可以包括一个或多个模块，便于处理组件602和其他组件之间的交互。例如，处理组件602可以包括多媒体模块，以方便多媒体组件608和处理组件602之间的交互。
存储器604被配置为存储各种类型的数据以支持在装置600的操作。这些数据的示例包括用于在装置600上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器604可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。
电源组件606为装置600的各种组件提供电力。电源组件606可以包括电源管理系统，一个或多个电源，及其他与为装置600生成、管理和分配电力相关联的组件。
多媒体组件608包括在所述装置600和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以是触控屏(TP)，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件608包括一个前置摄像头和/或后置摄像头。当装置600处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜系统或具有焦距和光学变焦能力。
音频组件610被配置为输出和/或输入音频信号。例如，音频组件610包括一个麦克风(MIC)，当装置600处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器604或经由通信组件616发送。在一些实施例中，音频组件610还包括一个扬声器，用于输出音频信号。
I/O接口612为处理组件602和外围接口模块之间提供接口，上述外围接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件614包括一个或多个传感器，用于为装置600提供各个方面的状态评估。例如，传感器组件614可以检测到装置600的打开/关闭状态，组件的相对定位，例如所述组件为装置600的显示器和小键盘，传感器组件614还可以检测装置600或装置600一个组件的位置改变，用户与装置600接触的存在或不存在，装置600方位或加速/减速和装置600的温度变化。传感器组件614可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件614还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件614还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
通信组件616被配置为便于装置600和其他设备之间有线或无线方式的通信。装置600可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件616经由广播信道接收来自外部广播管理系统的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件616还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。
在示例性实施例中，装置600可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述任一实施例所述的方法。
在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器604，上述指令可由装置600的处理器620执行以完成上述方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。
本领域技术人员在考虑说明书及实践这里公开的公开后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (14)

1.一种屏幕控制方法，其特征在于，应用于电子设备，所述电子设备包括触控屏和TOF传感器，所述TOF传感器包括发射单元和阵列排列的多个接收单元；
所述方法包括：
确定各个接收单元接收到的反射信号的能量值，所述反射信号为所述发射单元发射出的原始信号经遮挡物反射回的信号；
确定所述发射单元发射所述原始信号至所述各个接收单元接收到所述反射信号的延迟时长；
根据所述能量值和所述延迟时长确定所述遮挡物是否为目标对象，以及根据所述延迟时长确定所述遮挡物与所述电子设备之间的距离；
在确定所述遮挡物为所述目标对象且所述遮挡物与所述电子设备之间距离在预设距离范围内的情况下，控制所述触控屏处于灭屏状态。
2.根据权利要求1所述的屏幕控制方法，其特征在于，根据所述能量值和所述延迟时长确定所述遮挡物是否为目标对象，包括：
根据所述能量值确定所述遮挡物的生理特征信息；
根据所述延迟时长确定所述遮挡物的轮廓信息；
在确定所述遮挡物的轮廓信息与所述目标对象的轮廓信息相匹配且所述遮挡物的生理特征信息与所述目标对象的生理特征信息相匹配的情况下，确定所述遮挡物为所述目标对象。
3.根据权利要求2所述的屏幕控制方法，其特征在于，根据所述延迟时长确定所述遮挡物的轮廓信息，包括：
根据各个接收单元对应的延迟时长确定各个接收单元与所述遮挡物之间的距离，并构建距离矩阵；
将所述距离矩阵与轮廓模板矩阵的乘积结果确定为所述遮挡物的轮廓信息。
4.根据权利要求3所述的屏幕控制方法，其特征在于，还包括：
获取多个目标对象的测试距离矩阵，所述测试距离矩阵由所述发射单元发出的原始信号经所述目标对象反射回的发射信号而确定；
对多个测试距离矩阵中对应位置的元素求均值，得到距离均值矩阵；
对所述距离均值矩阵中的元素进行归一化处理，将归一化处理的结果确定为所述轮廓模板矩阵。
5.根据权利要求2所述的屏幕控制方法，其特征在于，还包括：
根据预设运算规则处理表征所述遮挡物的轮廓信息的轮廓矩阵，所述预设运算规则包括以下至少之一：计算矩阵的行列式、计算矩阵的所有元素之和、计算矩阵的特征值；
在处理结果在预设结果范围内的情况下，确定所述遮挡物的轮廓信息与所述目标对象的轮廓信息相匹配，其中，所述预设结果范围根据预先训练的目标对象识别模型而确定。
6.根据权利要求2所述的屏幕控制方法，其特征在于，根据所述能量值确定所述遮挡物的生理特征信息，包括：
确定接收到的反射信号的能量值在预设能量范围的目标接收单元的数量，使用所述目标接收单元的数量表征所述生理特征信息。
7.一种屏幕控制装置，其特征在于，应用于电子设备，所述电子设备包括触控屏和TOF传感器，所述TOF传感器包括发射单元和阵列排列的多个接收单元；
所述装置包括：
第一确定模块，用于确定各个接收单元接收到的反射信号的能量值，所述反射信号为所述发射单元发射出的原始信号经遮挡物反射回的信号；以及用于确定所述发射单元发射所述原始信号至所述各个接收单元接收到所述反射信号的延迟时长；
第二确定模块，用于根据所述能量值和所述延迟时长确定所述遮挡物是否为目标对象，以及根据所述延迟时长确定所述遮挡物与所述电子设备之间的距离；
控制模块，用于在确定所述遮挡物为所述目标对象且所述遮挡物与所述电子设备之间距离在预设距离范围内的情况下，控制所述触控屏处于灭屏状态。
8.根据权利要求7所述的屏幕控制装置，其特征在于，在根据所述能量值和所述延迟时长确定所述遮挡物是否为目标对象，所述第二确定模块用于：
根据所述能量值确定所述遮挡物的生理特征信息；
根据所述延迟时长确定所述遮挡物的轮廓信息；
在确定所述遮挡物的轮廓信息与所述目标对象的轮廓信息相匹配且所述遮挡物的生理特征信息与所述目标对象的生理特征信息相匹配的情况下，确定所述遮挡物为所述目标对象。
9.根据权利要求8所述的屏幕控制装置，其特征在于，在根据所述延迟时长确定所述遮挡物的轮廓信息时，所述第二确定模块用于：
根据各个接收单元对应的延迟时长确定各个接收单元与所述遮挡物之间的距离，并构建距离矩阵；
将所述距离矩阵与轮廓模板矩阵的乘积结果确定为所述遮挡物的轮廓信息。
10.根据权利要求9所述的屏幕控制装置，其特征在于，还包括：
获取模块，用于获取多个目标对象的测试距离矩阵，所述测试距离矩阵由所述发射单元发出的原始信号经所述目标对象反射回的发射信号而确定；
处理模块，用于对多个测试距离矩阵中对应位置的元素求均值，得到距离均值矩阵，并对所述距离均值矩阵中的元素进行归一化处理，将归一化处理的结果确定为所述轮廓模板矩阵。
11.根据权利要求8所述的屏幕控制装置，其特征在于，还包括：
处理模块，用于根据预设运算规则处理表征所述遮挡物的轮廓信息的轮廓矩阵，所述预设运算规则包括以下至少之一：计算矩阵的行列式、计算矩阵的所有元素之和、计算矩阵的特征值；
在处理结果在预设结果范围内的情况下，所述第二确定模块确定所述遮挡物的轮廓信息与所述目标对象的轮廓信息相匹配，其中，所述预设结果范围根据预先训练的目标对象识别模型而确定。
12.根据权利要求8所述的屏幕控制装置，其特征在于，在根据所述能量值确定所述遮挡物的生理特征信息时，所述第二确定模块用于：
确定接收到的反射信号的能量值在预设能量范围的目标接收单元的数量，使用所述目标接收单元的数量表征所述生理特征信息。
13.一种电子设备，其特征在于，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为执行所述可执行指令以实现权利要求1-6中任一项所述的屏幕控制方法。
14.一种计算机可读存储介质，其特征在于，其上存储有计算机程序，该程序被处理器执行时实现权利要求1-6中任一项所述的屏幕控制方法中的步骤。
CN202110298287.0A 2021-03-19 2021-03-19 屏幕控制方法、装置、电子设备、存储介质 Pending CN115113752A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110298287.0A CN115113752A (zh) 2021-03-19 2021-03-19 屏幕控制方法、装置、电子设备、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110298287.0A CN115113752A (zh) 2021-03-19 2021-03-19 屏幕控制方法、装置、电子设备、存储介质

Publications (1)

Publication Number Publication Date
CN115113752A true CN115113752A (zh) 2022-09-27

Family

ID=83323395

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110298287.0A Pending CN115113752A (zh) 2021-03-19 2021-03-19 屏幕控制方法、装置、电子设备、存储介质

Country Status (1)

Country Link
CN (1) CN115113752A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115877989A (zh) * 2022-11-14 2023-03-31 北京深光科技有限公司 触控识别方法、装置、电子设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103369142A (zh) * 2013-07-09 2013-10-23 广东欧珀移动通信有限公司 一种防止打电话误操作的方法及系统
CN108496172A (zh) * 2018-04-18 2018-09-04 深圳阜时科技有限公司 电子设备及其身份识别方法
CN109361815A (zh) * 2018-09-26 2019-02-19 Oppo广东移动通信有限公司 电子设备的亮灭屏控制方法、装置和电子设备
CN110380792A (zh) * 2019-07-01 2019-10-25 Oppo广东移动通信有限公司 屏幕状态的控制方法、移动终端以及计算机存储介质
CN111212157A (zh) * 2018-11-21 2020-05-29 北京小米移动软件有限公司 移动终端及其屏幕控制方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103369142A (zh) * 2013-07-09 2013-10-23 广东欧珀移动通信有限公司 一种防止打电话误操作的方法及系统
CN108496172A (zh) * 2018-04-18 2018-09-04 深圳阜时科技有限公司 电子设备及其身份识别方法
CN109361815A (zh) * 2018-09-26 2019-02-19 Oppo广东移动通信有限公司 电子设备的亮灭屏控制方法、装置和电子设备
CN111212157A (zh) * 2018-11-21 2020-05-29 北京小米移动软件有限公司 移动终端及其屏幕控制方法
CN110380792A (zh) * 2019-07-01 2019-10-25 Oppo广东移动通信有限公司 屏幕状态的控制方法、移动终端以及计算机存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115877989A (zh) * 2022-11-14 2023-03-31 北京深光科技有限公司 触控识别方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
KR101649596B1 (ko) 피부색 조절방법, 장치, 프로그램 및 기록매체
WO2017071085A1 (zh) 报警方法及装置
CN109656317B (zh) 具有距离感应功能的设备和距离感应方法
CN103973979B (zh) 一种配置拍摄参数的方法及装置
CN106797416A (zh) 屏幕控制方法及装置
CN105488464A (zh) 指纹识别方法及装置
JP2017532922A (ja) 画像撮影方法及び装置
CN108307106B (zh) 一种图像处理方法、装置及移动终端
CN104618575A (zh) 检测物体接近的方法和装置
WO2016050019A1 (zh) 对象定位方法及装置
WO2021017927A1 (zh) 设备控制方法、装置、电子设备及存储介质
CN110059547B (zh) 目标检测方法及装置
CN105607738B (zh) 确定单手模式的方法及装置
CN110166618B (zh) 屏幕控制方法及装置
CN107782250B (zh) 一种深度信息测量方法、装置和移动终端
CN107392160B (zh) 光学指纹识别方法及装置、计算机可读存储介质
CN115113752A (zh) 屏幕控制方法、装置、电子设备、存储介质
WO2022057327A1 (zh) 标定方法、装置、设备、介质、程序及测温人脸识别装置
CN109471119A (zh) 一种控制功耗的方法及终端设备
CN108206884B (zh) 终端、终端发射通信信号的调整方法和电子设备
CN111212159B (zh) 终端设备
CN109726611B (zh) 生物特征识别方法及装置、可读存储介质及电子设备
CN109151438A (zh) 一种拍摄立体影像的方法和装置
WO2023221062A1 (zh) 电子设备的语音唤醒方法、装置、存储介质及芯片
CN114639383A (zh) 设备唤醒方法、装置、电子设备和介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination