CN104731321B - 一种基于手势识别的多设备交互方法及系统 - Google Patents

Abstract

本发明提供的一种基于手势识别的多设备交互方法及系统，通过预先建立与电子设备复制指令相匹配的第一手势和与电子设备粘贴指令相匹配的第二手势，当第一电子设备中的距离传感器检测到设备屏幕前方预设距离内有物体，则开启与其相连接的第一前置摄像头对前方物体进行识别，若所述第一前置摄像头检测到第一手势，则复制第一电子设备中指定文件，并同时触发与第一电子设备建立连接的第二电子设备开启第二前置摄像头，当第二前置摄像头检测到所述第二手势时，则将所述指定文件粘贴在第二电子设备中。所述方法及系统，不需要前置摄像头实时开启对操作手势进行识别，因此降低了电子设备的能耗，节省了能量。

Description

一种基于手势识别的多设备交互方法及系统

技术领域

本发明涉及移动终端领域，尤其涉及的是一种基于手势识别的多设备交互方法及系统。

背景技术

带有触摸屏的智能电子设备现在越来越受到用户的青睐，并且用手势识别在多设备之间进行复制粘贴操作，用户体验很好。

但目前的智能电子设备，问题在于手势是依靠摄像头来识别的，而让摄像头始终工作的功耗很高，且由于触摸屏的屏幕比较大，所以在智能手机和平板电脑上应用手势识别会消耗大量的能耗，频繁的为电源充电不仅给用户带来诸多不便，而且还加速了电源电池的损耗。

现有技术有待于进一步的改进。

发明内容

鉴于上述现有技术中的不足之处，本发明的目的在于为用户提供一种基于手势识别的多设备交互方法及系统，以解决现有技术中的触摸屏电子设备通过手势识别进行交互时，能耗过大的问题。

本发明解决技术问题所采用的技术方案如下：

一种基于手势识别的多设备交互方法，其中，包括：

A、预先建立与电子设备复制指令相匹配的第一手势和与电子设备粘贴指令相匹配的第二手势；

B、当第一电子设备中的距离传感器检测到设备屏幕前方预设距离内有物体时，则开启第一电子设备的第一前置摄像头对前方物体进行识别，若所述第一前置摄像头检测到第一手势，则执行步骤C，否则关闭第一前置摄像头；

C、复制第一电子设备中指定文件，并同时触发与第一电子设备建立连接的第二电子设备开启第二前置摄像头；

D、当第二电子设备的第二前置摄像头检测到所述第二手势时，则将所述指定文件粘贴在第二电子设备中。

所述基于手势识别的多设备交互方法，其中，所述步骤A包括：

A1、各个电子设备的前置摄像头采集第一手势和第二手势；

A2、将第一手势与电子设备复制指令相匹配；将第二手势与电子设备的粘贴指令相匹配；

A3、将进行匹配后的第一手势和第二手势存储在电子设备的存储器中。

所述基于手势识别的多设备交互方法，其中，所述步骤D之后，还包括：

E、预定时间内，未检测到第一手势或者第二手势，则关闭第一前置摄像头和/或第二前置摄像头。

所述基于手势识别的多设备交互方法，其中，所述步骤B还包括：

B1、当所述第一前置摄像头检测到第一手势时，距离传感器保存此时第一手势与设备屏幕之间的距离值，并实时以保存的距离值的平均值更新为所述再次检测设备屏幕前方物体的预设距离值。

一种基于手势识别的多设备交互系统，其中，包括：建立手势模块、第一手势识别模块、复制开启模块和检测粘贴模块；

所述建立手势模块，用于预先建立与电子设备复制指令相匹配的第一手势和与电子设备粘贴指令相匹配的第二手势；

所述第一手势识别模块，用于当第一电子设备中的距离传感器检测到设备屏幕前方预设距离内有物体，则开启与其相连接的第一前置摄像头对前方物体进行识别；

所述复制开启模块，用于当第一前置摄像头检测到第一手势，则复制第一电子设备中指定文件，并同时触发与第一电子设备建立连接的第二电子设备开启第二前置摄像头；

所述检测粘贴模块，用于当第二电子设备的第二前置摄像头检测到所述第二手势时，则将所述指定文件粘贴在第二电子设备中。

所述基于手势识别的多设备交互系统，其中，所述建立手势模块包括手势采集单元、指令匹配单元和手势存储单元；

所述手势采集单元，用于各个电子设备的前置摄像头采集第一手势和第二手势；

所述指令匹配单元，用于将第一手势与电子设备复制指令相匹配；将第二手势与电子设备的粘贴指令相匹配；

所述手势存储单元，用于将进行匹配后的第一手势和第二手势存储在电子设备的存储器中。

所述基于手势识别的多设备交互系统，其中所述系统还包括：关闭摄像模块；

所述关闭摄像模块，用于当预定时间内未检测到第一手势或者第二手势，则关闭第一前置摄像头和/或第二前置摄像头。

所述基于手势识别的多设备交互系统，其中，所述第一手势识别模块还包括预设距离值自适应单元；

所述预设距离值自适应单元，用于当所述第一前置摄像头检测到第一手势时，距离传感器保存此时第一手势与设备屏幕之间的距离值，并实时以保存的距离值的平均值更新为所述再次检测设备屏幕前方物体的预设距离值。

有益效果，本发明提供的一种基于手势识别的多设备交互方法及系统，通过预先建立与电子设备复制指令相匹配的第一手势和与电子设备粘贴指令相匹配的第二手势，当第一电子设备中的距离传感器检测到设备屏幕前方预设距离内有物体，则触发开启与其相连接的第一前置摄像头对前方物体进行识别，若所述第一前置摄像头检测到第一手势，则复制第一电子设备中指定文件，并同时触发与第一电子设备建立连接的第二电子设备开启第二前置摄像头，当第二电子设备的第二前置摄像头检测到所述第二手势时，则将所述指定文件粘贴在第二电子设备中。所述方法及系统，由于是当检测到电子设备前方物体为手，用户发出操作手势时才开启其前置摄像头，并不需要前置摄像头实时开启对操作手势进行识别，因此降低了电子设备的能耗，节省了能量。

附图说明

图1是本发明提供一种基于手势识别的多设备交互方法的步骤流程图。

图2是本发明提供的所述方法中步骤S1具体细节流程图。

图3是本发明提供的一种基于手势识别的多设备交互系统的原理结构示意图。

图4是本发明提供的所述系统中建立手势模块的原理结构图。

具体实施方式

为使本发明的目的、技术方案及优点更加清楚、明确，以下参照附图并举实施例对本发明进一步详细说明。应当理解，此处所描述的具体实施例仅仅用于解释本发明，并不用于限定本发明。

本发明提供了一种基于手势识别的多设备交互方法，如图1所示，所述方法包括以下步骤：

S1、预先建立与电子设备复制指令相匹配的第一手势和与电子设备粘贴指令相匹配的第二手势。

由于是采用电子设备前置摄像头的手势识别功能，因此在本步骤中首先需要建立电子设备之间与复制指令和粘贴指令相匹配的手势，具体的，建立所述手势包括以下内容：

S11、各个电子设备的前置摄像头采集第一手势和第二手势。

可以想到的是，在本步骤中用户可以根据使用习惯，自定义采集识别手势，但第一手势与第二手势由于分别与复制指令和粘贴指令相匹配，则需要第一手势与第二手势不同。

S12、将第一手势与电子设备复制指令相匹配；将第二手势与电子设备的粘贴指令相匹配。

电子设备的处理器将所述第一手势与复制指令相匹配，将第二手势与粘贴指令相匹配。

S13、将进行匹配后的第一手势和第二手势存储在电子设备的存储器中。

待采集完之后，并对其进行记录保存，同时根据所采集的识别手势与电子设备中复制、粘贴等指令相匹配。其中，该电子设备可为电视、平板电脑、手机等，此处不作限定。

S2、当第一电子设备中的距离传感器检测到设备屏幕前方预设距离内有物体时，则开启第一电子设备的第一前置摄像头对前方物体进行识别，若所述第一前置摄像头检测到第一手势，则执行步骤S3，否则关闭第一前置摄像头。

当距离传感器检测到其前方的预定距离值内有物体，则触发电子设备开启与其相连接的第一电子设备上的前置摄像头，所述前置摄像头具有手势识别功能，其开启后自动对前方是否出现第一手势进行识别，当其识别出第一手势时，则进行下一步，否则关闭第一前置摄像头，避免因为摄像头长时间开启，导致电子设备电量流失。

为了使距离传感器能更加准确的检测到其前方的物体，当所述第一前置摄像头检测到第一手势时，距离传感器保存此时第一手势与设备屏幕之间的距离值，并实时以保存的距离值的平均值更新为所述再次检测设备屏幕前方物体的预设距离值，从而距离传感器可以根据用户的习惯自适应的将预设距离值设定为用户适宜的范围。

S3、复制第一电子设备中指定文件，并同时触发与第一电子设备建立连接的第二电子设备开启第二前置摄像头。

当所述第一前置摄像头检测到第一手势时，则第一电子设备的处理器发出复制指令响应，复制该第一电子设备中的指定文件，并触发需要与第一电子设备之间交互文件的第二电子设备开启第二前置摄像头。

S4、当第二电子设备的第二前置摄像头检测到所述第二手势时，则将所述指定文件粘贴在第二电子设备中。

所述步骤还包括：

S5、预定时间内，未检测到第一手势或者第二手势，则关闭第一前置摄像头和/或第二前置摄像头。

为了对上述方法进行更加详细的解释，下面以三个电子设备之间进行交互对所述方法进行举例，例如：将第一电子设备中的文件复制后，粘贴到第二电子设备和第三电子设备中。

首先在这个三个电子设备中均建立与电子设备复制指令相匹配的第一手势和将与电子设备的粘贴指令相匹配的第二手势。

用于在第一电子设备的距离传感器所预设距离值的范围内做出第一手势，则当第一电子设备中的距离传感器检测到设备屏幕前方预设距离内有物体（手），则开启与其相连接的第一前置摄像头对手进行识别，具体的，使用其手势识别功能对所述其前方是否出现第一手势进行识别，当所述第一前置摄像头检测到第一手势，复制第一电子设备中指定文件，并同时触发与第一电子设备建立连接的第二电子设备开启第二前置摄像头，和触发与第一电子设备建立连接的第三电子设备开启其前端的第三前置摄像头，否则关闭第一前置摄像头。

第二电子设备前端的第二前置摄像头开启后，对当第二电子设备的前方是否有第二手势进行识别，第二前置摄像头检测到所述第二手势时，则将所述指定文件粘贴在第二电子设备中；第三电子设备前端的第三前置摄像头开启后，对当第三电子设备的前方是否有第二手势进行识别，第三前置摄像头检测到所述第二手势时，则将所述指定文件粘贴在第三电子设备中，依次类推，可以将第一电子设备中的指定文件粘贴到第N个与第一电子设备建立连接的第N电子设备上。

在具体实施例中，为了得到更好的用户体验，安装在电子设备上的距离传感器可以设置与设备屏幕具有一定的角度，从而实现用户的手在设备的前方，而不是设备前方靠上，使距离传感器的检测效果更好。

本发明较佳实施例中，在实现多台电子设备之间的文件相互传递，较优选的是将该些电子设备建立在同一局域网络下，但并不限定有线或是无线连接。在同一局域网下，传递速度快，而且这种交互平台也易实现。

本发明还提供了一种基于手势识别的多设备交互系统，如图2所述，包括：建立手势模块10、第一手势识别模块20、复制开启模块30和检测粘贴模块40；

所述建立手势模块10，用于预先建立与电子设备复制指令相匹配的第一手势和与电子设备粘贴指令相匹配的第二手势；

所述第一手势识别模块20，用于当第一电子设备中的距离传感器检测到设备屏幕前方预设距离内有物体，则开启与其相连接的第一前置摄像头对前方物体进行识别；

所述复制开启模块30，用于当第一前置摄像头检测到第一手势，则复制第一电子设备中指定文件，并同时触发与第一电子设备建立连接的第二电子设备开启第二前置摄像头；

所述检测粘贴模块40，用于当第二电子设备的第二前置摄像头检测到所述第二手势时，则将所述指定文件粘贴在第二电子设备中。

所述建立手势模块10包括手势采集单元110、指令匹配单元120和手势存储单元130；

所述手势采集单元110，用于各个电子设备的前置摄像头采集第一手势和第二手势；

所述指令匹配单元120，用于将第一手势与电子设备复制指令相匹配；将第二手势与电子设备的粘贴指令相匹配；

所述手势存储单元130，用于将进行匹配后的第一手势和第二手势存储在电子设备的存储器中。

所述基于手势识别的多设备交互系统，其中，所述系统还包括：关闭摄像模块；

所述关闭摄像模块，用于当预定时间内未检测到第一手势或者第二手势，则关闭第一前置摄像头和/或第二前置摄像头。

所述基于手势识别的多设备交互系统，其中，所述第一手势识别模块还包括预设距离值自适应单元；

所述预设距离值自适应单元，用于当所述第一前置摄像头检测到第一手势时，距离传感器保存此时第一手势与设备屏幕之间的距离值，并实时以保存的距离值的平均值更新为所述再次检测设备屏幕前方物体的预设距离值。

本发明提供的一种基于手势识别的多设备交互方法及系统，通过预先建立与电子设备复制指令相匹配的第一手势和与电子设备粘贴指令相匹配的第二手势，当第一电子设备中的距离传感器检测到设备屏幕前方预设距离内有物体，则触发开启与其相连接的第一前置摄像头对前方物体进行识别，若所述第一前置摄像头检测到第一手势，则复制第一电子设备中指定文件，并同时触发与第一电子设备建立连接的第二电子设备开启第二前置摄像头，当第二电子设备的第二前置摄像头检测到所述第二手势时，则将所述指定文件粘贴在第二电子设备中。所述方法及系统，由于是当检测到电子设备前方物体为手，用户发出操作手势时才开启其前置摄像头，并不需要前置摄像头实时开启对操作手势进行识别，因此降低了电子设备的能耗，节省了能量。

可以理解的是，对本领域普通技术人员来说，可以根据本发明的技术方案及其发明构思加以等同替换或改变，而所有这些改变或替换都应属于本发明所附的权利要求的保护范围。

Claims (6)

1.一种基于手势识别的多设备交互方法，其特征在于，包括：

A、预先建立与电子设备复制指令相匹配的第一手势和与电子设备粘贴指令相匹配的第二手势；

B、当第一电子设备中的距离传感器检测到设备屏幕前方预设距离内有物体时，则开启第一电子设备的第一前置摄像头对前方物体进行识别，若所述第一前置摄像头检测到第一手势，则执行步骤C，否则关闭第一前置摄像头；

C、复制第一电子设备中指定文件，并同时触发与第一电子设备建立连接的第二电子设备开启第二前置摄像头；

D、当第二电子设备的第二前置摄像头检测到所述第二手势时，则将所述指定文件粘贴在第二电子设备中;

所述步骤B还包括：

B1、当所述第一前置摄像头检测到第一手势时，距离传感器保存此时第一手势与设备屏幕之间的距离值，并实时以保存的距离值的平均值更新为再次检测设备屏幕前方物体的预设距离值;

所述距离传感器设置与设备屏幕具有一定的角度。

2.根据权利要求1所述基于手势识别的多设备交互方法，其特征在于，所述步骤A包括：

A1、各个电子设备的前置摄像头采集第一手势和第二手势；

A2、将第一手势与电子设备复制指令相匹配；将第二手势与电子设备的粘贴指令相匹配；

A3、将进行匹配后的第一手势和第二手势存储在电子设备的存储器中。

3.根据权利要求1所述基于手势识别的多设备交互方法，其特征在于，所述步骤D之后，还包括：

E、预定时间内，未检测到第一手势或者第二手势，则关闭第一前置摄像头和/或第二前置摄像头。

4.一种基于手势识别的多设备交互系统，其特征在于，包括：建立手势模块、第一手势识别模块、复制开启模块和检测粘贴模块；

所述建立手势模块，用于预先建立与电子设备复制指令相匹配的第一手势和与电子设备粘贴指令相匹配的第二手势；

所述第一手势识别模块，用于当第一电子设备中的距离传感器检测到设备屏幕前方预设距离内有物体，则开启与其相连接的第一前置摄像头对前方物体进行识别；

所述复制开启模块，用于当第一前置摄像头检测到第一手势，则复制第一电子设备中指定文件，并同时触发与第一电子设备建立连接的第二电子设备开启第二前置摄像头；

所述检测粘贴模块，用于当第二电子设备的第二前置摄像头检测到所述第二手势时，则将所述指定文件粘贴在第二电子设备中;

所述第一手势识别模块还包括预设距离值自适应单元；

所述预设距离值自适应单元，用于当所述第一前置摄像头检测到第一手势时，距离传感器保存此时第一手势与设备屏幕之间的距离值，并实时以保存的距离值的平均值更新为再次检测设备屏幕前方物体的预设距离值;

所述距离传感器设置与设备屏幕具有一定的角度。

5.根据权利要求4所述基于手势识别的多设备交互系统，其特征在于，所述建立手势模块包括手势采集单元、指令匹配单元和手势存储单元；

所述手势采集单元，用于各个电子设备的前置摄像头采集第一手势和第二手势；

所述指令匹配单元，用于将第一手势与电子设备复制指令相匹配；将第二手势与电子设备的粘贴指令相匹配；

所述手势存储单元，用于将进行匹配后的第一手势和第二手势存储在电子设备的存储器中。

6.根据权利要求4所述基于手势识别的多设备交互系统，其特征在于，所述系统还包括：关闭摄像模块；

所述关闭摄像模块，用于当预定时间内未检测到第一手势或者第二手势，则关闭第一前置摄像头和/或第二前置摄像头。