CN107610284A - 一种手势识别方法、装置及智能猫眼 - Google Patents

Abstract

本发明实施例涉及智能家居技术领域，公开了一种手势识别方法、装置及智能猫眼。手势识别方法，应用于终端，包括：当确定所述智能猫眼被触发后，开启摄像头，通过所述摄像头拍摄获得门外的图像；识别所述图像中包含的人的手势信息；判断所述人的手势信息所指示的手势是否为开门手势；若确定不是开门手势，将所述人的手势信息转换成对应的文字信息或语音信息并保存；若确定是开门手势，向门锁发出开门命令，由所述门锁根据所述开门命令执行开门动作。本发明中，使得能够通过手势在智能猫眼留言，以及实现门锁的手势控制。

Description

一种手势识别方法、装置及智能猫眼

技术领域

本发明实施例涉及智能家居技术领域，特别涉及一种手势识别方法、装置及智能猫眼。

背景技术

有这样一个群体，他们听不到悦耳的声音，说不出动听的话语，只能活在无声的世界里，他们便是聋哑人，聋哑人在中国就有两千万，全世界有七千万。无法与正常人进行交流沟通，为他们工作、学习、娱乐、就医、维权等生活带来不便。

发明人发现现有技术中至少存在如下问题：人们家居生活一般会设置猫眼，但聋哑人不能通过猫眼进行无障碍的沟通。现有的智能猫眼多有留言功能，却不适合聋哑人使用，尽管现有的智能猫眼含有摄像头等给人们的使用带来很大的方便，但是大部分人通过智能猫眼的摄像头拍摄视频不能读懂聋哑人的手势，影响到聋哑人表达和沟通。因此，需要一款方便聋哑人使用的智能猫眼。

发明内容

本发明实施方式的目的在于提供一种手势识别方法、装置及智能猫眼，使得能够通过手势在智能猫眼留言，以及实现门锁的手势控制。

为解决上述技术问题，本发明的实施方式提供了一种手势识别方法，应用于智能猫眼，包括以下步骤：

当确定智能猫眼被触发后，开启摄像头，通过摄像头拍摄获得门外的图像；

识别该图像中包含的人的手势信息；

判断人的手势信息所指示的手势是否为开门手势；

若确定不是开门手势，将人的手势信息转换成对应的文字信息或语音信息并保存；

若确定是开门手势，向门锁发出开门命令，由门锁根据开门命令执行开门动作。

本发明的实施方式还提供了一种手势识别装置，应用于智能猫眼，包括：

获取模块，用于当确定智能猫眼被触发后，开启摄像头，通过摄像头拍摄获得门外的图像；

识别模块，用于识别该图像中包含的人的手势信息；

判断模块，用于判断人的手势信息所指示的手势是否为开门手势；

转换模块，用于若确定不是开门手势，将人的手势信息转换成对应的文字信息或语音信息并保存；

确定模块，用于若确定是开门手势，向门锁发出开门命令，由门锁根据开门命令执行开门动作。

本发明的实施方式还提供了一种智能猫眼，包括：至少一个处理器；以及，

与至少一个处理器通信连接的存储器；其中，

存储器存储有可被至少一个处理器执行的指令，指令被至少一个处理器执行，以使至少一个处理器能够执行上述实施方式所述的手势识别方法。

本发明实施方式相对于现有技术而言，该智能猫眼能够将手势信息转换成对应的文字或语音信息并保存，使得不懂手语的人能够明白聋哑人的手语表达的内容，因此方便了聋哑人与其他人的沟通和交流，主要是不懂手语的人在看到聋哑人的手势留言时能够根据对应的文字或语音信息明白聋哑人表达的意思，通过该智能猫眼使聋哑人进行有效的表达，另外，在确定识别到的手势为开门手势后，指示门锁进行开门，实现了智能猫眼与门锁联动,方便了用户开锁。

另外，确定该智能猫眼被触发，包括：检测到对留言模式的开关按键的触控操作，启动留言模式；或者，检测到留言模式的声控开关被触发，启动留言模式；或者，检测到有人靠近，启动所述留言模式。

该实施方式中，智能猫眼留言模式的开关被触发直接进入留言模式，方便门外的人进行留言，并且，能够实现在门外的人需要留言的情况下通过触控或声控的方式开启留言模式，以避免留言模式始终处于开启状态造成的资源消耗。

另外，将人的手势信息转换成对应的文字信息或语音信息之后，该手势识别方法包括：

将该文字信息或语音信息实时发送到终端；

接收终端返回的的对话信息，并在该智能猫眼的显示屏上显示对话信息。

该实施方式中，实现了远程对讲，即终端用户通过智能猫眼发送的手势信息以及该手势信息对应的文字信息或语音信息，并根据该文字或语音信息的内容进行回复，使得终端的使用者可以和门外的人进行交流。

另外，将人的手势信息转换成对应的文字信息或语音信息之后，该手势识别方法包括：

将文字信息实时发送到智能猫眼连接的门内主机的显示屏上显示，或将该语音信息实时发送到智能猫眼连接的门内主机进行播放。

另外，将文字信息实时发送到智能猫眼连接的门内主机的显示屏上显示之后，或将语音信息实时发送到智能猫眼连接的门内主机进行播放之后，该手势识别方法还包括：

获取门内主机返回的对话信息，并在该智能猫眼的显示屏上显示对话信息。

另外，该手势识别装置还包括：发送模块和接收模块，

发送模块，用于将文字信息或语音信息实时发送到终端；

接收模块，用于接收终端返回的的对话信息，并在该智能猫眼的显示屏上显示该对话信息。

附图说明

一个或多个实施例通过与之对应的附图中的图片进行示例性说明，这些示例性说明并不构成对实施例的限定，附图中具有相同参考数字标号的元件表示为类似的元件，除非有特别申明，附图中的图不构成比例限制。

图1是本发明第一实施方式中手势识别方法的流程图；

图2是本发明第二实施方式中手势识别方法的流程图；

图3是本发明第三实施方式中手势识别装置的结构图；

图4是本发明第四实施方式中手势识别装置的结构图；

图5是本发明第五实施方式中智能猫眼的结构图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合附图对本发明的各实施方式进行详细的阐述。然而，本领域的普通技术人员可以理解，在本发明各实施方式中，为了使读者更好地理解本申请而提出了许多技术细节。但是，即使没有这些技术细节和基于以下各实施方式的种种变化和修改，也可以实现本申请所要求保护的技术方案。

本发明的第一实施方式涉及一种手势识别方法，应用于智能猫眼。具体流程如图1所示。

步骤101：当确定智能猫眼被触发后，开启摄像头，通过该摄像头拍摄获得门外的图像；

步骤102：识别该图像中包含的人的手势信息；

步骤103：判断人的手势信息所指示的手势是否为开门手势；若为是，则执行步骤105，若为否，则执行步骤104；

步骤104：若确定不是开门手势，将人的手势信息转换成文字信息或语音信息并保存；

步骤105：若确定是开门手势，向门锁发出开门命令，由该门锁根据开门命令执行开门动作。

在一个具体实现中，智能猫眼处于留言模式，当智能猫眼被触发则开启摄像头拍摄门外的图像，该实施方式能够保证智能猫眼将全部的留言信息保留，同时若是智能猫眼因为意外被触发也能够保证摄像头记录下意外的情况保留证据，有一定的保险作用。

具体的，从摄像头拍摄到的图像中识别出图像中的手势信息，手势的动作存在先后，因此，在将人的手势信息转换成文字信息或语音信息时，需一一对应，根据图像的中手势将识别的手势文字意思记录并识别下一个手势，从而识别出留言中全部的手势信息。

具体的，先判断人的手势信息是否为开门手势，其中，开门手势是自定义的手势信息，例如，当摄像头识别到的第一个手势信息即为开门手势，则智能猫眼向门锁发出开门命令。

在一个具体的实现中，若确定人的手势为开门手势则智能猫眼向门锁发出开门命令，具体的，该智能猫眼与门锁联动，门锁接收到开门命令后执行开门动作。

需要说明的是，智能猫眼与门锁联动，摄像头识别到开门手势到智能猫眼向门锁发出开门命令，还需要其他安全措施配合，例如，在开门之前识别门外的人的人脸特征，以判断门外的人是否为户主等，具体开门过程不是本申请主要实现功能不再赘述。

具体的，智能猫眼被触发，包括：检测到对留言模式的开关按键的触控操作，启动留言模式；或者，检测到留言模式的声控开关被触发，启动留言模式；或者，检测到有人靠近，启动留言模式。

在一个具体的实现中，智能猫眼被设置为留言模式，检测到智能猫眼的开关按键被触发或声控开关被触发，开启摄像头并拍摄图片，保留全部的留言过程，使得聋哑人通过手势表达留言，之后将聋哑人的手势信息转换为文字信息或语音信息并保存，其他人能够根据该留言信息中的文字信息或语音信息了解到聋哑人通过手势信息表达的内容。

本实施方式相对于现有技术而言，该智能猫眼能够将手势信息转换成对应的文字或语音信息并保存，使得不懂手语的人能够明白聋哑人的手语表达的内容，因此方便了聋哑人与其他人的沟通和交流，主要是不懂手语的人在看到聋哑人的手势留言时能够根据对应的文字或语音信息明白聋哑人表达的意思，通过该智能猫眼使聋哑人进行有效的表达，另外，在确定识别到的手势为开门手势后，指示门锁进行开门，实现了智能猫眼与门锁联动,方便了用户开锁。

本发明的第二实施方式涉及一种手势识别方法。第二实施方式与第一实施方式大致相同，主要区别之处在于：本发明第二实施方式中，智能猫眼将手势信息转换的文字信息或语音信息发送到终端，具体流程如图2所示。

步骤201：当确定智能猫眼被触发后，开启摄像头，通过该摄像头拍摄获得门外的图像；

步骤202：识别该图像中包含的人的手势信息；

步骤203：判断人的手势信息所指示的手势是否为开门手势；若为是，则执行步骤204，若为否，则执行步骤205～步骤207；

步骤204：若确定是开门手势，向门锁发出开门命令，由该门锁根据开门命令执行开门动作；

步骤205：若确定不是开门手势，将人的手势信息转换成文字信息或语音信息并保存；

步骤206：将该文字信息或语音信息实时发送到终端；

步骤207：接收该终端返回的对话信息，并通过所述智能猫眼连接的投影探头在门外指定区域投影显示所述对话信息。

具体的，终端与智能猫眼通信连接，智能猫眼将该文字信息或语音信息发送到终端，供终端用户实时通过智能猫眼了解到留言情况，以便于用户掌握访客情况。便于户主根据终端收到的留言信息，随时获知家中访客信息，也可以及时与到达家门口的访客互动，告知访客户主到家时间，或者使户主及时获知访客到访事由等。

具体的，用户在获取到智能猫眼中的留言内容后，将回复的内容通过终端发送到智能猫眼，在一个具体实现中，智能猫眼中包括小型的投影探头将终端发送的对话信息投影出来，使门外的人可以与终端使用者进行对话，具体终端用户与门外的人的对话方式不限于该实施方式，具体根据智能猫眼的设备选择恰当的对话的方式。

基于以上第一或第二实施方式的一个具体实现中，将人的手势信息转换成文字或语音信息之后，还包括：将文字信息实时发送到该智能猫眼连接的门内主机的显示屏上显示，或将该语音信息实时发送到该智能猫眼连接的门内主机进行播放。在一个具体实现中，智能猫眼会连接一个主机，该主机位于室内并连接显示屏，智能猫眼将人的手势信息转换成文字信息后实时发送到该显示屏上显示，或者，将语音信息实时发送到门内主机进行实时播放。

基于以上第一或第二实施方式的一个具体实现中，为了方便聋哑人与其他人进行良好的沟通，当该文字信息发送到门内主机显示屏后，或该语音信息发送到门内主机进行播放后，门内的人可在获取门外的人表达的信息后通过门内主机发送对话信息，并通过与该智能猫眼连接的投影探头在门外指定区域投影显示该对话信息。例如，在户主在家且没有听到门铃响动的情况下，可以及时通过门内主机获知到访信息。

上面各种方法的步骤划分，只是为了描述清楚，实现时可以合并为一个步骤或者对某些步骤进行拆分，分解为多个步骤，只要包括相同的逻辑关系，都在本专利的保护范围内；对算法中或者流程中添加无关紧要的修改或者引入无关紧要的设计，但不改变其算法和流程的核心设计都在该专利的保护范围内。

本发明第三实施方式涉及一种手势识别装置，应用于智能猫眼，如图3所示，包括：获取模块301、识别模块302、判断模块303、转换模块304和确定模块305。

获取模块301，用于当确定智能猫眼被触发后，开启摄像头，通过该摄像头拍摄获得门外的图像；

识别模块302，用于识别图像中包含的人的手势信息；

判断模块303，用于判断人的手势信息所指示的手势是否为开门手势；

转换模块304，用于若确定不是开门手势，将人的手势信息转换成对应的文字信息或语音信息并保存；

确定模块305，用于若确定是开门手势，向门锁发出开门命令，由门锁根据开门命令执行开门动作。

具体的，获取模块301用于，检测到对留言模式的开关按键的触控操作，启动留言模式；或者，检测到留言模式的声控开关被触发，启动留言模式；或者，检测到有人靠近，启动留言模式。

在一个具体的实现中，获取模块包括红外传感器或距离传感器，例如，红外传感器检测到有人靠近智能猫眼时，开启摄像头，并拍摄获得门外的图像，在具体的实现中，获取模块中开启摄像头还可包括其他的传感器，用于检测是否有人访客等，具体使用的传感器的种类不做限制，此处仅是举例说明。

不难发现，本实施方式为与第一实施方式相对应的系统实施例，本实施方式可与第一实施方式互相配合实施。第一实施方式中提到的相关技术细节在本实施方式中依然有效，为了减少重复，这里不再赘述。相应地，本实施方式中提到的相关技术细节也可应用在第一实施方式中。

值得一提的是，本实施方式中所涉及到的各模块均为逻辑模块，在实际应用中，一个逻辑单元可以是一个物理单元，也可以是一个物理单元的一部分，还可以以多个物理单元的组合实现。此外，为了突出本发明的创新部分，本实施方式中并没有将与解决本发明所提出的技术问题关系不太密切的单元引入，但这并不表明本实施方式中不存在其它的单元。

本发明第四实施方式涉及一种手势识别装置。第四实施方式与第三实施方式大致相同，主要区别之处在于：在本发明第四实施方式中，说明了手势识别装置其他的结构，如图4所示。该手势识别装置还包括：发送模块306和接收模块307。

发送模块306，用于将文字信息或语音信息实时发送到终端；

接收模块307，用于接收终端返回的的对话信息，并通过连接的投影探头在门外指定区域投影显示所述对话信息。

具体的，发送模块306还用于，将文字信息实时发送到该智能猫眼连接的门内主机的显示屏上显示，或将语音信息实时发送到该智能猫眼连接的门内主机进行播放。

具体的，转换模块304用于，获取该门内主机返回的对话信息，并通过连接的投影探头在门外指定区域投影显示所述对话信息。

由于第二实施方式与本实施方式相互对应，因此本实施方式可与第二实施方式互相配合实施。第二实施方式中提到的相关技术细节在本实施方式中依然有效，在第二实施方式中所能达到的技术效果在本实施方式中也同样可以实现，为了减少重复，这里不再赘述。相应地，本实施方式中提到的相关技术细节也可应用在第二实施方式中。

本发明第五实施方式涉及一种智能猫眼，如图5所示，包括存储器501、至少一个处理器502。其结构如图5所示，该至少一个的存储器501与该处理器502通信连接。

存储器501用于存储可被该至少一个处理器执行的指令；

处理器502用于执行该存储器中存储的指令。

处理器502还用于执行第一和第二实施方式中有关手势识别方法的执行步骤。

具体的，处理器502用于，当确定智能猫眼被触发后，开启摄像头，通过摄像头拍摄获得门外的图像；识别图像中包含的人的手势信息；判断人的手势信息所指示的手势是否为开门手势；若确定不是开门手势，将人的手势信息转换成对应的文字信息或语音信息并保存；若确定是开门手势，向门锁发出开门命令，由门锁根据开门命令执行开门动作。

具体的，处理器502用于，检测到对留言模式的开关按键的触控操作，启动留言模式；或者，检测到留言模式的声控开关被触发，启动留言模式。

其中，存储器和处理器采用总线方式连接，总线可以包括任意数量的互联的总线和桥，总线将一个或多个处理器和存储器的各种电路链接在一起。总线还可以将诸如外围设备、稳压器和功率管理电路等之类的各种其他电路链接在一起，这些都是本领域所公知的，因此，本文不再对其进行进一步描述。总线接口在总线和收发机之间提供接口。收发机可以是一个元件，也可以是多个元件，比如多个接收器和发送器，提供用于在传输介质上与各种其他装置通信的单元。经处理器处理的数据通过天线在无线介质上进行传输，进一步，天线还接收数据并将数据传送给处理器。

处理器负责管理总线和通常的处理，还可以提供各种功能，包括定时，外围接口，电压调节、电源管理以及其他控制功能。而存储器可以被用于存储处理器在执行操作时所使用的数据。

本领域技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序存储在一个存储介质中，包括若干指令用以使得一个设备(可以是单片机，芯片等)或处理器(processor)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

本领域的普通技术人员可以理解，上述各实施方式是实现本发明的具体实施例，而在实际应用中，可以在形式上和细节上对其作各种改变，而不偏离本发明的精神和范围。

Claims (10)

1.一种手势识别方法，应用于智能猫眼，其特征在于，包括：

当确定所述智能猫眼被触发后，开启摄像头，通过所述摄像头拍摄获得门外的图像；

识别所述图像中包含的人的手势信息；

判断所述人的手势信息所指示的手势是否为开门手势；

若确定不是开门手势，将所述人的手势信息转换成对应的文字信息或语音信息并保存；

若确定是开门手势，向门锁发出开门命令，由所述门锁根据所述开门命令执行开门动作。

2.根据权利要求1所述的手势识别方法，其特征在于，所述确定智能猫眼被触发，包括：

检测到对留言模式的开关按键的触控操作，启动所述留言模式；或者，

检测到留言模式的声控开关被触发，启动所述留言模式；或者，

检测到有人靠近，启动所述留言模式。

3.根据权利要求1或2所述的手势识别方法，其特征在于，所述将所述人的手势信息转换成对应的文字信息或语音信息之后，所述手势识别方法包括：

将所述文字信息或语音信息实时发送到终端；

接收所述终端返回的的对话信息，并通过连接的投影探头在门外指定区域投影显示所述对话信息。

4.根据权利要求3所述的手势识别方法，其特征在于，所述将所述人的手势信息转换成对应的文字信息或语音信息之后，所述手势识别方法包括：

将所述文字信息实时发送到所述智能猫眼连接的门内主机的显示屏上显示，或将所述语音信息实时发送到所述智能猫眼连接的门内主机进行播放。

5.根据权利要求4所述的手势识别方法，其特征在于，所述将所述文字信息实时发送到所述智能猫眼连接的门内主机的显示屏上显示之后，或将所述语音信息实时发送到所述智能猫眼连接的门内主机进行播放之后，所述手势识别方法还包括：

获取所述门内主机返回的对话信息，并通过连接的投影探头在门外指定区域投影显示所述对话信息。

6.一种手势识别装置，应用于智能猫眼，其特征在于，包括：

获取模块，用于当确定所述智能猫眼被触发后，开启摄像头，通过所述摄像头拍摄获得门外的图像；

识别模块，用于识别所述图像中包含的人的手势信息；

判断模块，用于判断所述人的手势信息所指示的手势是否为开门手势；

转换模块，用于若确定不是开门手势，将所述人的手势信息转换成对应的文字信息或语音信息并保存；

确定模块，用于若确定是开门手势，向门锁发出开门命令，由所述门锁根据所述开门命令执行开门动作。

7.根据权利要求6所述的手势识别装置，其特征在于，所述获取模块用于，

检测到对留言模式的开关按键的触控操作，启动所述留言模式；或者，

检测到留言模式的声控开关被触发，启动所述留言模式；或者，

检测到有人靠近，启动所述留言模式。

8.根据权利要求6或7所述的手势识别装置，其特征在于，所述手势识别装置还包括：发送模块和接收模块，

所述发送模块，用于将所述文字信息或语音信息实时发送到终端；

所述接收模块，用于接收所述终端返回的的对话信息，并通过连接的投影探头在门外指定区域投影显示所述对话信息。

9.根据权利要求8所述的手势识别装置，其特征在于，所述发送模块还用于：

将所述文字信息实时发送到所述智能猫眼连接的门内主机的显示屏上显示，或将所述语音信息实时发送到所述智能猫眼连接的门内主机进行播放。

10.一种智能猫眼，其特征在于，包括：

至少一个处理器；以及，

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如权利要求1-5任一所述的手势识别方法。