CN106371559B - 交互方法、交互装置及用户设备 - Google Patents
交互方法、交互装置及用户设备 Download PDFInfo
- Publication number
- CN106371559B CN106371559B CN201510490318.7A CN201510490318A CN106371559B CN 106371559 B CN106371559 B CN 106371559B CN 201510490318 A CN201510490318 A CN 201510490318A CN 106371559 B CN106371559 B CN 106371559B
- Authority
- CN
- China
- Prior art keywords
- information
- user
- portable equipment
- condition
- movement
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- User Interface Of Digital Computer (AREA)
Abstract
本申请实施例公开了一种交互方法、交互装置及用户设备,所述方法包括:获取与一用户头部的第一运动对应的第一信息;获取与所述用户携带的一便携设备的第二运动对应的第二信息;响应于所述第一信息与所述第二信息满足一第一条件,执行与所述第一条件对应的至少一第一操作;其中,所述第一条件对应于:所述便携设备的至少部分由所述用户的视野范围外运动至所述用户的视野范围内。本申请实施例的至少一个实施方案同时根据用户头部的运动和便携设备的运动确定便携设备由用户的视野范围外运动至视野范围内,并进而执行一操作,以更准确的确定用户对所述便携设备的操作意图,方便用户使用。
Description
技术领域
本申请涉及一种交互技术领域,尤其涉及一种交互方法、交互装置及用户设备。
背景技术
随着人机交互技术的发展,用户设备的使用便利性越来越被用户关注。在用户进行操作之前用户设备就能提前感知用户的操作意图并执行对应的操作,可以大大提高用户设备的使用便利性,因此,如何使用户设备及时、准确地感知用户的操作意图已经是设计者越来越关心的问题。
发明内容
本申请实施例可能的目的是:提供一种交互技术方案。
第一方面,本申请的一可能的实施方案提供了一种交互方法,包括:
获取与一用户头部的第一运动对应的第一信息;
获取与所述用户携带的一便携设备的第二运动对应的第二信息;
响应于所述第一信息与所述第二信息满足一第一条件,执行与所述第一条件对应的至少一第一操作;
其中,所述第一条件对应于:所述便携设备的至少部分由所述用户的视野范围外运动至所述用户的视野范围内。
结合第一方面,在第二种可能的实施方式中,所述第一信息与所述第二信息满足所述第一条件包括:
所述第一信息满足一第一信息变化规律,其中:所述第一信息变化规律对应于所述用户头部由一非交互姿态运动至一交互姿态;
所述第二信息满足一第二信息变化规律,其中,所述第二信息变化规律对应于所述便携设备的所述至少部分由一非交互位置运动至一交互位置;
其中:所述交互位置位于所述交互姿态对应的用户的视野范围内。
结合第一方面的上述任一种可能的实施方式,在第三种可能的实施方式中,所述至少一第一操作包括:至少部分激活所述便携设备。
结合第一方面的上述任一种可能的实施方式,在第四种可能的实施方式中,所述方法还包括:
响应于所述第一信息与所述第二信息满足一第二条件,
执行与所述第二条件对应的至少一第二操作;
其中,所述第二条件对应于:所述便携设备的至少部分由所述用户的视野范围内变化至所述用户的视野范围外。
结合第一方面的上述任一种可能的实施方式,在第五种可能的实施方式中,所述第一信息与所述第二信息满足所述第二条件包括:
所述第一信息满足一第三信息变化规律,其中:所述第三信息变化规律对应于所述用户头部由一交互姿态运动至一非交互姿态;
和/或
所述第二信息满足一第四信息变化规律,其中,所述第四信息变化规律对应于所述便携设备的所述至少部分由一交互位置运动至一非交互位置。
结合第一方面的上述任一种可能的实施方式,在第六种可能的实施方式中,所述至少一第二操作包括:至少部分休眠所述便携设备。
结合第一方面的上述任一种可能的实施方式,在第七种可能的实施方式中,所述第一信息包括以下的至少一种:
与所述第一运动对应的第一传感信息、与所述第一运动对应的第一运动姿态信息。
结合第一方面的上述任一种可能的实施方式,在第八种可能的实施方式中,所述第一传感信息包括以下的至少一种:
所述用户的至少一头戴设备的至少一第一惯性传感信息、所述至少一头戴设备采集的至少一第一图像序列、所述用户头部的至少一第二图像序列、所述用户颈部至少一位置对应的至少一肌电传感信息、所述用户颈部至少一位置对应的至少一弯曲传感信息。
结合第一方面的上述任一种可能的实施方式,在第九种可能的实施方式中,所述第二信息包括以下的至少一种:
与所述第二运动对应的第二传感信息、与所述第二运动对应的第二运动姿态信息。
结合第一方面的上述任一种可能的实施方式,在第十种可能的实施方式中,所述第二传感信息包括以下的至少一种:
所述便携设备的至少一第二惯性传感信息、所述便携设备采集的至少一第三图像序列、所述便携设备的至少一第四图像序列。
结合第一方面的上述任一种可能的实施方式,在第十一种可能的实施方式中,所述便携设备的至少部分包括:
所述便携设备的可交互区域。
结合第一方面的上述任一种可能的实施方式,在第十二种可能的实施方式中,所述可交互区域包括:视觉指示区域。
第二方面,本申请的一可能的实施方案提供了一种交互装置,包括:
第一信息获取模块,用于获取与一用户头部的第一运动对应的第一信息;
第二信息获取模块,用于获取与所述用户携带的一便携设备的第二运动对应的第二信息;
第一处理执行模块,用于响应于所述第一信息与所述第二信息满足一第一条件,执行与所述第一条件对应的至少一第一操作;其中,所述第一条件对应于:所述便携设备的至少部分由所述用户的视野范围外运动至所述用户的视野范围内。
结合第二方面,在第二种可能的实施方式中,所述第一信息与所述第二信息满足所述第一条件包括:
所述第一信息满足一第一信息变化规律,其中:所述第一信息变化规律对应于所述用户头部由一非交互姿态运动至一交互姿态;
所述第二信息满足一第二信息变化规律,其中,所述第二信息变化规律对应于所述便携设备的所述至少部分由一非交互位置运动至一交互位置;
其中:所述交互位置位于所述交互姿态对应的用户的视野范围内。
结合第二方面的上述任一种可能的实施方式,在第三种可能的实施方式中,所述至少一第一操作包括:至少部分激活所述便携设备。
结合第二方面的上述任一种可能的实施方式,在第四种可能的实施方式中,所述装置还包括:
第二处理执行模块,用于响应于所述第一信息与所述第二信息满足一第二条件,执行与所述第二条件对应的至少一第二操作;
其中,所述第二条件对应于:所述便携设备的至少部分由所述用户的视野范围内变化至所述用户的视野范围外。
结合第二方面的上述任一种可能的实施方式,在第五种可能的实施方式中,所述第一信息与所述第二信息满足所述第二条件包括:
所述第一信息满足一第三信息变化规律,其中:所述第三信息变化规律对应于所述用户头部由一交互姿态运动至一非交互姿态;
和/或
所述第二信息满足一第四信息变化规律,其中,所述第四信息变化规律对应于所述便携设备的所述至少部分由一交互位置运动至一非交互位置。
结合第二方面的上述任一种可能的实施方式,在第六种可能的实施方式中,所述至少一第二操作包括:至少部分休眠所述便携设备。
结合第二方面的上述任一种可能的实施方式,在第七种可能的实施方式中,所述第一信息包括以下的至少一种:
与所述第一运动对应的第一传感信息、与所述第一运动对应的第一运动姿态信息。
结合第二方面的上述任一种可能的实施方式,在第八种可能的实施方式中,所述第一传感信息包括以下的至少一种:
所述用户的至少一头戴设备的至少一第一惯性传感信息、所述至少一头戴设备采集的至少一第一图像序列、所述用户头部的至少一第二图像序列、所述用户颈部至少一位置对应的至少一肌电传感信息、所述用户颈部至少一位置对应的至少一弯曲传感信息。
结合第二方面的上述任一种可能的实施方式,在第九种可能的实施方式中,所述第二信息包括以下的至少一种:
与所述第二运动对应的第二传感信息、与所述第二运动对应的第二运动姿态信息。
结合第二方面的上述任一种可能的实施方式,在第十种可能的实施方式中,所述第二传感信息包括以下的至少一种:
所述便携设备的至少一第二惯性传感信息、所述便携设备采集的至少一第三图像序列、所述便携设备的至少一第四图像序列。
结合第二方面的上述任一种可能的实施方式,在第十一种可能的实施方式中,所述便携设备的至少部分包括:
所述便携设备的可交互区域。
结合第二方面的上述任一种可能的实施方式,在第十二种可能的实施方式中,所述可交互区域包括:视觉指示区域。
第三方面,本申请的一可能的实施方案提供了一种用户设备,所述用户设备包括:
存储器,用于存放程序;
处理器,用于执行所述存储器存储的程序,所述程序使得所述处理器执行以下操作:
获取与一用户头部的第一运动对应的第一信息;
获取与所述用户携带的一便携设备的第二运动对应的第二信息;
响应于所述第一信息与所述第二信息满足一第一条件,执行与所述第一条件对应的至少一第一操作;
其中,所述第一条件对应于:所述便携设备的至少部分由所述用户的视野范围外运动至所述用户的视野范围内。
本申请实施例的至少一个实施方案同时根据用户头部的运动和便携设备的运动确定便携设备由用户的视野范围外运动至视野范围内,并进而执行一操作,以更准确的确定用户对所述便携设备的操作意图,方便用户使用。
附图说明
图1为本申请实施例的一种交互方法的流程示意图;
图2a和2b为本申请实施例的应用场景示意图;
图3为本申请实施例的一种交互装置的结构示意框图;
图4a~4c为本申请实施例的三种交互装置的结构示意框图;
图5为本申请实施例的一种用户设备的结构示意框图。
具体实施方式
下面结合附图(若干附图中相同的标号表示相同的元素)和实施例,对本申请的具体实施方式作进一步详细说明。以下实施例用于说明本申请,但不用来限制本申请的范围。
本领域技术人员可以理解,本申请中的“第一”、“第二”等术语仅用于区别不同步骤、设备或模块等,既不代表任何特定技术含义,也不表示它们之间的必然逻辑顺序。
如图1所示,本申请实施例的一种可能的实施方式提供了一种交互方法,包括:
S110获取与一用户头部的第一运动对应的第一信息;
S120获取与所述用户携带的一便携设备的第二运动对应的第二信息;
S130响应于所述第一信息与所述第二信息满足一第一条件,执行与所述第一条件对应的至少一第一操作;其中,所述第一条件对应于:所述便携设备的至少部分由所述用户的视野范围外运动至所述用户的视野范围内。
举例来说,本申请提供的交互装置作为本实施例的执行主体,执行S110~S130。具体地,所述交互装置可以以软件、硬件或软硬件结合的方式设置在用户设备中,或者,所述交互装置本身就是所述用户设备;所述用户设备包括但不限于:智能手机、智能手环、智能手表、智能戒指等。
本申请实施例的实施方式同时根据用户头部的第一运动和用户使用的便携设备的第二运动来确定所述便携设备是否进入用户的视野范围内,可以更准确的识别用户对便携设备的操作意图,进而执行对应的操作,避免因用户无意运动了头部、或携带了所述便携设备的肢体的无意动作导致误操作的可能。
通过下面的实施方式进一步说明本申请实施例的各步骤:
S110获取与一用户头部的第一运动对应的第一信息。
在一种可能的实施方式中,可选地,所述第一信息可以包括:
与所述第一运动对应的第一传感信息。
在一种可能的实施方式中,可选地,所述第一传感信息可以包括:
所述用户的至少一头戴设备的至少一第一惯性传感信息。
在一种可能的实施方式中,所述至少一第一惯性传感信息由所述至少一头戴设备上配置的至少一惯性传感器采集。其中,在一种可能的实施方式中,所述至少一惯性传感器本身就是所述至少一头戴设备。
其中,所述至少一头戴设备例如可以为:眼镜、头盔、耳机等中的一个或多个。
在本实施方式中,所述用户头部的第一运动会导致所述至少一头戴设备的运动,进而使得所述至少一惯性传感器采集到与所述第一运动对应的至少一第一惯性传感信息。
在一种可能的实施方式中,可选地,所述第一传感信息可以包括:
所述至少一头戴设备采集的至少一第一图像序列。
在本实施方式中,所述至少一第一图像序列可以由所述至少一头戴设备上的至少一图像采集器件采集。所述第一图像序列例如可以为按时间排序的多个第一图像。在一种可能的实施方式中面,所述第一图像序列例如可以为一段视频中包含的多帧图像。
在本实施方式中,所述用户头部的第一运动会导致所述至少一头戴设备的运动,进而使得所述至少一第一图像序列中的一个或多个对象在所述多个第一图像中的位置发生与所述第一运动对应的变化。
在上述的实施方式中,所述获取所述第一信息,例如可以是通过通信的方式从所述至少一头戴设备获取所述第一信息。
由于用户头部的运动一般是与用户颈部的运动对应的,因此,在一些可能的实施方式中,可以根据所述用户颈部对应的传感信息来确定所述第一运动。
在一种可能的实施方式中,可选地,所述第一传感信息可以包括:
所述用户颈部至少一位置对应的至少一肌电传感信息。
用户的头部运动与用户颈部的肌肉运动对应,因此,在本实施方式中,根据所述颈部至少一位置对应的至少一肌电传感信息可以确定所述第一运动。其中,在一些可能的实施方式中,所述至少一肌电传感信息与所述第一运动或所述用户视野之间的对应关系,可以通过训练得到。所述至少一位置例如可以为用户的后颈部。
在一种可能的实施方式中,例如可以通过用户颈部的一颈环、脖套或贴附的多个肌电传感电极片来获取所述至少一肌电传感信息。
在一种可能的实施方式中,可选地,所述第一传感信息可以包括:所述用户颈部至少一位置对应的至少一弯曲传感信息。
用户的头部运动与用户颈部的弯曲角度对应,例如,用户俯视时,颈部向前弯曲;用户仰视时,颈部向后弯曲等。在本实施方式中,例如,可以通过贴附在用户颈部皮表至少一位置的弯曲传感器来获取所述至少一弯曲传感信息。其中,在一些可能的实施方式中,所述至少一弯曲传感信息与所述第一运动或所述用户视野之间的对应关系,可以通过训练得到。所述至少一位置例如可以为:用户颈部下颌至喉结段。
在一种可能的实施方式中,可选地,所述第一传感信息可以包括:
所述用户头部的至少一第二图像序列。
在一种可能的实施方式中,所述至少一第二图像序列可以是由一外部设备采集的。在本实施方式中,所述获取所述第一信息例如可以为:通过通信的方式从所述外部设备获取所述第一信息。
当然,本领域技术人员可以知道,所述第一传感信息也可以包括上面几种第一传感信息中的多种,以进一步增加用户头部运动姿态判断的准确性。并且,除了上面所述的几种第一传感信息外,其它可能用于确定用户头部运动姿态的传感信息也可以应用在本申请实施例的实施方式中,这里不再一一列举。
在一种可能的实施方式中,所述第一信息可以包括:与所述第一运动对应的第一运动姿态信息。
在一种可能的实施方式中,所述第一运动姿态信息可以是根据上面所述至少一第一传感信息中的一个或多个得到的。例如,根据所述至少一第一惯性传感信息得到所述第一运动姿态信息。
其中,所述第一运动姿态信息例如可以包括:所述第一运动的运动变化信息和姿态变化信息。
S120获取与所述用户携带的一便携设备的第二运动对应的第二信息。
与所述第一信息相似的,在本申请实施例中,所述第二信息可以包括以下的至少一种:
与所述第二运动对应的第二传感信息、与所述第二运动对应的第二运动姿态信息。
其中,所述第二运动姿态信息可以根据所述第二传感信息得到。
在一种可能的实施方式中,与第一传感信息类似的,所述第二传感信息可以包括:
所述便携设备的至少一第二惯性传感信息、和/或所述便携设备采集的至少一第三图像序列。
在本实施方式中,在所述交互方法的执行主体不是所述便携设备时,所述S120可以通过通信的方式从所述便携设备获取所第二信息。
在所述执行主体本身就是所述便携设备时,可以直接从本地获得所述第二信息。
在一种可能的实施方式中,所述第二传感信息可以包括:所述便携设备的至少一第四图像序列。
S130响应于所述第一信息与所述第二信息满足一第一条件,执行与所述第一条件对应的至少一第一操作;其中,所述第一条件对应于:所述便携设备的至少部分由所述用户的视野范围外运动至所述用户的视野范围内。
在本实施方式中,所述用户的视野范围可以根据需要设置。例如:以人类的一般的有效视野范围、最大视野范围、所述用户能够舒适观看对象的视野范围等作为所述用户的视野范围。
在一种可能的实施方式中,例如,所述S130可以根据所述第一信息确定所述用户头部的姿态变化信息;根据所述第二信息确定所述便携设备的位置变化信息(可以是相对于所述用户的位置变化信息);确定在所述用户头部的姿态变化过程中所述便携设备的位置是否会由所述视野范围外进入到视野范围内,如果有,则所述第一信息和所述第二信息满足所述第一条件,执行所述至少一第一操作。
在另一种可能的实施方式中,所述第一信息、所述第二信息与所述第一条件之间的对应关系可以事先获取,再由所述第一信息、所述第二信息和所述对应关系就可以确定所述第一信息和所述第二信息是否满足所述第一条件。
所述对应关系例如可以为:所述第一信息符合一第一信息变化规律时,所述第二信息也符合至少一第二信息变化规律,则所述第一信息和所述第二信息满足所述第一条件。
一种可能的所述对应关系的实施方式如表一所示:
表一:
组合序号 | 第一信息变化规律 | 第二信息变化规律 |
1 | V11 | V21 |
2 | V11 | V22 |
3 | V12 | V23 |
4 | V13 | V24 |
5 | V14 | V25 |
… | … | … |
其中,表一中的每行表示的为满足所述第一条件的所述第一信息和第二信息的一组合。例如:只要所述第一信息满足变化规律V11,并且同时第二信息满足变化规律V21或V22,则所述第一信息和所述第二信息满足所述第一条件。
以所述便携设备为用户佩戴在手腕上的智能手表210为例进行说明,所述第一信息为由用户头部佩戴的耳机220采集的第一惯性传感信息得到的第一运动姿态信息,所述第二信息为所述智能手表210采集的第二惯性传感信息得到的第二运动姿态信息。
如图2a和2b所示,在一种可能的实施方式中,一第一信息变化规律例如可以为:向前下方转动30~45度,其对应于用户的头部由基本平视变成俯视30~45度;一第二信息变化规律例如可以为:向前上方运动了设定距离,并且在此过程中发生了翻转,其对应于用户的手腕抬起并翻转。由图2b可以看出,在所述第一信息满足了上述的第一信息变化规律、所述第二信息满足了上述的第二信息变化规律后,就可以使得所述智能手表的表面由视野范围外暴露于所述用户的视野范围FOV内。
在一种可能的实施方式中,所述第一信息与所述第二信息满足所述第一条件可以包括:
所述第一信息满足一第一信息变化规律,其中:所述第一信息变化规律对应于所述用户头部由一非交互姿态运动至一交互姿态;
所述第二信息满足一第二信息变化规律,其中,所述第二信息变化规律对应于所述便携设备的所述至少部分由一非交互位置运动至一交互位置;
其中:所述交互位置位于所述交互姿态对应的用户的视野范围内。
在本实施方式中,所述非交互姿态、交互姿态、非交互位置以及交互位置可以根据用户的使用习惯等学习得到。
可以看出,在本实施方式中,需要所述用户的头部变为一交互姿态、所述便携设备的位置位于一交互位置,并且所述交互位置位于所述交互姿态对应的用户的视野范围内才执行所述至少一第一操作,进一步的减少误操作的可能。
例如,用户抬头并抬起手腕去取高处的物品时,虽然所述便携设备也从用户的视野范围外运动至视野范围内时,但由于所述用户的头部并不处于与所述便携设备的交互姿态(例如,在一种可能的实施方式中,设定只有用户低头的姿态才是与所述便携设备交互的交互姿态),因此,也不会引起所述至少一第一操作的执行。
所述至少一第一操作可以是与所述头戴设备和/或所述便携设备相关的操作。例如,所述头戴设备与所述便携设备之间的交互操作,例如:数据传输的交互操作等。
在一种可能的实施方式中,可选地,所述至少一第一操作可以包括:至少部分激活所述便携设备。
例如,所述便携设备为一智能手表,所述至少一第一操作包括:将所述智能手表从节能模式唤醒,例如,点亮所述智能手表的屏幕。
在一种可能的实施方式中,可选地,所述便携设备的至少部分可以包括:
所述便携设备的可交互区域。
本领域技术人员可以知道,在用户需要对便携设备进行操作时,通常便携设备的可交互区域在所述用户的视野范围内即可,并不一定需要所述便携设备的全部都位于所述视野范围内。
所述可交互区域为可供用户交互操作的区域,例如:用户手指操作的触摸板、触摸屏、按键等区域;用户眼睛注视的屏幕、指示灯等视觉指示区域等。
在一种可能的实施方式中,可选地,所述方法还可以包括:
响应于所述第一信息与所述第二信息满足一第二条件,
执行与所述第二条件对应的至少一第二操作;
其中,所述第二条件对应于:所述便携设备的至少部分由所述用户的视野范围内变化至所述用户的视野范围外。
所述至少一第二操作可以是与所述头戴设备和/或所述便携设备相关的操作。例如,所述头戴设备与所述便携设备之间的交互操作,例如:数据传输停止的交互操作等。
在一种可能的实施方式中,可选地,所述至少一第二操作可以包括:至少部分休眠所述便携设备。例如,与上面的激活所述便携设备对应的,在所述便携设备离开所述用户的视野范围内时,所述便携设备可以进入关闭屏幕等节能模式。
在一种可能的实施方式中,所述第一信息与所述第二信息满足所述第二条件可以包括:
所述第一信息满足一第三信息变化规律,其中:所述第三信息变化规律对应于所述用户头部由一交互姿态运动至一非交互姿态。
或者,在一种可能的实施方式中,所述第一信息与所述第二信息满足所述第二条件可以包括:
所述第二信息满足一第四信息变化规律,其中,所述第四信息变化规律对应于所述便携设备的所述至少部分由一交互位置运动至一非交互位置。
或者在一种可能的实施方式中,所述第一信息与所述第二信息满足所述第二条件可以包括:所述第一信息满足所述第三信息变化规律,所述第二信息满足所述第四信息变化规律。
通常,在所述非交互姿态或在所述非交互位置,通常所述便携设备不会出现在所述用户的视野范围,因此所述用户的头部由一交互姿态运动到一非交互姿态、或所述便携设备由一交互位置运动到一非交互位置意味着用户有结束交互的意图。本实施方式中根据这样的动作,执行所述至少一第二操作,可以给用户带来更好的体验。
通过图2a和2b所示的应用场景进一步说明本申请实施例。
在本实施方式中,所述交互方法的执行主体为所述便携设备——智能手表210。
所述智能手表210从所述耳机220获取所述用户头部的运动对应的第一惯性传感信息,例如:加速度传感信息、陀螺仪传感信息。同时,所述智能手表210获取自身的惯性传感器的第二惯性传感信息。
其中,在所述用户低头并抬手看所述智能手表210时,所述第一惯性传感信息中包含与所述用户低头的第一运动对应的第一信息、所述第二惯性传感信息中包含与用户抬手的第二运动对应的第二信息,并且这两部分在时间上有重合。
根据上面所述的实施方式中的方法的S130,可以确定所述第一信息与所述第二信息满足所述第一条件,因此,在用户抬手的过程中,所述便携设备从节能模式唤醒,进入方便用户观看、操作的可交互模式,方便了用户的使用。
当然,在其它可能的实施方式中,例如,所述交互方法的执行主体还可以是所述便携设备以外的其它设备。例如,在图2a和2b所示的应用场景中,所述执行主体可以是所述用户的一手机,所述手机分别与所述耳机220和所述智能手表210通信连接,从所述耳机220获取所述第一信息、从所述智能手表210获取所述第二信息,并在处理后确定所述第一信息和所述第二信息是否满足所述第一条件,并在满足时,向所述智能手表210发送一控制指令,例如,发送一从节能模式唤醒的控制指令。
当然,在一种可能的实施方式中,所述执行主体还可以为所述耳机220。例如:所述耳机220从所述智能手表210获取所述第二信息,并与自身获取的第一信息一起处理,确定是否满足所述第一条件,并在满足时执行与所述智能手表210之间的一交互操作。
本领域技术人员可以理解,在本申请具体实施方式的上述方法中,各步骤的序号大小并不意味着执行顺序的先后,各步骤的执行顺序应以其功能和内在逻辑确定,而不应对本申请具体实施方式的实施过程构成任何限定。
如图3所示,本申请实施例的一种可能的实施方式提供了一种交互装置300,包括:
第一信息获取模块310,用于获取与一用户头部的第一运动对应的第一信息;
第二信息获取模块320,用于获取与所述用户携带的一便携设备的第二运动对应的第二信息;
第一处理执行模块330,用于响应于所述第一信息与所述第二信息满足一第一条件,执行与所述第一条件对应的至少一第一操作;其中,所述第一条件对应于:所述便携设备的至少部分由所述用户的视野范围外运动至所述用户的视野范围内。
本申请实施例的实施方式同时根据用户头部的第一运动和用户使用的便携设备的第二运动来确定所述便携设备是否进入用户的视野范围内,可以更准确的识别用户对便携设备的操作意图,进而执行对应的操作,避免因用户无意运动了头部、或携带了所述便携设备的肢体的无意动作导致误操作的可能。
通过下面的实施方式进一步说明本申请实施例的各模块。
在一种可能的实施方式中,可选地,所述第一信息可以包括:
与所述第一运动对应的第一传感信息。
在一种可能的实施方式中,可选地,所述第一传感信息可以包括:
所述用户的至少一头戴设备的至少一第一惯性传感信息。
在一种可能的实施方式中,所述至少一第一惯性传感信息由所述至少一头戴设备上配置的至少一惯性传感器采集。
其中,所述至少一头戴设备例如可以为:眼镜、头盔、耳机等中的一个或多个。
在本实施方式中,所述用户头部的第一运动会导致所述至少一头戴设备的运动,进而使得所述至少一惯性传感器采集到与所述第一运动对应的至少一第一惯性传感信息。
在一种可能的实施方式中,可选地,所述第一传感信息可以包括:
所述至少一头戴设备采集的至少一第一图像序列。
在本实施方式中,所述至少一第一图像序列可以由所述至少一头戴设备上的至少一图像采集器件采集。所述第一图像序列例如可以为按时间排序的多个第一图像。在一种可能的实施方式中面,所述第一图像序列例如可以为一段视频中包含的多帧图像。
在本实施方式中,所述用户头部的第一运动会导致所述至少一头戴设备的运动,进而使得所述至少一第一图像序列中的一个或多个对象在所述多个第一图像中的位置发生与所述第一运动对应的变化。
在一种可能的实施方式中,可选地,所述第一传感信息可以包括:
所述用户颈部至少一位置对应的至少一肌电传感信息。
用户的头部运动与用户颈部的肌肉运动对应,因此,在本实施方式中,根据所述颈部至少一位置对应的至少一肌电传感信息可以确定所述第一运动。其中,在一些可能的实施方式中,所述至少一肌电传感信息与所述第一运动或所述用户视野之间的对应关系,可以通过训练得到。所述至少一位置例如可以为用户的后颈部。
在一种可能的实施方式中,例如可以通过用户颈部的一颈环、脖套或贴附的多个肌电传感电极片来获取所述至少一肌电传感信息。
在一种可能的实施方式中,可选地,所述第一传感信息可以包括:所述用户颈部至少一位置对应的至少一弯曲传感信息。
用户的头部运动与用户颈部的弯曲角度对应,例如,用户俯视时,颈部向前弯曲;用户仰视时,颈部向后弯曲等。在本实施方式中,例如,可以通过贴附在用户颈部皮表至少一位置的弯曲传感器来获取所述弯曲传感信息。其中,在一些可能的实施方式中,所述至少一弯曲传感信息与所述第一运动或所述用户视野之间的对应关系,可以通过训练得到。所述至少一位置例如可以为:用户颈部下颌至喉结段。
在一种可能的实施方式中,可选地,所述第一传感信息可以包括:
所述用户头部的至少一第二图像序列。
在一种可能的实施方式中,所述至少一第二图像序列可以是由一外部设备采集的。在本实施方式中,所述获取所述第一信息例如可以为:通过通信的方式从所述外部设备获取所述第一信息。
当然,本领域技术人员可以知道,所述第一传感信息也可以包括上面几种第一传感信息中的多种,以进一步增加用户头部运动姿态判断的准确性。并且,除了上面所述的几种第一传感信息外,其它可能用于确定用户头部运动姿态的传感信息也可以应用在本申请实施例的实施方式中,这里不再一一列举。
在一种可能的实施方式中,所述第一信息可以包括:与所述第一运动对应的第一运动姿态信息。
在一种可能的实施方式中,所述第一运动姿态信息可以是根据上面所述至少一第一传感信息中的一个或多个得到的。例如,根据所述至少一第一惯性传感信息得到所述第一运动姿态信息。
其中,所述第一运动姿态信息例如可以包括:所述第一运动的运动变化信息和姿态变化信息。
如图4a所示,在一种可能的实施方式中,可选地,所述第一信息获取模块310可以包括一第一通信单元311,用于从至少一外部设备(例如所述至少一头戴设备)获取所述第一信息。
如图4b所示,在另一种可能的实施方式中,可选地,所述第一信息获取模块310可以包括至少一第一信息传感单元312,用于采集所述第一信息。
与所述第一信息相似的,在本申请实施例中,所述第二信息可以包括以下的至少一种:
与所述第二运动对应的第二传感信息、与所述第二运动对应的第二运动姿态信息。
其中,所述第二运动姿态信息可以根据所述第二传感信息得到。
在一种可能的实施方式中,与第一传感信息类似的,所述第二传感信息可以包括:
所述便携设备的至少一第二惯性传感信息、和/或所述便携设备采集的至少一第三图像序列。
在一种可能的实施方式中,如图4b所示,在所述交互装置不属于所述便携设备的场景中,所述第二信息获取模块320可以包括一第二通信单元321,用于通过通信的方式从所述便携设备获取所第二信息。
在一种可能的实施方式中,在所述交互装置属于所述便携设备的场景中,所述第二信息获取模块320可以包括采集所述第二信息的至少一第二信息传感单元322。
在一种可能的实施方式中,所述第二传感信息可以包括:所述便携设备的至少一第四图像序列。在本实施方式中,所述第二信息获取模块320也可以是包括通信单元,用于从外部设备获取所述至少一第四图像序列。
在一种可能的实施方式中,所述第一处理执行模块330可以根据所述第一信息确定所述用户头部的姿态变化信息;根据所述第二信息确定所述便携设备的位置变化信息(可以是相对于所述用户的位置变化信息);确定在所述用户头部的姿态变化过程中所述便携设备的位置是否会由所述视野范围外进入到视野范围内,如果有,则所述第一信息和所述第二信息满足所述第一条件,执行所述至少一第一操作。
在一种可能的实施方式中,所述第一信息与所述第二信息满足所述第一条件可以包括:
所述第一信息满足一第一信息变化规律,其中:所述第一信息变化规律对应于所述用户头部由一非交互姿态运动至一交互姿态;
所述第二信息满足一第二信息变化规律,其中,所述第二信息变化规律对应于所述便携设备的所述至少部分由一非交互位置运动至一交互位置;
其中:所述交互位置位于所述交互姿态对应的用户的视野范围内。
在本实施方式中,所述非交互姿态、交互姿态、非交互位置以及交互位置可以根据用户的使用习惯等学习得到。
可以看出,在本实施方式中,所述第一处理执行模块330需要确定所述用户的头部变为一交互姿态、所述便携设备的位置变成一交互位置,并且所述交互位置位于所述交互姿态对应的用户的视野范围内才执行所述至少一第一操作,进一步的减少误操作的可能。
所述至少一第一操作可以是与所述头戴设备和/或所述便携设备相关的操作。例如,所述头戴设备与所述便携设备之间的交互操作,例如:数据传输的交互操作等。
在一种可能的实施方式中,可选地,所述至少一第一操作可以包括:至少部分激活所述便携设备。
在一种可能的实施方式中,可选地,所述便携设备的至少部分可以包括:
所述便携设备的可交互区域。
所述可交互区域为可供用户交互操作的区域,例如:用户手指操作的触摸板、触摸屏、按键等区域;用户眼睛注视的屏幕、指示灯等视觉指示区域等。
在一种可能的实施方式中,如图4c所示,可选地,所述装置300还可以包括:
第二处理执行模块340,用于响应于所述第一信息与所述第二信息满足一第二条件,执行与所述第二条件对应的至少一第二操作;
其中,所述第二条件对应于:所述便携设备的至少部分由所述用户的视野范围内变化至所述用户的视野范围外。
所述至少一第二操作可以是与所述头戴设备和/或所述便携设备相关的操作。例如,所述头戴设备与所述便携设备之间的交互操作,例如:数据传输停止的交互操作等。
在一种可能的实施方式中,可选地,所述至少一第二操作可以包括:至少部分休眠所述便携设备。
在一种可能的实施方式中,所述第一信息与所述第二信息满足所述第二条件可以包括:
所述第一信息满足一第三信息变化规律,其中:所述第三信息变化规律对应于所述用户头部由一交互姿态运动至一非交互姿态。
或者,在一种可能的实施方式中,所述第一信息与所述第二信息满足所述第二条件可以包括:
所述第二信息满足一第四信息变化规律,其中,所述第四信息变化规律对应于所述便携设备的所述至少部分由一交互位置运动至一非交互位置。
或者在一种可能的实施方式中,所述第一信息与所述第二信息满足所述第二条件可以包括:所述第一信息满足所述第三信息变化规律,所述第二信息满足所述第四信息变化规律。
通常,在所述非交互姿态或在所述非交互位置,通常所述便携设备不会出现在所述用户的视野范围,因此所述用户的头部由一交互姿态运动到一非交互姿态、或所述便携设备由一交互位置运动到一非交互位置意味着用户有结束交互的意图。本实施方式中根据这样的动作,执行所述至少一第二操作,可以给用户带来更好的体验。
图5为本申请实施例提供的又一种用户设备500的结构示意图,本申请具体实施例并不对用户设备500的具体实现做限定。如图5所示,该用户设备500可以包括:
处理器(processor)510、通信接口(Communications Interface)520、存储器(memory)530、以及通信总线540。其中:
处理器510、通信接口520、以及存储器530通过通信总线540完成相互间的通信。
通信接口520,用于与比如客户端等的网元通信。
处理器510,用于执行程序532,具体可以执行上述方法实施例中的相关步骤。
具体地,程序532可以包括程序代码,所述程序代码包括计算机操作指令。
处理器510可能是一个中央处理器CPU,或者是特定集成电路ASIC(ApplicationSpecific Integrated Circuit),或者是被配置成实施本申请实施例的一个或多个集成电路。
存储器530,用于存放程序532。存储器530可能包含高速RAM存储器,也可能还包括非易失性存储器(non-volatile memory),例如至少一个磁盘存储器。程序532具体可以用于使得所述用户设备500执行以下步骤:
获取与一用户头部的第一运动对应的第一信息;
获取与所述用户携带的一便携设备的第二运动对应的第二信息;
响应于所述第一信息与所述第二信息满足一第一条件,执行与所述第一条件对应的至少一第一操作;
其中,所述第一条件对应于:所述便携设备的至少部分由所述用户的视野范围外运动至所述用户的视野范围内。
其中,在一种可能的实施方式中,所述便携设备可以为所述用户设备。
程序532中各步骤的具体实现可以参见上述实施例中的相应步骤和单元中对应的描述,在此不赘述。所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的设备和模块的具体工作过程,可以参考前述方法实施例中的对应过程描述,在此不再赘述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及方法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上实施方式仅用于说明本申请,而并非对本申请的限制,有关技术领域的普通技术人员,在不脱离本申请的精神和范围的情况下,还可以做出各种变化和变型,因此所有等同的技术方案也属于本申请的范畴,本申请的专利保护范围应由权利要求限定。
Claims (8)
1.一种交互方法,其特征在于,包括:
获取与一用户头部的第一运动对应的第一信息;
获取与所述用户携带的一便携设备的第二运动对应的第二信息;
响应于所述第一信息与所述第二信息满足一第一条件,执行与所述第一条件对应的至少一第一操作;
其中,所述第一条件对应于:所述便携设备的至少部分由所述用户的视野范围外运动至所述用户的视野范围内;
所述第一信息与所述第二信息满足所述第一条件包括:
所述第一信息满足一第一信息变化规律,其中:所述第一信息变化规律对应于所述用户头部由一非交互姿态运动至一交互姿态;
所述第二信息满足一第二信息变化规律,其中,所述第二信息变化规律对应于所述便携设备的所述至少部分由一非交互位置运动至一交互位置;
其中:所述交互位置位于所述交互姿态对应的用户的视野范围内。
2.如权利要求1所述的方法,其特征在于,所述至少一第一操作包括:至少部分激活所述便携设备。
3.如权利要求1所述的方法,其特征在于,所述第一信息包括以下的至少一种:
与所述第一运动对应的第一传感信息、与所述第一运动对应的第一运动姿态信息。
4.如权利要求1所述的方法,其特征在于,所述第二信息包括以下的至少一种:
与所述第二运动对应的第二传感信息、与所述第二运动对应的第二运动姿态信息。
5.一种交互装置,其特征在于,包括:
第一信息获取模块,用于获取与一用户头部的第一运动对应的第一信息;
第二信息获取模块,用于获取与所述用户携带的一便携设备的第二运动对应的第二信息;
第一处理执行模块,用于响应于所述第一信息与所述第二信息满足一第一条件,执行与所述第一条件对应的至少一第一操作;其中,所述第一条件对应于:所述便携设备的至少部分由所述用户的视野范围外运动至所述用户的视野范围内;
所述第一信息与所述第二信息满足所述第一条件包括:
所述第一信息满足一第一信息变化规律,其中:所述第一信息变化规律对应于所述用户头部由一非交互姿态运动至一交互姿态;
所述第二信息满足一第二信息变化规律,其中,所述第二信息变化规律对应于所述便携设备的所述至少部分由一非交互位置运动至一交互位置;
其中:所述交互位置位于所述交互姿态对应的用户的视野范围内。
6.如权利要求5所述的装置,其特征在于,所述至少一第一操作包括:至少部分激活所述便携设备。
7.如权利要求5所述的装置,其特征在于,所述便携设备的至少部分包括:
所述便携设备的可交互区域。
8.一种用户设备,其特征在于,所述用户设备包括:
存储器,用于存放程序;
处理器,用于执行所述存储器存储的程序,所述程序使得所述处理器执行以下操作:
获取与一用户头部的第一运动对应的第一信息;
获取与所述用户携带的一便携设备的第二运动对应的第二信息;
响应于所述第一信息与所述第二信息满足一第一条件,执行与所述第一条件对应的至少一第一操作;
其中,所述第一条件对应于:所述便携设备的至少部分由所述用户的视野范围外运动至所述用户的视野范围内;
所述第一信息与所述第二信息满足所述第一条件包括:
所述第一信息满足一第一信息变化规律,其中:所述第一信息变化规律对应于所述用户头部由一非交互姿态运动至一交互姿态;
所述第二信息满足一第二信息变化规律,其中,所述第二信息变化规律对应于所述便携设备的所述至少部分由一非交互位置运动至一交互位置;
其中:所述交互位置位于所述交互姿态对应的用户的视野范围内。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510490318.7A CN106371559B (zh) | 2015-08-11 | 2015-08-11 | 交互方法、交互装置及用户设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510490318.7A CN106371559B (zh) | 2015-08-11 | 2015-08-11 | 交互方法、交互装置及用户设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106371559A CN106371559A (zh) | 2017-02-01 |
CN106371559B true CN106371559B (zh) | 2019-09-10 |
Family
ID=57880929
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510490318.7A Active CN106371559B (zh) | 2015-08-11 | 2015-08-11 | 交互方法、交互装置及用户设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106371559B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104156141A (zh) * | 2014-09-09 | 2014-11-19 | 联想(北京)有限公司 | 一种穿戴式电子设备的控制方法和装置 |
CN104375648A (zh) * | 2014-11-26 | 2015-02-25 | 三星电子(中国)研发中心 | 一种腕式设备及其使用方法 |
CN104793866A (zh) * | 2015-05-05 | 2015-07-22 | 陈王胜 | 一种智能腕式可穿戴设备背光控制单元和控制方法 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2455839B1 (en) * | 2010-11-09 | 2016-04-06 | BlackBerry Limited | Method and apparatus for controlling an output device of a portable electronic device |
US20130017516A1 (en) * | 2011-07-11 | 2013-01-17 | Kelly Tyler | Active braille timepiece & related methods |
CN102915189B (zh) * | 2011-08-02 | 2016-03-30 | 联想(北京)有限公司 | 一种显示处理方法及电子设备 |
CN103207666B (zh) * | 2012-01-16 | 2016-12-14 | 联想(北京)有限公司 | 一种响应用户操作的处理方法及电子设备 |
US9622074B2 (en) * | 2013-07-24 | 2017-04-11 | Htc Corporation | Method for continuing operation on mobile electronic device, mobile device using the same, wearable device using the same, and computer readable medium |
CN104516660B (zh) * | 2013-09-27 | 2019-03-08 | 联想(北京)有限公司 | 一种信息处理方法、系统及电子设备 |
CN103977559B (zh) * | 2014-05-23 | 2017-10-17 | 北京智谷睿拓技术服务有限公司 | 交互方法及交互装置 |
CN104484047B (zh) * | 2014-12-29 | 2018-10-26 | 北京智谷睿拓技术服务有限公司 | 基于可穿戴设备的交互方法及交互装置、可穿戴设备 |
CN104503589B (zh) * | 2015-01-05 | 2018-02-16 | 京东方科技集团股份有限公司 | 体感识别系统及其识别方法 |
-
2015
- 2015-08-11 CN CN201510490318.7A patent/CN106371559B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104156141A (zh) * | 2014-09-09 | 2014-11-19 | 联想(北京)有限公司 | 一种穿戴式电子设备的控制方法和装置 |
CN104375648A (zh) * | 2014-11-26 | 2015-02-25 | 三星电子(中国)研发中心 | 一种腕式设备及其使用方法 |
CN104793866A (zh) * | 2015-05-05 | 2015-07-22 | 陈王胜 | 一种智能腕式可穿戴设备背光控制单元和控制方法 |
Also Published As
Publication number | Publication date |
---|---|
CN106371559A (zh) | 2017-02-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103676604B (zh) | 手表及其运行方法 | |
US11776322B2 (en) | Pinch gesture detection and recognition method, device and system | |
US9671872B2 (en) | Gesture recognition method, gesture recognition system, terminal device and wearable device | |
CN105046215B (zh) | 不受个体佩戴位置和佩戴方式影响的姿态行为识别方法 | |
CN109918975A (zh) | 一种增强现实的处理方法、对象识别的方法及终端 | |
CN104503589B (zh) | 体感识别系统及其识别方法 | |
CN109144181A (zh) | 设备中的抬起手势检测 | |
KR20150079804A (ko) | 이미지 처리 방법, 장치, 단말기기, 프로그램 및 기록매체 | |
CN108829242A (zh) | 智能终端及其非触控式操作方法 | |
CN109461124A (zh) | 一种图像处理方法及终端设备 | |
US20160091956A1 (en) | Switching Method And Electronic Device | |
CN107124560A (zh) | 一种自拍系统、媒质和方法 | |
CN103777861A (zh) | 终端和用于在终端中控制触摸操作的方法 | |
CN104573459B (zh) | 交互方法、交互装置及用户设备 | |
CN108431731A (zh) | 用于执行基于生物计量信号的功能的方法、存储介质和电子设备 | |
JP6621133B2 (ja) | 情報処理方法、情報処理装置及びプログラム | |
CN107450672B (zh) | 一种高识别率的腕式智能装置 | |
CN106371559B (zh) | 交互方法、交互装置及用户设备 | |
CN208061134U (zh) | 一种手部动作姿态捕捉设备及虚拟现实交互系统 | |
CN107209936A (zh) | 信息处理设备,信息处理方法和程序 | |
CN108932058A (zh) | 显示方法、装置及电子设备 | |
US10075816B2 (en) | Mobile device position determining method and determining apparatus, and mobile device | |
CN206805464U (zh) | Vr环境与现实环境实现真实交互的触感手套 | |
CN106156554B (zh) | 交互方法、交互装置以及用户设备 | |
JP6577324B2 (ja) | 行動判定装置及び行動判定方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |