CN107027340A - 可穿戴电子系统 - Google Patents
可穿戴电子系统 Download PDFInfo
- Publication number
- CN107027340A CN107027340A CN201580034122.5A CN201580034122A CN107027340A CN 107027340 A CN107027340 A CN 107027340A CN 201580034122 A CN201580034122 A CN 201580034122A CN 107027340 A CN107027340 A CN 107027340A
- Authority
- CN
- China
- Prior art keywords
- wearable device
- information
- audio
- wearable
- audio devices
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G04—HOROLOGY
- G04G—ELECTRONIC TIME-PIECES
- G04G21/00—Input or output devices integrated in time-pieces
- G04G21/04—Input or output devices integrated in time-pieces using radio waves
-
- G—PHYSICS
- G04—HOROLOGY
- G04G—ELECTRONIC TIME-PIECES
- G04G21/00—Input or output devices integrated in time-pieces
- G04G21/06—Input or output devices integrated in time-pieces using voice
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2420/00—Details of connection covered by H04R, not provided for in its groups
- H04R2420/05—Detection of connection of loudspeakers or headphones to amplifiers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R5/00—Stereophonic arrangements
- H04R5/033—Headphones for stereophonic communication
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
一种在可穿戴音频装置上提供通知的方法。该方法包括检测可穿戴音频装置的物理配置。使用由可穿戴音频装置上的一个或多个传感器提供的信息来确定物理配置。以对应于所确定的物理配置的方式提供从移动装置路由的至少一个通知,该移动装置与可穿戴音频装置连接。
Description
技术领域
一个或多个实施方式总体上涉及可穿戴音频装置,并且更具体地涉及可配置的可穿戴装置和基于可穿戴装置配置的服务。
背景技术
诸如耳机、头戴耳机和耳塞的个人收听装置用来为用户再现来自电子装置(诸如音乐播放器、录音机、手机等)的声音。大部分个人收听装置简单地将声音从声音产生电子装置传递到该收听装置的扬声器部分。
发明内容
一个或多个实施方式涉及可配置的可穿戴音频装置和基于可穿戴装置配置的服务。在一个实施方式中,方法在可穿戴音频装置上提供通知。方法包括检测可穿戴音频装置的物理配置。使用由可穿戴音频装置上的一个或多个传感器提供的信息来确定物理配置。以对应于所确定的物理配置的方式提供从移动装置路由的至少一个通知,所述移动装置与可穿戴音频装置连接。
通过传感器感测可穿戴音频装置的一个或多个耳机的位置来确定物理配置。
物理配置是对可穿戴音频装置的形态的操作。
所述方法还包括对由一个或多个服务提供的通知信息的引入进行管理。
对由一个或多个服务提供的通知信息的引入进行管理包括生成一个或多个服务列表、生成对于一个或多个服务的一个或多个通知、以及接收对于一个或多个服务的优先级分类。
所述方法还包括使可穿戴音频装置与另一可穿戴装置无线连接。
基于被连接的装置的监测状态以及所确定的物理配置,至少一个通知被路由到作为当前主要使用焦点的装置。
基于预定的优先级分类,所述至少一个通知被选择性地路由到作为所述当前主要使用焦点的所述装置。
根据从被连接的装置的传感器接收到的信息确定监测状态。
方法还包括根据请求执行音频回放,其中音频回放包括基于预设时间间隔的预选内容类别的获取内容。
方法还包括通过查询多个第三方来源并选择对可穿戴音频装置、移动装置和可穿戴电子装置之一的合适动作,从所述可穿戴音频装置接收主题命令并解释所述主题命令。
方法还包括对可穿戴音频装置、移动装置和可穿戴电子装置之间的交互进行协调。
方法还包括通过可穿戴音频装置执行应用或功能,其中应用或功能基于有关可穿戴音频装置的用户语境、以及来自移动装置、服务器装置和基于云的服务中的一个或多个的信息中的一个或多个提供语境信息。
方法还包括通过移动装置执行伴随应用,其中伴随应用允许选择包括被提供到可穿戴音频装置的个人化的和语境音频信息的服务。
伴随应用使用通知生成应用列表。
方法还包括通过可穿戴音频装置直接地且与其他连接装置结合来执行语境检测。
可穿戴音频装置与生态系统中的其他装置连接,所述生态系统包括以下中的一个或多个:智能电话、平板计算机、另一可穿戴装置、智能电视、设备和车辆。
在另一实施方式中,系统提供包括管理器的主机装置,所述管理器被配置为以对应于可穿戴装置的检测到的物理配置的方式,向连接的所述可穿戴音频装置提供至少一个通知。
在一个实施方式中,具有指令的非暂时性计算机可读介质,该指令在计算机上执行时执行包括检测可穿戴音频装置的物理配置的方法。在一个实施方式中,使用由可穿戴音频装置上的一个或多个传感器提供的信息来确定物理配置。以对应于所确定的物理配置的方式提供从移动装置路由的至少一个通知,该移动装置与可穿戴音频装置连接。
参考以下描述、所附权利要求和附图,一个或多个实施方式的这些和其它特征、方面和优点将得以更好地理解。
附图说明
图1示出根据实施方式的用于音频通信的可穿戴装置系统。
图2A示出根据实施方式的示例性计算环境或生态系统,其提供可穿戴装置可访问的内容和装置的生态系统的免提控制。
图2B示出电子可穿戴装置结合一个或多个其他装置,例如图2A所示的装置的实施方式的示例性实现方式的框图。
图3示出根据实施方式的内容管理器的示例性架构。
图4示出根据实施方式的由内容管理器执行的示例性管理过程。
图5示出根据实施方式的示例性读出配置和选择。
图6示出根据实施方式的示例性读出内容设置。
图7示出根据实施方式的示例性读出过程。
图8示出根据实施方式的示例性通知框架。
图9示出根据实施方式的示例性音频通知配置。
图10示出根据实施方式的示例性通知过程。
图11示出根据实施方式的示例性面板语音命令解释。
图12A和12B示出根据实施方式的用于多装置编排的示例性表格,其中生态系统中的指定装置执行各种动作。
图13示出根据实施方式的示例性耳内型电子可穿戴(音频)装置(头戴耳机)和智能装置(活动的)编排配置。
图14示出根据实施方式的示例性耳内型电子可穿戴装置和智能装置(隐藏的)编排配置。
图15示出根据实施方式的作为项链佩戴的示例性电子可穿戴装置和智能装置(活动的)编排配置。
图16示出根据实施方式的示例性耳内型电子可穿戴装置和另一可穿戴装置的编排配置。
图17示出根据实施方式的作为项链佩戴的示例性电子可穿戴装置和另一可穿戴装置的编排配置。
图18示出根据实施方式的示例性耳内型电子可穿戴装置、智能装置(活动的)和另一可穿戴装置的编排配置。
图19示出根据实施方式的示例性耳内型电子可穿戴装置、智能装置(隐藏的)和另一可穿戴装置的编排配置。
图20示出根据实施方式的作为项链佩戴的示例性电子可穿戴装置、智能装置(活动的)和另一可穿戴装置的编排配置。
图21示出根据实施方式的作为项链佩戴的示例性电子可穿戴装置、智能装置(隐藏的)和另一可穿戴装置的编排配置。
图22A-22B示出根据实施方式的智能装置(活动的)和另一可穿戴装置的编排配置的实施例。
图23示出根据实施方式的示例性电子可穿戴装置和智能装置(隐藏的)编排配置。
图24示出根据实施方式的电子可穿戴装置、另一可穿戴装置与智能装置之间的多个无线连接的实施例。
图25示出根据实施方式的用于连接的装置的故障转移的实施例。
图26示出根据实施方式的多个电子装置的自动重新连接的实施例。
图27示出根据实施方式的多个电子装置的屏幕检测和路由的实施例。
图28示出根据实施方式的用于提供语境个人音频的流程,其利用通过通信链路来自与电子可穿戴装置通信的语境信息平台或主机装置的信息。图29示出根据实施方式的用于提供语境个人音频的流程,其利用电子可穿戴装置的语音识别模块。
图29示出根据实施方式的用于提供语境个人音频的流程,其利用电子可穿戴装置的语音识别模块。
图30示出根据实施方式的用于提供信息娱乐的流程。
图31示出根据实施方式的用于提供请求的信息的流程。
图32示出根据实施方式的用于提供(积极型的)智能警报的流程。
图33示出根据实施方式的用于提供扩增音频的流程。
图34示出根据实施方式的用于提供装置控制的流程。
图35示出根据实施方式的用于提供生态系统装置集成的流程。
图36A-36C示出根据实施方式的对于电子可穿戴装置的示例性用户体验(UX)分类。
图37示出根据实施方式的用于激活有关电子可穿戴装置的UX的示例性过程。
图38示出根据实施方式的用于电子可穿戴装置的语境和个人化音频的示例性架构。
图39示出根据实施方式的确定电子可穿戴装置的语境检测(第一次)的示例性流程。
图40示出根据实施方式的电子可穿戴装置的交互式音频回放的示例性流程。
图41示出根据实施方式的用于早晨读出的内容收集的示例性过程。
图42示出根据实施方式的确定电子可穿戴装置的语境检测(非第一次)的示例性过程。
图43示出根据实施方式的电子可穿戴装置的音频菜单/交互式音频回放的示例性过程。
图44为示出包括用于实现实施方式的计算机系统的计算系统的高级框图。
具体实施方式
一个或多个实施方式涉及可配置的可穿戴音频装置和基于可穿戴装置配置的服务。在一个实施方式中,方法在可穿戴音频装置上提供通知。该方法包括检测可穿戴音频装置的物理配置。使用由可穿戴音频装置上的一个或多个传感器提供的信息来确定物理配置。以对应于所确定的物理配置的方式提供从移动装置路由的至少一个通知,该移动装置与可穿戴音频装置连接。
在另一实施方式中,系统提供包括管理器的主机装置,该管理器被配置用于以对应于可穿戴装置的检测的物理配置的方式,向连接的可穿戴音频装置提供至少一个通知。
在一个实施方式中,非暂时性计算机可读介质具有指令,当所述指令在计算机上执行时,执行包括检测可穿戴音频装置的物理配置的方法。在一个实施方式中,使用由可穿戴音频装置上的一个或多个传感器提供的信息来确定物理配置。以对应于所确定的物理配置的方式提供从移动装置路由的至少一个通知,该移动装置与可穿戴音频装置连接。
参考以下描述、随附权利要求和附图,一个或多个实施方式的这些和其它特征、方面和优点将得以更好地理解。
实施方式
为了说明一个或多个实施方式的总体原则的目的进行以下描述,并且以下描述不旨在限制本文所要求保护的发明概念。另外,本文所描述的特定特征可能以各种可能组合和排列中的每一个与其他描述的特征结合使用。除非本文另外具体限定,所有术语将被给予其最广泛的可能解释,包括从本说明书暗示的意义以及本领域技术人员理解的和/或如字典、专题论文等中限定的意义。
一个或多个实施方式涉及可配置的可穿戴音频装置和基于可穿戴音频装置配置的服务。在一个实施方式中,方法在可穿戴音频装置上提供通知。该方法包括检测可穿戴音频装置的物理配置。可使用由可穿戴音频装置上的一个或多个传感器提供的信息来确定物理配置。以对应于所确定的物理配置的方式提供从移动装置路由的至少一个通知,该移动装置与可穿戴音频装置连接。
一个或多个实施方式基于检测的可穿戴配置信息和其他语境提供管理的服务。服务可包括读出重要信息、通知和增强的语音命令。其他特征可包括对处于用户进行的集中使用(即,读取屏幕显示,收听装置,操纵屏幕上的显示等)中的一个或多个装置的多装置协调/智能路由、信息聚合和智能通知传播。一个实施方式通过传感器(例如,光传感器、触摸传感器、移动传感器、位置传感器等)提供装置状态检测,该传感器可辅助控制各种装置使用模式。一个实施方式提供路由到使用中的当前装置的智能装置的屏幕检测。一个或多个实施方式提供多服务混洗(shuffle)或聚合以方便动作(例如,横跨多个应用)。提供在显示器上或通过音频(其可限于有用的通知)接收的通知的智能传播、以及对信息(例如,感兴趣的新闻、天气、日历事件、交通等)的智能管理,并且可限于集中使用中的装置。
图1示出根据实施方式的用于音频通信的可穿戴装置系统100。在一个实施方式中,可穿戴装置105包括:音频输出装置(诸如耳塞111和113)、音频输出装置之间的可替换绳索(或缆线)116、与音频模块110耦接的至少一个电池、与音频模块110和/或音频模块112耦接的控制器模块,控制器模块通过例如包括音频控制件(例如,按钮、触摸接口、麦克风(例如,使用语音识别)、运动感测等)的控制件来控制音频模块110和/或音频模块112。在一个实施方式中,控制件在被用户作为项链佩戴时,放置在绳索或缆线前部附近以用于简单和舒适的访问。在另一实施例中,控制件定位在音频模块110和112中的任一个或两者上。耳塞111和113可通过数据连接(例如,微USB、或任何其他合适的连接性)附接到可交换绳索116。在一个实施例中,音频模块110与连接器114(例如,公微型USB、母微型USB、任何其他合适的连接器等)连接,并且音频模块112与连接器115(例如,母微型USB、公微型USB等)连接。在一个实施例中,可穿戴装置105可使用诸如无线网关(例如,等)的通信介质130与电子主机装置120(例如,智能电话、平板装置、计算装置、设备、可穿戴装置(例如,手腕或悬挂装置)、车辆等)通信。在一个实施方式中,可穿戴装置105可由用户佩戴以用于通过耳塞111和113中一个或两者收听音频。
在一个实施方式中,绳索或缆线116可包括通过绳索或缆线行进的缆线,以用于音频模块110与112之间的通信。在一个实施方式中,绳索或缆线116可包括其他软材料的包覆模制材料(例如,泡沫、凝胶、塑料、其他模制材料等)以用于可穿戴舒适。在一个实施例中,绳索或缆线116可以在抵靠用户颈部放置时成形以用于舒适配合。在一个实施方式中,绳索或缆线116基于指定使用(诸如耐水或防水以用于水类运动使用)来设计,包括附加填料或材料以用于慢跑或当可穿戴装置105在使用中时使得缆线或绳索116移动的运动/活动(例如,耳塞部署在用户耳内、作为项链佩戴、以及音频模块110和112接通电源、处于备用或操作等)。在一个实施方式中,绳索或缆线116可包括成形的记忆合金或超弹性(或伪弹性)材料,诸如镍钛合金。
在一个实施方式中,可穿戴装置105具有重量,当被用户佩戴(作为项链佩戴、佩戴在一只耳朵中、或佩戴在双耳内)时,该重量符合人体工程学地分布在缆线或绳索116与耳塞111和113之间。
在一个实施例中,音频模块110可包括:电池(例如,可再充电电池、可替换电池等)、指示器LED、语音激活按钮(例如,数字辅助激活、语音命令接收触发器等)或触摸激活装置(例如,电阻数字转换器、触摸屏按钮、电容区域或按钮等)、电源按钮或触摸激活装置、以及音频驱动器。在一个实施例中,音频模块110可包括电容区域或按钮和电阻数字转换器,其可以是可编程的以用作控制件(例如,音量、电源、麦克风控制、静音、方向控制(向前/向后)等)。
在一个实施例中,绳索或缆线116可包括一个或多个触觉元件,其包括用于触觉通知(例如,低电量警告、传入消息(例如,语音邮件或文本消息)、传入呼叫、指定呼叫者、计时器通知、距离通知等)的触觉电动机。在一个实施例中,触觉元件可在可穿戴装置105被用户佩戴时定位在颈部后、围绕缆线或绳索116展开,或单个触觉元件放置在可穿戴装置105上的期望或可配置位置中。
在一个实施例中,音频模块112可包括:控制器模块、连接模块、音量按钮或触摸敏感控制件、播放按钮或触摸控制件、霍尔效应传感器、一个或多个麦克风、以及音频驱动器。在一个实施例中,音频模块110和112可包括其他传感器,诸如运动传感器、压力传感器、触摸传感器、温度传感器、表压传感器、生物计量传感器、回转仪传感器、全球定位系统(GPS)传感器或模块、光传感器等。
在一个实施例中,一个音频模块(例如,音频模块112)的连接模块可包括无线天线(例如,天线、Wi-Fi天线、蜂窝天线等)以无线连接到主机装置120。其他部件可包括控制器模块、物理按钮(被配置为控制音量、播放音乐等)、换能器(诸如霍尔效应传感器)、麦克风、或音频驱动器。具有耳塞111的其他音频模块(例如,音频模块110)可包括用于为可穿戴装置105供电的电池、连同一个或多个指示器LED、物理按钮(被配置为电源按钮、或虚拟辅助激活、或音频驱动器)。
在一个实施例中,耳塞111和113可具有任何类型的配置,以用于在耳布局中、在耳环或凸缘上、分类的尺寸和材料(例如,硅、弹性体、泡沫等)。在一个实施方式中,耳塞111和耳塞113的内耳部分的材料可以被设置尺寸以用于噪声消除连同音频模块112的电子噪声消除。
在一个实施例中,音频模块110可包括用于为可穿戴装置105充电而连接的可再充电电池和耳塞111以进行音频通信。
在一个实施例中,具有耳塞111的音频模块110可包括用于与具有耳塞113的音频模块112配合的磁体(或一个或多个磁性元件),和用于可穿戴装置105的另一磁体以进行音频通信。在一个实施例中,音频模块110和112包括用于彼此磁性吸引的磁体,以用于配合音频模块110、112、耳塞111、113并且形成项链。在一个实施例中,可穿戴装置105与主机装置120通信。用户可利用物理控制按钮、触摸敏感区域、或向可穿戴装置105提供语音命令以用于控制和使用。在一个实施例中,可穿戴装置105无线连接到主机装置120。在一个实施方式中,可穿戴装置105包括夹子(例如,领夹)以用于在被用户佩戴时(例如,当慢跑、骑马等时)减小移动。
在一个实施例中,代替磁性元件或磁体,可使用其他耦接元件,诸如可移除的(或分离)的锁定元件、电子磁体、扣子、钩-环紧固元件等。
在一个实施例中,具有耳塞111和113的可穿戴音频模块110和112分别可包括用于可穿戴装置105的一个或多个传感器以检测装置的配置(即,配置检测)。例如,传感器可辅助可穿戴装置105用于确定可穿戴装置的配置状态(例如,耳塞处于一只耳朵中、两个耳塞处于相应耳朵中、可穿戴装置处于项链配置、还是可穿戴装置未被用户佩戴)。
在一个实施例中,用于耳塞的每个音频模块110和112具有加速计,其感测用户的运动或音频模块和耳塞定向。在一些实施方式中,所佩戴的具有耳塞111和113的音频模块110和112将处于某种级别的匀速运动,或使得绳索116大致向下指向。由此,允许确定一个、两个还是没有耳塞111和113在使用中。在其他实施方式中,音频模块110和112以及耳塞111和113可以被配置为响应于各种手势,诸如双击、晃动、或可以被加速计记录的其他类似手势或移动。
在一个实施例中,用于耳塞111和113的每个音频模块110和112包括两个麦克风:一个采样外部环境的麦克风、以及一个在耳塞内采样的麦克风。比较信号以用于选择最佳信号和进一步的音频处理。例如,使用麦克风差值的信号比较可记录耳塞内麦克风上的抑制噪声,以便确定耳塞是否在使用中(例如,位于用户的耳内)。任选地,麦克风可用于执行音频处理,诸如噪声消除或“收听”语音命令。在一些实施方式中,麦克风可以是超小型麦克风,但也可利用其他麦克风。
在一个实施方式中,用于耳塞的每个音频模块110和112包括压力传感器。在一个实施例中,当耳塞111、113插入耳内或从耳移除时,如压力峰值或压力谷值的事件出现。压力峰值或压力谷值可随后用于确定可穿戴装置的状态。
在一个实施例中,用于耳塞111和113的每个音频模块110、112包括光学接近传感器,以使得在被佩戴时产生稳定接近信号。在一个实施方式中,光学接近传感器可定位在耳塞111和/或耳塞113的外壳内,以使得当耳塞被佩戴时,光学接近传感器抵靠用户的皮肤。在一个实施例中,光学接近传感器对一个、两个还是没有耳塞在使用中进行确定。
在一个实施方式中,用于耳塞的每个音频模块110和112包括对触摸敏感(电容感测)的外壳元件。例如,每个耳塞外壳结构可包括在耳塞111和113的插入用户耳内的柔性耳塞部分附近的电容触摸环。这种结构可接触或触摸用户的皮肤,从而允许确定一个、两个还是没有耳塞在使用中。
在一个实施方式中,用于耳塞的每个音频模块110和112具有机械转换接口,以便在项链状态下隐藏耳塞111和113。例如,转换接口可包括磁性卡扣,该磁性卡扣根据耳塞处于打开位置还是闭合位置激活限制开关(例如,使用铰链),允许确定一个、两个还是没有耳塞在使用中。
在一个实施例中,电子部件集中在与左耳塞111连接的音频模块110中,以及与右耳塞113连接的音频模块112中。在一个实施例中,一个或多个LED可围绕可交换绳索116的带或覆盖件分布以用于不同功能。在一个实施例中,LED可用于通过使用光来通知用户,以用于提醒接收的消息和通知。例如,不同的光图案或颜色可用于不同的通知和消息(例如,基于颜色或图案提醒特定用户、基于消息类型提醒、基于紧急性提醒等)。在另一实施例中,LED可用于提供光,以用于辅助用户看见可穿戴装置105或其元件,诸如按钮或控制区域、在附接元件上的指令或指示等。在一个实施例中,LED可用于提供照明,以用于看见周围区域(例如,类似手电筒)。在另一实施例中,LED可用于在黑暗中识别特定用户(例如,当在人群中时,特定用户可与特定光图案、颜色等相关联)。
图2A示出根据实施方式的示例性计算环境或生态系统700,其提供可穿戴装置(例如,可穿戴装置105,图1)可访问的内容和装置的生态系统的免提控制。在一个实施方式中,电子可穿戴装置结合计算环境或生态系统700中的一个或多个主机装置(例如,智能电话120、电子手镯705、智能电视703、平板计算机701、数据平台704(例如,云信息平台)、智能设备702、汽车/车辆780(图2B)等),提供可穿戴装置可访问的内容和装置的生态系统的免提控制。
在一个实施方式中,电子可穿戴装置可通过通信模块(例如, Wi-Fi、红外无线超宽带、感应无线等)与每个主机装置直接连接。在另一实施方式中,电子可穿戴装置可通过单个主机装置(例如,智能电话)与其他装置交互。
在一个实施方式中,电子可穿戴(音频)装置与主机装置(例如,智能电话)之间的连接可以是无线的,其中主机装置与生态系统的剩余部分之间的接口连接通过有线或无线的通信发生。在一个实施方式中,通过电子可穿戴装置执行的可用服务或处理可能以若干种方式来执行。在一个实施方式中,用于电子可穿戴装置的处理可通过管理器应用或位于主机装置上的模块来管理。在一个实施方式中,可以作为移动操作系统的其他特征的延伸合并处理。一些实施方式可包括:从电子可穿戴装置单独运行/执行处理;从主机装置运行更鲁棒性处理,其中如果没要将连接的主机装置,从电子可穿戴装置运行有限版本;单独从云平台运行等。在通过主机装置、其他可穿戴装置(例如,电子可穿戴手镯或手表装置、悬挂件等)上的显示器、或通过来自电子可穿戴装置的音频向终端用户呈现内容之前,可从各种应用或内容提供商提供或拉取内容并且聚合内容。
图2B示出电子可穿戴装置105结合一个或多个其他装置(诸如图2A所示的主机装置)的实施方式的示例性实现方式710的框图。在一个实施方式中,可在可穿戴装置105中实现语音辅助(S-voice)应用或功能。语音辅助还可具有在主机装置中实现的部件(例如,智能电话120,平板计算机或计算装置720、智能设备702、智能电视703、其他电子可穿戴装置705、车辆780等),并且用户命令或查询(例如,语音命令771)可以在云信息平台704中发送或处理,以便执行高级语音命令识别并且确定适当动作。
在一个实施方式中,电子可穿戴105装置可包括建议应用或功能772。建议应用或功能772可以被物理按钮触发,并且基于位置、当日时间、语境和活动(例如,走路、驾车、收听、交谈等)、日历信息、天气等提供相关信息。建议应用或功能772可与连接的主机装置中的功能交互以获得适当信息。在一个实施方式中,建议应用基于从语境得知的有关用户的信息、与电子可穿戴105装置的交互、个人信息、与应用的交互(例如,从社交媒体平台、日历应用、邮件等获得信息)、位置、当日时间等,提供适当信息。
在一个实施方式中,伴随应用(例如,伴随应用712、722)使得用户能够选择用户期望的服务。伴随应用还可从智能电话应用和云服务收集来自各种源的内容。例如,对于“早晨读出”,今天的日历事件和天气在被呼叫之前被收集,以使得可穿戴装置105上的建议应用或功能772可立即/顺利地执行回放而没有任何时延。伴随应用还可促进其他功能,诸如为媒体/音乐播放器713控制媒体/音乐播放器762、位置服务应用714、763、健康应用715、新闻/播客应用716等。
在一个实施方式中,伴随应用可以在主机装置(例如,智能电话、平板计算机等)上实现,并且可查询生态系统中的其他装置。在一个实施例中,智能电话120可包括用于语音命令711(例如,识别、交互辅助等)、位置服务714、健康应用715和新闻/播客716的功能。计算装置或平板计算机装置720可包括与伴随应用722一起操作的语音命令功能721。
在一个实施方式中,云信息平台(信息平台)704包括可与生态系统中的其他装置连接的基于云的服务平台。云信息平台704可包括信息推送751功能,以便向电子可穿戴装置105或其他主机装置推送信息,或通过语境/状态检测功能752辅助语境/状态检测。
在一个实施方式中,音频管理器功能可以作为语音辅助功能的部件或伴随应用712、722实现。音频管理器可在主机装置(例如,智能电话、平板计算机等)上实现。在一个实施方式中,音频管理器管理来自生态系统中的其他装置的输入信息,并且选择性地将信息路由到适当装置。
在一个实施方式中,主机装置可以是智能设备702,或电子可穿戴装置可通过主机装置与智能设备交互。智能设备702可包括允许与电子可穿戴装置105交互的功能。例如,所述功能可允许执行来自电子可穿戴装置105的语音命令(例如,语音命令功能731),诸如温度控制732(升高/降低温度,打开/关闭热量/空气调节/风扇等),照明控制733(打开/关闭灯,使灯变暗等),提供当前状态734(例如,洗碗机/洗衣机/烘干机负载所剩下的时间、烤箱温度或烹饪所剩下的时间、冰箱门状态等),电子锁控制735(例如,锁定/解锁被适配成无线打开/锁定的门或窗),或遮挡/明暗控制736(例如,打开/闭合/调整被适配用于无线控制的窗中的遮挡件)。
在一个实施方式中,电子可穿戴装置105可作为主机装置或通过另一主机装置与汽车或车辆780交互。汽车或车辆780可包括促进这种交互的功能。例如,所述功能可允许语音命令781控制导航782(例如,确定方向、路由选项等)、获得实时交通更新784、控制温度或气候调整783、提供无钥匙进入785或远程点火/启动786、报警动作(例如,喇叭/车灯)、通过GPS的紧急追踪等。
在一个实施方式中,电子可穿戴装置105可与智能电视703主机装置接口连接,或通过另一主机装置与智能电视交互。智能电视703可包括促进与电子可穿戴装置105交互的功能。例如,所述功能可允许语音命令接通或断开电视742、控制声道选择741、控制音量743、控制输入源744、控制电视应用、与智能电视703的观看者通信、控制记录等。
在一个实施方式中,电子可穿戴装置105可与另一电子可穿戴装置705(例如,可穿戴手腕装置、悬挂件等)主机装置接口连接,或通过另一主机装置与可穿戴装置交互。这些连接或交互可类似于以上所描述的计算环境或生态系统700(图2A)发生。其他电子可穿戴装置705可包括促进与电子可穿戴装置105交互的功能。例如,功能可允许语音命令761控制或与电子可穿戴装置105通信,通信以用于操作/控制媒体/音乐播放器762(例如,接收音频,播放音频等)和位置服务763(例如,确定位置,提供方向、地图信息等)。在一个实施例中,可穿戴装置105和/或可穿戴装置705可通过通信模块(例如,Wi-Fi、红外无线超宽带、感应无线等)与每个主机装置直接连接。在另一实施方式中,电子可穿戴装置105/705可通过单个主机装置(例如,智能电话)与其他装置交互。
图3示出根据实施方式的内容管理器应用1110的示例性架构1100。在一个实施方式中,内容管理器应用1110可在主机装置(例如,主机装置120,图1)上使用。在一个实施方式中,内容管理器应用1110提供对读出(例如,在主机显示器上)的管理、通知(例如,通过电子可穿戴装置的音频、通过主机显示器的视觉、通过另一可穿戴装置上的触觉元件振动等)、对通知的管理、装置连接管理(例如,无线或有线)、以及用于语音设置的接口。在一个实施方式中,读出可包括姓名、时间、内容和内容设置。装置连接可包括断开、连接重置和装置信息。
内容管理器应用1110可聚合来自各种源的内容(装置上的内容、用户所拥有的其他装置、用户的个人云、第三方内容提供商(来自应用、云服务、热点、警示灯等)、现场音频馈送等)。在一个实施方式中,可通过装置配置设置中的用户选择执行聚合。在一个实施方式中,内容管理器应用1110可演进或迭代以添加内容用于聚合。这些可利用各种机器学习算法来确定或预测用户可能期望包括的内容。内容的预测可基于当前根据需要选择的内容、过去或进行中的用户访问内容的频率(通过电子可穿戴装置,在主机装置上,或在生态系统中的另一装置上)、具有类似兴趣的用户(例如,朋友、社交网络或社交圈中的其他人、家庭、人口统计等)的建议等。建议的其他实施例可包括主要新闻或事件、紧急信息等。在一个实施方式中,可通过音频提示、弹出式通知、自动包括有反馈请求、或通过可迭代或获悉用户偏好的其他类似方法,向用户建议预测内容。
在一个实施方式中,为了内容聚合,内容管理器应用1110可限制所编译或接收信息的子集的内容。例如,仅读出期望内容或提供重要通知。信息子集的确定可由用户手动配置或策展(curate),或通过机器学习智能地确定。在一个实施例中,机器学习可基于所接收的通知(来自预先加载的应用或第三方应用)逐渐传播通知,并且还可基于用户采用何种行动(例如,响应于通知、解散/清除、忽略等)学习。在一个实施方式中,策展或配置可以是基于位置的(例如,利用GPS位置、世界区域等)。
在一个实施方式中,内容管理器应用1110可控制与电子可穿戴装置的连接(例如,连接类型(有线、无线、无线类型)配对、刷新/重置连接、断开等)。在一个实施方式中,内容管理器应用1110可以能够控制电子可穿戴装置的某些方面(例如,打开或关闭装置,打开或关闭触觉元件,调整音量等)。电子可穿戴装置可具有多个状态或配置(例如,项链模式、单声道音频模式、立体声音频模式等)。内容管理器应用1110可从电子可穿戴装置传感器接收状态信息,以确定将提供的适当处理或服务。例如,装置是否处于项链模式(例如,通过霍尔效应传感器确定是否连接磁体,其他传感器等),或一个或两个耳塞是否被检测成位于用户耳内(例如,压力传感器,使用中的传感器,位置传感器等)。在一个实施方式中,状态配置还可确定是否正佩戴该装置(例如,检测来自传感器的运动,诸如一个或多个加速计)。
在一个实施方式中,内容管理器应用1110可提供语音递送,其中以自然发声方式递送音频信息。可使用脚本、模板等执行信息。在一个实施方式中,内容管理器应用1110可利用引擎来实时或近实时地执行语法或格式确定。在一个实施方式中,内容管理器应用1110可利用引擎来确定信息的语气,从而允许不同的语音个性或简档以及与信息相关的适当音调。例如,运动得分可设置有运动主持人或播音员的音调变化,而新闻标题可通过更含蓄或保守的音调变化来呈现。如另外的实施例,运动得分还可能以激动的音调来呈现,好的新闻标题可以以欢快或愉悦的音调来呈现,坏的新闻标题可以以严肃、忧郁、或受控的音调来呈现,突发新闻可以以传送急迫的音调设置等。
在一个实施方式中,内容管理器应用1110还可应对各种处理或服务,其可通过语音控制或命令、激活硬件控制等触发。内容管理器应用1110可允许用户展策或配置他们希望包括有读出的内容连同附加设置(诸如时间段和内容)、哪些通知被认为是优先的、装置连接管理、以及访问操作系统或另一应用中的设置。
图4示出根据实施方式的、由内容管理器应用1110(图11)执行的示例性管理过程1200。在一个实施方式中,在框1210中,过程1200例如通过打开装置、访问设置、提供音频命令等来开始。在框1220中,内容管理器应用1110可接收启动任务的指示。指示可以是通过语音命令、硬件触发(例如,按钮按压)等来自用户的请求、或来自通过输入信息(例如,通知)触发的行动的请求。任务可回放请求的相关信息(当前天气、个人计划、头条新闻故事、交通状况、运动得分等)、回答呼叫、提供语境更新(例如,例行路线上的交通事故、提醒、紧急警报、天气等)。
在框1230中,内容管理器应用1110可确定电子可穿戴装置的状态配置。在一个实施例中,这可通过从传感器接收信息并分析所提供的信息以确定当前状态(例如,项链模式、单耳内、双耳内、未佩戴等)来执行。可穿戴装置可向内容管理器应用1110提供已分析的状态信息。装置状态的改变可以是启动任务或执行命令的指示。例如,如果电子可穿戴装置被检测为从项链模式改变到双耳内模式,那么可启动音乐应用来开始播放歌曲等。在另一实施例中,从耳内改变状态到项链可暂停任务,并且如果在某个时间帧内将状态改变回耳内,任务可恢复。
在框1240中,内容管理器应用1110可确定待执行的任务。可基于语境(诸如当日时间)、执行任务的输入指示(例如,命令、按钮按压、传入呼叫/文本等)、装置状态配置等进行这种确定。这些任务的实施例可包括读出、通知、语音命令等。
在框1250中,内容管理器应用1110可获取附加信息以执行确定出的任务。例如,内容管理器应用1110可从第三方请求信息以提供新闻、运动天气等。如果没有附加信息是必要的,那么可立即进行任务,像在通知传入呼叫的情况下那样。
在框1260中,内容管理器应用1110可向电子可穿戴装置提供数据或音频以执行任务。内容管理器应用1110可处理所收集的数据,并且向可穿戴装置提供进行任务的信息或指令,诸如执行音频回放。内容管理器应用1110可提供提示(例如,音频音调或命令提示)、接收语音命令等。在框1270中,过程1200结束并且等待在框1210处再次开始。
根据实施方式,图5示出示例性读出配置和选择1300,并且图6示出示例性读出内容设置1400。在一个实施方式中,可在电子装置120的屏幕上显示示例性读出配置和选择以及示例性读出内容设置。在一个实施例中,选择屏幕1310提供对设置的选择,包括配对装置、音频通知、读出、语音等的选择。选择屏幕1320包括读出的设置。在一个实施例中,在装置上示出用于监测屏幕显示1330中的早晨结果的选择屏幕1320上的设置选择。设置屏幕1410提供对不同内容的选择和当日时间选择。在一个实施例中,可基于设置屏幕1410上的新闻选择(由箭头1455指示)示出设置屏幕1420。在另一实施例中,可基于设置屏幕1410上的运动选择(由箭头1460指示)示出设置屏幕1430。
在又一实施例中,可基于设置屏幕1410上的天气选择(由箭头1456指示)示出设置屏幕1440。
在一个实施方式中,内容管理器应用1110(图3)可提供用于读出各种内容的处理或服务。可从主机装置、云、其他用户装置、或第三方内容提供商提供内容。这种内容可以设计成使用脚本、预生成的模板、或甚至读出通知的实时生成来传送。可以以强调最有价值信息的方式来执行脚本、预生成的模板、实时生成等(诸如清晰且简洁地传送信息),并且没有用过多音频压倒用户。在一个实施例中,可以以句法或人性化回放来执行展示,如同现场个人正进行响应那样。
在一个实施方式中,可从各种源请求或拉取内容。此内容可能已被用户策展以选择具体类别。这些策展可通过配置菜单由内容管理器应用1110接收。可策展的内容类别的实施例可包括新闻、日历(约会/计划)、天气、交通、运动、娱乐等。
在一个实施例中,日历读出可提供用户即将到来的计划的回放,其可从主机装置、用户的云、或其他用户装置来聚合。在一个实施方式中,日历读出可基于聚合的信息(例如,当日中的剩余事件、无剩余事件、无计划的事件等),在各种实施例中不同地响应。例如,如果存在剩余事件,读出可包括当日事件数目或剩余事件数目,并且随后提供另外附加的细节,诸如事件的时间或名称。在没有事件剩余的实施例中,读出可通知用户日历上没有剩下的,并且提供明天的计划事件的预览(例如,次日的第一计划项目、或如果次日空闲计划的下一个项目)。在不存在为当日计划的事件的实施例中,可以向用户通知这点,并且类似地提供即将到来日的下一个计划事件的预览。
在一个实施例中,天气读出可取决于当日时间提供位置处天气的变化指示。例如,从12AM到12PM,读出可包括当日的预测和当前温度。随着当日前进(例如,从12PM到7PM),读出可仅包括当前温度。当日中更晚时(例如,7PM到12AM),读出可提供当前温度连同即将到来日的天气预报。在一个实施例中,如果存在即将到来的天气警报或警告,则可包括其以用于警告的持续时间。
在另一实施例中,新闻读出可提供标题之后的新闻类别的概要。内容管理器应用1110可跟踪标题,以确保没有先前阅读标题的重复。标题数目可以是封端的以防止信息溢流。在一个实施例中,信息可以仅限于标题,并且不包括诸如作者、来源等的附加信息。在没有新标题可用的情况下,读出可向用户指示这一点。在一个实施例中,重要更新可以被刷新或表示以指示存在故事的变化。
在另一实施例中,运动读出可基于与指定游戏相关的时间(例如,游戏前、游戏期间、游戏后等)提供不同的信息。游戏前信息可包括日期、时间、以及竞争的团队/竞争者。可存在可提前多久提供计划的限制(例如,48小时的时间窗口等)。在一个实施方式中,游戏前信息可在窗口内读出多个计划的游戏。游戏期间读出可包括诸如得分、游戏的当前时间(例如,一局、四分之一、一半、时期等)的信息。在游戏之后,运动读出可指示哪个团队/竞争者获胜以及最终得分。在一个实施例中,在存在进行中的游戏、完成的游戏和未来游戏混合的情况下,运动读出可设置当前在进行中的游戏的优先级超过完成的游戏或未来的游戏的优先级。
在另一实施例中,交通读出可在总体交通或报告的事故/事件之间提供不同的信息。例如,当前交通状况可使读出指示设置例行路线上的交通程度。可顺序地读取许多例行路线,或可基于位置设置许多例行路线的优先级。在存在事故(或多个事故)、或事件(例如,施工、碎片、清洁车等)的情况下,读出可在例行路线上的交通程度之前指示事故或事件。在一个实施例中,可提供附加信息,诸如备用多久到达(例如,估计的距离(一英里备用),或到指定出口等)。
一个实施方式提供在当日不同时间的不同读出的读出设置配置的选择。例如,从6AM到8AM的指定时间的简档可为所有工作日创建,并且包括选择的日历内容和天气。内容可具有用户希望从内容类别提供的事物的进一步设置。例如,日历类别可包括假期、提醒、约会等。在一个实施例中,天气类别可包括城市或位置和附加细节,诸如温标或温度信息的何种粒度(例如,仅当前温度、包括高温、或包括高温和低温两者)。其他实施方式可包括附加语境方面,诸如位置。在一个实施例中,多个简档可配置为处理各种时间、日期、位置或其他方面,这可导致用户优选不同的读出。
在一个实施方式中,如果存在时间、日期、位置或其他语境方面上重叠的两个读出,管理器可智能地确定(通过处理或算法)哪个读出是优选的并且播放该读出。这种确定可分析各种方面,诸如用户的日历、当前位置、读出历史(例如,优选新闻超过交通)、来自生态系统中其他装置的信息、或其他类似方面,并且可利用得分、加权、因数、或其他类似确定来预测优选简档。例如,如果存在9AM重叠的对于周一的两个简档,但一个具有交通并且另一具有新闻。内容管理器应用1110可利用GPS位置,并且如果位置示出装置(和用户)正计算,可优于新闻使用具有本地交通的简档。在一个实施例中,用于确定简档的其他方式可包括简档的用户设置优先级或偏好。附加地,可接收命令或选择以选择指定的读出简档。
在一个实施例中,内容管理器应用1110可识别具有重叠时间的读出,并提供进行适当校正的提示。在另一实施例中,内容管理器应用1110可提供来自重叠时段的两个读出的内容,但移除重复的类别。例如,如果从9AM到11AM的第一读出包括日历和天气,而从10AM到12PM的第二读出具有天气和新闻,那么10AM与11AM之间的读出请求播放日历、天气和新闻。
图7示出根据实施方式的示例性读出过程1500。过程1500可从由内容管理器应用1110执行的过程1200(图4)分支。过程1500在框1510中开始(例如,从打开装置、开始应用、接收语音命令等)。过程可从过程1200的框1240中对任务的确定行进,或作为独立过程1500在框1520中行进,其中过程1500确定将执行的请求任务是读出。在框1530中,内容管理器应用1110可获取信息以便确定适当简档。此类信息可包括星期几、时间、命令等。管理器可在多个简档可能重叠的情况下执行分析。
在框1540中,内容管理器应用1110可获取所选简档所需的指定信息或内容(例如,日历信息、新闻或运动类别、天气、交通等)。在框1550中,可以以适用于读出的格式处理和布置指定信息,允许人听到信息。处理还可将可用信息减小到容易消化的片段(例如,选择对于用户最有趣或用户优选的子集)。在框1560中,可向电子可穿戴装置提供处理的数据以用于读出。在框1570中,过程1500结束或等待在框1510处再次开始。
图8示出根据实施方式的具有不同内容情况的示例性通知框架1600。在一个实施方式中,通知框架1600包括电子可穿戴装置的内容情况1610和配置1620。内容管理器应用1110(图3)可提供处理或服务以用于音频通知。这种通知可以是用于各种通知的推送音频,其具有在内容管理器应用1110中建立的优选设置。该通知可在层级中分裂或通过优先级分裂。可自动阅读较高优先级或更重要的通知。在给用户提供用于命令的提示之后,可选择进入较低优先级通知或正常通知。这种提示可以是音调,并且所接收的命令可注册硬按钮按压。
在一个实施例中,错过的通知可以用作有限时间窗口/帧的音频。这种窗口/帧可以是用户配置的或预设时间(例如,60分钟)。时间窗口/帧之外错过的通知在其他装置上仍可以其他形式可访问。在一个实施例中,内容情况1610可以是常规通知、优先级通知和传入呼叫。可包括其他内容情况,诸如紧急警报等。
在一个实施例中,在关于常规通知的情况下,这些通知可包括用户已经选择作为音频通知而接收的输入信息(例如,来自应用、SMS、电子邮件等的第三方通知)。电子可穿戴装置的配置状态可确定对信息采取的随后行动。例如,如果电子可穿戴装置处于项链配置,那么不采取附加行动。通知仍可在其他装置(例如,智能电话、另一可穿戴装置等)上可访问并且是没有阅读的。在一个实施例中,如果用户在有限时间窗口内改变配置,那么音频通知可以是可用的并且通过提示触发。如果确定配置状态是耳内模式,那么在播放通知之前可对行动进行提示。
在一个实施例中,在内容是优先级通知的情况下,可基于配置状态执行不同动作。在一个实施例中,如果确定配置是耳内,那么可自动开始播放优先级通知而无需接收来自用户的任何响应。如果确定状态是项链配置,那么可给出提供触觉响应(例如,振动通知)的指示,并且根据是否在预设时间窗口/帧(例如,在5-10秒内)内检测到状态改变,可自动播放或可需要另外的确认来播放(例如,在5-10秒之后,接收硬件按钮按压)优先级通知,或者音频指示(例如,音调)在处于项链模式时可以是仅对于用户可听的。
在一个实施例中,对于传入呼叫,可根据电子可穿戴装置配置状态执行不同动作。如果所检测的状态是耳内,那么可提供呼叫者信息并且在回答呼叫之前等待响应(按钮按压、语音命令等)。如果所检测的状态是处于项链模式,那么可提供触觉通知(任选地铃音可发声)。如果装置状态被注册成从项链改变到耳内同时正发生触觉通知或响铃,那么可回答呼叫。如果检测之后的状态改变,那么可能需要另外接收的输入来播放错过的呼叫通知。
图9示出根据实施方式的示例性音频通知配置1700。该配置可允许用户管理和设定期望的通知以及优先级水平。在一个实施例中,用户可添加可包含期望的通知的第三方应用通知。在一个实施方式中,屏幕显示器1310提供对音频通知的选择。在一个实施例中,选择音频通知(由箭头1720指示)得到屏幕显示器1730。在一个实施例中,选择附加应用或服务(由箭头1725指示)得到提供对附加应用或服务的选择的屏幕显示1740。
在一个实施例中,内容管理器应用1110(图3)可配置为基于随时间的推移从应用接收到的通知通过第三方应用逐渐地填充音频通知。例如,内容管理器应用1110最初可开始于没有第三方应用,如屏幕显示1740所示。随时间的推移,当添加了第三方应用或服务并且接收到通知时,内容管理器应用1110可通过提供提醒的第三方应用或服务(例如,地图应用、发消息应用、社交网络应用、公共服务应用等)填充列表。另外,内容管理器应用1110可利用机器学习来确定推荐的优先级水平。例如,可将较短接收时间内检查每个通知的社交网络应用设定为优先通知,而仅可将频繁检查的发消息应用设定为常规通知。在一个实施例中,如果用户行为在某一时间段内改变,则管理器还可使用机器学些来推荐优先级水平的调整。例如,如果用户停止检查或开始忽略来自特定应用的通知,则管理器可推荐将所述通知设定成关闭或自动设定。
图10示出根据实施方式的示例性通知过程1800。在一个实施方式中,过程1800可开始于框1810,例如,通过打开装置、开启应用、接收语音命令或按钮按压等。内容管理器应用1110的通知过程1800可从图4所示的过程1200分支。在框1820中,内容管理器应用1110可接收通知。可从第三方、用户云或其他装置上应用(例如,电子邮件、SMS、日历提醒、传入呼叫等)推送通知。在框1830中,内容管理器应用1110可基于预设配置文件来确定通知分类(例如,常规、优先等)。内容管理器应用1110可使用学习算法来智能地确定并且基于频率、历史、兴趣或其他语境建议优先级。
在框1840中,内容管理器应用1110可接收信息,允许其监测装置状态并检测任何状态改变。在框1850中,内容管理器应用1110可任选地确定是否执行各种动作,诸如播放通知。在框1860中,内容管理器应用1110可任选地协调一个或多个所连接的装置。例如,传入通知还可在所连接的装置(例如,智能电话或另一可穿戴装置)的屏幕上提供指示。可将通知发送到所有连接的装置。
在一个实施例中,可基于被确定为最合适的装置(如以下进一步描述的)的屏幕检测或其他接收到的传感器信息来执行路由。可在最合适的装置(例如,具有当前用户焦点或活动的装置)上执行屏幕通知。在一个实施例中,读出和音频通知的组合可通过一个特征优先于另一的优先级发生(例如,在读出之前播放通知等)。在一个实施例中,在框1870中,过程1800结束并且等待在框1810处再次开始。
图11示出根据实施方式的用于自然语音命令解释的示例性架构1900。在一个实施方式中,用语音1920实施例音频响应来响应于示例性接收到的用户语音命令1910,并且可采取示例性动作1930。在一个实施例中,内容管理器应用1110可提供通用控制允许通过命令解释来控制各种媒体服务。可提供命令来响应于所有可适用的应用(例如,多服务媒体混洗),并且选择合适的响应。可通过随机选择、第一响应(例如,最低延迟等)或通过基于各种因素(包括频率、位置、其他语境因素等)的分数的确定来执行对响应的选择。例如,管理器可将诸如“为我播放一些好听的”解释为更具体的命令,并且查询若干第三方音乐或媒体应用。在一个实施例中,管理器可将术语“一些好听的”解释为用户已标记为最喜爱歌曲的歌曲。管理器随后可选择合适的响应,并且启动频繁使用的应用来播放最喜爱的歌曲。在一个实施方式中,电子可穿戴装置可充当用于语音命令的优良输入接口。内容管理器应用1110可促进装置之间的交互并且支持多个装置协调。
图12A和图12B示出了多装置编排(orchestration)的示例性实施方式的表格,其中生态系统中的特定装置执行各种动作并且装置提供大部分处理能力。图12A和图12B中的表格示出某些方面,这取决于电子可穿戴(音频)装置(耳内型或项链)的配置状态和主机装置(例如,智能电话)是否是活动的或是存储/隐藏的(例如,在口袋、钱包等中)。
以下图13-图23示出如图12A和图12B的表格所示的示例性配置。
图13示出根据实施方式的耳内型电子(音频)可穿戴装置(头戴耳机)2010和智能装置(例如,智能电话(SP))(处于活动状态)2050的编排配置的实施例2000。在一个实施方式中,电子可穿戴装置2010用来将语音输入2020信号发送到智能装置2050,并且从智能装置2050接收音频输出2040信号。在一个实施例中,电子可穿戴装置2010通过无线连接2030(例如,Wi-Fi等)与智能装置2050连接。在一个实施例中,智能装置2050基于2020信号中的语音命令在显示器上示出视觉输出。
图14示出根据实施方式的耳内型电子(音频)可穿戴装置2010和智能装置(隐藏状态)2150的编排配置的实施例2100。在一个实施例中,隐藏状态是指智能装置被存放在口袋、钱包、背包等中。在一个实施例中,智能装置的传感器(例如,环境光传感器、触摸传感器等)确定装置处于存放状态。在其他实施例中,当用户在车辆中时,智能装置可存放在固持器、手套箱等中。在一个实施例中,电子可穿戴装置2010用来将2020信号中的语音命令发送到智能装置2150,并且从智能装置2150接收音频输出2040信号。在一个实施例中,电子可穿戴装置2010通过无线连接2030与智能装置2150连接。在一个实施例中,智能装置2150基于2020信号中的语音命令在显示器上不示出视觉输出。
图15示出根据实施方式的作为项链佩戴的电子可穿戴装置2210和智能装置(活动的)2220的编排配置的实施例2200。在一个实施例中,当传感器(例如,环境光传感器、压力传感器等)确定智能装置不处于存放状态时,智能装置被确定处于活动状态。在一个实施方式中,电子可穿戴装置2210用来将2020信号中的语音命令发送到智能装置2220。在一个实施例中,电子可穿戴装置2210通过无线连接2030与智能装置2220连接。在一个实施例中,智能装置2220基于2020信号中的语音命令在显示器上示出视觉输出。
图16示出根据实施方式的电子可穿戴装置2010(耳内型)和另一可穿戴装置2320的编排配置的实施例2300。在一个实施方式中,另一可穿戴装置2320可以是包括视觉显示器、触觉元件、音频等的手镯或智能手表装置。在一个实施例中,电子可穿戴装置2010用来将2020信号中的语音命令发送到另一可穿戴装置2320,并且从另一可穿戴装置2320接收音频输出2040信号。在一个实施例中,电子可穿戴装置2010通过无线连接2030与另一可穿戴装置2320连接。在一个实施例中,另一可穿戴装置2320基于2020信号中的语音命令在显示器上示出视觉输出。
图17示出根据实施方式的作为项链佩戴的电子可穿戴装置2210和另一可穿戴装置2410的编排配置的实施例2400。在一个实施例中,另一可穿戴装置2410可以是包括视觉显示器、触觉元件、音频等的手镯或智能手表装置。在一个实施例中,电子可穿戴装置2210用来将2020信号中的语音命令发送到另一可穿戴装置2410。在一个实施例中,电子可穿戴装置2210通过无线连接2030与另一可穿戴装置2410连接。在一个实施例中,另一可穿戴装置2410基于2020信号中的语音命令在显示器上示出视觉输出。
图18示出根据实施方式的电子可穿戴装置2010的实施例2500、智能装置(活动)2050和另一可穿戴装置2520的编排配置。在一个实施例中,电子可穿戴装置2010用来将2020信号中的语音命令发送到智能装置2050,并且从智能装置2050接收音频输出2040信号。在一个实施方式中,电子可穿戴装置2010通过无线连接2030与智能装置2050连接,并且智能装置2050通过无线连接2510与另一可穿戴装置2520连接。在一个实施方式中,智能装置2050和另一可穿戴装置2520(如果没有其他任务正在进行)基于2020信号中的语音命令在显示器上示出视觉输出。
图19示出根据实施方式的耳内电子可穿戴装置2010、智能装置2150(隐藏的)和另一可穿戴装置2320的编排配置的实施例2600。在一个实施例中,电子可穿戴装置2010用来将2020信号中的语音命令发送到智能装置2150,并且从智能装置2150接收音频输出2040信号。在一个实施例中,电子可穿戴装置2010通过无线连接2030与智能装置2150连接,并且智能装置2150通过无线连接2510与另一可穿戴装置2320连接。在一个实施例中,智能装置2150在显示器上不示出视觉输出,并且另一可穿戴装置2320(如果没有其他任务正在进行)基于2020信号中的语音命令在显示器上示出视觉输出。在一个实施例中,如果在电子可穿戴装置2010上没有任务正在进行,则音频输出2040可包括比有任务正在进行时更丰富的信息。例如,如果在电子可穿戴装置2010上有任务正在进行,则示例性音频输出可以用“这是我发现的地方列表”来对“哪些印度餐厅在我附近”的输入语音命令进行答复。如果没有任务正在进行,则示例性音频输出随后可包括“我发现附近有若干印度餐厅;餐厅A如何。它在XYZ搜索榜上评级为4星并且0.1英里远”。在一个实施例中,一旦将智能装置2150从口袋取出并且进行解锁(例如,变成活动的),智能装置2150就可在显示器上显示语音命令结果。
图20示出根据实施方式的作为项链佩戴的电子可穿戴装置2210、智能装置2220(活动的)和另一可穿戴装置2320的编排配置的实施例2700。在一个实施例中,电子可穿戴装置2210用来将2020信号中的语音命令发送到智能装置2220。在一个实施例中,电子可穿戴装置2210通过无线连接2030与智能装置2220连接,并且智能装置2220通过无线连接2710与另一可穿戴装置2320连接。在一个实施例中,智能装置2220和另一可穿戴装置2320基于2020信号中的语音命令在显示器上示出视觉输出。
图21示出根据实施方式的作为项链佩戴的电子可穿戴装置2210的实施例2800、智能装置(隐藏的)2150和另一可穿戴装置2320的编排配置。在一个实施例中,电子可穿戴装置2210用来将2020信号中的语音命令发送到智能装置2150,并且从智能装置2150接收音频输出2040信号。在一个实施例中,电子可穿戴装置2210通过无线连接2030与智能装置2150连接,并且智能装置2150通过无线连接2810与另一可穿戴装置2320连接。在一个实施例中,智能装置2150在显示器上不示出视觉输出,并且另一可穿戴装置2320基于2020信号中的语音命令在显示器上示出视觉输出。
图22A-22B分别示出根据实施方式的智能装置2050(活动)的实施例2900和另一可穿戴装置2520的实施例2950的编排配置。在实施例2900和2950中,无线装置2050和另一可穿戴装置2520通过无线连接2030进行连接。如图所示,取决于用于语音输入的装置,将音频输出和视觉输出发送到合适的装置。
图23示出根据实施方式的另一可穿戴装置2320和智能装置2150(隐藏)的编排配置的实施例3000。在一个实施例中,另一可穿戴装置2320用来将2020信号中的语音命令发送到智能装置2150,并且从智能装置2150接收音频输出2040信号。在一个实施例中,另一可穿戴装置2320通过无线连接2030与智能装置2150连接。在一个实施例中,另一可穿戴装置2320在显示器上示出视觉输出。
图24-图26示出可由内容管理器应用1110(图3)控制的多个无线连接的示例性实施方式。在一个实施例中,取决于所连接的和可用于接收语音命令的装置的处理能力,不同水平的语音助理是可用的。在一个实施例中,主机装置120的处理能力高于与另一可穿戴装置3110连接的可穿戴装置105的处理能力。因此,语音辅助水平(例如,语音解释库、查找、搜索等)更具扩展性。头戴耳机+手表对头戴耳机+电话(主机装置)的一个实施例可以是,前者在例如语音搜索附近餐厅时可示出结果信息的简化形式,然而后者可示出包括详细用户评论和对饭厅网站的链路等的更详细的结果信息。
图24示出根据实施方式的电子可穿戴装置105、另一可穿戴装置3110和智能装置120之间的多个无线连接的实施例3100。虽然连接被示出为通过电子可穿戴装置105而进行,但是可通过主机装置120(例如,智能装置)或甚至另一可穿戴装置3110来执行连接。此类无线连接可以是通过低功耗(BLE)、Wi-Fi或其他无线连接进行。
图25示出根据实施方式的用于所连接的装置的故障转移的实施例3200。在实施例3200中,当内容管理器应用1110在智能装置120与电子可穿戴装置105之间检测到降级信号(例如,由于距离或干扰)时,内容管理器应用1110可启动自动故障转移,以使电子可穿戴装置105直接连接到另一可穿戴装置3110。
图26示出根据实施方式的用于多个电子装置的自动重新连接的实施例3300。在一个实施例中,当检测到更好的连接时,内容管理器应用1110可自动恢复电子可穿戴装置105与智能装置120之间的连接。可类似地执行电子可穿戴装置105与另一可穿戴装置3110之间的连接,智能装置120与另一可穿戴装置3110之间的连接也是这样。
图27示出根据实施方式的用于多个电子装置的屏幕检测和路由视觉内容的实施例3400。在一个实施例中,电子可穿戴装置105连接到智能装置2050,智能装置2050连接到另一可穿戴装置2520。如图所示,当用户主动与智能装置2050交互时,视觉输出可显示在智能装置2050的屏幕上。可从触摸屏输入、屏幕检测(例如,无论屏幕是否打开或关闭)、环境光传感器、相机图像捕捉、加速计、陀螺仪定向等检测到这种交互。在一个实施例中,当检测到用户与另一可穿戴装置2520交互时,可将视觉输出路由(如箭头3410所示)到所述装置。类似于智能装置2050,可使用类似的传感器机构来检测交互。
图28示出根据实施方式的利用来自语境信息平台3515(例如,云信息平台704,图2A-2B)或主机装置(例如,主机装置120等)的信息提供语境个人音频的示例性过程3500的流程,所述平台通过通信链路(例如,通信链路130,图1)与可穿戴装置105进行通信。在一个实施方式中,主机装置包括与电子可穿戴装置105通信的伴随应用(例如,伴随应用712、722,图2B)。在一个实施方式中,在过程中考虑可电子可穿戴装置105的状态(例如,一只耳朵、两只耳朵或项链状态)或时间。
【表1】
在示例性实施方式中,在早上,用户可穿戴上电子可穿戴装置105并且插入一个耳塞(例如,耳塞11或13,图1)。当在3505处激活合适的物理按钮时,主机装置120上的伴随应用3550可在框3510处确定电子可穿戴装置105的语境或状态3506(例如,当前时间、记录已佩戴单个耳塞、当天的第一次访问、当前位置等)。伴随应用可将对语境信息(例如,天气3520等)的请求3511发送到云信息平台3515,或通过从包含在装置上的本地信息3516(例如,日历事件)拉出来获得装置信息3512。在一个实施例中,用户可在执行或运行伴随应用3550的主机装置120上选择偏好3560,伴随应用3550可随时间的推移学习。例如,如果用户在特定时间(例如,若干天、星期等)内重复地请求特定信息,伴随应用3550可请求在一天的特定时间可自动提供到电子可穿戴装置105的信息(例如,本地早间新闻、天气、爆炸新闻;午间股票报道;午餐或晚餐时间的餐厅等待时间;一天特定时间的体育得分等)。
获取到的信息可提供(例如,在3530处发送)到可穿戴装置控制器,该可穿戴装置控制器可包括音频管理器。在框3540中,音频管理器可确定如何将内容3541组织并呈现在早晨简报中。可在3545处向用户播放早晨简报,诸如以上表1所示的实施例。任选地,伴随应用3550处的某些物理按钮按键可用来跳过消息(例如,双按)或取消简报(例如,长按)。
图29示出根据实施方式的用于提供语境个人音频、利用电子可穿戴装置105的语音识别接口或过程检测来自用户的口头语音命令的示例性过程3600的流程。以下表2中示出电子可穿戴装置105的头戴式和连接语境的语境个人音频的一个实施例。
【表2】
在一个示例性实施方式中,用户可戴上可穿戴装置的两只耳塞(例如,耳塞111、113,图1)并且用物理按钮3610触发语音命令。根据提示,可提供用户命令3611,诸如请求从特定应用播放音乐。请求可从电子可穿戴装置105传递到主机装置120。在3620处,语音命令功能可识别命令并且在3621处将请求提供到伴随应用,或将请求直接路由到信息平台3515。信息平台3515或伴随应用可如通过命令(例如,启动应用、验证播放列表3623等)引导的与第三方应用3630的交互3622。一旦从应用接收到响应,伴随应用就可提供请求的音频确认3624并且实施请求(例如,开始播放所请求的播放列表或歌曲)。
在任选的实施方式中,在框3622中,可将另一电子可穿戴装置(诸如智能手腕或手表电子装置)并入过程。作为来自伴随应用或信息平台3515的请求的一部分,第三方可提供信息以便显示在另一电子可穿戴装置上。在另一任选的实施方式中,用户可选择对歌曲“加星”(例如,标记、标记为最喜爱的等)。可在3631处通过信息平台3515或在3640处通过伴随应用将此信息提供到第三方应用3630,并且可在3640处利用音频确认3612将音频确认提供到电子可穿戴装置105。
图30示出根据实施方式的用于提供信息娱乐的示例性过程3700的流程。移动娱乐信息在以下表3中被示出为音频交互。
【表3】
在示例性实施方式中,当用户进入汽车/车辆780时,电子可穿戴装置105可处于项链状态。一旦处于车辆780中,电子可穿戴装置105可直接地或通过主机装置120与车辆的娱乐信息系统对接。用户可在3701处激活(例如,电子可穿戴装置105上或车辆780中的)物理按钮以触发功能。在3706处,主机装置120上的伴随应用3550可确定3710处的相关语境(例如,可穿戴装置状态、用户正在驾驶、汽车立体声打开、当日时间等)。伴随应用3550可从主机装置在本地或通过对云信息平台3515的请求来收集相关语境信息,诸如新闻头条3730或播客内容3731。
信息平台3515或伴随应用3550在3720处可编译信息,并且在3740处将其提供到音频管理器3540,从而确定在3741和3742处如何组织和呈现内容。在3743处,可通过车辆780扬声器来播放所得的信息选择。可由电子可穿戴装置105或车辆780的麦克风接收用户选择,并且可对合适的第三方应用做出请求3750,诸如新闻头条。例如,在3744处,伴随应用3550理解按钮按压或语音命令。在一个实施例中,语音识别应用基于内容建立语法并且将信息存储在主机装置或信息平台3515上。信息平台3515从第三方应用请求内容3721,并且可将信息(例如,图形、显示、文本等)推送到伴随应用3550。在3760处,伴随应用3550随后在主机装置120上播放头条。
任选地,可提供另外的选择以供用户进行选择,诸如选择想倾听的新闻报导等。在任选的实施方式中,用户的位置可导致将交通警报3770发送到信息平台3515或伴随应用3550。在一个实施例中,警报可(基于从信息平台3515公布的、接收到的交通卡815)指示附近的交通问题3722并且推荐绕行路线。警报可中断3780当前正在播放的信息。
图31示出根据实施方式的用于提供所请求的信息的示例性过程3800的流程。一个实施方式提供所请求的信息,如由以下表4中的示例性音频交互所示。
【表4】
在示例性实施方式中,电子可穿戴装置120可处于项链配置并且用户可在3801处使用物理按钮来激活语音命令功能。根据音频提示,可提供命令或请求3802(例如,特定游戏的时间、方向等)。在框3620处,可穿戴装置的语音命令功能可将请求引导到主机装置120上的伴随应用,或任选地直接引导到信息平台3515。在3806处,伴随应用可确定语境(例如,可穿戴装置状态3810、当前日期等),并且在3820处将请求发送到信息平台2515,或者在3821处检查是否在本地主机装置120上发现信息。在一个实施例中,在3822处,信息平台3515确定用于显示结果的最佳方法,例如传至另一可穿戴装置,诸如智能可穿戴手腕装置。在3823处,获取到的信息可通过电子可穿戴装置105的耳塞111和113(图1)播放,并且任选地,在另一可穿戴装置(例如,可穿戴手腕装置)或主机装置上显示3830。
图32示出根据实施方式的用于提供智能警报的示例性过程3900的流程。智能警报的一个实施例在以下表5中被示出为音频交互。
【表5】
在一个示例性实施方式中,主机装置120的伴随应用可产生自动积极型警报3901,自动积极型警报3901可至少部分基于日历信息、地理定位、待办事项列表、交通或其他类似因素。在3906处,伴随应用可确定可穿戴装置105的语境或状态(例如,戴上一只耳塞、项链配置等)。在3911处,警报信息3910可提供到信息平台3515,信息平台3515可使用所述信息来确定何时向用户提供警报。例如,在3921处,计算用户的位置、去往任务位置的交通、用户的日程安排中的后续会议或约会等。在3922处,信息可作为卡或其他通知公布给主机装置120的伴随应用,在3930处,伴随应用继而将所述信息提供成在可穿戴装置105上播放。
图33示出根据实施方式的用于提供扩增音频的示例性过程4000的流程。在以下表6中示出作为音频交互的扩增音频的一个实施例。
【表6】
在扩增音频的示例性实施方式中,在4001处,电子可穿戴装置105的用户可使用电子可穿戴装置105上的物理按钮来触发功能,允许输入命令。在框4020处,电子可穿戴装置上的语音命令功能可识别请求4002,并且在4021处将命令传递到主机装置120上的伴随应用或传递到信息平台3515。伴随应用可确定语境(例如,可穿戴装置的状态、地理定位、用户的特性/过去的信息等)。伴随应用可将信息提供到信息平台,所述信息平台可查询第三方应用4023以得到结果4022(例如,使用距离和命令计算距离并且提供用户的运动(例如高尔夫)中的平均距离)。在4030处,结果可提供给伴随应用,伴随应用继而将信息4040提供到音频管理器3540,以便在4041处在电子可穿戴装置105上回放。
图34示出根据实施方式的用于提供装置控制的示例性过程4100的流程。在以下表7中示出用于装置控制的音频交互的一个实施例。
【表7】
在示例性实施方式中,电子可穿戴装置105可用于控制装置、设备等。在一个实施例中,在4101处,可使用电子可穿戴装置105上的物理按钮来触发语音命令,以允许输入语音命令4102。在框4120中,语音命令4102可传递到主机装置120上的伴随应用或直接传递到信息平台3515。在4122处,伴随应用可收集语境信息(例如,可穿戴装置状态、地理定位等),并且将附加信息与理解命令一起提供到信息平台3515。在4130处,信息平台3515可与第三方应用对接以实施命令(例如,提高温度),并且将确认4122提供回主机装置120的伴随应用。在4140处,可在电子可穿戴装置105上回放确认,如实施例4141中所示。
图35示出根据实施方式的用于提供生态系统装置集成的示例性过程4200的流程。在一个实施例中,生态系统装置集成由以下表8中的示例性音频交互示出。
【表8】
在与生态系统的装置集成的示例性实施方式中,在4201处,在电子可穿戴装置105处于合适配置(例如,戴上一只耳塞、项链状态等)时,用户可触发物理按钮。请求可呈语音查询4202的形式(例如,请求运动事件得分等)。在4220处,电子可穿戴装置105的语音命令功能可将请求传递到伴随应用或信息平台3515以接收应答。在框4221处,伴随应用可包括附加的语境信息(例如,地理定位、附近的其他已知装置等)。信息平台3515从第三方应用4224获得信息,并且例如公布卡4230和TV动作4222(例如,展示内容、提供动作等)。
所得信息可传递回音频管理器3540,音频管理器3540在4240处确定如何组织、呈现内容并访问文字至语音(TTS)功能,以便在用户愿意按照初始查询方式执行活动时将响应和查询按照可听见方式提供给用户。在4241处,在电子可穿戴装置105上播放响应。在4242处,伴随应用在音频回放期间等待按钮按压(或语音命令4243或其他输入)。如果在框4250处接收到肯定响应,则主机装置120或信息平台3515可使得合适的装置在4223处被适当地激活并调谐(例如,打开TV并选择合适比赛的频道)。
在实施方式中,物理按钮在装置上如何激活可触发不同的功能。例如,物理按钮的长按或按压并保持可触发建议功能,建议功能可得到表1、2、3和6所示的实施方式的流程,如图28、29、30和33所示。在这些实施方式中,如果合适的话,则执行模式和语境检测而无需等待语音命令。
在另一实施例中,单次按压可触发语音命令功能(例如,来自语音识别接口或过程),语音命令功能可得到表4、7和8所示的实施方式的流程,如图31、34和35所示。在这些实施例中,电子可穿戴装置105在执行模式检测之前可等待语音输入。任选地,音频输出可能仅在电子可穿戴装置105状态被记录为使用一只或多只耳塞时发生。
在实施方式中,某些流程基于语境或当日时间可能是可用的。例如,每天第一次使用物理按钮触发电子可穿戴装置105,并且如果时间在早晨,则可产生早晨读出,如表1中举例说明。后续触发可执行表2-8所示的其他功能。
在实施方式中,电子可穿戴装置105可独自地或结合图2A所示的生态系统中的其他装置执行语境检测。例如,语境检测可包括确定电子可穿戴装置105的模式或状态(例如,未佩戴、项链状态、一只耳塞、两只耳塞)、当日时间(例如,早晨、中午等)、每日访问计数、用户状态(例如,行走、驾驶、跑步、静止等)、位置(例如,家中、工作、行进/四处奔走、未知的等)、附近可用的装置(例如,可穿戴装置、智能电话、设备、车辆等)。可自动执行此类语境检测。
图36A-36C示出根据实施方式的对于头戴耳机装置的示例性用户体验(UX)分类。在一个实施方式中,UX分类可包括建议4310(例如,经由语音按钮、长按4311操作)、语音4320(例如,经由语音按钮、单次按压4321操作)和积极型4330。在一个实施方式中,物理按钮在电子可穿戴装置(例如,可穿戴装置105)上如何激活可触发不同的功能。例如,物理按钮的长按或按压并保持可触发建议功能(建议4310),建议功能可得到过程3500(图28)、3600(图29)、4000(图33)和3700(图30)的流程。在另一实施例中,对于语音4320,物理按钮的单次按压或按压并释放可触发语音功能(语音4320),该语音功能可导致过程3800(图31)、4100(图34)和4200(图35)的流程。在另一实施例中,对于积极型4330,可将智能警报自动推送或拉到装置,所述智能警报可触发过程3900(图32)。在这些实施方式中,如果合适的话,则执行模式和语境检测而无需等待语音命令。
图37示出根据实施方式的用于激活有关电子可穿戴装置(例如,可穿戴装置105)的UX的示例性过程4400。在一个实施例中,单次按压可触发语音命令功能(例如,语音4320),所述语音命令功能可导致用于语音输入、模式检测和音频输出的上述流程。在另一实施例中,取决于设置,对于建议4310的触发可导致如上所述用于模式检测、内容检测和读出的流程。在一个实施例中,对于积极型(智能警报)4330,可导致如上所述用于模式检测、活动装置检测、视觉通知和音频输出的流程。在这些实施例中,电子可穿戴装置在执行模式检测之前可等待语音输入。在一个实施方式中,音频输出可仅在电子可穿戴装置状态被记录为使用一只或多只耳塞时发生。
图38示出根据实施方式的用于可穿戴头戴耳机装置的语境和个人化音频的示例性架构。在一个实施方式中,某些流程基于语境或当日时间可能是可用的。例如,每天第一次使用物理按钮触发电子可穿戴装置,并且如果时间在早晨4510,则可产生早晨读出;在中午4520时,则可产生中午读出;以及在夜晚/傍晚4530时,则可产生夜晚读出。后续触发可执行图6、8、10、13、15、17和19所示的其他功能。
图39示出根据实施方式的确定电子可穿戴装置(例如,可穿戴装置105)的语境检测4610(第一次)的示例性流程4600。如图所示,根据一个实施方式,流程4600确定在一天中第一次访问电子可穿戴装置时进行语境检测4610。在一个实施例中,流程4600可导致音频回放以进行如图所示的早晨读出交互。在一个实施例中,一旦进行触发(例如,按钮按下、长按、语音命令等),流程4600就自动发生(自动动作4620)。
在一个实施方式中,电子可穿戴装置可独自地或结合生态系统(例如,图2B)中的其他装置执行语境检测4610。例如,物理按钮的长按可导致由电子可穿戴装置或主机装置(主机装置120)上的伴随应用采取的自动动作4620,而无需要求用户交互。另外,这些自动动作4620对于用户可以是透明的,其中用户体验仅仅是最终结果。在一个实施例中,语境检测4610可包括确定电子可穿戴装置的模式或状态(例如,未佩戴、项链配置、耳内一只耳塞、耳内两只耳塞)、当日时间(例如,早晨、中午、夜晚等)、每日访问计数、用户状态(例如,行走、驾驶、跑步、静止等)、位置(例如,家中、工作、行进/四处奔走、未知的等)、附近可用的生态系统装置(例如,可穿戴装置、智能电话、设备、车辆等)。
图40示出根据实施方式的用于电子可穿戴装置(例如,可穿戴装置105,图1)的交互式音频回放的示例性过程4700。在示例性流程4700中,示出示例性交互式回放,其中用户内容偏好4720和所收集的内容4730(诸如用户的日历)可与内容检测4710一起用来提供交互式音频回放。示例性流程4700示出示例性早晨读出,其中组合的语境检测4710、内容偏好4720和所收集的内容4730从文本至语音(或通过主机装置(例如,主机装置120))动态地呈现在电子可穿戴装置上。音频回放可指示特定数量的某些事件(例如,会议),所述事件可从用户的日历或其他来源(例如,社交网络等)收集。可识别物理按钮的各种输入(例如,单次按压、两次按压等)或其他已记录的用户输入(例如,手势、装置移动、语音等)以获得细节、跳至下一事件或取消回放。另外,早晨读出在没有用户交互的情况下可自动前进到回放的下一部分,以便将音频信息提供给用户而无需来自用户的其他输入。
图41示出根据实施方式的用于早晨读出的内容收集4810的示例性过程4800。在一个实施方式中,在特定时间(预定的、动态调整的、用户设定等),内容收集4810可在多个类别范围内发生。这样的类别可由用户预定、选择等。此信息可从多个来源收集,诸如用户的日历、本地天气(基于用户的GPS位置、用户的归属地等)、来自各种或特定新闻报导的头条报导、用户的待办事项、报导信息(关于用户的兴趣、用户的最喜爱的队等)或其他类别。
在一个实施方式中,主机装置上或电子可穿戴装置的伴随应用可被配置为通过将内容按次序拼接在一起而动态地呈现文本至语音(TTS)4820。这可导致电子可穿戴装置的第一激活的早晨读出。在一个实施例中,当用户的装置可以是闲置的或收费来预加载早晨读出时,信息的编译可在早期发生。
图42示出根据实施方式的确定电子可穿戴装置的语境检测4610(非第一次)的示例性过程4900。在一个实施方式中,当一天中不是第一次激活可穿戴装置时,过程4900用于语境检测4610。自动语境检测4610可如过程4900(图42)所描述的类似地发生,差异在于访问计数类别触发指示先前已访问过电子可穿戴装置的指示物。在一个实施例中,音频输出可导致音频菜单而非早晨读出。
图43示出根据实施方式的用于电子可穿戴装置(例如,可穿戴装置105,图1)的音频菜单/交互式音频回放5010的示例性过程5000。在一个实施方式中,播放音频菜单5010可由用户输入(例如,按钮按压、语音命令等)激活,早晨读出5020的回放可使用在电子可穿戴装置上动态呈现的TTS 5030来得到音频输出。在一个实施例中,当先前已访问过可穿戴装置时,过程5000示出用户输入的音频菜单的交互式音频回放。音频菜单可动态地呈现并且包括可基于语境改变的选项。菜单可从物理按钮、语音命令或其他输入方法(例如,通过主机装置等)接收输入,以确定用户希望选择哪个选项。在一个实施例中,早晨读出的选择回放过程4700(图40)。
图44是示出信息处理系统的高级框图,该信息处理系统包括可用于实现本公开的实施方式的计算机系统5100。计算机系统5100包括一个或多个处理器5101,并且还可包括电子显示装置5102(用于显示图形、文本和其他数据)、主存储器5103(例如,随机存取存储器(RAM))、存储装置5104(例如,硬盘驱动器)、可移除存储装置5105(例如,可移除存储驱动器、可移除存储器模块、磁带驱动器、光盘驱动器、将计算机软件和/或数据存储在其中的计算机可读介质)、用户接口装置5106(例如,键盘、触摸屏、小键盘、定点装置)、以及通信接口5107(例如,调制解调器、网络接口(诸如以太网卡)、通信端口或PCMCIA插槽和卡)。通信接口5107允许在计算机系统与外部装置之间传输软件和数据。系统5100还包括通信基础结构5108(例如,通信总线、交叉条或网络),以上提及的装置/模块5101至5107连接到该通信基础结构。
通过通信接口5107传输的信息可以是诸如电子、电磁、光学信号或能够由通信接口5107通过通信链路5109接收的其他信号的形式,通信链路5109承载信号并且可使用有线或缆线、光线、电话线、蜂窝电话链路、射频(RF)链路和/或其他通信信道实现。本文中表示框图和/或流程图的计算机程序指令可加载到计算机、可编程数据处理设备或处理装置上,以使得在其上执行的一系列操作产生计算机实现的过程。
已经参考根据实施方式的方法、设备(系统)和计算机程序产品的流程图图示和/或框图来描述实施方式。这些图示/图的每个框或其组合可由计算机程序指令实现。计算机程序指令在提供到处理器时产生机器,使得指令经由处理器执行时产生用于实现流程图和/或框图中规定的功能/操作的手段。流程图/框图中的每个框可代表实现实施方式的硬件和/或软件模块或逻辑。在替代实现方式中,框中所标注的功能可不按图中所标注的顺序、可不同时发生。
计算机程序(即,计算机控制逻辑)存储在主存储器和/或辅助存储器中。计算机程序还可以经由通信接口来接收。这种计算机程序在被执行时使得计算机系统能够执行本文所论述的实施方式的特征。具体地,计算机程序在执行时使得处理器和/或多核处理器能够执行计算机系统的特征。此类计算机程序代表计算机系统的控制器。
尽管已经参考实施方式的某些版本来描述实施方式;然而,其他版本也是可能的。因此,实施方式的精神和范围应该不限于对本文所包含的优选形式的描述。
Claims (15)
1.一种用于在可穿戴音频装置上提供通知的方法,包括:
检测所述可穿戴音频装置的物理配置,其中所述物理配置使用由所述可穿戴音频装置上的一个或多个传感器提供的信息来确定;以及
以对应于所确定的物理配置的方式提供从移动装置路由的至少一个通知,所述移动装置与所述可穿戴音频装置连接。
2.如权利要求1所述的方法,其中通过所述传感器感测所述可穿戴音频装置的一个或多个耳机的位置来确定所述物理配置。
3.如权利要求1所述的方法,其中所述物理配置是对所述可穿戴音频装置的形态的操作。
4.如权利要求1所述的方法,还包括:
对由一个或多个服务提供的通知信息的引入进行管理。
5.如权利要求4所述的方法,其中对由一个或多个服务提供的通知信息的引入进行所述管理包括:
生成所述一个或多个服务的列表;
生成对于所述一个或多个服务的一个或多个通知;以及
接收对于所述一个或多个服务的优先级分类。
6.如权利要求1所述的方法,还包括:
使所述可穿戴音频装置与另一可穿戴装置无线连接。
7.如权利要求6所述的方法,其中基于被连接的装置的监测状态以及所确定的物理配置,所述至少一个通知被路由到作为当前主要使用焦点的装置。
8.如权利要求7所述的方法,其中基于预定的优先级分类,所述至少一个通知被选择性地路由到作为所述当前主要使用焦点的所述装置。
9.如权利要求7所述的方法,其中根据从被连接的装置的传感器接收到的信息确定所述监测状态。
10.如权利要求1所述的方法,还包括:
根据请求执行音频回放,其中所述音频回放包括基于预设时间间隔的预选内容类别的获取内容。
11.如权利要求1所述的方法,还包括:
通过查询多个第三方来源并选择对所述可穿戴音频装置、所述移动装置和可穿戴电子装置之一的合适动作,从所述可穿戴音频装置接收主题命令并解释所述主题命令。
12.如权利要求11所述的方法,还包括:
对所述可穿戴音频装置、所述移动装置和所述可穿戴电子装置之间的交互进行协调。
13.如权利要求12所述的方法,还包括:
通过所述可穿戴音频装置执行应用或功能,其中所述应用或功能基于以下中的一个或多个来提供语境信息:有关所述可穿戴音频装置的用户语境、以及来自所述移动装置、服务器装置和基于云的服务中的一个或多个的信息。
14.一种系统,包括:
包括管理器的主机装置,所述管理器被配置为以对应于连接的可穿戴装置的、检测到的物理配置的方式,向所述可穿戴音频装置提供至少一个通知。
15.一种具有指令的非暂时性计算机可读介质,所述指令在计算机上执行时执行以下方法,所述方法包括:
检测可穿戴音频装置的物理配置,其中使用由所述可穿戴音频装置上的一个或多个传感器提供的信息来确定所述物理配置;以及
以对应于所确定的物理配置的方式提供从移动装置路由的至少一个通知,所述移动装置与所述可穿戴音频装置连接。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201462027127P | 2014-07-21 | 2014-07-21 | |
US62/027,127 | 2014-07-21 | ||
US14/595,894 US20150230022A1 (en) | 2014-02-07 | 2015-01-13 | Wearable electronic system |
US14/595,894 | 2015-01-13 | ||
PCT/KR2015/007398 WO2016013806A1 (en) | 2014-07-21 | 2015-07-16 | Wearable electronic system |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107027340A true CN107027340A (zh) | 2017-08-08 |
Family
ID=55163298
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580034122.5A Pending CN107027340A (zh) | 2014-07-21 | 2015-07-16 | 可穿戴电子系统 |
Country Status (3)
Country | Link |
---|---|
EP (1) | EP3172905A4 (zh) |
CN (1) | CN107027340A (zh) |
WO (1) | WO2016013806A1 (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108737923A (zh) * | 2018-05-22 | 2018-11-02 | Oppo广东移动通信有限公司 | 音量调节方法及相关产品 |
CN109151637A (zh) * | 2018-08-21 | 2019-01-04 | 歌尔科技有限公司 | 无线耳机、用于无线耳机的智能语音控制系统及方法 |
CN110585549A (zh) * | 2019-08-05 | 2019-12-20 | 广州启德星教育科技有限公司 | 一种α波脑电频率共振设备 |
WO2020052164A1 (zh) * | 2018-09-14 | 2020-03-19 | 歌尔股份有限公司 | 一种无线耳机连接的方法、装置及无线耳机 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060195789A1 (en) * | 2005-02-28 | 2006-08-31 | Yahoo! Inc. | Media engine user interface |
KR100617576B1 (ko) * | 2005-04-22 | 2006-09-01 | 엘지전자 주식회사 | 이동통신 단말기와 블루투스 헤드셋을 이용한 통화로 제어장치 및 제어 방법 |
US20110063103A1 (en) * | 2009-09-11 | 2011-03-17 | Samsung Electronics Co., Ltd. | Bluetooth communication method and system |
US20110144779A1 (en) * | 2006-03-24 | 2011-06-16 | Koninklijke Philips Electronics N.V. | Data processing for a wearable apparatus |
US20130129110A1 (en) * | 2011-11-18 | 2013-05-23 | Kaddan Entertainment, Inc. | Headphone System for Activating a Control Module |
US20140028539A1 (en) * | 2012-07-29 | 2014-01-30 | Adam E. Newham | Anatomical gestures detection system using radio signals |
US20140146957A1 (en) * | 2012-11-29 | 2014-05-29 | Maqsood A. Thange | Telecommunications Addressing System and Method |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090296951A1 (en) * | 2008-05-30 | 2009-12-03 | Sony Ericsson Mobile Communications Ab | Tap volume control for buttonless headset |
JP4612728B2 (ja) * | 2009-06-09 | 2011-01-12 | 株式会社東芝 | 音声出力装置、及び音声処理システム |
US9332372B2 (en) * | 2010-06-07 | 2016-05-03 | International Business Machines Corporation | Virtual spatial sound scape |
US20130194310A1 (en) * | 2012-01-26 | 2013-08-01 | General Instrument Corporation | Automatically adaptation of application data responsive to an operating condition of a portable computing device |
US8947382B2 (en) * | 2012-02-28 | 2015-02-03 | Motorola Mobility Llc | Wearable display device, corresponding systems, and method for presenting output on the same |
US20150358716A1 (en) * | 2013-01-11 | 2015-12-10 | Innovation Sound Technology Co., Ltd. | A tension detection-based headset with intelligent switching control |
-
2015
- 2015-07-16 CN CN201580034122.5A patent/CN107027340A/zh active Pending
- 2015-07-16 EP EP15824223.0A patent/EP3172905A4/en not_active Ceased
- 2015-07-16 WO PCT/KR2015/007398 patent/WO2016013806A1/en active Application Filing
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060195789A1 (en) * | 2005-02-28 | 2006-08-31 | Yahoo! Inc. | Media engine user interface |
KR100617576B1 (ko) * | 2005-04-22 | 2006-09-01 | 엘지전자 주식회사 | 이동통신 단말기와 블루투스 헤드셋을 이용한 통화로 제어장치 및 제어 방법 |
US20110144779A1 (en) * | 2006-03-24 | 2011-06-16 | Koninklijke Philips Electronics N.V. | Data processing for a wearable apparatus |
US20110063103A1 (en) * | 2009-09-11 | 2011-03-17 | Samsung Electronics Co., Ltd. | Bluetooth communication method and system |
US20130129110A1 (en) * | 2011-11-18 | 2013-05-23 | Kaddan Entertainment, Inc. | Headphone System for Activating a Control Module |
US20140028539A1 (en) * | 2012-07-29 | 2014-01-30 | Adam E. Newham | Anatomical gestures detection system using radio signals |
US20140146957A1 (en) * | 2012-11-29 | 2014-05-29 | Maqsood A. Thange | Telecommunications Addressing System and Method |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108737923A (zh) * | 2018-05-22 | 2018-11-02 | Oppo广东移动通信有限公司 | 音量调节方法及相关产品 |
CN109151637A (zh) * | 2018-08-21 | 2019-01-04 | 歌尔科技有限公司 | 无线耳机、用于无线耳机的智能语音控制系统及方法 |
WO2020052164A1 (zh) * | 2018-09-14 | 2020-03-19 | 歌尔股份有限公司 | 一种无线耳机连接的方法、装置及无线耳机 |
US11627404B2 (en) | 2018-09-14 | 2023-04-11 | Goertek Inc. | Wireless earphone linking method and apparatus and wireless earphone |
CN110585549A (zh) * | 2019-08-05 | 2019-12-20 | 广州启德星教育科技有限公司 | 一种α波脑电频率共振设备 |
Also Published As
Publication number | Publication date |
---|---|
WO2016013806A1 (en) | 2016-01-28 |
EP3172905A1 (en) | 2017-05-31 |
EP3172905A4 (en) | 2018-03-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20150230022A1 (en) | Wearable electronic system | |
US10360907B2 (en) | Smart necklace with stereo vision and onboard processing | |
US10848910B2 (en) | Contextual information usage in systems that include accessory devices | |
EP3041200B1 (en) | Wristband-type information processing device, information processing system, information processing method, and program | |
CN106415721B (zh) | 音频数据传输的协调切换 | |
US20160134737A1 (en) | System having a miniature portable electronic device for command and control of a plurality of wireless devices | |
US20160198319A1 (en) | Method and system for communicatively coupling a wearable computer with one or more non-wearable computers | |
CN105976813A (zh) | 语音识别系统及其语音识别方法 | |
KR20180015586A (ko) | 상황별 음악 추천 방법 및 이를 이용하는 장치 | |
CN105981403A (zh) | 可穿戴电子系统 | |
KR20140053024A (ko) | 어린이용 이동 통신, 교육, 오락, 경보 및 감시 통합 시스템 | |
JP2016522465A (ja) | 永続性コンパニオンデバイスを提供するための装置及び方法 | |
JP7136099B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
EP3540603B1 (en) | Reproduction terminal and reproduction method | |
CN106686202A (zh) | 一种智能终端/手机的控制方法 | |
CN105637448A (zh) | 利用移动设备脉络化传感器数据、服务数据和设备数据 | |
CN107027340A (zh) | 可穿戴电子系统 | |
US20130159400A1 (en) | User device, server, and operating conditions setting system | |
US11184311B2 (en) | Communication system and communication control method | |
JP7031578B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
KR100943651B1 (ko) | 대화형 완구 및 이를 이용한 일정관리방법 | |
JP6884854B2 (ja) | 音声提供装置、音声提供方法及びプログラム | |
CN203858671U (zh) | 一种语音备忘提示设备 | |
US11270682B2 (en) | Information processing device and information processing method for presentation of word-of-mouth information |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170808 |