CN110175063B - 操作辅助方法、装置、移动终端及存储介质 - Google Patents
操作辅助方法、装置、移动终端及存储介质 Download PDFInfo
- Publication number
- CN110175063B CN110175063B CN201910425236.2A CN201910425236A CN110175063B CN 110175063 B CN110175063 B CN 110175063B CN 201910425236 A CN201910425236 A CN 201910425236A CN 110175063 B CN110175063 B CN 110175063B
- Authority
- CN
- China
- Prior art keywords
- target task
- application program
- mobile terminal
- target
- application
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/4401—Bootstrapping
- G06F9/4418—Suspend and resume; Hibernate and awake
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Security & Cryptography (AREA)
- Telephone Function (AREA)
Abstract
本发明提供一种操作辅助方法、装置、移动终端及存储介质,该方法包括:响应于操作辅助请求,确定与所述移动终端的当前操作界面对应的目标任务,所述当前操作界面为桌面界面、应用界面或通知界面;确定执行目标任务的目标应用程序;基于目标应用程序执行目标任务的操作路径,创建与目标任务对应的操作路径清单;以及根据所述操作路径清单,显示与目标任务对应的操作指引。根据本发明实施例的技术方案,能够有效地辅助用户完成目标任务,降低用户的操作学习成本及操作门槛,帮助用户更方便地使用移动终端。
Description
技术领域
本发明涉及终端领域,尤其涉及一种操作辅助方法、操作辅助装置、移动终端以及计算机可读存储介质。
背景技术
随着互联网技术的发展,移动终端成为人们无法离开的必要工具,复杂多样的应用程序也随之进入了人们的视野。这些应用程序在给大部分人带来许多便利的同时,其繁琐的操作方法对一些用户例如学习能力、记忆力偏弱的用户来说并不友好。
目前,在一些技术方案中,采用辅助操作模式来辅助用户对移动终端的应用程序进行操作。然而,当前常用的操作辅助模式,如老人模式,仅支持桌面应用图标布局、字体大小等视觉层面的简单调整,对于用户希望完成的目标操作缺乏有效辅助。
发明内容
本发明实施例的目的是提供一种操作辅助方法、操作辅助装置、移动终端以及计算机可读存储介质,以解决对于用户希望完成的目标操作缺乏有效辅助的问题。
为解决上述技术问题,本发明实施例是这样实现的:
第一方面,本发明实施例提供了一种操作辅助方法,应用于移动终端,包括:响应于操作辅助请求,确定与所述移动终端的当前操作界面对应的目标任务,所述当前操作界面为桌面界面、应用界面或通知界面;确定执行所述目标任务的目标应用程序;基于所述目标应用程序执行所述目标任务的操作路径,创建与所述目标任务对应的操作路径清单;以及根据所述操作路径清单,显示与所述目标任务对应的操作指引。
第二方面,本发明实施例提供了一种操作辅助装置,应用于移动终端,包括:任务确定模块,用于响应于操作辅助请求,确定与所述移动终端的当前操作界面对应的目标任务,所述当前操作界面为桌面界面、应用界面或通知界面;应用程序确定模块,用于确定执行所述目标任务的目标应用程序;路径清单创建模块,用于基于所述目标应用程序执行所述目标任务的操作路径,创建与所述目标任务对应的操作路径清单;操作指引模块,用于根据所述操作路径清单,显示与所述目标任务对应的操作指引。
第三方面,本发明实施例提供了一种移动终端,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如上述第一方面所述的操作辅助方法的步骤。
第四方面,本发明实施例提供了一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现如上述第一方面所述的操作辅助方法的步骤。
根据本发明实施例的技术方案,一方面,基于目标应用程序执行目标任务的操作路径,创建与目标任务对应的操作路径清单,能够自动建立执行目标任务的操作步骤的操作路径清单;另一方面,根据操作路径清单,显示与目标任务对应的操作指引,能够有效地辅助用户完成目标任务,降低用户的操作学习成本及操作门槛,帮助用户更方便地使用移动终端。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1示出了根据本发明的一些实施例提供的操作辅助方法的流程示意图;
图2示出了根据本发明的一些实施例提供的确定执行目标任务的目标应用程序的流程示意图;
图3示出了根据本发明的一些实施例提供的显示与目标任务对应的操作指引的流程示意图;
图4示出了根据本发明的一些实施例提供的操作辅助方法的应用场景的示意图;
图5示出了根据本发明的一些实施例提供的操作辅助方法的另一应用场景的示意图;
图6示出了根据本发明的一些实施例提供的操作辅助装置的示意框图;以及
图7示出了根据本发明的另一些实施例提供的移动终端的示意框图。
具体实施方式
为了使本技术领域的人员更好地理解本发明中的技术方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
图1示出了根据本发明的一些实施例提供的操作辅助方法的流程示意图,该操作辅助方法应用于移动终端。参照图1所示,该操作辅助方法包括步骤S110、步骤S120、步骤S130以及步骤S140。下面对图1的示例实施例中的操作辅助方法进行详细的说明。
参照图1所示,在步骤S110中,响应于操作辅助请求,确定与所述移动终端的当前操作界面对应的目标任务,所述当前操作界面为桌面界面、应用界面或通知界面。
在示例实施例中,当用户发出操作辅助请求时,操作辅助模式被唤醒。其中,操作辅助模式为对用户操作移动终端进行辅助的模式,用户可以通过自定义设置的多种方式唤醒操作辅助模式,例如,在操作控件位置设置不同的按压或滑动手势来唤醒操作辅助模式。
在示例实施例中,在操作辅助模式下,可以通过以下方式确定在移动终端上预设的目标任务,例如,通过键盘输入目标任务、选择预设的目标任务或从云端获取目标任务。
需要说明的是,在示例实施例中,目标任务可以为清理手机垃圾或放大手机字体,也可以包括其他适当的任务例如调节手机亮度或打开手电筒,本发明对此不进行特殊限定。
进一步地,在示例实施例中,在不同操作界面唤醒操作辅助模式,移动终端上预设的对应的目标任务可以不同,该操作界面包括桌面界面、应用界面或通知界面,例如,在桌面界面下唤醒操作辅助模式,移动终端上预设的目标任务可以为调节手机亮度或放大手机字体;在应用界面唤醒操作辅助模式,移动终端上预设的目标任务可以为与应用程序的功能对应的目标任务;在通知界面唤醒操作辅助模式,移动终端上预设的目标任务可以为与通知内容对应的目标任务。此外,可以自定义添加或删除操作界面上预设的目标任务。
在示例实施例中,唤醒操作辅助模式后,确定移动终端的操作界面,在移动终端上展示该操作界面对应的预设的常用目标任务。例如,在购物类应用程序“手机BB”的主界面唤醒操作辅助模式后,其预设的常用目标任务为“清空购物车”与“联系客服”;在社交类应用程序“AA”的主界面唤醒操作辅助模式后,其预设的常用目标任务为“添加朋友”“收付款”。
接下来,在步骤S120中,确定执行目标任务的目标应用程序。
在示例实施例中,确定目标任务对应的功能标签以及移动终端的应用程序列表中各个应用程序的功能标签;将目标任务对应的功能标签与各个应用程序的功能标签进行匹配;若存在匹配成功的应用程序,则将匹配成功的应用程序作为执行目标任务的目标应用程序。例如,目标任务为“清理手机垃圾”,确定目标任务的功能标签为“释放空间”,与移动终端上应用列表中的各个应用程序的功能标签进行匹配,直到找到具有此功能标签的应用“XX手机管家”,确定“XX手机管家”为执行目标任务的目标应用程序。
此外,在另一些示例实施例中,可以建立目标任务与执行目标任务的目标应用程序的映射关系,基于该映射关系确定执行目标任务的目标应用程序。例如,预先建立目标任务与执行目标任务的目标应用程序之间的映射关系表,在确定了移动终端上预设的目标任务之后,从该映射关系表中查找执行目标任务的目标应用程序。
继续参照图1所示,在步骤S130中,基于所述目标应用程序执行所述目标任务的操作路径,创建与所述目标任务对应的操作路径清单。
在示例实施例中,应用程序执行目标任务的操作路径是从应用程序中获取的实现某一特定功能而实施的操作步骤的集合,将操作路径整理后获得对应的操作路径清单。例如,目标任务“发文字朋友圈”对应的操作路径清单内容为:点击应用图标“AA”—点击“发现”—点击“朋友圈”—长按图标“相机”—输入文字—点击“发表”。
在步骤S140中,根据所述操作路径清单,显示与所述目标任务对应的指引操作。
在示例实施例中,根据目标任务对应的操作路径清单中各个操作的步骤顺序逐步显示与目标任务对应的操作指引。例如,用户在桌面界面唤醒操作辅助模式,确定目标任务为“发文字朋友圈”,显示指引过程如下:操作路径清单中第一步操作为点击应用图标“AA”,与之对应,第一个显示的指引是在桌面界面的应用图标“AA”处显示的手势指引;第二步操作为点击“发现”,第二个显示的指引是在AA程序的主界面的“发现”处的手势指引……第四步操作是长按图标“相机”,对应的显示的指引是在图标“相机”处的另一种手势指引等。
需要注意的是,在不同的操作步骤中,不同的操作方式,例如“点击”、“长按”以及“输入”,对应的指引图标可以是不一样的,方便用户区分。
根据图1的示例实施例中的操作辅助方法,一方面,基于目标应用程序执行目标任务的操作路径,创建与目标任务对应的操作路径清单,能够自动建立执行目标任务的操作步骤的操作路径清单;另一方面,根据操作路径清单,显示与目标任务对应的操作指引,能够有效地辅助用户完成目标任务,降低用户的操作学习成本及操作门槛,帮助用户更方便地使用移动终端。
进一步地,在示例实施例中,在提出操作辅助请求并唤醒操作辅助模式后,显示对应的操作界面的操作方法教程,可以调出应用界面相关操作的演示应用程序或图文使用说明,让用户通过观看功能演示,了解操作方法。
图2示出了根据本发明的一些实施例提供的确定执行目标任务的目标应用程序的流程示意图。
参照图2所示,在步骤S210中,确定所述目标任务对应的功能标签以及所述移动终端的应用程序列表中各个应用程序的功能标签。
在示例实施例中,确定与目标任务对应的功能标签,需要调用预先建立的功能数据库。该功能数据库包括:从移动终端上的应用商店中获取的被使用过的功能标签;人工采集的与各个功能标签对应的关联词集合。根据各个功能标签与对应的关联词集合建立的关联关系数据库即为功能数据库。
进一步地,将目标任务与功能数据库中的关联词集合进行匹配,需要确定目标任务与关联词集合的语义相似度,当语义相似度大于预设阈值时,可以判定目标任务与关联词集合的含义相同,即匹配成功。当匹配成功时,关联词集合对应的功能标签即为目标任务对应的功能标签;当匹配失败时,提示用户无法检索到目标功能。
在示例实施例中,从移动终端的应用商店获取移动终端的应用程序列表中各个应用程序的功能标签,应用程序被开发者上传到应用商店时具有相应的功能标签。
在步骤S220中,将所述目标任务对应的功能标签与各个所述应用程序的功能标签进行匹配。
在示例实施例中,确定目标任务对应的功能标签与应用程序的功能标签之间的相似度;若相似度大于预定阈值,则确定目标任务对应的功能标签与应用程序的功能标签匹配成功。例如,将步骤S210中获得的目标任务对应的功能标签与移动终端的应用程序列表上的每一个应用程序的功能标签轮流进行对比,确定目标任务对应的功能标签与应用程序的功能标签之间的相似度。当相似度大于预设阈值时,则确定目标任务对应的功能标签与应用程序的功能标签匹配成功;若相似度小于预设阈值,则匹配失败。匹配失败说明本移动终端没有安装可以实现目标任务的应用程序,因此需要下载一个新的应用程序,用于实现目标任务。
在步骤230中,确定步骤S220中的匹配结果是否成功,若匹配成功,则进入步骤S240;若匹配失败,则进入步骤S250。
在步骤S240中,将匹配成功的应用程序作为执行目标任务的目标应用程序。
在步骤S250中,从所述移动终端的应用商店上下载与所述目标任务对应的功能标签匹配的应用程序。
在示例实施例中,若目标任务对应的功能标签与各个应用程序的功能标签均匹配失败,则将目标任务对应的功能标签与移动终端的应用商店上各个应用程序的功能标签进行匹配;若存在匹配成功的应用程序,则从应用商店下载与目标任务对应的功能标签匹配的应用程序。
图3示出了根据本发明的一些实施例提供的显示与目标任务对应的操作指引的流程示意图。
参照图3所示,在步骤S310中,对移动终端的屏幕显示内容进行识别,得到多个页面操作元素,所述页面操作元素包括功能图标和/或操作控件。
在示例实施例中,对屏幕显示内容的识别运用了光学字符识别技术(OCR,OpticalCharacter Recognition)与图像识别技术。通过光学字符识别技术可以识别屏幕显示内容中的文字信息,通过图像识别技术可以识别屏幕显示内容中的图标和/或控件等图像信息,二者结合可以得出屏幕显示内容中出现的全部功能图标和/或操作控件的名称。
在步骤S320中,将所述页面操作元素的名称与所述操作路径清单中的各个操作的名称进行匹配。
在示例实施例中,在得到多个页面操作元素之后,将页面操作元素的名称与操作路径清单中的各个操作的名称进行匹配。例如,计算页面操作元素的名称与各个操作的名称之间的相似度,若相似度大于预定阈值例如80%,则确定页面操作元素的名称与该操作的名称相匹配。
进一步地,若用户没有按照指引来操作移动终端,例如手滑点击了返回键,或发生其他意外,例如应用程序出错强行退出,导致下一步获取的屏幕中的页面操作元素,无法与操作路径清单中下一个操作中的名称匹配,则该页面操作元素就会重新从操作路径清单中第一步操作中的名称开始匹配,若无法匹配成功则继续与下一步操作中的名称匹配,直到再次匹配成功,再根据操作路径清单中接下来的操作的步骤顺序逐步显示与目标任务对应的操作指引。
在步骤S330中,在匹配到的页面操作元素处显示与所述目标任务对应的操作指引。
在示例实施例中,根据目标任务对应的操作路径清单中各个操作的步骤顺序逐步显示与目标任务对应的操作指引。例如,用户在桌面界面唤醒操作辅助模式,确定目标任务为“发文字朋友圈”,显示指引过程如下:操作路径清单中第一步操作为点击应用图标“AA”,与之对应,第一个显示的指引是在桌面界面的应用图标“AA”处显示的手势指引;第二步操作为点击“发现”,第二个显示的指引是在AA程序的主界面的“发现”处的手势指引……第四步操作是长按图标“相机”,对应的显示的指引是在图标“相机”处的另一种手势指引等。
图4示出了根据本发明的一些实施例提供的移动终端操作辅助方法的应用场景的示意图。
参照图4所示,该移动终端显示的界面为AA清理界面,所在应用程序为管家类应用程序。在控件“一键放心清理_一键清理”410处显示了手势图标420;在控件“久远的聊天图片_一键清理”430处显示了手势图标440。图4示出了在一些实施例中显示与目标任务对应的操作指引的实际效果。
图5示出了根据本发明的一些实施例提供的移动终端操作辅助方法的另一应用场景的示意图。
参照图5所示,该移动终端显示的界面为XX手机管家主界面,所在应用程序为管家类应用程序。在“一键优化”图标下方有“输入目标任务”与文本框510、两个椭圆形控件“释放空间”与“优化性能”520以及矩形控件“来自云端”530。
图5示出了确定在移动终端上预设的目标任务的三种方式。
第一种方式是键盘输入目标任务。用户可以在“输入目标任务”与文本框510中的文本框通过移动终端自带的虚拟键盘输入目标任务,例如“更新软件”与“通讯录备份”。
第二种方式是选择预设的常用目标任务。例如,在图5界面中,预设的常用目标任务就是两个椭圆形控件“释放空间”与“优化性能”520。
第三种方式是从云端获取目标任务。点击矩形控件“来自云端”530,即可浏览到他人上传到云端的目标任务,可通过检索或直接点击选中目标任务。
需要说明的是,图4、图5的移动终端包括但不限于手机、平板电脑、电脑、可穿戴设备等智能终端。需要注意的是,上述应用场景仅是为了便于理解本发明的精神和原理而示出,本发明的实施例在此方面不受任何限制。相反,本发明的实施例可以应用于适用的任何场景。
图6示出了根据本发明的一些实施例提供的操作辅助装置的示意框图,该操作辅助装置应用于移动终端。参照图6所示,该操作辅助装置600包括:任务确定模块610、应用程序确定模块620、路径清单创建模块630及操作指引模块640。其中,任务确定模块610用于响应于操作辅助请求,确定与所述移动终端的当前操作界面对应的目标任务,所述当前操作界面为桌面界面、应用界面或通知界面;应用程序确定模块620用于确定执行所述目标任务的目标应用程序;路径清单创建模块630用于基于所述目标应用程序执行所述目标任务的操作路径,创建与所述目标任务对应的操作路径清单;操作指引模块640用于根据所述操作路径清单,显示与所述目标任务对应的操作指引。
在本发明的一些实施例中,基于上述方案,应用程序确定模块包括:功能标签确定单元,用于确定所述目标任务对应的功能标签以及所述移动终端的应用程序列表中各个应用程序的功能标签;功能标签匹配单元,用于将所述目标任务对应的功能标签与各个所述应用程序的功能标签进行匹配;目标应用程序确定单元,用于若存在匹配成功的应用程序,则将所述匹配成功的应用程序作为执行所述目标任务的目标应用程序。
在本发明的一些实施例中,基于上述方案,所述操作辅助装置还包括:匹配失败单元,用于若所述目标任务对应的功能标签与各个所述应用程序的功能标签均匹配失败,则将所述目标任务对应的功能标签与所述移动终端的应用商店上各个应用程序的功能标签进行匹配;下载单元,用于若应用商店上存在匹配成功的应用程序,则从所述应用商店下载与所述目标任务对应的功能标签匹配的应用程序。
在本发明的一些实施例中,基于上述方案,所述操作指引模块包括:屏幕识别单元,用于对所述移动终端的屏幕显示内容进行识别,得到多个页面操作元素,所述页面操作元素包括功能图标和/或操作控件;名称匹配单元,用于将所述页面操作元素的名称与所述操作路径清单中各个操作的名称进行匹配;指引显示单元,用于在匹配到的页面操作元素处显示与所述目标任务对应的操作指引。
在本发明的一些实施例中,基于上述方案,所述操作指引模块还包括:顺序显示单元,用于根据所述操作路径清单中各个操作的步骤顺序逐步显示与所述目标任务对应的操作指引。
图7为本发明一实施例提供的一种移动终端的硬件结构示意图,如图7所示,该移动终端700包括但不限于:射频单元701、网络模块702、音频输出单元703、输入单元704、传感器705、显示单元706、用户输入单元707、接口单元708、存储器709、处理器710、以及电源711等部件。本领域技术人员可以理解,图7中示出的移动终端结构并不构成对移动终端的限定,移动终端可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,移动终端包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中,存储器709内存储有计算机程序,该计算机程序被处理器710执行时,能够实现以下流程:响应于操作辅助请求,确定与所述移动终端的当前操作界面对应的目标任务,所述当前操作界面为桌面界面、应用界面或通知界面;确定执行所述目标任务的目标应用程序;基于所述目标应用程序执行所述目标任务的操作路径,创建与所述目标任务对应的操作路径清单;以及根据所述操作路径清单,显示与所述目标任务对应的操作指引。
可选地,该计算机程序被处理器710执行时,确定执行所述目标任务的目标应用程序,包括:确定所述目标任务对应的功能标签以及所述移动终端的应用程序列表中各个应用程序的功能标签;将所述目标任务对应的功能标签与各个所述应用程序的功能标签进行匹配;若存在匹配成功的应用程序,则将匹配成功的应用程序作为执行所述目标任务的目标应用程序。
可选地,该计算机程序被处理器710执行时,所述操作辅助方法还包括:若所述目标任务对应的功能标签与各个所述应用程序的功能标签均匹配失败,则将所述目标任务对应的功能标签与所述移动终端的应用商店上各个应用程序的功能标签进行匹配;若应用商店上存在匹配成功的应用程序,则从所述应用商店下载与所述目标任务对应的功能标签匹配的应用程序。
可选地,该计算机程序被处理器710执行时,根据所述操作路径清单,显示与所述目标任务对应的操作指引,包括:对所述移动终端的屏幕显示内容进行识别,得到多个页面操作元素,所述页面操作元素包括功能图标和/或操作控件;将所述页面操作元素的名称与所述操作路径清单中各个操作的名称进行匹配;在匹配到的页面操作元素处显示与所述目标任务对应的操作指引。
可选地,该计算机程序被处理器710执行时,显示与所述目标任务对应的操作指引,还包括:根据所述操作路径清单中各个操作的步骤顺序逐步显示与所述目标任务对应的操作指引。
应理解的是,本发明实施例中,射频单元701可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器710处理;另外,将上行的数据发送给基站。通常,射频单元701包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元701还可以通过无线通信系统与网络和其他设备通信。
移动终端通过网络模块702为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元703可以将射频单元701或网络模块702接收的或者在存储器709中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元703还可以提供与移动终端700执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元703包括扬声器、蜂鸣器以及受话器等。
输入单元704用于接收音频或视频信号。输入单元704可以包括图形处理器(Graphics Processing Unit,GPU)7041和麦克风7042,图形处理器7041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元706上。经图形处理器7041处理后的图像帧可以存储在存储器709(或其它存储介质)中或者经由射频单元701或网络模块702进行发送。麦克风7042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元701发送到移动通信基站的格式输出。
移动终端700还包括至少一种传感器705,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板7061的亮度,接近传感器可在移动终端700移动到耳边时,关闭显示面板7061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别移动终端姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器705还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元706用于显示由用户输入的信息或提供给用户的信息。显示单元706可包括显示面板7061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板7061。
用户输入单元707可用于接收输入的数字或字符信息,以及产生与移动终端的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元707包括触控面板7071以及其他输入设备7072。触控面板7071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板7071上或在触控面板7071附近的操作)。触控面板7071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器710,接收处理器710发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板7071。除了触控面板7071,用户输入单元707还可以包括其他输入设备7072。具体地,其他输入设备7072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板7071可覆盖在显示面板7061上,当触控面板7071检测到在其上或附近的触摸操作后,传送给处理器710以确定触摸事件的类型,随后处理器710根据触摸事件的类型在显示面板7061上提供相应的视觉输出。虽然,触控面板7071与显示面板7061是作为两个独立的部件来实现移动终端的输入和输出功能,但是在某些实施例中,可以将触控面板7071与显示面板7061集成而实现移动终端的输入和输出功能,具体此处不做限定。
接口单元708为外部装置与移动终端700连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元708可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到移动终端700内的一个或多个元件或者可以用于在移动终端700和外部装置之间传输数据。
存储器709可用于存储软件程序以及各种数据。存储器709可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器709可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器710是移动终端的控制中心,利用各种接口和线路连接整个移动终端的各个部分,通过运行或执行存储在存储器709内的软件程序和/或模块,以及调用存储在存储器709内的数据,执行移动终端的各种功能和处理数据,从而对移动终端进行整体监控。处理器710可包括一个或多个处理单元;优选的,处理器710可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器710中。
移动终端700还可以包括给各个部件供电的电源711(比如电池),优选的,电源711可以通过电源管理系统与处理器710逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
另外,移动终端700包括一些未示出的功能模块,在此不再赘述。
本申请实施例中的移动终端能够实现前述移动终端操作辅助方法的各个过程,并达到相同的效果和功能,这里不再重复。
进一步地,本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述移动终端操作辅助方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(RandomAccess Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明上述实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。
Claims (9)
1.一种操作辅助方法,应用于移动终端,其特征在于,包括:
响应于操作辅助请求,确定与所述移动终端的当前操作界面对应的目标任务,所述当前操作界面为桌面界面、应用界面或通知界面;
确定执行所述目标任务的目标应用程序;
基于所述目标应用程序执行所述目标任务的操作路径,创建与所述目标任务对应的操作路径清单;以及
根据所述操作路径清单,显示与所述目标任务对应的操作指引;
根据所述操作路径清单,显示与所述目标任务对应的操作指引,包括:
对所述移动终端的屏幕显示内容进行识别,得到多个页面操作元素,所述页面操作元素包括功能图标和/或操作控件;
将所述页面操作元素的名称与所述操作路径清单中各个操作的名称进行匹配;
在匹配到的页面操作元素处显示与所述目标任务对应的操作指引。
2.根据权利要求1所述的操作辅助方法,其特征在于,确定执行所述目标任务的目标应用程序,包括:
确定所述目标任务对应的功能标签以及所述移动终端的应用程序列表中各个应用程序的功能标签;
将所述目标任务对应的功能标签与各个所述应用程序的功能标签进行匹配;
若存在匹配成功的应用程序,则将所述匹配成功的应用程序作为执行所述目标任务的目标应用程序。
3.根据权利要求2所述的操作辅助方法,其特征在于,所述操作辅助方法还包括:
若所述目标任务对应的功能标签与各个所述应用程序的功能标签均匹配失败,则将所述目标任务对应的功能标签与所述移动终端的应用商店上各个应用程序的功能标签进行匹配;
若应用商店上存在匹配成功的应用程序,则从所述应用商店下载与所述目标任务对应的功能标签匹配的应用程序。
4.根据权利要求1所述的操作辅助方法,其特征在于,显示与所述目标任务对应的操作指引,还包括:
根据所述操作路径清单中各个操作的步骤顺序逐步显示与所述目标任务对应的操作指引。
5.一种操作辅助装置,应用于移动终端,其特征在于,包括:
任务确定模块,用于响应于操作辅助请求,确定与所述移动终端的当前操作界面对应的目标任务,所述当前操作界面为桌面界面、应用界面或通知界面;
应用程序确定模块,用于确定执行所述目标任务的目标应用程序;
路径清单创建模块,用于基于所述目标应用程序执行所述目标任务的操作路径,创建与所述目标任务对应的操作路径清单;
操作指引模块,用于根据所述操作路径清单,显示与所述目标任务对应的操作指引;
所述操作指引模块包括:
屏幕识别单元,用于对所述移动终端的屏幕显示内容进行识别,得到多个页面操作元素,所述页面操作元素包括功能图标和/或操作控件;
名称匹配单元,用于将所述页面操作元素的名称与所述操作路径清单中各个操作的名称进行匹配;
指引显示单元,用于在匹配到的页面操作元素处显示与所述目标任务对应的操作指引。
6.根据权利要求5所述的操作辅助装置,其特征在于,所述应用程序确定模块包括:
功能标签确定单元,用于确定所述目标任务对应的功能标签以及所述移动终端的应用程序列表中各个应用程序的功能标签;
功能标签匹配单元,用于将所述目标任务对应的功能标签与各个所述应用程序的功能标签进行匹配;
目标应用程序确定单元,用于若存在匹配成功的应用程序,则将所述匹配成功的应用程序作为执行所述目标任务的目标应用程序。
7.根据权利要求6所述的操作辅助装置,其特征在于,所述操作辅助装置还包括:
匹配失败单元,用于若所述目标任务对应的功能标签与各个所述应用程序的功能标签均匹配失败,则将所述目标任务对应的功能标签与所述移动终端的应用商店上各个应用程序的功能标签进行匹配;
下载单元,用于若应用商店上存在匹配成功的应用程序,则从所述应用商店下载与所述目标任务对应的功能标签匹配的应用程序。
8.根据权利要求5所述的操作辅助装置,其特征在于,所述操作指引模块还包括:
顺序显示单元,用于根据所述操作路径清单中各个操作的步骤顺序逐步显示与所述目标任务对应的操作指引。
9.一种移动终端,其特征在于,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至4中任一项所述的操作辅助方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910425236.2A CN110175063B (zh) | 2019-05-21 | 2019-05-21 | 操作辅助方法、装置、移动终端及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910425236.2A CN110175063B (zh) | 2019-05-21 | 2019-05-21 | 操作辅助方法、装置、移动终端及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110175063A CN110175063A (zh) | 2019-08-27 |
CN110175063B true CN110175063B (zh) | 2022-08-30 |
Family
ID=67691704
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910425236.2A Active CN110175063B (zh) | 2019-05-21 | 2019-05-21 | 操作辅助方法、装置、移动终端及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110175063B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111580911A (zh) * | 2020-05-09 | 2020-08-25 | 惠州Tcl移动通信有限公司 | 一种终端的操作提示方法、装置、存储介质及终端 |
CN114065094A (zh) * | 2021-11-24 | 2022-02-18 | 中国银联股份有限公司 | 网页操作智能反馈方法、系统、装置及可读存储介质 |
CN114610425A (zh) * | 2022-02-23 | 2022-06-10 | 清华大学 | 计算机操作辅助方法、系统、电子设备及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20070005527A (ko) * | 2005-07-06 | 2007-01-10 | 엘지전자 주식회사 | 보조 장치 동작 장치 및 방법 |
CN107219988A (zh) * | 2017-05-26 | 2017-09-29 | 维沃移动通信有限公司 | 一种界面操作引导方法及移动终端 |
CN108108214A (zh) * | 2017-12-18 | 2018-06-01 | 维沃移动通信有限公司 | 一种操作引导方法、装置及移动终端 |
CN109428972A (zh) * | 2017-09-05 | 2019-03-05 | 天津三星通信技术研究有限公司 | 终端中的语音控制方法和设备 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI445384B (zh) * | 2010-04-26 | 2014-07-11 | Htc Corp | 通訊控制方法、通訊裝置及電腦程式產品 |
US20110264698A1 (en) * | 2010-04-26 | 2011-10-27 | Htc Corporation | Method for guiding operation of application program, mobile electronic device, and computer-readable medium using the method thereof |
CN105718133A (zh) * | 2014-12-05 | 2016-06-29 | 珠海金山办公软件有限公司 | 一种引导用户操作的方法及装置 |
CN108287739A (zh) * | 2017-12-19 | 2018-07-17 | 维沃移动通信有限公司 | 一种操作引导方法及移动终端 |
CN108470566B (zh) * | 2018-03-08 | 2020-09-15 | 腾讯科技(深圳)有限公司 | 一种应用操作方法以及装置 |
-
2019
- 2019-05-21 CN CN201910425236.2A patent/CN110175063B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20070005527A (ko) * | 2005-07-06 | 2007-01-10 | 엘지전자 주식회사 | 보조 장치 동작 장치 및 방법 |
CN107219988A (zh) * | 2017-05-26 | 2017-09-29 | 维沃移动通信有限公司 | 一种界面操作引导方法及移动终端 |
CN109428972A (zh) * | 2017-09-05 | 2019-03-05 | 天津三星通信技术研究有限公司 | 终端中的语音控制方法和设备 |
CN108108214A (zh) * | 2017-12-18 | 2018-06-01 | 维沃移动通信有限公司 | 一种操作引导方法、装置及移动终端 |
Non-Patent Citations (2)
Title |
---|
《Open-Source, Web-Based Dashboard Components for DICOM Connectivity》;Bustamante, C et al.;《JOURNAL OF DIGITAL IMAGING》;20160902;全文 * |
《面向安卓手机App功能测试技术的方法》;张明 等;《计算机工程与设计》;20180331;全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN110175063A (zh) | 2019-08-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108762954B (zh) | 一种对象分享方法及移动终端 | |
CN107734175B (zh) | 一种通知消息的提示方法及移动终端 | |
CN109917979B (zh) | 一种搜索方法及移动终端 | |
CN108415652B (zh) | 一种文本处理方法及移动终端 | |
CN107977132B (zh) | 一种信息显示方法及移动终端 | |
CN107943390B (zh) | 一种文字复制方法及移动终端 | |
CN111338530B (zh) | 应用程序图标的控制方法和电子设备 | |
CN108446058B (zh) | 一种移动终端的操作方法及移动终端 | |
CN110837327B (zh) | 一种消息查看方法及终端 | |
CN110866038A (zh) | 信息推荐方法及终端设备 | |
CN109189303B (zh) | 文本编辑方法及移动终端 | |
CN109634438B (zh) | 一种输入法的控制方法及终端设备 | |
CN110971510A (zh) | 一种消息的处理方法及电子设备 | |
CN111124223A (zh) | 一种应用界面切换方法及电子设备 | |
CN107665162B (zh) | 一种应用程序处理方法及移动终端 | |
CN110175063B (zh) | 操作辅助方法、装置、移动终端及存储介质 | |
CN110096203B (zh) | 一种截图方法及移动终端 | |
CN111610903A (zh) | 信息显示方法及电子设备 | |
CN111125307A (zh) | 一种聊天记录查询方法及电子设备 | |
CN110990679A (zh) | 信息搜索方法及电子设备 | |
CN111061446A (zh) | 一种显示方法及电子设备 | |
CN107728920B (zh) | 一种复制方法及移动终端 | |
CN111273827B (zh) | 一种文本处理方法及电子设备 | |
CN110515507B (zh) | 一种图标显示方法及终端 | |
CN109284146B (zh) | 一种轻应用开启方法及移动终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |