[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

CN107430441A - 用于放大和/或突出屏幕上的对象的方法和装置 - Google Patents

用于放大和/或突出屏幕上的对象的方法和装置 Download PDF

Info

Publication number
CN107430441A
CN107430441A CN201680019576.XA CN201680019576A CN107430441A CN 107430441 A CN107430441 A CN 107430441A CN 201680019576 A CN201680019576 A CN 201680019576A CN 107430441 A CN107430441 A CN 107430441A
Authority
CN
China
Prior art keywords
focal zone
user
screen
sight
sensor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201680019576.XA
Other languages
English (en)
Inventor
安卢·佩斯拉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huawei Technologies Co Ltd
Original Assignee
Huawei Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huawei Technologies Co Ltd filed Critical Huawei Technologies Co Ltd
Publication of CN107430441A publication Critical patent/CN107430441A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04806Zoom, i.e. interaction techniques or interactors for controlling the zooming operation

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

本发明实施例公开一种用于放大和突出屏幕上的对象的方法和装置。本发明提供一种具有至少一个传感器、用于自动放大和/或突出其屏幕上显示的对象的装置。所述装置包括基于来自所述传感器的至少一个传感器事件而检测专注于所述屏幕的至少一个用户的目光聚焦区域以及所述装置附近的光线强度,且由此自动放大和/或突出所述目光聚焦区域,其中所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域,且所述突出是基于所述装置附近的所述光线强度。

Description

用于放大和/或突出屏幕上的对象的方法和装置
技术领域
本文描述的本发明主题总的来说涉及一种包括显示屏的数据处理系统或计算机系统,并且更确切地说,本发明涉及一种用于将对象显示在显示屏上的图形用户界面,以及用于将显示屏上显示的对象的显示放大倍数自动改变为所要的显示放大倍数的系统、装置和方法。
背景技术
如今几乎人人都普遍在使用数据处理系统或计算机系统,例如手机,包含但不限于智能手机、个人数字助理(personal digital assistant,PDA)等。这些数据处理系统或计算系统提供用于显示文本字符串和超链接、图形按钮等图形用户界面的对象的图形屏幕。这些数据处理系统或计算系统极为先进,且包含各种内置传感器,例如相机传感器、加速计传感器、触摸传感器等等。
除了使用这些数据处理系统或计算系统浏览所述内容之外,也将其广泛用于阅读、观看视频/动画/数字内容。用户可阅读其电子邮件、文档、电子书、视图和图像/图片、视图呈现/图形,比如饼图等。
然而,在阅读/观看时,如果屏幕上显示的对象/内容对于用户视力来说不可见、较小或如果周围光线不合适(不足以用于阅读/观看),用户可能需要过度用眼去阅读/观看,从而最终影响其视力。
鉴于以上局限性,现有技术提供了各种方案,其中,当用户在阅读/观看任何对象时,如果其想要更清晰地看到对象,用户必须手动放大或缩小内容。因此,为避免用户用眼过度,总是需要手动干预来放大内容以使其更明显/更清晰。同样,如果周围光线不合适,这可能造成视力疲劳,为避免这一点,用户必须手动调整屏幕/显示器的光线和/或进一步放大对象。
因此,现有技术中可用的/所提供的现存技术存在的主要问题是:为方便用户的阅读/观看,需要手动干预。
因此,需要提供针对上述技术难题的自动化方案,以供自动放大和突出用户当前观看/阅读的对象,并进一步降低用户的眼部紧张度。
发明内容
提供此发明内容是为了引入与用于放大和突出屏幕上的对象的系统、方法和装置相关的概念,下文在具体实施方式中进一步加以描述。此发明内容并不意图确定所主张的主题的基本特征,也并不意图用于确定或限制所主张的主题的范围。
本发明的一个方面提供一种放大和/或突出屏幕上的对象的机制。
本发明的另一个方面提供一种基于目光焦点而放大和突出屏幕上的对象的机制。
本发明的另一个方面提供一种基于目光焦点而放大和突出屏幕上的对象的自动化机制。
本发明的另一个方面提供一种基于目光焦点而放大和突出屏幕上的对象、由此减轻阅读/观看所述对象时的疲劳感的自动化机制。
本发明的另一个方面提供一种基于用户的目光焦点和/或基于周围光线而放大和突出屏幕上的对象、由此减轻阅读/观看所述对象时的疲劳感的自动化机制。
因此,在一个实施方案中,本发明提供一种具有至少一个传感器、用于自动放大和/或突出其屏幕上显示的对象的装置。所述装置包括基于来自所述传感器的至少一个传感器事件而检测专注于所述屏幕的至少一个用户的目光聚焦区域以及所述装置附近的光线强度,由此自动放大和/或突出所述目光聚焦区域,其中所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域,且所述突出是基于所述装置附近的所述光线强度。
在一个实施方案中,本发明提供一种具有至少一个传感器、用于自动放大和/或突出其屏幕上显示的对象的装置。所述装置包括检测模块,其在收到来自所述传感器的至少一个传感器事件之后即刻用于检测专注于所述屏幕的至少一个用户的目光聚焦区域,且检测所述装置附近的光线强度。所述装置还包括放大和突出模块,其用于基于所检测到的目光聚焦区域而放大所述目光聚焦区域;和/或基于所检测到的光线强度而突出所述目光聚焦区域;其中所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域。
在一个实施方案中,本发明提供一种由装置执行的用于自动放大和/或突出所述装置的屏幕上显示的对象的方法。所述方法包括基于来自所述传感器的至少一个传感器事件而检测专注于所述屏幕的至少一个用户的目光聚焦区域以及所述装置附近的光线强度,由此自动放大和/或突出所述目光聚焦区域,其中所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域,且所述突出是基于所述装置附近的所述光线强度。
在一个实施方案中,本发明提供一种由装置执行的用于自动放大和/或突出所述装置的屏幕上显示的对象的方法。所述方法包括:
●使用检测模块在收到来自所述传感器的至少一个传感器事件之后即刻检测专注于所述屏幕的至少一个用户的目光聚焦区域以及所述装置附近的光线强度;
●使用放大和突出模块基于所检测到的目光聚焦区域而放大所述目光聚焦区域;以及
●使用放大和突出模块基于所检测到的光线强度而突出所述目光聚焦区域;
●其中,所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域。
本发明为每日忙于文档和电子书的特定人群提供了解决技术难题的技术方案。所述方案还为每天清晨阅读报纸的老年人等许多其他人减轻痛苦,或为那些在设备上阅读任何文档时感到十分疲劳的人们减轻痛苦。
在一个实施方案中,本发明通过提供可用在设备中的特征来使用户生活变得简单,所述特征可捕捉用户的目光焦点且突出和放大用户当前在阅读时所专注的周围区域。
在一个实施方案中,本发明改善在智能电话上阅读文档的用户体验,此种阅读是日常生活中针对许多不同活动而完成的极为常见的操作,比如阅读新闻文章、博客、电子书等等。
在一个实施方案中,用户需要使设备较接近其双眼以获取其所专注的对象的确切聚焦区域,从而达到以下效果:
a)出现在用户的聚焦区域下的对象的确切聚焦区域将被缩放以得到更高清晰度。
b)对象的同一确切聚焦区域将取决于周围光线强度而加以突出。
附图说明
具体实施方式是参考附图描述的。在附图中,参考编号最左边的数字表示所述参考编号在该附图中首次出现。贯穿图式使用相同数字指代相同特征和组件。
图1示出了根据本发明主题的实施例的装置,其具有至少一个传感器,用于自动放大和/或突出屏幕上显示的对象。
图2示出了根据本发明主题的实施例的由装置执行的用于自动放大和/或突出屏幕上显示的对象的方法。
图3和图4示出了根据本发明主题的实施例的本发明的总体概览。
应理解,附图是为了说明本发明的概念,并且可能不是按比例绘制。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚地描述。显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本发明保护的范围。
本发明可按多种方式实施,包括实施为过程、装置、系统、物质组合物、计算机可读存储介质等计算机可读介质,或其中程序指令经由光学或电子通信链路发送的计算机网络。在本说明书中,这些实施方案或本发明可以采取的任何其它形式可被称为技术。在一般情况下,所公开的过程的步骤的顺序可以在本发明的范围内进行调整。
以下连同说明本发明的原理的附图一起来详细描述本发明的一个或多个实施例。本发明结合此类实施例来进行描述,但本发明不限于任何实施例。本发明的范围仅受到权利要求书的限制,且本发明涵盖许多替代方式、修改和等效物。在以下描述中,阐述许多特定细节以便提供对本发明的透彻理解。这些细节是出于举例目的而提供,且可在没有这些特定细节中的一些或全部的情况下根据权利要求书来实践本发明。出于清晰的目的,未对与本发明相关的技术领域中已知的技术材料进行详细描述,以防不必要地模糊本发明。
公开放大和突出屏幕上的对象的方法和装置。
虽然所描述的用于放大和突出屏幕上的对象的各方面可以任何数目的不同计算系统、环境和/或配置来实施,但实施例是在以下示例性系统、装置和方法的情形中描述的。
在一个实施方案中,本发明提供一种基于用户的目光焦点和/或基于周围光线而放大和突出屏幕上的对象、由此减轻阅读/观看所述对象时的疲劳感的自动化机制。
通过一些实时用户情境可很好地解释对本发明的需要,且这对于普通用户可能极为有用。以下记录一些使用案例以供说明。然而,应注意,实时用户情境仅出于理解目的而提供,且不应视作对本发明的范围限制。
使用案例1:
Stella非常喜欢写博客,也喜欢阅读博客,但她每天非常忙碌,因此只有在深夜时才能做读写博客的事。为此,她专注于文本而给眼睛带来了很大负担,而且她必须手动放大和缩小字体很小的文本。
根据本发明,如果Stella将手机移近自己的眼睛,那么她正在看的任何文本会自动突出,并且屏幕在所述文本的周围缩放,这将使她有更好的阅读体验。即使外部没有电力,文本阅读仍会变得极为舒服,因为它不会使您的眼睛受累。
使用案例2:
本发明中所提供的此方案对进行一些研究工作、为了这些工作而需要每日阅读大量文章的学生或人们是极有帮助的。
举个例子,Smith正在进行某一研究项目,他每天必须阅读很多文章,文章多得让他必须日以继夜地阅读。每次屏幕阅读造成极大压力,并且还降低他的效率。在晚上,如果周边也没有足够光线,阅读文档会变得甚至更忙乱。而且当他必须手动缩放屏幕来更好查看内容时,他还得保持手动拖动屏幕以查看全部内容。
因此,利用本发明,他能够继续以正常方式进行阅读,而且本发明帮助他以好得多的有效方式阅读内容而不会给个人头脑带来很多压力。
使用案例3:
这种方案可对通常习惯阅读报纸的老龄化人群或长者有帮助,因为报纸中所写的文字对于他们来说通常太小。
本发明将对阅读小字体有困难、从而难以理解这些文字的人们有帮助。
以上使用案例是运用这种方案的一些个例。还有许多其它情境可以应用此方法以让用户生活变得便捷。
在一个实施方案中,用户需要使设备较接近其双眼以获取其所专注的对象的确切聚焦区域,从而达到以下效果:
a)出现在用户的聚焦区域下的对象的确切聚焦区域将被缩放以得到更高清晰度。
b)对象的同一确切聚焦区域将取决于周围光线强度而加以突出。
在一个实施方案中,本发明检测用户的目光焦点以知晓屏幕上的当前聚焦区域,并且还检测周围光线强度以便相应地为用户放大和突出文本。
在一个实施方案中,本发明使设备能够获取传感器事件以检测当前目光焦点和周围光线强度。在一个实例中,如果所述设备是基于安卓操作系统,则可由所述设备接收安卓传感器事件。当用户使设备较接近其双眼时,设备需要继续获取安卓服务中的传感器事件。
在一个实施方案中,可将用于放大/缩放和/或突出的选项作为设备设置页中的可配置项提供给用户。
在一个实施方案中,当安卓系统等设备(操作系统)从用户接收到设备非常接近用户的特定传感器事件时,可向用户提供以下提到的动作:
a)如果用户已允用突出特征,设备应突出与周围光线相容的聚焦文本。
b)其还缩放所述聚焦文本以使文本对于用户更加清晰可见。
在一个实施方案中,当设备屏幕非常接近用户时,相机传感器捕捉目光焦点且将此事件通过聚焦区域坐标发送给用户。相机传感器(3D传感器)可用于辨识周围区域的光线强度,这将告诉荧光笔如何突出文本以使用户看得更清楚。因此,在获得聚焦区域和光线强度之后,本发明缩放和/或突出(如果这些选项的任一个选项被允用)当前在用户的聚焦区域中的文本。
在一个实施方案中,本发明是基于与现有技术中已经可用的眼球追踪技术形成对比的基于数据的放大和突出。
在一个实施方案中,在追踪眼球移动时,本发明将第一帧位置标记为起始点且接着捕捉下一帧的位置。连接每一帧点以创建线样结构,其将给出用户查看的方向。如果所计算的下一个像素超过阈限,则在该处结束所述线并从新的像素点开始。如果下一个像素位置超过所述阈值,则其意味着所述线在该处结束,且应当从新的线开始。
在一个实施方案中,这些线值将发给设备的系统,以便突出和缩放所述部分。本发明特征可添加为配置项,并且可在任何需要的时候允用。
在一个实施方案中,对文本/图像或任何mime类型的突出程度可取决于周围环境的光线强度。光线强度可从相机传感器捕捉到。取决于周围光线,可向用户提供一定范围,用户可在此范围中设置突出值。取决于周围光线,突出的比例将不同。
在一个实施方案中,可在设备设置中提供设置,用户可通过所述设置来设定用户根据使用舒适度而想要将其在所述设备上聚焦的对象放大的比例。
在一个实施方案中,基于设备的大小,所述放大可能不同。对于具有较大屏幕尺寸的设备,所述放大比例可能更大,从而显示得更清楚。
在一个实施方案中,本发明提供一种基于mime类型的放大,任何应用程序可根据其用途而定制这种放大。
现参考图1,图1示出了根据本发明主题的实施例的具有至少一个传感器、用于自动放大和/或突出屏幕上显示的对象的装置。
虽然将实施方案考虑为装置100来解释本发明,但可理解,装置100还可在多种计算系统中实施,例如膝上型计算机、台式计算机、笔记本、工作站、大型计算机、服务器、网络服务器等等。应理解,装置100可由多个用户通过以下称作用户的一个或多个用户/电子设备(未展示)或驻留于用户设备上的应用程序访问。装置100和用户设备的实例可包含,但不限于,便携式计算机、个人数字助理、手持设备以及工作站。用户设备通过网络以通信方式耦合到装置100。
在一个实施方案中,网络可为无线网络、有线网络或其组合。网络可实施为不同类型的网络中的一种,例如企业内部网、局域网(local area network,LAN)、广域网(widearea network,WAN)、互联网等等。网络可为专用网络或共享网络。共享网络表示使用多种协议与彼此通信的不同类型的网络的关联,所述协议例如超文本传输协议(HypertextTransfer Protocol,HTTP)、传输控制协议/互联网协议(Transmission ControlProtocol/Internet Protocol,TCP/IP)、无线应用协议(Wireless ApplicationProtocol,WAP)等等。此外,网络可包含多种网络设备,包含路由器、网桥、服务器、计算设备、存储设备等等。
在一个实施例中,装置100可包含至少一个处理器102、输入/输出(input/output,I/O)接口104、至少一个传感器106,以及存储器108。所述至少一个处理器102可实施为一个或多个微处理器、微计算机、微控制器、数字信号处理器、中央处理器、状态机、逻辑电路,和/或基于操作指令来控制信号的任何设备。除了其它能力,所述至少一个处理器102尤其用于提取和执行可能以模块形式存储在存储器108中的计算机可读指令。
I/O接口104可包含多种软件和硬件接口,例如,Web界面、图形用户界面等等。I/O接口104可允许装置100直接地或通过用户/客户端设备与用户交互。此外,I/O接口104可使装置100能够与Web服务器和外部数据服务器(未展示)等其它计算设备通信。I/O接口104可促进广泛多种网络和协议类型内的多种通信,所述网络和协议类型包含:有线网络,例如LAN、电缆等;以及无线网络,例如WLAN、蜂窝式网络或卫星。I/O接口104可包含用于将多个设备连接到彼此或连接到另一服务器的一个或多个端口。
存储器108可包含所属领域中已知的任何计算机可读介质,包含例如:易失性存储器,例如静态随机存取存储器(static random access memory,SRAM)和动态随机存取存储器(dynamic random access memory,DRAM);和/或非易失性存储器,例如只读存储器(readonly memory,ROM)、可擦除可编程ROM、快闪存储器、硬盘、光盘以及磁带。存储器108可包含模块110和数据库(未展示)。
模块110包含例程、程序、对象、组件、数据结构等,其执行特定任务或实施特定抽象数据类型。在一个实施方案中,模块110可包含检测模块112、放大和突出模块114。其它模块(未展示)可包含补充装置100的应用和功能的程序或编码指令。
在一个实施方案中,本发明提供一种具有至少一个传感器、用于自动放大和/或突出其屏幕上显示的对象的装置。所述装置包括基于来自所述传感器的至少一个传感器事件而检测专注于所述屏幕的至少一个用户的目光聚焦区域以及所述装置附近的光线强度,由此自动放大和/或突出所述目光聚焦区域,其中所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域,且所述突出是基于所述装置附近的所述光线强度。
在一个实施方案中,本发明提供一种具有至少一个传感器、用于自动放大和/或突出其屏幕上显示的对象的装置。所述装置包括检测模块,所述检测模块在收到来自所述传感器的至少一个传感器事件之后即刻用于检测专注于所述屏幕的至少一个用户的目光聚焦区域,且检测所述装置附近的光线强度。所述装置还包括放大和突出模块,所述放大和突出模块用于基于所检测到的目光聚焦区域而放大所述目光聚焦区域;和/或基于所检测到的光线强度而突出所述目光聚焦区域;其中所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域。
在一个实施方案中,当所述屏幕距所述用户预定距离时,本发明自动放大和/或突出所述用户对所述屏幕上显示的所述对象的所述目光聚焦区域,其中所述预定距离由附接到所述装置的至少一个传感器检测,确切地说,由相机传感器检测。在一个实施方案中,所属领域的技术人员可理解,为了确定屏幕与用户之间的预定距离,可使用装置中已经可用的现有传感器中的任何传感器。
在一个实施方案中,优选地借助于至少一个3D传感器来检测呈聚焦区域坐标形式的所述目光聚焦区域。
在一个实施方案中,优选地借助于附接到所述装置的至少一个接近传感器、确切地说是借助于相机传感器来检测所述装置附近的所述光线强度。在一个实施方案中,所属领域的技术人员可理解,为了确定光线强度,可使用装置中已经可用的现有传感器中的任何传感器。
在一个实施方案中,本发明接收呈至少一个传感器事件形式的所述聚焦区域坐标和所述光线强度数据,由此放大和/或突出所述目光聚焦区域,所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域。
在一个实施方案中,所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域,其被放大和/或突出。
在一个实施方案中,本发明用于在所述屏幕接近所述用户时接收传感器事件。
在一个实施方案中,本发明在设置选项中提供至少一个可配置项,其中所述可配置项是放大所述目光聚焦区域的放大(缩放)选项或突出所述目光聚焦区域的突出选项中的至少一者,或其任何组合。
在一个实施方案中,所述突出选项包括所述用户可选的某一范围的突出值。
在一个实施方案中,所述放大(缩放)选项包括所述用户可选的某一范围的放大(缩放)值。
在一个实施方案中,基于至少两种线结构检测所述目光聚焦区域,每个结构具有通过以下方式获得的起始点和结束点:
●基于专注于所述屏幕的所述用户的眼球移动而将第一帧位置标记为起始点,且捕捉下一接续帧位置,其中所述第一帧位置和所述下一接续帧位置包括多个帧点/像素;
●连接所述多个帧点/像素以创建具有所述起始点的第一线结构,其中所述第一线结构提供所述用户专注于所述屏幕的方向;
●检查帧点/像素是否超过阈值,如果超过,将所述帧点/像素标记为所述第一线结构的结束点;
●将所述第一线结构作为传感器事件提供给所述装置以便放大和/或突出所述目光聚焦区域;以及
●重复以上步骤以获得新的线结构。
在一个实施方案中,本发明提供MIME类型放大和突出。
现参考图2,图2示出了根据本发明主题的实施例的用于验证至少一个用户的方法。可在计算机可执行指令的总体上下文中描述所述方法。通常,计算机可执行指令可包含例程、程序、对象、组件、数据结构、过程、模块、功能等,上述各项执行特定功能或实施特定的抽象数据类型。所述方法还可在分布式计算环境中实践,其中由通过通信网络连接的远程处理设备执行功能。在分布式计算环境中,计算机可执行指令可位于本地以及远程计算机存储介质中,包含存储器存储设备。
描述所述方法的次序不用理解为限制,并且可按任何次序而组合任何数目的所描述方法的方块来实施所述方法或替代性方法。此外,可在不脱离本文描述的主题的保护范围的情况下从所述方法中删除单个方块。此外,所述方法可在任何合适的硬件、软件、固件或其组合中实施。然而,为便于解释,在下文描述的实施例中,所述方法可被视为在上述装置100中实施。
在一个实施方案中,本发明提供一种由装置执行的用于自动放大和/或突出所述装置的屏幕上显示的对象的方法。所述方法包括基于来自所述传感器的至少一个传感器事件而检测专注于所述屏幕的至少一个用户的目光聚焦区域以及所述装置附近的光线强度,由此自动放大和/或突出所述目光聚焦区域,其中所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域,且所述突出是基于所述装置附近的所述光线强度。
在一个实施方式中,本发明提供一种由装置执行的用于自动放大和/或突出所述装置的屏幕上显示的对象的方法。所述方法包括:
●使用检测模块在收到来自所述传感器的至少一个传感器事件之后即刻检测专注于所述屏幕的至少一个用户的目光聚焦区域以及所述装置附近的光线强度;
●使用放大和突出模块基于所检测到的目光聚焦区域而放大所述目光聚焦区域;以及
●使用放大和突出模块基于所检测到的光线强度而突出所述目光聚焦区域;
●其中,所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域。
在方块202处,使用检测模块在收到来自存在于所述装置100中的所述传感器的至少一个传感器事件之后即刻检测专注于所述屏幕的至少一个用户的目光聚焦区域。
在方块204处,使用检测模块在收到来自存在于所述装置中的所述传感器的至少一个传感器事件之后即刻检测所述装置附近的光线强度。
在方块206处,使用所述装置的放大和突出模块基于所检测到的目光聚焦区域来放大所述目光聚焦区域。
在方块208处,使用所述装置的放大和突出模块基于所检测到的光线强度来突出所述目光聚焦区域。
在一个实施方案中,所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域。
在一个实施方案中,所述方法可进一步包含检测所述屏幕与所述用户之间的距离,如果检测到的所述距离等于或小于预定距离,则自动放大和/或突出所述用户对所述屏幕上显示的所述对象的所述目光聚焦区域。
在一个实施方案中,所述方法可进一步包含优选地借助于至少一个3D传感器和/或相机传感器来检测呈聚焦区域坐标形式的所述目光聚焦区域。
在一个实施方案中,所述方法可进一步接收呈至少一个传感器事件形式的所述聚焦区域坐标和所述光线强度数据,由此放大和/或突出所述目光聚焦区域,所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域。
在一个实施方案中,所述方法可进一步在所述屏幕接近所述用户时接收传感器事件。
在一个实施方案中,所述方法可进一步在所述装置的设置选项中提供至少一个可配置项,其中所述可配置项是放大所述目光聚焦区域的放大选项或突出所述目光聚焦区域的突出选项中的至少一者,或其任何组合。
在一个实施方案中,所述方法可进一步包含突出选项,所述突出选项包括所述用户可选的某一范围的突出值。
在一个实施方案中,所述方法可进一步包含放大(缩放)选项,所述放大(缩放)选项包括所述用户可选的某一范围的放大(缩放)值。
在一个实施方案中,所述方法可进一步包含:
●基于至少两种线结构检测所述目光聚焦区域,每个线结构具有通过以下方式获得的起始点和结束点:
●基于专注于所述屏幕的所述用户的眼球移动而将第一帧位置标记为起始点,且检测下一接续帧位置,其中所述第一帧位置和所述下一接续帧位置包括多个帧点/像素;
●连接所述多个帧点/像素以创建具有所述起始点的第一线结构,其中所述第一线结构提供所述用户专注于所述屏幕的方向;
●检查帧点/像素是否超过阈值,如果超过,将所述帧点/像素标记为所述第一线结构的结束点;
●将所述第一线结构作为传感器事件提供给所述装置以便放大和/或突出所述目光聚焦区域;以及
●重复以上步骤以获得新的线结构。
图3和图4示出了根据本发明主题的实施例的本发明的总体概览。
如图3中所展示,如果用户在设备/装置的显示屏上阅读一些含有“ALICE”、“BOB”和“MARK”的文本的内容,当用户在阅读特定内容/专注于“BOB”时,用户却在阅读这一特定内容时有些困难,所以根据本发明,当用户使设备/装置更接近其双眼时,此设备(其中内嵌有本发明)将自动缩放这一特定内容。此外,所述设备/装置也可突出这一内容。所述突出和所述缩放是可由用户视情况从设定选项选择的特征。
如图4中所展示,提供实施于智能电话中的本发明。此处,用户试图阅读移动电话的屏幕上显示的内容,但其阅读所显示的内容时有些困难。为了避免眼睛受累,所述用户试着使智能电话更接近其双眼。一检测到这一活动,智能电话就试着找到用户在屏幕上的确切目光焦点,且自动缩放/放大存在于此检测到的确切焦点中的内容。如果用户已允用突出其目光确切焦点中的内容的特征/选项,所述智能电话会检测附近光线强度且相应地调整智能电话的光线强度。放大/缩放和/或突出的选项/特征是可配置和可选的选项/特征,其可在智能电话的设置页中提供。
在一个实施方案中,本发明可用于不同情境以及不同对象。出于理解目的而在下文提供其中几个,然而应注意和理解的是,这些实例/情境并不限制本发明的范围。
如果本发明的应用更多的是基于文本的应用,那么使用这一特征,用户正在阅读的文本(整行或几行)将被突出和放大到用户所设置的比例。举例来说,如果用户在阅读邮件,用户所读的行以及相连行将被完全突出和放大。
如果任何应用程序更多使用图像mime类型,可取决于用户设置缩放和突出图像。举例来说,如果用户在查看来自图库的任何图像,可缩放所述图像以给出更多细节。
如果任何应用程序是用于显示图形,可取决于用户设置更清晰地界定图形中的特定区域或特定分离。举例来说,如果用户在查看任意饼图,可仅突出和缩放分块中的最大块和最小块。
如果使用基于excel的应用程序,此特征可突出单元格的特定集合/组合且将其放大。
上文所论述的示例性实施例可提供某些优点。尽管并非是实践本发明的方面所必须,但这些优点可包含:
1.本发明向在保持设备极接近眼睛时感到十分疲劳的人们提供良好的方案。
2.本发明适用于近视人群和老年人。
尽管已用特定针对结构特征和/或方法的语言来描述用于放大和突出屏幕上的对象的系统、方法和装置的实施方案,但应理解,所附权利要求书不必限于所描述的特定特征或方法。确切地说,特定特征和方法是作为用于放大和突出屏幕上的对象的系统、方法和装置的实施方案的实例而公开。

Claims (25)

1.一种具有至少一个传感器、用于自动放大和/或突出其屏幕上显示的对象的装置,其特征在于,用于:
基于来自所述传感器的至少一个传感器事件而检测专注于所述屏幕的至少一个用户的目光聚焦区域以及所述装置附近的光线强度,由此自动放大和/或突出所述目光聚焦区域,其中所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域,且所述突出是基于所述装置附近的所述光线强度。
2.一种具有至少一个传感器、用于自动放大和/或突出其屏幕上显示的对象的装置,其特征在于,包括:
检测模块,其在收到来自所述传感器的至少一个传感器事件之后即刻用于:
检测专注于所述屏幕的至少一个用户的目光聚焦区域;
检测所述装置附近的光线强度;以及
放大和突出模块,其用于:
基于所检测到的目光聚焦区域而放大所述目光聚焦区域;和/或
基于所检测到的光线强度而突出所述目光聚焦区域;其中所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域。
3.根据权利要求1和2所述的装置,其特征在于,当所述屏幕距所述用户预定距离时,所述装置自动放大和/或突出所述用户对所述屏幕上显示的所述对象的所述目光聚焦区域,其中所述预定距离由附接到所述装置的至少一个传感器检测,优选地由相机传感器检测。
4.根据权利要求1和2所述的装置,其特征在于,优选地借助于至少一个3D传感器来检测呈聚焦区域坐标形式的所述目光聚焦区域。
5.根据权利要求1和2所述的装置,其特征在于,其中所述装置附近的所述光线强度优选地借助于附接到所述装置的至少一个接近传感器来检测,确切地说借助于相机传感器来检测。
6.根据权利要求4和5所述的装置,其特征在于,接收呈至少一个传感器事件形式的所述聚焦区域坐标和所述光线强度数据,由此放大和/或突出所述目光聚焦区域,所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域。
7.根据权利要求1和2所述的装置,其特征在于,所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的所述当前聚焦区域,其被放大和/或突出。
8.根据权利要求1和2所述的装置,其特征在于,用于在所述屏幕接近所述用户时接收传感器事件。
9.根据权利要求1和2所述的装置,其特征在于,在设置选项中包括至少一个可配置项,其中所述可配置项是放大所述目光聚焦区域的放大(缩放)选项或突出所述目光聚焦区域的突出选项中的至少一者,或其任何组合。
10.根据权利要求9所述的装置,其特征在于,所述突出选项包括所述用户可选的某一范围的突出值。
11.根据权利要求9所述的装置,其特征在于,所述放大(缩放)选项包括所述用户可选的某一范围的放大(缩放)值。
12.根据权利要求1和2所述的装置,其特征在于,基于至少两种线结构检测所述目光聚焦区域,每个线结构具有起始点和结束点,为了检测所述线结构,所述装置用于:
基于专注于所述屏幕的所述用户的眼球移动而将第一帧位置标记为起始点,且捕捉下一接续帧位置,其中所述第一帧位置和所述下一接续帧位置包括多个帧点/像素;
连接所述多个帧点/像素以创建具有所述起始点的第一线结构,其中所述第一线结构提供所述用户专注于所述屏幕的方向;
检查帧点/像素是否超过阈值,如果超过,将所述帧点/像素标记为所述第一线结构的结束点;
将所述第一线结构作为传感器事件提供给所述装置以便放大和/或突出所述目光聚焦区域;以及
重复以上步骤以获得新的线结构。
13.根据权利要求1和2所述的装置,其特征在于,提供MIME类型放大和突出。
14.一种由装置执行的用于自动放大和/或突出所述装置的屏幕上显示的对象的方法,其特征在于,包括:
基于来自所述传感器的至少一个传感器事件而检测专注于所述屏幕的至少一个用户的目光聚焦区域以及所述装置附近的光线强度,由此自动放大和/或突出所述目光聚焦区域,其中所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域,且所述突出是基于所述装置附近的所述光线强度。
15.一种由装置执行的用于自动放大和/或突出所述装置的屏幕上显示的对象的方法,其特征在于,包括:
使用检测模块在收到来自所述传感器的至少一个传感器事件之后即刻检测:
专注于所述屏幕的至少一个用户的目光聚焦区域;和
所述装置附近的光线强度;
使用放大和突出模块基于所检测到的目光聚焦区域而放大所述目光聚焦区域;和/或
使用放大和突出模块基于所检测到的光线强度而突出所述目光聚焦区域;
其中,所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域。
16.根据权利要求14和15所述的方法,其特征在于,包括检测所述屏幕与所述用户之间的距离,如果检测到的所述距离等于或小于预定距离,则自动放大和/或突出所述用户对所述屏幕上显示的所述对象的所述目光聚焦区域,其中所述预定距离由附接到所述装置的至少一个传感器检测,确切地说,由相机传感器检测。
17.根据权利要求14和15所述的方法,其特征在于,包括优选地借助于至少一个3D传感器或相机传感器来检测呈聚焦区域坐标形式的所述目光聚焦区域。
18.根据权利要求14和15所述的方法,其特征在于,包括检测所述装置附近的所述光线强度,其优选地借助于附接到所述装置的至少一个接近传感器来检测,并且确切地说是借助于相机传感器来检测。
19.根据权利要求14和15所述的方法,其特征在于,包括接收呈至少一个传感器事件的形式的所述聚焦区域坐标和所述光线强度数据,由此放大和/或突出所述目光聚焦区域,所述目光聚焦区域是所述用户对所述屏幕上显示的所述对象的当前聚焦区域。
20.根据权利要求14和15所述的方法,其特征在于,包括在所述屏幕接近所述用户时接收传感器事件。
21.根据权利要求14和15所述的方法,其特征在于,包括在所述装置的设置选项中提供至少一个可配置项,其中所述可配置项是放大所述目光聚焦区域的放大(缩放)选项或突出所述目光聚焦区域的突出选项中的至少一者,或其任何组合。
22.根据权利要求21所述的方法,其特征在于,所述突出选项包括所述用户可选的某一范围的突出值。
23.根据权利要求21所述的方法,其特征在于,所述放大(缩放)选项包括所述用户可选的某一范围的放大(缩放)值。
24.根据权利要求14和15所述的方法,其特征在于,包括基于至少两种线结构检测所述目光聚焦区域,每个线结构具有通过以下方式获得的起始点和结束点:
基于专注于所述屏幕的所述用户的眼球移动而将第一帧位置标记为起始点,且检测下一接续帧位置,其中所述第一帧位置和所述下一接续帧位置包括多个帧点/像素;
连接所述多个帧点/像素以创建具有所述起始点的第一线结构,其中所述第一线结构提供所述用户专注于所述屏幕的方向;
检查帧点/像素是否超过阈值,如果超过,将所述帧点/像素标记为所述第一线结构的结束点;
将所述第一线结构作为传感器事件提供给所述装置以便放大和/或突出所述目光聚焦区域;以及
重复以上步骤以获得新的线结构。
25.根据权利要求14和15所述的方法,其特征在于,包括提供MIME类型放大和突出。
CN201680019576.XA 2015-04-10 2016-03-25 用于放大和/或突出屏幕上的对象的方法和装置 Pending CN107430441A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
IN1890CH2015 2015-04-10
IN1890/CHE/2015 2015-04-10
PCT/CN2016/077401 WO2016161905A1 (en) 2015-04-10 2016-03-25 Method and apparatus for magnifying and/or highlighting objects on screens

Publications (1)

Publication Number Publication Date
CN107430441A true CN107430441A (zh) 2017-12-01

Family

ID=57071717

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680019576.XA Pending CN107430441A (zh) 2015-04-10 2016-03-25 用于放大和/或突出屏幕上的对象的方法和装置

Country Status (2)

Country Link
CN (1) CN107430441A (zh)
WO (1) WO2016161905A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108491123A (zh) * 2018-02-12 2018-09-04 维沃移动通信有限公司 一种调节应用程序图标的方法及移动终端
CN111506195A (zh) * 2020-04-17 2020-08-07 南京巨鲨显示科技有限公司 一种基于眼球追踪设备的焦点区域突显系统
CN112514373A (zh) * 2018-08-14 2021-03-16 华为技术有限公司 用于特征提取的图像处理装置和方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109407831A (zh) * 2018-09-28 2019-03-01 维沃移动通信有限公司 一种交互方法及终端

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101893934A (zh) * 2010-06-25 2010-11-24 宇龙计算机通信科技(深圳)有限公司 一种智能调整屏幕显示的方法和装置
CN102096757A (zh) * 2010-09-08 2011-06-15 浙江大学 一个基于时域约束的注视点聚类数据处理方法
CN103019560A (zh) * 2012-11-29 2013-04-03 中兴通讯股份有限公司 控制移动终端界面的方法、装置及移动终端
CN103309451A (zh) * 2013-06-20 2013-09-18 上海华勤通讯技术有限公司 移动终端的显示方法及移动终端
CN103885589A (zh) * 2014-03-06 2014-06-25 华为技术有限公司 眼动追踪方法及装置
CN103902179A (zh) * 2012-12-28 2014-07-02 华为技术有限公司 一种交互方法及装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI462648B (zh) * 2012-08-06 2014-11-21 Wistron Corp 背光驅動電路以及背光驅動方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101893934A (zh) * 2010-06-25 2010-11-24 宇龙计算机通信科技(深圳)有限公司 一种智能调整屏幕显示的方法和装置
CN102096757A (zh) * 2010-09-08 2011-06-15 浙江大学 一个基于时域约束的注视点聚类数据处理方法
CN103019560A (zh) * 2012-11-29 2013-04-03 中兴通讯股份有限公司 控制移动终端界面的方法、装置及移动终端
CN103902179A (zh) * 2012-12-28 2014-07-02 华为技术有限公司 一种交互方法及装置
CN103309451A (zh) * 2013-06-20 2013-09-18 上海华勤通讯技术有限公司 移动终端的显示方法及移动终端
CN103885589A (zh) * 2014-03-06 2014-06-25 华为技术有限公司 眼动追踪方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108491123A (zh) * 2018-02-12 2018-09-04 维沃移动通信有限公司 一种调节应用程序图标的方法及移动终端
CN112514373A (zh) * 2018-08-14 2021-03-16 华为技术有限公司 用于特征提取的图像处理装置和方法
CN112514373B (zh) * 2018-08-14 2023-09-15 华为技术有限公司 用于特征提取的图像处理装置和方法
CN111506195A (zh) * 2020-04-17 2020-08-07 南京巨鲨显示科技有限公司 一种基于眼球追踪设备的焦点区域突显系统

Also Published As

Publication number Publication date
WO2016161905A1 (en) 2016-10-13

Similar Documents

Publication Publication Date Title
US9930248B2 (en) Digital image capturing device system and method
US11256919B2 (en) Method and device for terminal-based object recognition, electronic device
US20180341376A1 (en) Method and device for displaying information resource, and computer readable storage medium
CN107430441A (zh) 用于放大和/或突出屏幕上的对象的方法和装置
US20210037179A1 (en) Scaled perspective zoom on resource constrained devices
US20120040717A1 (en) Mobile Data Gathering System and Method
JP2014049094A (ja) 情報処理装置、情報処理方法及びコンピュータプログラム
JP2019505911A (ja) 世論に対するpr活動の実施方法、システム、ユーザ端末及びコンピュータ読取り可能な記憶媒体
US20130226999A1 (en) Method, system and program product for interaction between users
US20160301876A1 (en) Electronic device and image display method
CN104408133A (zh) 网页链接区域的热力图的显示方法和装置
CN104536566A (zh) 一种页面内容的处理方法
US10600062B2 (en) Retail website user interface, systems, and methods for displaying trending looks by location
WO2023083279A1 (zh) 拍摄方法及装置
Xu et al. Touch saliency
US10511813B1 (en) Systems, devices, and/or methods for logging writing activities
CN113794943A (zh) 视频封面设置方法、装置、电子设备及存储介质
CN104571858B (zh) 一种终端
US10484454B2 (en) Electronic device and method of providing digital photograph information
CN117666792A (zh) 电子表格显示方法、装置、电子设备及可读存储介质
US8712788B1 (en) Method of publicly displaying a person's relationship status
AU2012205152B2 (en) A platform for recognising text using mobile devices with a built-in device video camera and automatically retrieving associated content based on the recognised text
CN108170269A (zh) 一种图像缩放方法及终端
JP2015043118A (ja) 情報処理装置、情報処理システム、情報処理方法、及びプログラム
KR101655172B1 (ko) 참석자 카운팅 장치 및 그 장치를 이용한 참석자 카운팅 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20171201

RJ01 Rejection of invention patent application after publication