本专利文件要求于2019年9月2日提交的申请号为16/558,309的美国非临时专利申请的权益和优先权。上述专利申请的全部内容通过引用并入并作为本专利文件公开内容的一部分。
具体实施方式
在以下描述中,提供了许多具体细节以便透彻理解本发明。然而,本领域技术人员应当理解,本发明可以在没有这些细节中的一个或多个的情况下实现。在其他示例中,为了简洁,本领域已知的特征和技术将不再描述。
电子设备或系统可以配备指纹认证机制,以改进访问设备的安全性。这种电子设备或系统可以包括便携式或移动计算设备,例如智能手机、平板电脑、腕戴式设备和其他可穿戴或便携式设备,还包括更大的电子设备或系统,例如便携式或台式的个人计算机、ATM、用于商业或政府用途的各种终端到各种电子系统、数据库或信息系统、以及包括汽车、船、火车、飞机和其他的机动交通系统。
指纹感测在使用或需要安全访问的移动应用和其他应用中是有用的。例如,指纹感测可以用于提供对移动设备的安全访问和包括在线购物的安全金融交易。所期望的是,包括适用于移动设备和其他应用的鲁棒与可靠的指纹感测。在移动、便携式或可穿戴设备中,由于这些设备上的空间有限,尤其考虑到对给定设备上的最大显示区域的需求,对于指纹传感器来说期望最小化或消除用于指纹感测的占用空间。由于电容感测的近场交互需求,电容式指纹传感器的许多实现方式必须在设备的顶面上实现。
光学感测模块可以被设计为减轻电容式指纹传感器的上述和其他限制,并实现附加的技术优势。例如,在实现光学指纹感测设备时,携带指纹成像信息的光可以在一定距离上被引导到光学检测器的光学检测器阵列以进行指纹检测,而不限于电容式传感器中的近场感测。特别地,携带指纹成像信息的光可以被引导透过诸如触摸感测屏的许多显示屏中常用的顶部盖板玻璃和其他结构,并且可以通过折叠或复杂的光学路径被引导到达光学检测器阵列,从而允许灵活地将光学指纹传感器放置在不适用于电容式指纹传感器的设备中。基于本文公开的技术的光学指纹传感器模块可以是屏下光学指纹传感器模块,其放置在显示屏下方以采集和检测来自放置在屏幕的顶部感测表面上或上方的手指的光。如本文所公开的,除了检测和感测指纹图案之外,光学感测还可以用于光学检测与用户或用户动作相关联的其他参数,例如检测到的指纹是否来自活人的手指并用于提供反欺骗机制,或光学检测用户的某些生物参数。
I、屏下光学感测模块概述
本公开描述的光学感测技术和实现方式的示例提供了一种光学指纹传感器模块,该光学指纹传感器模块至少部分地使用来自显示屏的光作为照明探测光,以照亮显示屏的触摸感测表面上的指纹感测区域,进而基于这种光的光学感测执行一种或多种感测操作。一种用于实现所公开的光学传感器技术的合适的显示屏可以基于各种显示技术或配置,包括:液晶显示(liquid crystal display,LCD)屏,其使用背光以向LCD像素提供白光照明,并且使用匹配的光学滤波器以实现彩色LCD像素;或者具有发光显示像素而不使用背光的显示屏,其中每个单独的像素生成光,用于形成屏幕上的显示图像,例如,有机发光二极管(organic light emitting diode,OLED)显示屏或电致发光显示屏。尽管所公开技术的各个方面适用于OLED屏和其他显示屏,下面提供的具体示例涉及屏下光学感测模块与LCD屏的集成,因此包含与LCD屏相关联的某些技术细节。
由显示屏产生的用于显示图像的光的一部分必须穿过该显示屏的顶面以被用户看到。与顶面接触或靠近顶面的手指与顶面处的光相互作用,以使触摸表面区域处的反射光或散射光携带手指的空间图像信息。这种携带手指的空间图像信息的反射光或散射光返回到顶面下方的显示面板。在触摸感测显示设备中,例如,顶面是接触用户的触摸感测界面,并且用于显示图像的光和用户手指或手之间的这种相互作用不断发生,但是这种返回至显示面板的携带信息的光被大量浪费,并且未在各种触摸感测设备中使用。在具有触摸感测显示屏和指纹感测功能的各种移动或便携式设备中,指纹传感器倾向于作为与显示屏分离的设备,可能设置在显示屏的同一表面上的除显示屏区域之外的位置处,例如在苹果手机iPhone和三星智能手机的一些模型中,或者可能设置在智能手机的背面,例如华为、联想、小米或谷歌等智能手机的一些模型,以避免占用正面上用于设置大显示屏的宝贵空间。这些指纹传感器是与显示屏分离的设备,因此需要紧凑以节省显示屏和其他功能的空间,同时仍然提供具有高于某一可接受水平的空间图像分辨率的可靠且快速的指纹感测。然而,在许多指纹传感器中,设计指纹传感器为紧凑且小巧的需求与采集指纹图案时提供高空间图像分辨率的需求彼此直接冲突,因为在基于各种适当的指纹感测技术(例如,电容式触摸感测或光学成像)采集指纹图像时的高空间图像分辨率需要具有大量感测像素的大传感器区域。
本公开中描述的传感器技术和传感器技术的实现方式的示例提供了一种光学指纹传感器模块,在一些实现方式中,该光学指纹传感器模块至少部分地使用来自显示屏的光作为照明探测光,以照亮显示屏的触摸感测表面上的指纹感测区域,进而基于这种光的光学感测执行一个或多个感测操作,或者在其他实现方式中,其使用来自一个或多个指定照明光源的指定照明或探测光进行光学感测,而该指定照明或探测光与用于光学感测的显示光分离,或者在某些实现方式中,其使用背景光进行光学感测。
在公开的用于基于所公开的光学传感器技术将光学感测模块集成到LCD屏的示例中,LCD下光学传感器可以用于检测光的一部分,该光的一部分用于在LCD屏中显示图像,其中,这种用于显示屏的光的一部分可以是散射光、反射光或一些杂散光。例如,在一些实现方式中,基于背光的LCD屏的图像光在遇到用户手指或手掌等物体、或像触笔等的用户指针设备时,可以作为返回光而反射或散射回LCD显示屏中。这种返回光可以被采集,以用于使用所公开的光学传感器技术来执行一个或多个光学感测操作。由于使用来自LCD屏的光进行光学感测,基于所公开的光学传感器技术的光学指纹传感器模块被专门设计为集成到LCD显示屏,其中,该集成的方式保留LCD显示屏的显示操作和功能而不受干扰,同时提供光学感测操作和功能,以增强诸如智能手机、平板电脑或移动和/或可穿戴设备等电子设备或系统的整体功能、设备集成和用户体验。
另外,在所公开的光学感测技术的各种实现方式中,可以设置一个或多个指定探测光源,以产生用于LCD屏下光学感测模块进行光学感测操作的附加照明探测光。在这种应用中,来自LCD屏的背光的光和来自一个或多个指定探测光源的探测光共同形成用于光学感测操作的照明光。
关于除指纹检测以外的附加的光学感测功能,光学感测可以用于测量其他参数。例如,鉴于整个LCD显示屏上可用的大触摸区域,所公开的光学传感器技术能够测量人的手掌的图案(相反,一些指定的指纹传感器,如苹果手机iPhone/平板电脑iPad设备的主按钮中的指纹传感器,具有相当小且指定的屏外指纹感测区域,其在感测区域的大小上受到高度限制,可能不适合感测大图案)。再例如,所公开的光学传感器技术不仅可以用于使用光学感测来采集和检测与人关联的手指或手掌的图案,还可以用于使用光学感测或其他感测机制,以通过“活体手指”检测机制检测采集的或检测的指纹或手掌的图案是否来自活人的手,该“活体手指”检测机制基于例如血液在不同光学波长下的不同光学吸收行为,事实上,由于人的自然移动或运动(有意或无意的),活人的手指通常是移动或伸展的,或当血液流过与心跳相连的人体时,手指通常是脉动的。在一个实现方式中,光学指纹传感器模块可以检测由于心跳/血流变化而导致的从手指或手掌返回的光的变化,从而检测在表现为手指或手掌的对象中是否存在活体心跳。用户认证可以基于指纹/手掌图案的光学感测和对存在活人的正面确定的结合来增强访问控制。又如,光学指纹传感器模块可以包括感测功能,该感测功能用于基于来自手指或手掌的返回光的光学感测来测量葡萄糖水平或氧饱和度。再如,当人触摸LCD显示屏时,触摸力的变化能够以一种或多种方式反映,包括指纹图案变形、手指和屏幕表面之间的接触面积的变化、指纹脊变宽或血流动态变化。这些变化和其他变化可以通过基于所公开的光学传感器技术的光学感测来测量,并且可以用于计算触摸力。这种触摸力感测可以用于为光学指纹传感器模块增加除指纹感测之外更多的功能。
针对与LCD显示屏的触摸感测方面相关的有用操作或控制特征,所公开的光学传感器技术可以基于来自光学指纹传感器模块的一个或多个感测结果提供触发功能或附加功能,以进行与LCD显示屏上的触摸感测控制相关的某些操作。例如,手指皮肤的光学特性(如折射率)通常与其他人造物体不同。基于此,光学指纹传感器模块可以设计为选择性地接收和检测由与LCD显示屏的表面接触的手指造成的返回光,而由其他物体造成的返回光不会被光学指纹传感器模块检测到。这种物体选择性光学检测可以用于通过触摸感测提供有用的用户控制,例如只有经由人的手指或手掌的触摸才能唤醒智能手机或设备,而其他物体的触摸不会引起设备的苏醒,以实现节能操作并且延长电池的使用。这种操作可以通过基于光学指纹传感器模块的输出的控制来实现,以控制LCD显示屏的唤醒电路操作,其中,通过关闭LCD像素(以及关闭LCD背光)使其处于“睡眠”模式,同时开启用于LCD面板下光学指纹传感器模块的一个或多个照明光源(例如LED)使其处于闪光模式,以向屏幕表面间歇性地发出闪光来感测人的手指或手掌的任何触摸。在这种设计下,光学指纹传感器模块操作一个或多个照明光源,以产生“睡眠”模式唤醒感测光闪烁,使得光学指纹传感器模块能够检测LCD显示屏上的手指触摸所造成的这种唤醒感测光的返回光,并且一旦检测到返回光,LCD背光和LCD显示屏即被开启或“唤醒”。在一些实现方式中,唤醒感测光可以在红外线不可见的光谱范围中,所以用户不会经历任何视觉上的光的闪烁。LCD显示屏操作可以控制为通过消除用于指纹的光学感测的背景光来提供改进的指纹感测。例如,在一个实现方式中,每个显示扫描帧生成一帧指纹信号。如果生成两帧与显示相关的指纹信号,其中当LCD显示屏打开时生成一帧指纹信号,而当LCD显示屏关闭时生成另一帧指纹信号,则这两帧指纹信号的差值可以用于减少周围的背景光的影响。在一些实现方式中,通过操作指纹感测帧速率为显示帧速率的一半,能够降低指纹感测中的背景光噪声。
基于所公开的光学传感器技术的光学指纹传感器模块可以耦合到LCD显示屏的背面,而不需要在LCD显示屏的表面侧上创建指定的区域,该区域在一些智能手机、平板电脑或可穿戴设备等电子设备中会占用宝贵的设备表面空间。所公开的技术的这一方面可以用于在设备设计和产品集成或制造中提供某些优点或益处。
在一些实现方式中,基于所公开的光学传感器技术的光学指纹传感器模块可以被配置为非入侵式模块,其可以容易地集成到显示屏,而不需要改变LCD显示屏的设计以提供指纹感测等期望的光学感测功能。就这点而言,基于所公开的光学传感器技术的光学指纹传感器模块可以独立于特定的LCD显示屏的设计,这是由于光学指纹传感器模块的以下性质:这种光学指纹传感器模块的光学感测是通过检测由光学指纹传感器模块的一个或多个照明光源发出的并从显示区域的顶面返回的光进行的,并且所公开的光学指纹传感器模块耦合到LCD显示屏的背面而作为屏下光学指纹传感器模块,用于接收来自显示区域的顶面的返回光,从而不需要与显示屏区域分离的特定感测端口或感测区域。因此,这种屏下光学指纹传感器模块可以用于与LCD显示屏组合,以提供LCD显示屏上的光学指纹感测和其他传感器功能,而不使用具有专门设计用于提供这种光学感测的硬件的特殊设计的LCD显示屏。所公开的光学传感器技术的这一方面使得智能手机、平板电脑或其他电子设备中的广范围的LCD显示屏具有来自所公开的光学传感器技术的光学感测的增强功能。
例如,对于不提供分离的指纹传感器的现有手机组件设计,像某些苹果手机iPhone或三星盖乐世Galaxy智能手机,这种现有手机组件设计可以不改变触摸感测显示屏组件而集成如本文所公开的屏下光学指纹传感器模块,以提供增加的屏上指纹感测功能。因为所公开的光学感测不需要单独的指定感测区域或端口,像某些苹果手机iPhone/三星Galaxy手机具有在显示屏区域外的前置指纹传感器,或像华为、小米、谷歌或联想等模型中的一些智能手机在背面具有指定的后置指纹传感器,本文所公开的屏上指纹感测的集成不需要对现有手机组件设计或具有触摸感测层和显示层的触摸感测显示模块进行实质的改变。基于本文件中所公开的光学感测技术,不需要在设备外部设置用于添加所公开的用于指纹感测的光学指纹传感器模块的外部感测端口和外部硬件按钮。添加的光学指纹传感器模块和相关电路位于手机外壳内的显示屏下方,并且指纹感测可以在触摸屏的相同触摸感测表面上方便地进行。
又如,由于用于指纹感测的光学指纹传感器模块的上述性质,集成这种光学指纹传感器模块的智能手机能够随着改进的设计、功能和集成机制来更新,而不影响LCD显示屏的设计或制造或加重LCD显示屏的设计或制造负担,以在产品周期中为设备制造和改进/升级提供期望的灵活性,同时维持更新版本的光学感测功能对使用LCD显示屏的智能手机、平板电脑或其他电子设备的可用性。具体地,通过利用所公开的屏下光学指纹传感器模块,可以在下一产品发布时更新触摸感测层或LCD显示层,而无需为指纹感测特征增加任何显著的硬件改变。此外,通过使用新版本的屏下光学指纹传感器模块,可以将用于针对这种光学指纹传感器模块实现的指纹感测或其他光学感测功能的改进屏上光学感测添加到新产品版本中,而不需要对手机组件设计作出显著的改变,包括增加附加的光学感测功能。
所公开的光学传感器技术的以上和其他特征可以实现为向新一代的电子设备提供改进的指纹感测和其他感测功能,尤其是对于具有LCD显示屏的智能手机、平板电脑和其他电子设备,以提供各种触摸感测操作和功能,并增强这些设备的用户体验。本文公开的光学指纹传感器模块的特征可以适用于基于不同技术的各种显示面板,包括LCD显示屏和OLED显示屏。以下的具体示例针对的是LCD显示面板和置于LCD显示面板下的光学指纹传感器模块。
在所公开的技术特征的实现方式中,可以设置附加的感测功能或感测模块,如生物医学传感器,例如在像腕带设备或手表等的可穿戴设备中的心跳传感器。总之,不同的传感器可以设置在电子设备或系统中,以实现不同的感测操作和功能。
所公开的技术可以实现为提供设备、系统和技术,该设备、系统和技术执行人体指纹的光学感测和用于验证对配备有指纹检测模块的锁定的诸如移动设备等计算机控制设备或计算机控制系统的访问尝试的认证。所公开的技术可以用于保护对各种电子设备和系统的访问,该电子设备和系统包括笔记本电脑、平板电脑、智能手机和游戏设备等便携式或移动计算设备,以及电子数据库、汽车、银行ATM等其他电子设备或系统。
II、屏下光学感测模块的设计示例
如本文所述,实施例提供了诸如用于屏下光学指纹模块的屏下光学感测模块的大感测区域实现方式。出于增加清楚性和上下文的考虑,描述了用于屏下光学指纹传感器模块的各种设计的示例,用于将光学信号收集到光学检测器并提供所需的光学成像,例如具有足够的成像分辨率。在下面的专利文件中,进一步描述了屏下光学指纹感测实现方式的这些和其他实施例,在此通过引用将这些专利文件全部内容并入本文,分别为:美国专利申请第15/616,856号;美国专利申请第15/421,249号;美国专利申请第16/190,138号;美国专利申请第16/190,141号;美国专利申请第16/246,549号;以及美国专利申请第16/427,269号。
图1是具有包括指纹传感器181的指纹感测模块180的系统180的示例的框图,其可以实现为包括基于本文件中所公开的指纹的光学感测的光学指纹传感器。系统180包括指纹传感器控制电路184和数字处理器186,数字处理器186可以包括一个或多个处理器,用于处理指纹图案并确定输入的指纹图案是否是授权用户的指纹图案。指纹感测系统180使用指纹传感器181获得指纹并将获得的指纹与储存的指纹进行比较,以启用或禁用由指纹感测系统180保护的设备或系统188中的功能。在操作中,基于采集的用户指纹是否来自授权用户,指纹处理处理器186控制对设备188的访问。如图所示,指纹传感器181可以包括多个指纹感测像素,例如,统一表示至少一部分指纹的像素182A-182E。例如,指纹感测系统180可以在作为系统188的ATM处实现,以确定请求访问资金或其他交易的客户的指纹。基于对从指纹传感器181获得的客户指纹与一个或多个储存的指纹的比较,响应于正面识别,指纹感测系统180可以使得ATM系统188准许请求的对用户账户的访问,或者响应于否定识别,可以拒绝访问。再如,设备或系统188可以是智能手机或便携式设备,并且指纹感测系统180是集成到设备188的模块。再如,设备或系统188可以是使用指纹传感器181来准许或拒绝进入的设施或家庭的门或安全入口。再如,设备或系统188可以是汽车或其他交通工具,其使用指纹传感器181链接到发动机的启动,并识别人是否被授权操作该汽车或交通工具。
作为一个具体示例,图2A和图2B示出了电子设备200的一个示例性实现方式,电子设备200具有触摸感测显示屏组件和位于该触摸感测显示屏组件下方的光学指纹传感器模块。在该特定的示例中,显示技术可以通过具有用于光学照亮LCD像素的背光的LCD显示屏或具有发光显示像素而不使用背光的另一种显示屏(例如OLED显示屏)来实现。电子设备200可以是智能手机或平板电脑等便携式设备,也可以是如图1所示的设备188。
图2A示出了设备200的正面,其类似于一些现有智能手机或平板电脑中的一些特征。设备屏幕位于设备200的正面,占据全部、大部分或显著部分的正面空间,并且在设备屏幕上设置指纹感测功能,例如,用于在设备屏幕上接收手指的一个或多个感测区域。作为示例,图2A示出了设备屏幕中用于手指触摸的指纹感测区,该指纹感测区可以被照亮为明显可识别的区或区域,供用户放置手指进行指纹感测。这种指纹感应区可以像设备屏幕的其余部分一样用于显示图像。如图所示,在各种实现方式中,设备200的设备外壳可以具有侧面,该侧面支持当前市场上各种智能手机中常见的侧控制按钮。并且,如图2A中设备外壳的左上角的一个示例所示,设备200在设备屏幕外的正面上可以设置一个或多个可选的传感器。
图2B示出了设备200中与本文件中公开的光学指纹感测相关的模块的结构构造的示例。图2B中所示的设备屏幕组件包括:例如,在顶部具有触摸感测层的触摸感测屏模块、以及位于触摸感测屏模块下方的具有显示层的显示屏模块。光学指纹传感器模块耦合到显示屏组件模块并位于其下方,以接收和采集来自触摸感测屏模块的顶面的返回光,并且将该返回光引导且成像到光学感测像素或光电检测器的光学传感器阵列上,该光学传感器阵列将该返回光中的光学图像转换成像素信号以用于进一步处理。光学指纹传感器模块下方是设备电子器件结构,该设备电子器件结构包含用于设备200中的光学指纹传感器模块和其他部件的某些电子电路。该设备电子器件可以布置在设备外壳内部,并且可以包括如图2B所示的光学指纹传感器模块的下方的部件。
在一些实现方式中,设备屏幕组件的顶面可以为光学透明层的表面,该光学透明层的表面作为用户触摸感测表面以提供多种功能,例如(1)显示输出表面,携带显示图像的光穿过该显示输出表面到达观看者的眼睛,(2)触摸感测界面,通过触摸感测屏模块接收用户触摸以进行触摸感测操作,以及(3)光学界面,用于屏上指纹感测(以及可能的一个或多个其他光学感测功能)。该光学透明层可以为诸如玻璃或晶体层等的刚性层或柔性层。
显示屏的一个示例是具有LCD层以及薄膜晶体管(thin film transistor,TFT)结构或基板的LCD显示屏。LCD显示面板为多层式液晶显示(LCD)模块,该多层式LCD模块包括发出用于LCD像素的LCD照明光的LCD显示背光光源(例如LED灯)、引导背光的光波导层、以及可以包括例如液晶(LC)单元层、LCD电极、透明导电ITO层、光学偏振器层、彩色滤光片层和触摸感测层的LCD结构层。LCD模块还包括位于LCD结构层下方且光波导层上方的背光漫射器,用于空间分散用于照亮LCD显示像素的背光;以及光波导层下方的光学反射器膜层,用于将背光再循环至LCD结构层,以提高光利用率和显示亮度。为了光学感测,可以提供一个或多个单独的照明光源,并相对于LCD显示模块的背光光源独立地来操作这些照明光源。
参见图2B,本示例中的光学指纹传感器模块位于LCD显示面板下方,以采集来自该顶部触摸感测表面的返回光,并且当用户的手指与该顶面上的感测区域接触时获取高分辨率的指纹图案图像。在其他实现方式中,所公开的用于指纹感测的屏下光学指纹传感器模块可以在不具备触摸感测特征的设备上实现。
图3A和图3B示出了实现图2A和图2B中的光学指纹传感器模块的设备的示例。图3A示出了包括屏下光学指纹传感器模块的设备的一部分的横截面视图。图3B在左侧示出了具有触摸感测显示屏的设备的正面的视图,指示屏下部上的指纹感测区域,并在右侧示出了包括位于设备显示屏组件下方的光学指纹传感器模块的设备的一部分的透视图。图3B还示出了具有电路元件的柔性带的布局的示例。
在图2A-图2B以及图3A-图3B的设计示例中,光学指纹传感器设计不同于一些其他的指纹传感器设计,这些其他设计使用独立于显示屏的指纹传感器结构,并且在移动设备表面上的显示屏和指纹传感器之间具有物理分界(例如,一些移动电话设计中在顶部玻璃盖板的开口中的按钮状结构)。在本文所示的设计中,用于检测指纹感测信号和其他光学信号的光学指纹传感器位于顶部盖板玻璃或层的下方(例如图3A),使得盖板玻璃的顶面用作移动设备的顶面,作为遍及垂直堆叠并垂直重叠的显示屏层和光学检测传感器上的连续且均匀的玻璃表面。用于将光学指纹感测和触摸敏感显示屏集成在共同且均匀的表面下的这种设计示例提供了益处,包括提高了设备一体化,增强了设备封装,增强了设备对外部元件、故障、磨损和撕裂的抵抗力,并且增强了设备的持有期间的用户体验。
返回参考图2A和图2B,所示的用于屏上指纹感测的屏下光学指纹传感器模块可以以各种配置来实现。在一个实现方式中,基于上述设计的设备可以被构造成包括设备屏幕,该设备屏幕提供触摸感测操作并且包括用于形成显示图像的LCD显示面板结构,该设备还包括顶部透明层,形成于设备屏幕上方,作为被用户触摸以进行触摸感测操作、并传输来自显示结构的光以将图像显示给用户的界面,该设备还包括光学指纹传感器模块,位于显示面板结构下方,以接收从顶部透明层返回的光来检测指纹。
本文公开的这种设备和其他设备还可以被配置为包括各种特征。例如,设备电子控制模块可以包括在该设备中,以在检测到的指纹与授权用户的指纹匹配时准许用户对该设备的访问。此外,光学指纹传感器模块除了检测指纹外,还被配置为通过光学感测来检测不同于指纹的生物特征参数,以指示顶部透明层处与检测到的指纹相关联的触摸是否来自活人,并且如果(1)检测到的指纹与授权用户的指纹匹配,并且(2)检测到的生物特征参数指示检测到的指纹来自活人,则设备电子控制模块被配置为准许用户对该设备的访问。该生物特征参数可以包括,例如,手指是否包含人的血流或心跳。
例如,该设备可以包括耦合到显示面板结构的设备电子控制模块,以向发光显示像素提供电源,并控制显示面板结构的图像显示,以及在指纹感测操作中,设备电子控制模块操作为关闭一帧中的发光显示像素并开启下一帧中的发光显示像素,以允许光学传感器阵列采集具有发光显示像素照明和不具有发光显示像素照明的两个指纹图像,从而减少指纹感测中的背景光。
再如,设备电子控制模块可以耦合到显示面板结构,以向LCD显示面板提供电源,并在睡眠模式下关闭LCD显示面板的背光电源,并且当光学指纹传感器模块在顶部透明层的指定的指纹感测区域处检测到人的皮肤的存在时,设备电子控制模块可以被配置为将显示面板结构从睡眠模式唤醒。更具体地,在一些实现方式中,设备电子控制模块可以被配置为操作光学指纹传感器模块中的一个或多个照明光源间歇性地发光,同时关闭LCD显示面板的电源(在睡眠模式下),用于将间歇发出的照明光引导至顶部透明层的指定的指纹感测区域,以监测是否存在与指定的指纹感测区域接触的人的皮肤,用于将设备从睡眠模式唤醒。
再如,该设备可以包括设备电子控制模块,该设备电子控制模块耦合到光学指纹传感器模块,以接收通过感测手指的触摸获得的多个检测到的指纹的信息,并且该设备电子控制模块操作为测量该多个检测到的指纹的变化并确定造成测量到的该变化的触摸力。例如,该变化可以包括由于触摸力引起的指纹图像的变化、由于触摸力引起的触摸面积的变化、或指纹脊间隔的变化。
再如,顶部透明层可以包括用于用户通过手指触摸以进行指纹感测的指定的指纹感测区域,并且显示面板结构下方的光学指纹传感器模块可以包括与显示面板基板接触的透明块,以接收从该显示面板结构发出的并从该顶部透明层返回的光,该光学指纹传感器模块还可以包括接收该光的光学传感器阵列以及光学成像模块,该光学成像模块将该透明块中接收到的该光成像到该光学传感器阵列上。该光学指纹传感器模块可以相对于指定的指纹感测区域定位,并且被构造成:当与人的皮肤接触时,选择性地接收顶部透明层的顶面处通过全内反射返回的光,而在不存在人的皮肤的接触时,不接收从指定的指纹感测区域返回的光。
又如,光学指纹传感器模块可以被构造成包括位于显示面板结构下方的光楔,以改变与该光楔接合的显示面板结构的底面上的全反射条件,进而允许从该显示面板结构提取出穿过该底面的光,该光学指纹传感器模块还可以包括光学传感器阵列,其接收来自该光楔的从该显示面板结构提取出的光,还可以包括光学成像模块,位于该光楔和该光学传感器阵列之间,以将来自该光楔的光成像到该光学传感器阵列上。
图4A和图4B示出了用于实现图2A和图2B设计的、位于显示屏组件下方的光学指纹传感器模块的一个实现方式的示例。图4A和图4B中示出的设备包括具有顶部透明层431的显示组件423,该顶部透明层431形成于设备屏幕组件423上方,作为被用户触摸以进行触摸感测操作、并传输来自显示结构的光以将图像显示给用户的界面。在一些实现方式中,顶部透明层431可以是盖板玻璃或晶体材料。设备屏幕组件423可以包括顶部透明层431下方的LCD显示模块433。LCD显示层允许部分的光学透射,使得来自顶面的光能够部分地透过LCD显示层到达LCD下光学指纹传感器模块。例如,LCD显示层包括光学地用作孔阵列和光散射物体的电极和布线结构。设备电路模块435可以设置在该LCD显示面板下方,以控制该设备的操作并且为用户执行功能以操作该设备。
本具体实现示例中的光学指纹传感器模块702位于LCD显示模块433下方。设置一个或多个照明光源,例如LCD显示模块433下方的照明光源436或/和位于顶部盖板玻璃431下方的另一个或多个照明光源,用于提供光学指纹感测模块702进行光学感测的照明光或探测光,并且可以控制该一个或多个照明光源发光,以至少部分地穿过LCD显示模块433而照亮设备屏幕区域内的顶部透明层431上的指纹感测区615,以供用户将手指放置其中进行指纹识别。来自一个或多个照明光源436的照明光可以被引导至顶面上的指纹感测区域615,如同该照明光来自指纹照明光区613。另一个或多个照明光源可以位于顶部盖板玻璃431下方,并且可以邻近顶面上的指纹感测区域615放置,以引导产生的照明光到达顶部盖板玻璃433而无需穿过LCD显示模块433。在一些设计中,一个或多个照明光源可以位于顶部盖板玻璃431的底面上方,以引导产生的照明光到达顶部盖板玻璃433的顶面上方的指纹感测区域,而不必穿过顶部盖板玻璃431,例如,直接照亮顶部盖板玻璃431上方的手指。
如图4A所示,手指445被放置在作为有效感测区的照亮指纹感测区615中进行指纹感测。区615中反射或散射的光中的一部分被引导至LCD显示模块433下方的光学指纹传感器模块中,并且光学指纹传感器模块内的光电检测器感测阵列接收这种光,并且采集由接收的该光所携带的指纹图案信息。一个或多个照明光源436与用于LCD显示模块的背光源分开,并且独立于LCD显示模块的背光光源操作。
在使用一个或多个照明光源436来提供用于光学指纹感测的照明光的这种设计中,在一些实现方式中,可以控制每个照明光源436以相对较慢的周期间歇性地开启,从而减少用于光学感测操作的能源。在一些实现方式中,指纹感测操作可以以两步过程来实现:首先,以闪光模式开启一个或多个照明光源436,而不开启LCD显示面板,从而使用闪烁光来感测手指是否触摸感测区615,然后,一旦检测到区615中存在触摸,则操作光学感测模块执行基于光学感测的指纹感测,并且可以开启LCD显示面板。
在图4B的示例中,屏下光学指纹传感器模块包括耦合到该显示面板以接收来自设备组件的顶面的返回光的透明块701以及执行光学成像和成像采集的光学成像块702。在一种照明光源436的设计中,照明光源436被定位成引导照明光首先透过顶部盖板玻璃431再到达手指,来自一个或多个照明光源436的光在到达盖板顶面后,例如到达用户手指触摸的、或在没有触摸盖板顶面时用户手指所在的感测区域615处的盖板顶面后,从该盖板顶面反射或散射回来。当指纹脊与感测区域615中的盖板顶面接触时,由于在该位置处接触的手指的皮肤或组织的存在,指纹脊下的光反射不同于另一位置处的指纹谷下的光反射,在该另一位置处的指纹谷下,不存在手指的皮肤或组织。这种盖板顶面上的手指触摸的区域中脊和谷的位置处的光反射条件的不同形成了表示该手指的触摸部分的脊和谷的空间分布的图像。该反射光被引导回LCD显示模块433,并且在穿过LCD显示模块433的小孔后,到达该光学指纹传感器模块的低折射率光学透明块701的界面。低折射率光学透明块701被构造成其折射率小于LCD显示面板的折射率,使得返回光可以从LCD显示面板提取到光学透明块701中。一旦该返回光在光学透明块701内接收,这种接收到的光进入作为成像感测块702的一部分的光学成像单元,并被成像到块702内的光电检测器感测阵列或光学感测阵列上。指纹脊和谷之间的光反射差异产生指纹图像的对比度。如图4B所示,控制电路704(例如,微控制器或MCU)耦合到成像感测块702和主电路板上的诸如设备主处理器705等其他电路。
在该特定的示例中,光学光路设计被构造为使得照明光在基板和空气界面之间的顶面上全反射角范围内进入盖板顶面,因此,反射光被块702中的成像光学器件和成像传感器阵列最有效地收集。在这种设计中,由于每个手指谷位置处的全内反射条件,其中手指组织不触摸顶部盖板玻璃431的顶部盖板表面,因此指纹脊/谷区域的图像呈现最大的对比度。这种成像系统的实现方式可能具有不期望的光学畸变,这会对指纹感测产生不利影响。因此,基于沿返回光的光路在光学传感器阵列处的光学畸变轮廓,在对块702中的光学传感器阵列的输出信号进行处理时,在成像重建期间通过畸变校正来进一步校正获取的图像。通过在X方向线和Y方向线的整个感测区域每次扫描一行像素的测试图像图案,畸变校正系数可以由每个光电检测器像素处采集的图像生成。这种校正过程还可以使用来自于每次开启一个单独的像素且扫描光电检测器阵列的整个图像区域而得到的图像。这种校正系数只需要在组装传感器之后生成一次。
来自环境的背景光(如太阳光或室内照明光)可以通过LCD面板顶面、进而通过LCD显示组件433中的孔进入图像传感器。这种背景光可以在来自手指的有价值的图像中产生背景基线,并且因此可能不期望地降低了采集图像的对比度。可以使用不同的方法来减少背景光所引起的这种不期望的基线强度。一个示例是以一定的照明调制频率f开启和关闭照明光源436,通过对光源驱动脉冲和图像传感器帧进行相位同步,图像传感器因而以相同照明调制频率获取接收到的图像。在这种操作下,图像相位中只有一个包含来自光源的光。在实施该技术时,可以将成像采集定时成在偶数(或奇数)帧处开启照明光,同时在奇数(或偶数)帧处关闭照明光来采集图像,因此,可以减去偶数帧和奇数帧,用于获得主要由具有明显减少的背景光的调制照明光源发出的光形成的图像。基于这种设计,每个显示扫描帧生成一帧指纹信号,并且通过在一帧中开启照明光而在另一帧中关闭照明光来获得两个连续的信号帧。相邻帧的相减可用于最小化或基本上减小环境背景光的影响。在一些实现方式中,指纹感测帧速率可以是显示帧速率的一半。
在图4B所示的示例中,来自一个或多个照明光源436的光的一部分还可以穿过盖板顶面,并进入手指组织。这部分的照明光被散射在周围,并且这种散射光中的一部分可以最终被光学指纹传感器模块702中的成像传感器阵列收集。该散射光的光强是与手指的内部组织相互作用的结果,因此取决于手指的皮肤颜色、手指组织中的血液浓度或内部手指组织。手指的这种信息由手指上的这种散射光携带,对于指纹感测是有用的,并且可以作为指纹感测操作的一部分被检测到。例如,用户手指图像的区域的强度可以在检测时集成,以测量或观察与用户心跳的相位相关联的或取决于用户心跳的相位的血液浓度的增加或减少。这种特征可以用于确定用户的心跳速率,确定用户的手指是否是活体手指,或者用于提供具备伪造的指纹图案的欺骗设备。本专利文件的后面部分提供了使用携带手指的内部组织信息的光中的信息的附加示例。
在一些设计中,图4B中的一个或多个照明光源436可以设计成发出不同颜色或波长的照明光,并且光学指纹传感器模块可以采集不同颜色或波长下来自人的手指的返回光。通过记录在不同颜色或波长下对应测量到的返回光的强度,可以测量或确定与用户的肤色、血流或手指内的内部组织结构相关联的信息。例如,当用户注册了用于指纹认证操作的手指时,光学指纹传感器可操作为分别测量在两种不同颜色或与光色A和光色B相关联的照明光波长下来自手指的散射光的强度,记作强度Ia和Ib。当用户的手指放置在顶部感测表面上的感测区域上以测量指纹时,可以记录Ia/Ib的比率,以与稍后的测量结果作比较。该方法可以用作设备的反欺骗系统的一部分,以拒绝通过利用模拟用户指纹或与用户指纹相同但可能与用户的肤色或用户的其他生物信息不匹配的指纹制造的欺骗设备。
一个或多个照明光源436可以由用于控制块702中的图像传感器阵列的相同的电子器件704(如MCU)控制。该一个或多个照明光源436可以以短时间(例如,低占空比)进行脉冲,以间歇性地发光并提供用于图像感测的脉冲光。图像传感器阵列可以操作为以相同的脉冲占空比监测光图案。如果存在人体手指触摸屏幕上的感测区域615,则块702中的成像感测阵列处采集的图像可以用于检测触摸事件。连接到块702中的图像传感器阵列的控制电子器件或MCU 704可以操作为确定该触摸是否为人体手指触摸。如果确定是人体手指触摸事件,MCU 704可以操作为唤醒智能手机系统,开启一个或多个照明光源436以进行光学指纹感测,并使用正常模式获取完整的指纹图像。块702中的图像传感器阵列向智能手机主处理器705发送获取的指纹图像,智能手机主处理器705可以操作为将采集的指纹图像与注册的指纹数据库进行匹配。如果存在匹配,智能手机解锁手机,以允许用户访问手机并启动正常操作。如果采集的图像不存在匹配,智能手机向用户反馈该认证失败并保持手机的锁定状态。用户可以尝试再次进行指纹感测,或者可以输入密码作为解锁手机的替代方式。
在图4A和图4B所示的示例中,屏下光学指纹传感器模块使用光学透明块701和具有光电检测器感测阵列的成像感测块702,从而将与显示屏的顶面接触的触摸手指的指纹图案光学地成像在光电检测器感测阵列上。作为示例,图4B中示出了从感测区615至块702中光电检测器阵列的光学成像轴或检测轴625。光学透明块701和成像感测块702中位于光电检测器感测阵列前方的前端形成了体成像模块,以实现用于光学指纹感测的合适的成像。由于该成像过程中的光学畸变,畸变校正可以用于实现期望的成像操作。
在本文公开的由图4A和图4B中的屏下光学指纹传感器模块和其他设计进行的光学感测中,从顶部透明层431上的感测区615到屏下光学指纹传感器模块的光学信号包括不同的光组分。
图5A-图5C示出了用于不同光学条件下从感测区615返回的光的信号生成,以便于理解屏下光学指纹传感器模块的操作。从照明光源或从其他光源(例如,背景光)进入手指的光可以在手指表面下方的组织中产生内部散射光,例如图5A-图5C中的散射光191。在手指表面下方的组织中的这种内部散射的光可以通过手指的内部组织传播并且随后透过手指皮肤进入顶部透明层431,从而携带被手指表面散射、折射或反射的光未携带的某些信息,例如,关于手指皮肤颜色的信息、手指内的血液浓度或流动特性、或手指的光学透射图案,其包含(1)指纹的外部脊和谷的二维空间图案;和(2)与产生手指的外部脊和谷的内部手指组织结构相关联的内部指纹图案。
图5A示出了来自一个或多个照明光源436的照明光如何在透过顶部透明层431后传播通过OLED显示模块433、并生成到达屏下光学指纹传感器模块的不同返回光信号的示例,该返回光信号包括携带指纹图案信息的光信号。为了简单起见,两种不同位置处的两条照明光线80和82被引导至顶部透明层431,而在顶部透明层431的界面处不经历全反射。具体地,照明光线80和82与顶层431垂直或接近垂直。手指60与顶部透明层431上的感测区615接触。如图所示,照明光束80在透过顶部透明层431后,到达与顶部透明层431接触的手指脊,以在手指组织中生成光束183和返回至LCD显示模块433的另一光束181。照明光束82在透过顶部透明层431后,到达位于顶部透明层431上方的手指谷,以生成从顶部透明层431的界面返回到LCD显示模块433的反射光束185、进入手指组织的第二光束189以及由该手指谷反射的第三光束187。
在图5A的示例中,假设手指皮肤在550nm处的等效折射率约为1.44,并且顶部透明层431的盖板玻璃折射率约为1.51。手指脊-盖板玻璃界面对光束80的部分光束进行反射,作为到LCD显示模块433下方的底层524的反射光181。在一些LCD面板中,反射率可能很低,例如约为0.1%。光束80中的大部分光变为透过手指组织60中的光束183,手指组织60造成光183的散射,产生向LCD显示模块433和底层524返回的散射光191。来自LCD像素73的透射光束189在手指组织中的散射也对返回的散射光191有贡献。
手指皮肤谷位置63处的光束82被盖板玻璃表面反射。在一些设计中,例如,随着反射光185朝向底层524,反射率可以是大约3.5%,并且手指谷表面可以将入射光能量的大约3.3%(光187)反射到底层524,使得全反射可能约为6.8%。大部分光189透射至手指组织60中。手指组织中的透射光189中的光能量中的一部分被组织散射,从而贡献到朝向并进入底层524中的散射光191中。
因此,在图5A的示例中,来自触摸手指的手指谷和手指脊处的各种界面或表面的光反射是不同的,并且这种反射比差携带指纹图谱信息且可以被测量以提取与顶部透明层431接触并被OLED光照亮到的部分的指纹图案。
图5B和图5C示出了不同条件下和相对于手指的谷或脊处于不同位置的顶面上的两种附加类型的照明光线的光路,包括顶部透明层431的界面处全反射条件下的照明光线的光路。图示的照明光线生成到达屏下光学指纹传感器模块的不同返回光信号,包括携带指纹图案信息的光信号。假设盖板玻璃431和LCD显示模块433被粘合在一起,两者之间没有任何气隙,使得相对于盖板玻璃431具有大入射角的照明光在盖板玻璃-空气界面处被全反射。图5A、图5B和图5C示出了三组不同的发散光束的示例:(1)中心光束82,相对于盖板玻璃431具有小入射角且不发生全反射(图5A),(2)高对比度光束201、202、211和212,当没有任何物体触摸盖板玻璃表面时,在盖板玻璃431处发生全反射,并且当手指触摸盖板玻璃431时,可以耦合到手指组织中(图5B和图5C),以及(3)具有很大入射角的逃离光束,这些光束即使在手指组织触摸的位置处,也会在盖板玻璃431处发生全反射。
对于中心光束82,在一些设计中,盖板玻璃表面反射约为0.1%~3.5%的光至光束185,这部分光透射至底层524中,手指皮肤可以反射约为0.1%~3.3%的光至光束187,这部分光也透射至底层524中。反射差取决于光束82是否与手指皮肤脊61或谷63相遇。剩余的光束189被耦合到手指组织60中。
对于满足局部全内反射条件的高对比度光束201和202,如果没有任何物体触摸盖板玻璃表面,则盖板玻璃表面分别反射几乎100%的光到光束205和206。当手指皮肤脊触摸盖板玻璃表面且位于光束201和202的位置时,光能量中的大部分通过光束203和204可以耦合到手指组织60中。
对于满足局部全内反射条件的高对比度光束211和212,如果没有任何物体触摸盖板玻璃表面,则盖板玻璃表面分别反射几乎100%的光到光束213和214。当手指触摸盖板玻璃表面且手指皮肤谷恰好处于光束211和212的位置时,没有光能量耦合到手指组织60中。
如图5A所示,耦合到手指组织60中的照明光的一部分会经由内部手指组织发生随机散射,以形成低对比度光191,并且这种低对比度光191中的一部分将穿过LCD显示模块433到达光学指纹传感器模块。由光学指纹传感器模块采集的这部分光包含关于手指皮肤颜色、血液特征和与指纹相关联的手指内部组织结构的附加信息。用于在光学感测中使用手指表面下方组织中的内部散射光的附加特征将在本专利文件的后面部分中解释,例如获得手指的光学透射图案,包含(1)指纹的外部脊和谷的二维空间图案;和(2)与产生手指的外部脊和谷的内部手指组织结构相关联的内部指纹图案。因此,在高对比度光束照亮的区域中,手指皮肤脊和谷引起不同的光学反射,并且反射差异图案携带指纹图案信息。高对比度指纹信号可以通过比较这种差异来实现。
基于图2A和图2B中示出的设计,所公开的屏下光学感测技术可以以各种配置来光学采集指纹。例如,可以以各种配置来实现图4B中基于使用光学感测模块中的体成像模块进行光学成像的具体实现方式。
图6A-图6C示出了基于经由透镜的光学成像的屏下光学指纹传感器模块的示例,用于采集来自按压显示盖板玻璃423的手指445的指纹。图6C是图6B所示的光学指纹传感器模块部分的放大视图。如图6B所示的屏下光学传感器模块位于LCD显示模块433下方,包括:与LCD显示模块433的底面接合的光学透明间隔物617,用于接收来自顶部透明层431的顶面上的感测区615的返回光;以及位于间隔物617和光电检测器阵列623之间的成像透镜621,以将接收到的来自感测区615的返回光成像到光电检测器阵列623上。与图4B示出的不包括透镜的光学投影成像系统的示例不同,图6B中的成像设计的示例使用成像透镜621在光电检测器阵列623处采集指纹图像,并且通过成像透镜621的设计实现图像缩小。在一定程度上类似于图4B示例中的成像系统,图6B中用于光学指纹传感器模块的成像系统可能经历图像畸变,并且可以使用适当的光学校正校准来减少这种畸变,例如,针对图4B中系统所描述的畸变校正方法。
与图5A-图5C中的假设相似,假设手指皮肤在550nm处的等效折射率约为1.44,并且对于盖板玻璃423,裸的盖板玻璃的折射率约为1.51。当OLED显示模块433粘合在盖板玻璃431上且没有任何气隙时,全内反射在等于或大于界面的临界入射角的大角度时发生。如果没有任何物体接触盖板玻璃顶面,则全反射入射角约为41.8°,如果手指皮肤触摸盖板玻璃顶面,则全反射角约为73.7°。对应的全反射角差约为31.9°。
在这种设计中,微透镜621和光电二极管阵列623限定了用于采集感测区615中接触手指的图像的视角θ。为了检测盖板玻璃表面上感测区615中所期望的部分,可以通过控制物理参数或配置来适当地对准该视角。例如,可以对准视角以检测LCD显示组件的全内反射。具体地,对准视角θ以感测盖板玻璃表面上的有效感测区615。有效的感测盖板玻璃表面615可以被看作反射镜,使得光电检测器阵列有效地检测LCD显示屏中指纹照明光区613的图像,该图像由感测盖板玻璃表面615投射到光电检测器阵列上。光电二极管/光电检测器阵列623可以接收区613中由感测盖板玻璃表面615反射的图像。当手指触摸感测区615时,光中的一部分可以耦合到指纹的脊中,这会引起光电检测器阵列接收来自脊位置的光,以呈现为更暗的指纹图像。由于光学检测路径的几何原理是已知的,因此可以校正光学指纹传感器模块中的光学路径中引起的指纹图像畸变。
作为具体的示例,假定图6B中从检测模块中心轴到盖板玻璃顶面的距离H为2mm。这种设计可以直接覆盖5mm的有效感测区615,该有效感测区615在盖板玻璃的宽度为Wc。调整间隔物617的厚度可以调整检测器位置参数H,并且可以优化有效感测区宽度Wc。由于H包括盖板玻璃431和显示模块433的厚度,所以应用设计应当将这些层考虑在内。间隔物617、微透镜621和光电二极管阵列623可以集成在顶部透明层431的底面上的彩色涂层619的下方。
图7示出了用于图6A-图6C中示出的光学指纹传感器模块的光学成像设计的另一设计考虑的示例,该另一设计考虑通过使用特殊的间隔物618代替图6B-图6C中的间隔物617,以增加感测区域615的尺寸。间隔物618设计为具有宽度Ws,厚度Hs,具有低折射率(refraction index,RI)ns,并且,间隔物618放置于LCD显示模块433下方,例如,被附接(如粘合)到LCD显示模块433的底面。间隔物618的端面是与微透镜621接合的成角度的或倾斜的面。间隔物和透镜的这种相对位置不同于图6B-图6C,在图6B-图6C中,透镜位于间隔物617的下方。微透镜621和光电二极管阵列623被组装到具有检测角广度为θ的光学检测模块中。由于在间隔物618和显示模块433之间的界面以及在盖板玻璃431和空气之间的界面处的光学折射,检测轴625弯曲。局部入射角φ1和φ2由部件材料的折射率RI、ns、nc和na决定。
如果nc大于ns,则φ1大于φ2。由此,折射放大了感测宽度Wc。例如,假设手指皮肤的等效折射率RI在550nm处约为1.44,并且盖板玻璃的折射率RI约为1.51,如果没有任何物体触摸盖板玻璃顶面,则全反射入射角估计约为41.8°,如果手指皮肤触摸盖板玻璃顶面,则全反射角约为73.7°。对应的全反射角差约为31.9°。如果间隔物618是由与盖板玻璃相同的材料制成,则从检测模块中心至盖板玻璃顶面的距离为2mm,如果检测角广度θ=31.9°,则有效感测区域宽度Wc约为5mm。对应的中心轴的局部入射角φ1=φ2=57.75°。如果特殊间隔物618的材料具有约为1.4的折射率ns且Hs为1.2mm,则检测模块在φ1=70°处倾斜。有效感测区域宽度增加到6.5mm以上。在这些参数下,盖板玻璃中的检测角广度降低到19°。因此,用于光学指纹传感器模块的成像系统可以设计为期望扩大顶部透明层431上的感测区域615的尺寸。
当特殊间隔物618的折射率RI被设计为足够低时(如,使用MgF2、CaF2或甚至空气来形成间隔物),有效感测区域615的宽度Wc不再受限于盖板玻璃431和显示模块433的厚度。这种性质提供了期望的设计灵活性。原则上,如果检测模块具有足够的分辨率,有效感测区域甚至可以增加到覆盖整个显示屏。
因为所公开的光学传感器技术可以用于提供大感测区域来采集图案,所以所公开的屏下光学指纹传感器模块不仅可以用于采集和检测手指的图案,还可以用于采集和检测更大尺寸的图案,例如与人相关联的人的手掌,用于进行用户认证。
图8A-图8B示出了通过设置光电检测器阵列在显示屏表面中相对的检测角θ’以及透镜621和间隔物618之间的距离L,用于图7中示出的光学指纹传感器模块的光学成像设计的另一设计考虑的示例。图8A示出了沿着垂直于显示屏表面的方向的横截面视图,图8B示出了从显示屏底部或顶部看到的设备的视图。填充材料618c可以用于填充透镜621和光电检测器阵列623之间的间隔。例如,填充材料618c可以是与特殊间隔物618相同的材料或者是另一种不同的材料。在一些设计中,填充材料618c可以是空气间隔。
图9示出了基于图7的设计中的屏下光学指纹传感器模块的另一示例,其中,一个或多个照明光源614被设置,以照亮顶面感测区615用于光学指纹感测。照明光源614可以是扩展类型或是准直类型的光源,使得有效感测区615内所有的点均被照亮。照明光源614可以是单元件光源或光源阵列。
图10A-图10B示出了使用形状为薄楔的光学耦合器628的屏下光学指纹传感器模块的示例,以提高在光学传感器阵列623处的光学检测。图10A示出了具有用于指纹感测的屏下光学指纹传感器模块的设备结构的横截面,图10B示出了设备屏幕的顶视图。光楔628(具有折射率ns)位于显示面板结构下方,以改变与光楔628接合的显示面板结构的底面上的全反射条件,进而允许从显示面板结构提取出穿过底面的光。光学传感器阵列623接收来自光楔628的从显示面板结构提取出的光,光学成像模块621位于光楔628和光学传感器阵列623之间,以将来自光楔628的光成像到光学传感器阵列623上。在所示的示例中,光楔628包括面向光学成像模块和光学感测阵列623呈倾斜的光楔面。此外,如图所示,在光楔628和光学成像模块621之间存在空闲间隔。
如果光在盖板玻璃431的感测表面处发生全反射,则反射率为100%,具有最高的效率。然而,如果光与盖板玻璃表面平行,则光还会在LCD底面433b处发生全反射。楔形耦合器628用于改变局部表面角,使得光可以耦合输出以用于在光学传感器阵列623处的检测。LCD显示模块433中的微孔提供了期望的光传播路径,使得光透过LCD显示模块433,从而进行屏下光学感测。如果光透射角变得太大或当TFT层变得太厚时,实际的光透射效率可能逐渐降低。当该角度接近于全反射角时,即约为41.8°,且盖板玻璃折射率为1.5时,指纹图像看起来是好的。因此,楔形耦合器628的楔角可以被调整为若干度,从而可以提高或优化检测效率。如果盖板玻璃的折射率被选定为更高,则全反射角变得更小。例如,如果盖板玻璃由折射率约为1.76的蓝宝石制成,则全反射角约为34.62°。显示屏中的检测光透射效率也得到提高。因此,这种设计使用薄楔将检测角设置为高于全反射角,和/或使用高折射率的盖板玻璃材料,从而提高检测效率。
在一些屏下光学指纹传感器模块设计(例如,图6A-图6C、图7、图8A、图8B、图9、图10A和图10B中示出的设计)中,顶部透明表面上的感测区域615不垂直或正交于光学指纹传感器模块的检测轴625,使得感测区域的图像平面也不竖直或垂直于检测轴625。因此,光电检测器阵列623的平面相对于检测轴625可以是倾斜的,以在光电检测阵列623处实现高质量成像。
图11A-图11C出了针对这种倾斜的三个示例配置。图11A示出了感测区域615a是倾斜的且不垂直于检测轴625。在图11B中,感测区域615b与检测轴625上方对准,使得其图像平面也将位于检测轴625上。实践中,可以部分切掉透镜621以简化封装。在各种实现方式中,微透镜621还可以是透射型或反射型透镜。例如,图11C中示出了特定的方法。感测区域615c由成像镜621a成像。光电二极管阵列623b进行对准以检测信号。
在使用透镜621的上述设计中,透镜621可以被设计为具有大于LCD显示层中孔的孔径的有效孔径,从而允许光透过LCD显示模块来进行光学指纹感测。这种设计可以减少LCD显示模块中布线结构和其他散射物体的不期望的影响。
图12示出了用于减少或消除指纹感测中来自背景光的不期望的贡献的指纹传感器的操作的示例。光学传感器阵列可以用于采集各种帧,并且采集到的帧可以用于执行多个帧之间的差分和平均操作,以减少背景光的影响。例如,在帧A中,开启用于光学指纹感测的照明光源,以照亮手指触摸区域,在帧B中,改变或关闭照明。帧A的信号与帧B的信号的相减可以用于图像处理中,以减少不期望的背景光影响。
还可以通过在光路中提供合适的光学滤波来减少指纹感测中不期望的背景光。一个或多个光学滤波器可以用于过滤环境光波长,例如,近红外IR光和部分的红光等。在一些实现方式中,这种光学滤波器涂层可以制作在光学部件的表面上,包括显示屏底面、棱镜表面或传感器表面等。例如,人体手指会吸收波长在约580nm以下的大部分能量,如果一个或多个光学滤波器或光学滤波涂层可以被设计为拒绝波长从580nm到红外线的光,则可以大大减少环境光对指纹感测中光学检测的不期望的贡献。
图13示出了用于校正光学指纹传感器模块中图像畸变的操作过程的示例。在步骤1301处,控制和操作一个或多个照明光源在特定区域中发光,并且这种像素的光发射由频率F调制。在步骤1302处,操作显示面板下的成像传感器以相同频率F和某一帧率采集图像。在光学指纹感测操作中,手指放置在显示面板盖板基板的顶面上,并且手指对显示面板盖板基板的顶面的光反射强度进行调制。显示屏下的成像传感器采集指纹调制后的反射光图案。在步骤1303处,以频率F对来自图像传感器的信号的解调进行同步,并且进行背景相减。最终得到的图像减少了背景光的影响,并且包括来自像素发射光产生的图像。在步骤1304处,处理并校准采集到的图像,以校正图像系统畸变。在步骤1305处,将校正后的图像用作用于用户认证的人体指纹图像。
用于采集用户的指纹而使用的相同的光学传感器还可以用于采集来自被照亮手指的散射光,如图5A所示的后向散射光191。可以集成感兴趣区域中来自图5A中后向散射光191的检测器信号,以产生强度信号。评估该强度信号的强度变化,以确定指纹图案之外的其他参数,例如,用户的心率或与外部指纹图案相关联的手指的内部拓扑组织。
上述指纹传感器可以被能够得到授权用户的指纹并且将所窃取的指纹图案复制在类似于人体手指的载体上的恶意的个体黑客攻击。这种未授权的指纹图案可以用在指纹传感器上,以解锁目标设备。因此,尽管指纹图案是一种独特的生物特征标识符,但它本身可能并不是完全可靠或安全的标识。屏下光学指纹传感器模块还可以用作光学反欺骗传感器,用于感测具有指纹图案的输入物体是否是来自活人的手指,并且用于确定指纹输入是否是指纹欺骗攻击。这种光学反欺骗感测功能无需使用单独的光学传感器来提供。光学反欺骗能够提供高速响应,而不影响指纹感测操作的整体响应速度。
图14示出了血液中受监测材料的示例性光学消光系数,其中,光学吸收在如660nm的红光的可见光谱范围和如940nm的红外IR光的红外范围之间是不同的。通过使用探测光以第一可见光波长(颜色A)和诸如红外(IR)波长等的第二不同波长(颜色B)照亮手指,可以采集输入物体的光学吸收的差异,以确定触摸物体是否来自活人手指。用于提供光学感测照明的一个或多个照明光源可以用于发出不同颜色的光,并且发出的光为至少两种不同光学波长的探测光或照明光,以利用血液的不同光学吸收行为进行活体手指检测。当人的心脏跳动时,脉搏压力泵送血液在动脉中流动,因此血液中受监测材料的消光比随着脉搏而变化。接收到的信号携带脉搏信号。血液的这些特性可以用于检测受监测材料是活体指纹还是假指纹。
图15示出了来自无生命材料(例如,假手指或具有仿造指纹图案的欺骗设备)和活体手指的反射光中光学信号行为之间的比较。光学指纹传感器也可以用作心跳传感器运行,以监测活体。当检测到两种或更多种波长的探测光时,消光比差可以用于快速地确定受监测材料是否是活体,例如活体指纹。在图15所示的示例中,使用了不同波长的探测光,如图14所示,一个是可见光波长,另一个是红外IR波长。
当无生命材料触摸指纹传感器模块上方的顶部盖板玻璃时,接收到的信号揭示了与该无生命材料的表面图案相关的强度水平,并且该接收到的信号不包含与活人手指相关联的信号组分。然而,当活人手指触摸顶部盖板玻璃时,接收到的信号揭示了与活人相关联的信号特征,包括明显不同的强度水平,这是因为不同波长的消光比不同。这种方法不需要花费很长时间来确定触摸材料是否是活人的一部分。在图15中,脉冲状信号反映了多次触摸,而不是血液脉动。无生命材料的类似多次触摸不会显示出由活体手指引起的差异。
这种血液在不同光学波长处的不同光学吸收行为的光学感测可以在短周期内进行,以用于活体手指检测,并且可以比使用相同光学传感器进行的人的心跳的光学检测更快。
在LCD显示屏中,LCD背光照明光为白光,从而包含用于在光学指纹传感器模块处执行上述活体手指检测的可见光谱和红外IR光谱范围的光。LCD显示模块中的LCD滤光片可以用于允许光学指纹传感器模块获得图14和图15中的测量结果。另外,可以操作用于产生光学感测的照明光的指定光源436,以在不同时刻以选定的可见波长和红外IR波长发出探测光,并且两种不同波长的反射探测光由光学检测器阵列623采集,以基于图14和图15所示的上述操作来确定触摸物体是否是活体手指。需要注意的是,尽管在不同时刻选定的可见波长和IR波长的反射探测光可以反映血液的不同光学吸收特性,但是指纹图像总是在不同时刻由选定的可见波长的探测光和IR波长的探测光两者采集。因此,指纹感测可以在可见波长和IR波长两者下进行。
图16示出了通过操作用于光学感测的一个或多个照明光源以使用两种不同颜色的光照亮手指,用于确定与LCD显示屏接触的物体是否是活人手指的一部分的操作过程的示例。
又如,所公开的光学传感器技术可以用于通过除上述血液在不同光学波长下的不同光学吸收之外的其他机制,通过“活体手指”检测机制检测采集到的或检测到的指纹或手掌的图案是否来自活人的手。例如,由于人的自然移动或运动(有意或无意的),活体手指通常是移动或伸展的,或当血液流过与心跳相关的人体时,活人的手指通常是脉动的。在一个实现方式中,光学指纹传感器模块可以检测由于心跳/血流变化而导致的来自手指或手掌的返回光的变化,从而检测在表现为手指或手掌的物体中是否存在活体心跳。用户认证可以基于指纹/手掌图案的光学感测和对存在活人的正面确定的结合来增强访问控制。再如,当人触摸LCD显示屏时,触摸力的变化可以以一种或多种方式反映,包括指纹图案变形、手指和屏幕表面之间的接触面积的变化、指纹脊变宽、或血流动态变化。这些变化和其他变化可以通过基于所公开的光学传感器技术的光学感测来测量,并且可以用于计算触摸力。这种触摸力感测可以用于为光学指纹传感器模块增加除指纹感测之外更多的功能。
在上述通过成像模块在光学传感器阵列上采集指纹图案的示例中,如图4B和图6B所示,光学失真通常降低了图像感测保真度。这种光学失真可以以各种方式来校正。例如,可以使用已知图案在光学传感器阵列处生成光学图像,并且已知图案中的图像坐标可以与光学传感器阵列处生成的具有失真的光学图像相关,用于校准由光学传感器阵列输出的用于指纹感测的成像感测信号。指纹感测模块参考标准图案的图像对输出坐标进行校准。
根据本专利文件中的公开内容,可以针对所公开的光学指纹传感器模块进行各种实现。例如,显示面板可以构造成:每个像素均发光,并且可以被单独控制;显示面板包括至少部分透明的基板;以及基本透明的盖板基板。光学指纹传感器模块放置于显示面板下方,用于感测在显示面板表面的顶部上形成的图像。光学指纹传感器模块可以用于感测从显示面板像素发出的光所形成的图像。光学指纹传感器模块可以包括折射率低于显示面板基板的折射率的透明块,还包括具有成像传感器阵列的成像传感器块以及光学成像透镜。在一些实现方式中,低折射率块具有位于1.35至1.46或1至1.35的范围内的折射率。
再如,可以提供一种方法用于指纹感测,其中从显示面板发出的光被盖板基板反射,位于盖板基板顶部上的手指与光相互作用,以调制指纹的光反射图案。显示面板下方的成像感测模块用于感测反射的光图案图像,并重建指纹图像。在一个实现方式中,在时域中调制来自显示面板的发射光,并且成像传感器与发光像素的调制同步,其中解调过程会拒绝大部分的背景光(未来自目标像素的光)。
如上所述,便携式电子设备的显示屏通常被实现为具有多层的组件。例如,实现为触摸屏的显示屏可以包括用于输出视频数据的显示层、用于检测触摸事件的电容性触摸屏层、硬顶层等。附加层用于集成屏下光学感测功能,例如指纹感测。为了使光到达感测组件,光穿过顶面和传感器(例如,光电检测器)之间的各个层。为此,这些层被设计成允许光的透射,并且一些层可以被设计成增强、弯曲、聚焦、准直、反射和/或以其他方式影响穿过这些层的光的传输。
图17A和图17B分别示出了根据各种实施例的说明性便携式电子设备1700以及用于这种便携式电子设备1700的说明性显示模块1710的横截面。便携式电子设备1700被示为智能手机。在其他实现方式中,便携式电子设备1700是笔记本电脑、平板电脑、可穿戴设备或任何其他合适的计算平台。便携式电子设备1700可包括显示系统423。如上所述,显示系统423可以是触摸感测显示系统423。显示系统423在其中集成有屏下光学传感器。如图所示,屏下光学传感器可以限定感测区域615,在该感测区域内可以执行光学感测。例如,当用户将手指445放在感测区域615内的显示屏上时,可由屏下光学传感器执行指纹扫描。这种屏下光学传感器可以使用多个层来实现。
图17B的显示模块1710可以是图17A的显示系统423的一种实现方式。如图所示,显示模块1710包括多个层。顶部盖板层1715(例如,玻璃)可以用作用于各种用户界面操作的用户界面表面。例如,盖板层1715可以促进用户的触摸感测操作、向用户显示图像、用作光学感测接口来接收手指以进行光学指纹感测和其他光学感测操作等等。在一些实施例中,显示模块1710包括盖板层1715。在其他实现方式中,盖板层1715与显示模块1710分离。例如,显示模块1710作为模块集成到便携式电子设备1700中,而盖板层1715安装在显示模块1710的顶部。
显示模块1710的一层或多个其他层形成液晶模块(liquid crystal module,LCM)1720。在LCM 1720下方,显示模块1710包括增强层1725。如本文所述,增强层1725可以包括一层或多层亮度增强膜,例如包括梯形棱镜结构的增强膜。显示模块1710还可以包括光漫射器1730、导光板1735、反射器膜1740和框架1745中的一些或全部。一些实施例中包括附加组件,例如一个或多个显示光源1750,和一个或多个外部光源1760(例如,用于指纹感测和/或其他光学感测)。
显示光源1750的实现方式可以包括为显示模块1710提供白色背光的LCD显示屏背光光源(例如,LED灯)。导光板1735的实现方式包括与显示光源1750光学耦合的波导,以接收和引导背光。LCM 1720的实现方式包括液晶(liquid crystal,LC)单元层、LCD电极、透明导电ITO层、光学偏振器层、彩色滤光片层、触摸感测层等中的一些或全部。光漫射器1730的实现方式包括背光漫射器,该背光漫射器放置在LCM 1720下方并且在导光板1735上方,以在空间上分散背光以照亮LCM 1720中的LCD显示像素。反射器膜1740被实现为放置在导光板1735下方,以将背光再循环到LCM 1720,进而提高光的利用效率和显示亮度。
当(例如,在感测区域615中)LCD单元开启时,LCM 1720(例如,LC单元、电极、透明ITO、偏振器、彩色滤光片、触摸感测层等)可以变得部分透明,尽管微结构可能会干扰和/或阻挡某些探测光能。光漫射器1730、导光板1735、反射器膜1740和框架1745的实施例被处理,以固定指纹传感器并提供透明或部分透明的感测光路,使得来自盖板层1715的顶面的反射光的一部分可以到达屏下光学传感器的感测元件(例如,光电检测器阵列)。屏下光学传感器可以包括任何合适的组件,例如,指纹传感器部件、光电检测器阵列、用于将反射的探测光准直并引导至光电检测器阵列的光学准直器阵列、以及接收并调节来自光电检测器阵列的检测器输出信号的光学传感器电路。光电检测器阵列的实施例包括CMOS感测像素组成的CMOS传感器、CCD传感器阵列或任何其他合适的光学传感器阵列。
增强层1725的实施例包括一个或多个增强膜。一些增强膜设计包括具有尖锐棱镜脊和尖锐棱镜谷轮廓的棱镜膜(即,每个脊处具有尖锐的过渡和每个谷处具有尖锐的过渡)。例如,图18A-图18C示出了对称增强层1800的说明性部分的视图。图18A示出了对称增强层1800的一小部分的放大图1810。图18B和图18C示出了对称增强层1800的一个增强膜层1820的一小部分的横截面。图18C示出了对称增强层1800中以相对于彼此正交的方向堆叠的两个增强膜层1820a、1820b的一小部分的横截面。
如图所示,每个增强膜层1820形成有一系列尖锐棱镜结构。每个尖锐棱镜结构包括尖锐脊1822和尖锐谷1824。图18A的放大视图1810示出了从顶部观察到的以相对于彼此正交的方向堆叠的图18C的两个增强膜层1820。如图所示,相交的尖锐棱镜结构形成尖锐脊线1812和尖锐谷线1814的网格,分别对应于每个尖锐棱镜结构的尖锐脊1822和尖锐谷1824。如图18C所示,尖锐脊1822指向LCM 1720的方向。
这种增强层1800通常试图增强朝向观看者(例如朝向和/或穿过LCM 1720)的光的亮度。例如,增强层1800试图增强位于LCM 1720后面的背光的亮度和/或用于屏下光学感测的探测照明的亮度。如图18B所示,穿过增强层1800的棱镜结构的光沿不同的方向弯曲,如光路1832a和1832b所示。每个光路1832示出了光能的两个传播方向。第一方向(即,通常朝向LCM 1720)可以表示从增强层1800下方的光源起源的背光和/或探测照明能量的矢量。第二方向(即,通常背离LCM 1720)可以表示从另一层(例如,LCM 1720上方的顶部透明层)反射离开并沿屏下光学传感器方向返回传播的背光和/或探测照明能量的矢量。
随着光沿LCM 1720的方向穿过增强膜层1820,这种弯曲可能倾向于有益。例如,沿第一方向穿过增强膜层1820的光,包括具有大入射角的光路(例如,路径1832),可以以大体会聚的方式朝向LCM 1720弯曲,从而引起亮度增强。作为必然,沿第二方向穿过增强层1800的光可能倾向于以大体发散的方式弯曲。如果尝试进行光学感测,则会导致图像模糊。在典型的显示应用中,由于模糊的光正在进入设备而不是朝向观看者,因此这种模糊是无关紧要的。然而,如本文所述,在屏下光学指纹感测的上下文中,这种模糊影响沿光学感测组件的方向传播的光,这会阻碍通过常规增强层1800下方的组件而进行的光学感测。
为了更加清楚,图18B示出了用于光学感测的三种示例性潜在参考位置(例如,位置和定向)1850。如果根据参考位置1850a放置光学传感器,则该光学传感器可能倾向于检测通过左右棱镜面进入增强膜层1820的光,这可能倾向于导致图像模糊。然而,如果根据参考位置1850b或1850c放置光学传感器,则光学传感器可能倾向于检测仅分别通过右棱镜面或左棱镜面进入增强膜层1820的光。在这种情况下,可以避免模糊,但是至少一半的检测区域可能无法成像。
图19A-图19C示出了根据各种实施例的非对称增强层1900的说明性部分的视图。非对称增强层1900可以是增强层1725的另一实施例。图19A示出了非对称增强层1900的一小部分的放大图1910。图19B示出了非对称增强层1900的一个增强膜层1920的一小部分的横截面。图19C示出了非对称增强层1900中以相对于彼此正交的方向堆叠的两个非对称层1920a、1920b的一小部分的横截面。
如图所示,每个增强膜层1920形成有一系列非对称棱镜结构。每个非对称棱镜结构(微棱镜结构)通常由具有两个成角度的侧面的横截面限定,从而形成尖锐脊1922和尖锐谷1924。如图所示,两个成角度的侧面中的每一个侧面相对于垂直线以各自不同的倾斜角度1926倾斜。值得注意的是,在可能的倾斜角1926的范围的每个极限处是一个实施例,其中,一个倾斜角1926基本上为零度,以便有效地形成锯齿脊棱镜结构。在另一实施例中,一个倾斜角1926为45度,而另一个为52度。在另一实施例中,一个倾斜角1926为45度,而另一个为54度。在另一实施例中,一个倾斜角1926为45度,而另一个为56度。在另一实施例中,一个倾斜角1926为38度,而另一个为52度。在另一实施例中,一个倾斜角1926为36度,而另一个为54度。如本文所述,倾斜角1926被选择,以提供期望的类型和/或数量的亮度增强(例如,用于在LCM 1720的方向上穿过增强膜层1920的背光)。
图19A的放大视图1910示出了从顶部观察到的以相对于彼此正交的方向堆叠的图19C的两个增强膜层1920。如图所示,相交的棱镜结构形成尖锐脊线1912和尖锐谷线1914的网格,分别对应于每个尖锐棱镜结构的尖锐脊1922和尖锐谷1924。这种布置使俯视图看起来类似于图18的增强层1800的俯视图,但提供了与传统增强层1800不同的各种特征。
图19B示出了在LCM 1720的方向上,例如沿着光路1930,通过增强膜层1920传播的光。通常在LCM 1720的方向上穿过增强膜层1920(即,参照图示方向具有向上的方向分量)的光,例如,沿着光路1930a和1930b的那些光,通过微棱镜结构的成角度的表面朝向垂直方向弯曲。因此,尽管某些光路受到非对称棱镜结构的影响与受到对称增强层1800的微棱镜结构的影响不同,但是非对称增强膜层1920仍提供背光增强特征。
与对称增强层1800不同,非对称增强膜层1920对于在与LCM 1720相反的方向上传播(即,参照图示方向具有向下的方向分量)的光产生较少的模糊。图19B示出了在这样的方向上(例如,屏下光学传感器的方向),例如沿着光路1940,通过增强膜层1920传播的光。如图所示,三个物体1950位于相对于非对称增强膜层1920不同的位置。例如,物体1950是放置在具有非对称增强膜层1920的设备的指纹感测区域上的手指的指纹脊或谷,该非对称增强膜层1920设置在LCM 1720和屏下光学指纹传感器之间。来自第二物体1950b的光沿着折射光路1940a传播到检测点“B”1955b(例如,对应于第一个潜在的传感器位置),而来自第三物体1950c的光沿着折射光路1940b传播到检测点“C”1955c(例如,对应于第二个潜在的传感器位置)。值得注意的是,尽管对象1950b和1950c相对靠近,但是它们各自对应的检测点1955b和1955c相对距离较远。在沿基本垂直的方向离开非对称增强膜层1920之后,来自第一物体1950a的光沿着折射光路1945传播到检测点“A”1955a。可以看出,通过配置传感器用于检测沿路径1945(例如,在检测位置1955a处)出射的光,可以产生相对清晰和明亮的检测信息。这在图19C中进一步示出,其中两个堆叠的非对称增强膜层1920(以相对于彼此正交的方向)可以提供清晰的图像光路,例如由检测点1955a表示。
另外,如以上参考图18A-图18C所讨论的,避免模糊可以涉及将光学传感器定位成仅从微棱镜结构的左侧或右侧之一接收。例如,单个光学传感器可以指向为分别通过路径1945和1940a检测物体1950a和物体1950b,因为这两个光路均通过右棱镜面到达传感器。此外,仅从微棱镜结构的一个面接收光学信息可以有效地减小可实际且精确地成像而不会模糊的感测区域。
为了说明起见,图20示出了覆盖在诸如增强膜层1820或1920的单个增强膜层2000上的说明性指纹感测区域615。如图所示,增强膜层2000的微棱镜结构形成大体上在第一方向(标记为“X”轴2020)上延伸并且在大体上正交于第二方向(标记为“Y”轴2025)上延伸的平行脊线。尽管未示出,但是可以假定“Z”轴在LCM 1720的方向上从页面向外指向,正交于X轴和Y轴两者。如上所述,尽管理论上的指纹感测区域615占用相对较大的感测区域,但是定向为感测整个区域的光学传感器可能倾向于接收来自每个微棱镜结构的两个棱镜面的反射探测光,从而导致图像模糊。定向为仅从每个微棱镜结构的一个棱镜面接收反射探测光的光学传感器可以易于避免图像模糊,但是也易于导致感测区域减小(如感测子区域2010所示)。例如,光学传感器可以被定向为大体指向负Y方向、正Z方向(例如,{0,-y,z})。在这种情况下,实际感测子区域2010可以大约为理论上的感测区域615的面积的一半或更小。
图21示出了覆盖在具有两个增强膜层的增强面板2100上的说明性指纹感测区域615,该增强膜层被堆叠成使得它们各自的微棱镜结构在大致正交的方向上延伸。增强面板2100可以被实现为例如图18A和图19A所示的增强面板或图18C和图19C所示的一对增强膜层。如图所示,增强面板2100具有第一微棱镜结构(例如,属于第一增强膜层)和第二微棱镜结构(例如,属于第二增强膜层),其中第一微棱镜结构形成大体在第一方向上(沿“X”轴2020)延伸的平行脊线,第二微棱镜结构形成大体在第一二方向上(沿“Y”轴2025)延伸的平行脊线。通过两个增强膜层,每层都可能导致模糊。例如,穿过下增强膜层的微结构的一个棱镜面的光是穿过上增强膜层的微结构的两个棱镜面的光的组合。因此,为了避免模糊,光学传感器被定向为通过两个增强膜层从每个微棱镜结构的仅一个棱镜面接收反射探测光。例如,光学传感器可以被定向为大体上指向正X、负Y、正Z方向(例如,{x,-y,z})。在这种情况下,实际的感测子区域2110可以是理论上的感测区域615的面积的大约四分之一。例如,当使用对称微棱镜结构(例如,如图18A-图18C所示的那些结构)时,实际的感测子区域2110可以小于理论上的感测区域615的面积的四分之一,而当使用精心设计的非对称微棱镜结构(例如,如图19A至图19C所示的那些结构)时,实际的感测子区域2110可以略大于理论上的感测区域615的面积的四分之一。
增加理论上的感测区域615的面积可以抵消对面积减小的实际的感测子区域2110的限制。例如,将理论上的感测区域615的面积加倍可以使实际感测子区域2110的面积加倍。一种增加理论上的感测区域615的面积的方法是增加被检测的物体(例如,指纹特征)与光学传感器的输入处的透镜之间的距离。然而,直接增加这种距离会涉及增加光学传感器的厚度,这在许多应用中是不切实际的。例如,在智能手机应用中,期望维持薄的封装,同时仍然希望实现大感测区域。一些实施例试图通过使用折射和反射以产生折叠的光路来有效地增加理论上的感测区域615,而不会相应地增加传感器厚度。
图22示出了根据各种实施例的说明性屏下光学感测环境2200。如图所示,环境2200包括设置在显示模块1710下方的屏下光学感测系统。光学感测系统包括光学感测模块2210、折射结构2220和反射结构2230。光学感测模块2210可以包括用于光学感测的任何合适的组件。为了简单起见,光学感测模块2210被示为光学检测器2212和透镜2214。作为参考,显示模块1710被示为限定显示平面2205。例如,显示模块1710的显示表面通常是平的(例如,尽管它可以包括带边框的边缘、圆形的边缘等),使得显示表面通常位于显示平面2205中。显示模块1710可以是任何合适类型的显示屏,并且可以包括一层或多层。在一些实施例中,如上所述,显示模块1710是液晶显示(LCD)模块,其具有多个包括LCD层的层(例如,包括LCD像素阵列、电极互连等)。
光学感测模块2210被配置为根据接收到的照明能量获得光学信息。例如,当光通过输入孔2216进入光学感测模块2210时,光被透镜2214聚焦到光学检测器2212上,光学检测器2212可以包括光电检测器阵列和/或任何其他合适的组件。接收到的照明能量然后可以被转换成光学信息。例如,该转换可以包括任何合适的光学处理(例如,利用透镜、滤波器、调制器、掩模等)和/或任何合适的逻辑处理(例如,使用计算处理器、状态机、软件等)。如图所示,输入孔2216可以被定向为基本平行于显示平面2205。在这种配置中,平行于显示平面2205传播的光路可以与透镜2214同轴地进入输入孔2216的中心。
反射结构2230可以接收穿过显示模块1710(例如,在光学感测区域615内)的反射探测光并且可以。在一些实施例中,反射结构2230包括集成有(例如,贴附到)顶部反射表面2235的反射镜。例如,反射结构2230包括以适当的角度支撑和定向反射镜的结构,以用于将反射探测光的光路2240朝向折射结构2220重新引导。在其他实施例中,反射结构2230是具有成角度的顶面2235的整体式棱镜体。在这样的实施例中,整体式棱镜体可以由具有选定折射率的材料(例如,塑料,玻璃等)制成,从而使得穿过显示模块1710之后入射在成角度的顶面2235上的反射探测光朝向折射结构2220反射。如图所示,反射结构2230的尺寸和方向被设置成使来自整个光学感测区域615的反射探测光的光路2240重新引导到折射结构2220。在某些实现方式中,反射结构2230的尺寸和方向被设置成对仅来自光学感测区域615的一部分和/或另外来自光学感测区域615之外的区域的反射探测光的光路2240进行重新引导。
折射结构2220的实施例接收来自反射结构2230的反射探测光,并且使反射探测光的光路2240弯曲以会聚在光学感测模块2210的输入孔2216上。例如,如图所示,光路2240a、2240b和2240c分别从光学感测区域615的最左边缘、中心和最右边缘起源,从而代表来自整个光学感测区域615的光路2240。尽管覆盖了较大的光学感测区域615,但是光路2240全部被反射结构2230重新引导到折射结构2220,并且全部被折射结构2220弯曲以会聚在光学感测模块2210的输入孔2216上。在一些实施例中,折射结构2220是整体式棱镜体,具有第一折射表面(例如,距光学感测模块2210较远)以接收来自反射结构的反射探测光,以及第二折射表面(例如,距光学感测模块2210较近)以将反射探测光传输到光学传感模块的输入孔,第一折射表面相对于第二折射表面成一定角度。例如,如图所示,第二折射表面可以定向为基本正交于显示平面。
如上所述(尽管未在图22中示出),实施例可以包括照明源和顶部透明层。照明源可以设置在显示模块1710下方,以产生探测光并引导探测光穿过显示模块1710的至少一部分。例如,探测光源可以包括发光二极管(light emitting diode,LED)、垂直腔表面发射激光器(vertical cavity surface emitting laser,VCSEL)或任何其他合适的光源。顶部透明层可以设置在显示模块1710上方,并且配置为用于由显示模块1710产生的图像的输出接口。在一些实现方式中,显示模块1710还包括触摸敏感特征,并且顶部透明层还可以被配置为用于触摸敏感交互的输入接口。尽管光学感测区域615被示出为基本位于显示平面2205中,但是也可以参考顶部透明层的顶面来限定光学感测区域615。例如,当光学感测模块2210被配置用于屏下光学指纹感测时,指纹通常被放置在顶部透明层的顶面上,使得光学感测区域615更直接对应于顶部透明层的顶面中可以执行光学指纹感测的区域。光学感测区域615于是可以是配置为接收来自照明源的探测光并且响应于物体(例如,指纹特征)与顶面之间的相互作用而对探测光的一部分进行反射的区域。例如,如上所述,顶部透明层可以由相对于顶部透明层上方的空气和/或指纹特征或其他物体具有特定折射率的材料(例如,处理过的玻璃)制成。因此,基于是否存在物体,探测光将易于在顶部透明层的顶面处被反射或不反射(例如,指纹脊会导致探测光被反射,而指纹谷会导致探测光被吸收、散射等)。在这样的实施例中,由反射结构2230重新引导、折射结构2220弯曲以及光学感测模块2210接收的反射探测光是由顶部透明层的顶面反射的探测光。
在一些实施例中,反射结构2230和折射结构2220被配置(例如,调整尺寸、形状、位置和方向),使得穿过光学感测区域615的中心的光路2240b之一被反射结构2230重新引导并被折射结构2220弯曲,以进入光学感测模块的输入孔2216的中心。例如,透镜2214是具有主光轴的凸透镜,并且输入孔2216与透镜2214对准,使得输入孔2216的中心与透镜2214的主光轴对准。在一些实施例中,如图所示,反射结构2230和折射结构2220被配置为使得在基本垂直于显示平面的第一方向(例如,相对于图示垂直)上穿过显示模块的光路2240b之一被反射结构2230重新引导,并且被折射结构2220弯曲,从而在基本平行于显示平面的第二方向(例如,相对于图示水平)上进入光学感测模块2210的输入孔2216。
图23示出了根据各种实施例的具有离轴感测的说明性屏下光学感测环境2300。类似于图22的环境2200,环境2300包括设置在显示模块1710下方的屏下光学感测系统。光学感测系统包括光学感测模块2210、折射结构2220和反射结构2230(具有反射顶面2235)。光学感测模块2210可以包括用于光学感测的任何合适的组件,例如光学检测器2212和透镜2214。与图22不同,图23的环境2300示出了小于理论上的光学感测区域615的实际的光学感测子区域2310,例如参考图20和图21所描述的。
如上所述,显示模块1710的实施例可以包括具有微棱镜结构的增强层。例如,每个微棱镜结构可以具有至少第一和第二棱镜面,并且第一和第二棱镜面可以相对于彼此对称或不对称。当反射探测光穿过微棱镜结构时,一些反射探测光穿过微棱镜结构的第一棱镜面,而另一些反射探测光穿过微棱镜结构的第二棱镜面。例如,反射探测光的光路2340的第一部分穿过微棱镜结构的第一棱镜面,并且反射探测光的光路2340的第二部分穿过微棱镜结构的第二棱镜面,使得光路2340的第一和第二部分发散。如上所述,如果光学感测模块2210接收光路2340的第一和第二部分两者,则这种发散会引起模糊。相反,实施例可以将光学感测模块2210配置为根据接收到的仅与反射探测光的光路2340的第一部分相对应的照明能量获得光学信息。因此,实际光学感测子区域2310小于理论光学感测区域615(例如,大约一半或四分之一的面积)。
在一些这样的实施例中,增强层包括第一增强膜层和第二增强膜层。第一增强膜层具有微棱镜结构的第一部分,该第一部分被布置为形成在第一方向上延伸的第一平行棱镜脊线,并且第二增强膜层具有微棱镜结构的第二部分,该第二部分被布置为形成在不同于第一方向的第二方向上延伸的第二平行棱镜脊线。例如,如图21所示,第一增强膜层可以与第二增强膜层基本相同,并且第一增强膜层可以堆叠在第二增强膜层的顶部上并且被定向为使得第一方向正交于第二方向。在一些这样的实施例中,反射探测光的光路2340的第一部分通过穿过微棱镜结构的第一部分的第一棱镜面和微棱镜结构的第二部分的第一棱镜面,从而穿过微棱镜结构的第一棱镜面;反射探测光的光路2340的第二部分通过穿过微棱镜结构的第一部分的第二棱镜面和微棱镜结构的第二部分的第二棱镜面,从而穿过微棱镜结构的第二棱镜面。还可能存在反射探测光的光路2340的第三部分和反射探测光的光路2340的第四部分,该第三部分穿过微棱镜结构的第一部分的第一棱镜面和微棱镜结构的第二部分的第二棱镜面,并且该第四部分穿过微棱镜结构的第一部分的第二棱镜面和微棱镜结构的第二部分的第一棱镜面。此外,在这样的实施例中,实际的光学感测子区域2310可以小于理论上的光学感测区域615(例如,理论上的光学感测区域615的大约仅四分之一可以是可用的,而不会模糊)。
光学感测模块2210的实施例包括透镜2214和光学检测器2212(例如,包括任何合适类型的感测组件),其定向成使得会聚在光学感测模块2210的输入孔2216上的反射探测光通过透镜2214聚焦到光学检测器2212上。一些这样的实施例可以被配置成优选与仅(或主要)穿过微棱镜结构的特定面(例如,仅第一棱镜面)的照明能量相对应的光路2340的第一部分。例如,如图23所示,屏下光学感测系统被配置为使得光路2340a和光路2340b通过反射结构2230和折射结构2220被引导到光学感测模块2210中,而光路234c没有被引导。在一些这样的实施例中,光学检测器2212可以依据仅针对由光路2340的第一部分的配置偏好导致的一般偏心光路,相对于透镜离轴定位。因此,光学检测器2212可以被配置(例如,调整位置和/或尺寸),以接收从实际的光学感测子区域2310而不是从理论上的光学感测区域615的其余部分反射的照明能量。
虽然本公开包含许多细节,但这些细节都不应解释为对任何申请或要求保护的范围的限制,而应被解释为可以是特定于特定申请的特定实施例的特征的描述。在本专利文件中的单独实施例的上下文中描述的某些特征也可以在单个实施例中组合实现。相反,在单个实施例的上下文中描述的各种特征还可以在多个实施例中单独实现或以任何合适的子组合实现。另外,虽然以上可将特征描述为按某些组合来动作,或者甚至最初权利要求是这样记载的,但来自要求保护的组合的一个或多个特征在一些情况下可从该组合中删去,并且要求保护的组合可指向子组合或子组合的变体。
类似地,尽管附图中以特定顺序对操作进行描述,但这不应被理解为要求以所示的特定顺序或按顺序来执行这些操作,或者执行所有示出的操作,以实现期望的结果。而且,在本专利文件中描述的实施例中的各种系统组件的分离不应理解为在所有实施例中要求这种分离。
仅描述了若干实现方式和示例,并且可以基于本专利文件中描述和示出的内容来做出其他实现、增强和变化。
除非特别指出相反的情况,否则“一”,“一个”或“该”的引用旨在表示“一个或多个”。范围可以在本文中表示为从“约”一个指定值和/或到“约”另一个指定值。术语“约”在本文中用于表示近似、在...附近、大致或左右。当术语“约”与数值范围结合使用时,其通过扩展所提出数值的上下边界来修改该范围。一般而言,术语“约”在本文中用于将数值在所述值之上和之下修改10%的方差。当表达这样的范围时,另一实施例包括从一个指定值和/或到另一个指定值。类似地,当通过使用先行词“约”将值表示为近似值时,应理解,该指定值形成另一实施例。还应理解,每个范围的端点都包括在该范围内。
出于所有目的,本文提及的所有专利、专利申请、出版物和描述均通过引用全部并入。所有这些均未被认作现有技术。