CN108605148B - 视频显示系统 - Google Patents

Abstract

一种视频显示系统具有：使用时穿戴在用户头部上的显示设备(40)，生成并传输多个预合成图像给显示设备(40)的图像处理设备(10)，预合成图像被显示设备(40)用于显示，并且具有相互不同的分辨率。显示设备(40)接收由图像处理设备(10)传输的多个预合成图像，并且显示通过合成多个预合成图像得到的显示图像。

Description

视频显示系统

技术领域

本发明涉及在穿戴在用户头部上以供使用的显示设备上显示视频的视频显示系统、图像处理设备和包含在视频显示系统中的显示设备、图像处理方法和程序。

背景技术

一种称为“中心凹形呈现”的已知技术在图像中以比感兴趣区域外部更高的分辨率呈现感兴趣区域(估计要被用户注视的区域)。该技术使通过以比图像完全地以高分辨率呈现时更低的处理负荷以高分辨率呈现感兴趣区域成为可能。

发明内容

[技术问题]

当上面的技术被使用时，最终显示在显示设备上的图像需要完全地处于与感兴趣区域的分辨率一致的高分辨率。另外，理想的是，穿戴在用户头部上以供使用的显示设备(诸如头戴式显示器)以相对高的帧速率显示视频。为了以高分辨率且以如上所述的高帧速率显示视频，用于生成显示图像的图像处理设备需要以高数据传输速率将图像数据传输给显示设备。

本发明是鉴于上述情况做出的。本发明的目的是提供一种在显示设备显示表示高分辨率的感兴趣区域的图像时能够相对地减少数据传输量的视频显示系统、图像处理设备、显示设备、图像处理方法以及程序。

[解决方案]

根据本发明的视频显示系统包括穿戴在用户头部上以供使用的显示设备，以及用于提供要被显示在显示设备上的视频的图像处理设备。图像处理设备包括图像生成部分和传输部分。图像生成部分生成要被显示设备用于显示的、具有不同分辨率的多个未合成图像。传输部分将每个未合成图像传输给显示设备。显示设备包括接收部分和显示控制部分。接收部分接收从图像处理设备传输的未合成图像。显示控制部分显示通过合成未合成图像得到的显示图像。

根据本发明的图像处理设备将视频提供给穿戴在用户头部上以供使用的显示设备。图像处理设备包括图像生成部分和传输部分。图像生成部分生成要被合成以获得将要显示在显示设备上的显示图像的、具有不同分辨率的多个未合成图像。传输部分将每个未合成图像传输给显示设备。

根据本发明的显示设备穿戴在用户头部上以供使用，并且连接到将视频提供给显示设备的图像处理设备。显示设备包括接收部分和显示控制部分。接收部分接收从图像处理设备传输的且分辨率不同的多个未合成图像。显示控制部分显示通过合成未合成图像获得的显示图像。

根据本发明的图像处理方法用于将视频提供给穿戴在用户头部上以供使用的显示设备。图像处理方法包括：生成要被合成以获得将要显示在显示设备上的显示图像的、具有不同分辨率的多个未合成图像的步骤；以及将每个未合成图像传输给显示设备的步骤。

根据本发明的程序控制将视频提供给穿戴在用户头部上以供使用的显示设备的图像处理设备。该程序使图像处理设备起图像生成部分和传输部分的作用。图像生成部分生成要被合成以获得将要显示在显示设备上的显示图像的、具有不同分辨率的多个未合成图像。传输部分将每个未合成图像传输给显示设备。该程序可通过存储在计算机可读的、非暂时性的信息存储介质中来提供。

附图说明

图1是示出根据本发明的实施例的视频显示系统的整体配置的框图。

图2是示出根据本发明的实施例的视频显示系统实现的功能的功能性框图。

图3是示出整体图像P0的例子的图。

图4是示出第一部分图像P1的例子的图。

图5是示出第二部分图像P2的例子的图。

图6是示出从图像处理设备传输到显示设备的数据的内容的图。

图7是示出要被显示在显示设备上的帧图像的例子的图。

图8是示出由视频显示系统执行的处理流程的例子的序列图。

图9是示出帧图像内未合成图像之间的典型位置关系的图。

具体实施方式

现在将参考附图描述本发明的实施例。

图1是示出根据本发明的实施例的视频显示系统1的整体配置的框图。如图1所示，视频显示系统1包括图像处理设备10、操作设备20、中继设备30和显示设备40。

图像处理设备10生成并提供将要被显示设备40显示的图像。图像处理设备10可以是，例如，家用游戏机、便携式游戏机、个人计算机、智能手机或平板电脑。如图1所示，图像处理设备10包括控制部分11、存储部分12和接口部分13。

控制部分11包含至少一个处理器，例如中央处理单元(CPU)，并且执行存储在存储部分12中的程序以完成各种信息处理。在本实施例中由控制部分11完成的处理的具体例子将在后面描述。存储部分12包括至少一个存储设备，例如随机存取存储器(RAM)，并且存储要被控制部分11执行的程序和要被程序处理的数据。

接口部分13是用于操作设备20和中继设备30之间数据通信的接口。图像处理设备10通过接口部分13有线连接或无线地连接到操作设备20和中继设备30。更具体地，接口部分13可包含高清晰度多媒体接口(HDMI)(注册商标)或其它多媒体接口，以便将从图像处理设备10提供的视频和音频传输到中继设备30。此外，接口部分13包含蓝牙(注册商标)、通用串行总线(USB)或其它数据通信接口。通过数据通信接口，图像处理设备10经由中继设备30从显示设备40接收各种信息，并且传输例如控制信号。此外，图像处理设备10通过数据通信接口从操作设备20接收操作信号。

操作设备20是例如用于家用游戏机的控制器或键盘，并且从用户接收操作输入。操作设备20将表示从用户接收到的操作输入的内容的信号传输给图像处理设备10。

中继设备30连接到显示设备40。中继设备30接收从图像处理设备10提供的图像数据，并且将接收到的图像数据传输给显示设备40。在本实例中，例如，中继设备30可根据需要在提供的图像数据上执行校正处理，以消除由显示设备40的光学系统引起的失真，并且输出校正的图像数据。此外，除了图像数据，中继设备30中继音频数据、控制信号以及在图像处理设备10和显示设备40之间交换的各种其它信息。本实施例假设中继设备30无线地向显示设备40传输数据和从显示设备40接收数据。

显示设备40基于从中继设备30接收到的图像数据显示视频，以便允许用户观看所显示的视频。本实施例假定显示设备40穿戴在用户头部上以供使用，并适于允许双眼观看视频。也就是说，显示设备40在用户的右眼和左眼的每个前面形成视频图像。显示设备40可以被配置以便能够基于双目视差显示三维视频图像。如图1所示，显示设备40包括处理单元41、通信接口42、缓冲存储器43、视频显示元件44、光学元件45以及后置相机46。

处理单元41包括例如集成电路，基于通过中继设备30从图像处理设备10接收到的图像数据生成帧图像(显示图像)，并将生成的帧图像提供给视频显示元件44。通过以预定帧速率重复该处理，处理单元41使视频显示元件44显示视频。

通信接口42被用来建立与中继设备30的数据通信。通信接口42包括例如用于无线通信的天线和通信电路。由通信接口42从中继设备30接收到的图像数据暂时存储在缓冲存储器43中。处理单元41基于存储在缓冲存储器43中的图像数据生成帧图像。

视频显示元件44例如是有机电致发光(EL)显示面板或液晶显示面板，并且基于从处理单元41提供的视频信号来显示视频。视频显示元件44显示两个视频图像，即左眼视频图像和右眼视频图像。视频显示元件44可以是用于并排显示左和右眼视频图像的单个显示元件，或者是用于在独立的基础上显示视频图像的两个显示元件。此外，例如，公知的智能手机可被用作视频显示元件44。此外，显示设备40可以是将视频图像直接投射到用户视网膜上的视网膜辐照(视网膜投影)显示设备。在这种情况下，视频显示元件44可以包括例如发射光的激光器和扫描发射光的微电子机械系统(MEMS)反射镜。

光学元件45例如是全息光学元件、棱镜或半反射镜。光学元件45设置在用户的眼睛前面，透射或折射从视频显示元件44发射的视频光，并使视频光入射到用户的左和右眼。更具体地，由视频显示元件44显示的左眼视频图像通过光学元件45入射到用户的左眼，并且右眼视频图像通过光学元件45入射到用户的右眼上。利用穿戴在用户头部上的显示设备40，用户能够用左眼观看左眼视频图像，并且用右眼观看右眼视频图像。

后置相机46被设置以便能够从显示设备40捕获后视图像(即，捕获用户的图像)，并用来捕获用户的左和右眼的每一个的图像。由后置相机46捕获的图像通过中继设备30传输到图像处理设备10。

现在将参照图2描述由视频显示系统1实现的功能。如图2所示，图像处理设备10功能性地包括兴趣点识别部分51、图像生成部分52和图像数据传输部分53。当控制部分11执行存储在存储部分12中的程序时，这些功能被实现。程序可以通过诸如因特网的通信网络提供给图像处理设备10，或通过存储在诸如光盘的计算机可读信息存储介质提供。同时，显示设备40中的处理单元41功能性地包括时序控制部分54、图像数据选择部分55和显示控制部分56。这些功能中的一些或全部可以由软件实现或由诸如电子电路的硬件实现。

兴趣点识别部分51识别由用户使用显示设备40注视的显示区域内的位置(兴趣点)。更具体地，兴趣点识别部分51从显示设备40获取由后置相机46捕获的图像，并分析所获取的捕获图像以识别用户的注视方向。兴趣点是显示区域内与注视方向相对应的位置。

图像生成部52生成要在显示设备40上显示的图像。作为具体的例子，这里假设由图像生成部分52绘制的图像描绘了布置了各种对象的三维虚拟空间。然而，图像生成部分52不限于上述类型，并且可以绘制各种其它图像。此外，为了简单起见，假设显示设备40显示相同的帧图像作为左眼图像和右眼图像。然而，根据本实施例的视频显示系统1可以将不同的帧图像显示为左和右眼图像，以实现基于视差的三维显示。在这种情况下，图像处理设备10和显示设备40应该并行地对左和右帧图像中的每一个执行下述的处理。

在本实施例中，图像生成部分52为要被显示在显示设备40上的一帧图像生成多个具有不同分辨率的图像。这些图像用这种方式以不同的分辨率绘制相同的目标：分辨率越高，绘制区域越小。如下所述，这些图像在显示设备40中被合成一帧图像，并由视频显示元件44显示。由图像生成部分52生成并最终合成为一帧图像的图像在下文中被称为未合成图像。此外，作为具体的例子，在下文中假设图像生成部分52生成三个不同的未合成图像。按从最低分辨率到最高的顺序，三个不同的未合成图像是整体图像P0、第一部分图像P1和第二部分图像P2。

图3、4和5是示出三种不同的未合成图像的例子的图。如图3所示，整体图像P0在以低于第一部分图像P1和第二部分图像P2的分辨率在显示设备40的整个显示区域中显示的假设下被显示。同时，如图4所示，通过在整体图像P0中以比整体图像P0更高的分辨率绘制部分区域来获得第一部分图像P1。通过以甚至比第一部分图像P1更高的分辨率绘制小于第一部分图像P1的部分区域来获得图5所示的第二部分图像P2。假设第二部分图像P2以与显示设备40上实际显示的帧图像相同的分辨率被显示。

根据兴趣点识别部分51所识别的兴趣点来确定要绘制为第一部分图像P1和第二部分图像P2的区域。更具体地，通过绘制在整体图像P0内围绕兴趣点为中心的区域来获得部分图像。例如，如果穿戴显示设备40的用户注视显示区域中心的右上方的点，则通过绘制整体图像P0中的右上区域来获得第一部分图像P1和第二部分图像P2。图4和5示出了兴趣点位于整体图像P0的中心的情况，并且每个部分图像对应于整体图像P0的中心区域。

如上所述，由图像生成部分52绘制的未合成图像是这样的：目标区域越大，分辨率越低。因此，在整体图像P0、第一部分图像P1和第二部分图像P2中的数据总量小于最终显示的帧图像中的数据量(即，通过以与第二部分图像P2相同的分辨率绘制整体图像P0所覆盖的整个区域获得的图像)。

图像数据传输部分53将由图像生成部分52生成的未合成图像传输给中继设备30。在这种情况下，图像数据传输部分53在它们未合成时分别传输整体图像P0、第一部分图像P1和第二部分图像P2。这确保了为了显示一帧图像而从图像处理设备10传输到显示设备40的数据量小于当高分辨率、合成的帧图像被传输时的数据量。

在本实施例中，不是生成未合成图像的图像处理设备10，而是显示设备40合成未合成图像以生成要被实际显示的帧图像。因此，假设图像数据传输部分53连同未合成图像数据一起传输附加信息。附加信息包括指示显示设备40应如何合成未合成图像的各种信息项。

更具体地，在传输未合成图像之前，图像数据传输部分53将指示帧图像内未合成图像的位置的附加信息、帧图像内未合成图像的大小、放大率以及处理未合成图像所需的其它参数附加到每一个未合成图像。图6是示出从图像数据传输部分53传输的数据的内容的示意图。图6示出了附加到未合成图像上的上述附加信息。图6中的主导坐标是指示帧图像内未合成图像的位置的附加信息的例子。主导坐标表示帧图像内未合成图像的左上像素的位置坐标。

从图像数据传输部分53传输的图像数据通过中继设备30输入到显示设备40。显示设备40的通信接口42从中继设备30接收未合成图像数据，并将接收到的未合成图像数据临时存储在缓冲存储器43中。缓冲存储器43按原样存储通信接口42接收到的未合成图像数据。因此，缓冲存储器43不需要具有足够的容量来存储由视频显示元件44显示的一帧图像的全部。

时序控制部分54向图像数据选择部分55和显示控制部分56提供用于控制帧图像显示的时序的同步信号。图像数据选择部分55和显示控制部分56以从时序控制部分54提供的同步信号中导出的时序运行，从而彼此同步地执行处理。

图像数据选择部分55和显示控制部分56合作来执行合成从图像处理设备10接收到的未合成图像并生成要被显示的帧图像的处理。更具体地，图像数据选择部分55确定用于确定帧图像中每个像素的像素值的未合成图像。基本上，图像数据选择部分55从覆盖感兴趣的像素位置的未合成图像中选择最高分辨率的未合成图像，并使用所选择的最高分辨率的未合成图像。例如，对于在帧图像的中心对应于第二部分图像P2的区域内的像素，选择并使用第二部分图像P2。相反地，对于未被第一部分图像P1和第二部分图像P2所覆盖的帧图像的外围区域，选择并使用整体图像P0。图像数据选择部分55参照由图像数据传输部分53与未合成图像一起传输的附加信息中包含的位置和大小信息做出上述选择。然后，对于帧图像中的每个像素，图像数据选择部分55从缓冲存储器43中读取所选的未合成图像中对应像素上的像素值信息，并将读取的像素值信息输出到显示控制部分56。

根据由图像数据选择部分55选择的未合成图像上的图像数据，显示控制部分56确定帧图像中的每个像素的像素值。然后，显示控制部分56向视频显示元件44提供用于显示包括确定的像素值的帧图像的视频信号。因此，视频显示元件44能够显示通过合成未合成图像获得的帧图像。在合成未合成图像之前，显示控制部分56放大低分辨率的未合成图像。这种放大的放大率由例如图6所示的附加信息中的放大率参数确定。

当合成不同的未合成图像时，显示控制部分56可以这种方式执行图像处理，例如，使未合成图像之间的边界模糊和难以区分。当要执行这样的图像处理时，可以通过使用从图像数据传输部分53传输的附加信息中包含的参数来确定图像处理的细节。

图7示出了通过合成图3至5中示例的三个不同的未合成图像获得的帧图像的例子。帧图像具有与第二部分图像P2相同的分辨率作为整体；然而，图像的外围部分通过放大低分辨率的整体图像P0获得。同时，基于高分辨率的第二部分图像P2生成估计要被用户注视的区域。因此，用户感觉到帧图像以高分辨率显示。

现在将参照图8的流程图描述由视频显示系统1执行的来显示一帧图像的过程的流程。

首先，显示设备40将由后置相机46捕获的图像传输到图像处理设备10(步骤S1)。然后，图像处理设备中的兴趣点识别部分51通过使用在步骤S1中传输的捕获图像识别用户的兴趣点(步骤S2)。

接下来，图像生成部分52通过使用步骤S2中识别出的兴趣点上的信息生成三个不同的未合成图像(步骤S3)。随后。图像数据传输部分53将附加信息附加到生成的三个不同的未合成图像上，并且将由此生成的图像的组合和附加信息传输给显示设备40(步骤S4)。

显示设备40的通信接口42将步骤S4中传输的未合成图像上的图像数据存储在缓冲存储器43中(步骤S5)。然后，处理单元41通过合成步骤S5中存储在缓冲存储器43中的三个不同的未合成图像生成帧图像(步骤S6)，并且使视频显示元件44显示生成的帧图像(步骤S7)。

视频显示系统1通过重复执行上述处理来更新帧图像来显示视频。流程图假定每次帧图像被更新时，由后置相机46捕获的图像从显示设备40传输到图像处理设备10以更新兴趣点。然而，兴趣点识别部分51可以可替代地以较长的时间间隔更新兴趣点。在这种替代情况下，不需要每次更新帧图像时都传输由后置相机46捕获的图像。因此，步骤S1和S2较低频率地执行。

如上所述，根据本实施例的视频显示系统1被配置以使图像处理设备10传输具有不同分辨率的多个不同的未合成图像，以使显示设备40合成未合成图像以获得和显示帧图像。结果，与从图像处理设备10向显示设备40传输合成的帧图像的情况相比，可以减少要被传输以显示一帧图像的数据量。作为结果，即使在图像处理设备10和显示设备40之间没有提供大的通信带宽，显示设备40也能够以相对高的帧速率显示表示高分辨率感兴趣区域的视频。

上述描述假定第一部分图像P1和第二部分图像P2是具有与整体图像P0相同形状但与整体图像P0的尺寸不同的矩形图像。然而，部分图像不限于这样的形状，并且可以具有与整体显示区域不同的正方形形状、圆形形状或其它形状。此外，图像处理设备10可从多个候选中选择部分图像形状。在这种情况下，附加信息包括指定部分图像形状的信息。显示设备40参考这种附加信息，以识别帧图像的什么区域对应于接收到的部分图像。同时，整体图像P0不限于矩形形状，并且可以基于显示设备40的显示特性而具有圆形形状或其它形状。

上述描述假定帧图像内的部分图像的位置基于由用户注视的兴趣点来确定。因此，当用户的注视方向改变时，在整体图像内的部分图像的位置也相应地改变。然而，本实施例不限于这样的配置。兴趣点可以可替代地是一个固定点，例如显示区域的中心。在这种情况下，不需要兴趣点识别部分51。

上述描述假定要被合成以获得一帧图像的未合成图像包括两个部分图像。然而，可替代地，可包括一个部分图像或三个或更多部分图像。在任何情况下，可以用这样的方式(部分图像的分辨率越高，帧图像内的对应区域越小)通过确定每个部分图像的分辨率和尺寸来减少要传输的数据量。

上述描述假定在完全接收到三个未合成图像之后执行合成过程。然而，可替代地，处理单元41可以在通信接口42接收未合成图像的同时，在未合成图像的接收到的部分上执行合成过程。在这种情况下，在将未合成图像的主要部分存储在缓冲存储器43中的时候，处理单元41获取并合成所存储的部分，并将由此得到的部分作为视频信号提供给视频显示元件44。当接收到未合成图像的后续部分时，通信接口42用接收到的后续部分重写由处理单元41处理的部分，并存储由此得到的部分。当执行这种并行处理时，缓冲存储器43仅有必要具有用于存储未合成图像的某些部分的足够的容量。也就是说，缓冲存储器43不需要用于存储所有未合成图像上的全部数据的容量。

当要实现上述并行处理时，优选的是，图像数据传输部分53将每个未合成图像划分成多个传输单元(以下称为块)，并在各个块的基础上传输图像数据。这里，假设一个具体的例子，处理单元41通过将帧图像中的每一个横向排列的像素行(线)作为处理单元，从最高上边线开始，并依次朝最低下边线运行，逐步生成帧图像。在这种情况下，如果兴趣点位于显示区域的中心或下方，则如图7所示，基于整体图像P0生成帧图像的最高线，从而在帧图像生成开始之后，不立即使用第一部分图像P1和第二部分图像P2上的数据。随后，当位于和超出位置坐标Y2的线要被生成时，使用整体图像P0和第一部分图像P1上的数据，并且当位于和超出位置坐标Y1的线要被生成时，需要所有未合成图像上的数据。因此，图像数据传输部分53将每个未合成图像划分成多个块，并按照帧图像合成处理所需的顺序传输各个块。在这种情况下，每个块可以对应于每个合成图像中的一个或多个横向排列的像素行。图像数据传输部分53顺序地将每个部分图像的块传输到显示设备40。更具体地，例如，图像数据传输部分53首先传输形成整体图像P0的最高部分的块(对应于位置坐标Y3到Y2的块)，然后传输对应于位置坐标Y2至Y1的整体图像P0和第一部分图像P1的块，随后传输对应于和超出位置坐标Y1的每个未合成图像的块。以这种方式，显示设备40能够在接收到部分图像上的数据的同时开始生成并显示从上部开始的帧图像。

此外，在上述情况下优选的是，图像数据传输部分53根据兴趣点的变化改变各个块传输的顺序。作为具体实例，当兴趣点从中心向上移动时，第一部分图像P1和第二部分图像P2相对于整体图像P0的位置也向上移动。图9示出了在上述情况中通过合成三个不同的未合成图像而获得的帧图像的例子。当兴趣点如上所述向上移动时，与该移动之前的时间点相比，在帧图像生成开始之后，第一部分图像P1和第二部分图像P2的上部的块立即被需要。因此，当兴趣点向上移动时，优先地传输这些块。如上所述的运动控制使得无延迟地生成帧图像成为可能。

如果需要多个不同的未合成图像来在帧图像内生成一条线，则可以优先传输低分辨率的未合成图像。例如，如果在图7的例子中的位置坐标Y2到Y1之间的部分要进行合成，则基本上需要整体图像P0和第一部分图像P1的对应块。然而，优先地传输整体图像P0的对应块，然后传输对应于相同位置的第一部分图像P1的块。因此，当第一部分图像P1的对应块由于例如通信延迟而不及时传输时，使用整体图像P0使得即使在低分辨率低下也可以生成和显示帧图像成为可能。

上述描述假定图像生成部分52本身绘制描绘三维空间的未合成图像。然而，可替代地，图像生成部分52不限于上述类型，并且可以基于准备好的高分辨率图像生成未合成图像。例如，如果视频数据可用，其包括与显示设备40上要显示的帧图像具有相同分辨率的帧图像，则图像生成部分52生成具有比现有帧图像整体分辨率相当低的图像作为整体图像P0。此外，将通过裁剪帧图像的预定区域略微降低分辨率而获得的图像作为第一部分图像P1来处理，并且将通过裁剪比第一部分图像P1所用的更小的预定区域而获得的图像作为具有不变的分辨率的第二部分图像P2来处理。图像数据传输部分53将上述方式生成的每个未合成图像传输到显示设备40。因此，即使当要再现高分辨率视频时，也可以减少从图像处理设备10向显示设备40传输的图像数据的量。

上述描述假定中继设备30无线通信地连接到显示设备40。然而，本发明的实施例不限于这样的配置。可替代地，图像处理设备10可以通过各种通信链路连接到显示设备40。此外，并不总是需要中继设备30。图像处理设备10可直接地连接到显示设备40。

[参考符号列表]

1 视频显示系统

10 图像处理设备

11 控制部分

12 存储部分

13 接口部分

30 中继设备

40 显示设备

41 处理单元

42 通信接口

43 缓冲存储器

44 视频显示元件

45 光学元件

51 兴趣点识别部分

52 图像生成部分

53 图像数据传输部分

54 时序控制部分

55 图像数据选择部分

56 显示控制部分。

Claims (8)

1.一种视频显示系统，包括：

显示设备，其穿戴在用户头部上以供使用；以及

图像处理设备，其提供要被显示在所述显示设备上的视频，

其中，所述图像处理设备包括：

图像生成部分，其生成要被所述显示设备用于显示的、具有不同分辨率的多个未合成图像，以及

传输部分，其将每个所述未合成图像传输给所述显示设备，并且

所述显示设备包括：

接收部分，其接收从所述图像处理设备传输的所述未合成图像，以及

显示控制部分，其显示通过合成所述未合成图像得到的显示图像，

其中所述多个未合成图像具有不同的尺寸，并且具有兴趣点周围的重叠区域的图像信息，并且

其中所述显示图像包括每个未合成图像的至少一部分，并且分辨率低于最高分辨率的部分被放大，并且各部分之间的边界被模糊，并且

其中所述未合成图像中的数据总量小于通过以最小未合成图像的分辨率绘制最大未合成图像而获得的图像中的数据总量。

2.根据权利要求1所述的视频显示系统，其中，

所述未合成图像包括对应于所述显示图像内的部分区域的部分图像，

所述传输部分将所述部分图像和识别所述部分图像在所述显示图像内对应位置的附加信息传输到所述显示设备，并且

所述显示控制部分通过以所述部分图像对应于由所述附加信息识别的位置的这种方式，合成所述未合成图像来生成所述显示图像。

3.根据权利要求2所述的视频显示系统，其中，

所述图像处理设备还包括识别兴趣点的兴趣点识别部分，所述兴趣点在所述显示设备的显示区域内并且被用户注视，并且

所述图像生成部分以所述部分图像对应于基于所述兴趣点确定的显示图像内的位置的这种方式，生成所述部分图像。

4.根据权利要求3所述的视频显示系统，其中，

所述传输部分将每个所述未合成图像划分成多个传输单元，通过每个传输单元将图像传输给显示设备，并且根据所述兴趣点改变所述传输单元传输的顺序，所述传输单元形成每个所述未合成图像。

5.一种图像处理设备，其将视频提供给穿戴在用户头部上以供使用的显示设备，所述图像处理设备包括：

图像生成部分，其生成具有不同分辨率的多个未合成图像，所述未合成图像要被合成以获得要在所述显示设备上显示的显示图像；以及

传输部分，其将每个所述未合成图像传输给所述显示设备，

其中所述多个未合成图像具有不同的尺寸，并且具有兴趣点周围的重叠区域的图像信息，并且

其中所述显示图像包括每个未合成图像的至少一部分，并且分辨率低于最高分辨率的部分被放大，并且各部分之间的边界被模糊，并且

其中所述未合成图像中的数据总量小于通过以最小未合成图像的分辨率绘制最大未合成图像而获得的图像中的数据总量。

6.一种显示设备，其穿戴在用户头部上以供使用，并且连接到将视频提供给所述显示设备的图像处理设备，所述显示设备包括：

接收部分，其接收从所述图像处理设备传输的且分辨率不同的多个未合成图像；以及

显示控制部分，其显示通过合成所述未合成图像得到的显示图像，

其中所述多个未合成图像具有不同的尺寸，并且具有兴趣点周围的重叠区域的图像信息，并且

其中所述显示图像包括每个未合成图像的至少一部分，并且分辨率低于最高分辨率的部分被放大，并且各部分之间的边界被模糊，并且

其中所述未合成图像中的数据总量小于通过以最小未合成图像的分辨率绘制最大未合成图像而获得的图像中的数据总量。

7.一种图像处理方法，其用于将视频提供给穿戴在用户头部上以供使用的显示设备，所述图像处理方法包括：

生成要被合成以获得将要在所述显示设备上显示的显示图像的、具有不同分辨率的多个未合成图像的步骤；以及

将每个所述未合成图像传输给所述显示设备的步骤，

其中所述多个未合成图像具有不同的尺寸，并且具有兴趣点周围的重叠区域的图像信息，并且

其中所述显示图像包括每个未合成图像的至少一部分，并且分辨率低于最高分辨率的部分被放大，并且各部分之间的边界被模糊，并且

其中所述未合成图像中的数据总量小于通过以最小未合成图像的分辨率绘制最大未合成图像而获得的图像中的数据总量。

8.一种其上存储有程序的非暂时性计算机可读介质，其中所述程序由计算机执行，以用于控制将视频提供给穿戴在用户头部上以供使用的显示设备的图像处理设备，所述程序使所述图像处理设备起以下作用：

图像生成部分，其生成要被合成以获得将要在所述显示设备上显示的显示图像的、具有不同分辨率的多个未合成图像；以及

传输部分，其将每个所述未合成图像传输给所述显示设备，

其中所述多个未合成图像具有不同的尺寸，并且具有兴趣点周围的重叠区域的图像信息，并且

其中所述显示图像包括每个未合成图像的至少一部分，并且分辨率低于最高分辨率的部分被放大，并且各部分之间的边界被模糊，并且

其中所述未合成图像中的数据总量小于通过以最小未合成图像的分辨率绘制最大未合成图像而获得的图像中的数据总量。

Images