CN1726726A - 立体图像产生设备和立体图像传递方法 - Google Patents

Abstract

当将指示立体效果的强度最低的“0”应用为立体效果标记时，允许原样显示该立体图像。另一方面，当将“1”、“2”和“3”应用为立体效果标记时，根据立体效果标记的值来确定缩减率(一半、三分之一等)。根据该缩减率，显示立体图像和“warning”的字母。用户选择是显示与产生者意图一致的立体图像还是保持尺寸缩减的立体图像。如果执行如产生者所预期地显示立体图像所需的操作，则显示原始立体图像。

Description

立体图像产生设备和立体图像传递方法

技术领域

本发明涉及一种立体图像产生设备和一种立体图像传递方法。

背景技术

已经提出了一种立体图像接收器和立体图像系统，其中根据从二维视频信号中提取的深度信息和二维视频信号产生立体图像(参见日本专利待审公开No.2000-78611)。

根据上述现有技术，能够根据拍摄的二维图像来产生具有视差信息的立体视觉用途图像。附带地，当向观看者突然展示具有强立体效果的立体图像时，观看者很可能会感到不舒适。另一方面，考虑到作品的本质，立体图像作品的产生方需要使观看者看到具有强立体效果的立体图像。

发明内容

考虑到前述情况，本发明的目的是提出一种立体图像产生设备和立体图像传递方法，能够根据产生者的意图来观看立体图像作品，而不会使观看者对立体图像作品感到不舒适。

为了解决上述问题，本发明的立体图像产生设备包括：装置，用于检测指示添加到要显示的立体图像上的立体效果强度的信息；装置，通过根据指示立体图像的立体效果强度的所述信息来再现小于原始尺寸的尺寸，显示立体图像，并且要求指示是否允许原始尺寸的立体图像的输入；以及装置，当从用户侧接收到指示允许的信息时，执行原始尺寸立体图像的显示。

利用上述配置，通过首先再现小于其原始尺寸的尺寸，显示立体图像。结果，即使立体图像作品具有强立体效果，也将立体效果再现为较弱，并且能够防止观看者感到不舒适。由观看者通过指示允许的操作来显示原始尺寸的立体图像，从而还能够按照产生者的意图来观看立体图像作品。

而且，本发明的立体图像产生设备包括：装置，用于检测指示添加到要显示的立体图像上的立体效果强度的信息；装置，通过根据指示立体图像的立体效果强度的所述信息来再现弱于原始立体效果的立体效果，显示立体图像，并且要求指示是否允许具有原始立体效果的立体图像的输入；以及装置，当从用户侧接收到指示允许的信息时，执行具有原始立体效果的立体图像的显示。

利用这样的配置，通过首先再现弱于其原始立体效果的立体效果，显示立体图像。结果，即使立体图像具有强立体效果，也将立体效果再现为较弱，并且能够防止观看者感到不舒适。由观看者通过指示允许的操作来显示具有原始立体效果的图像，从而还能够按照产生者的意图来观看立体图像作品。

此外，根据本发明的立体图像产生设备包括：装置，用于确定要显示的立体图像的立体效果强度；装置，通过根据所确定的立体效果强度来再现小于原始尺寸的尺寸，显示立体图像，并且要求指示是否允许原始尺寸的立体图像的输入；以及装置，当从用户侧接收到指示允许的信息时，执行原始尺寸立体图像的显示。

而且，根据本发明的立体图像产生设备，包括：装置，用于确定要显示的立体图像的立体效果强度；装置，通过根据所确定的立体效果强度来再现弱于原始立体效果的立体效果，显示立体图像，并且要求指示是否允许具有原始立体效果的立体图像的输入；以及装置，当从用户侧接收到指示允许的信息时，执行具有原始立体效果的立体图像的显示。

利用这样的配置，即使未将指示立体效果强度的信息添加到立体图像上，也能够表现出与上述相同的效果。

此外，根据本发明的立体图像产生设备包括：装置，用于通过再现小于其原始尺寸的尺寸来显示要显示的立体图像，并且要求指示是否允许原始尺寸的立体图像的输入；以及装置，当从用户侧接收到指示允许的信息时，执行原始尺寸立体图像的显示。

而且，根据本发明的立体图像产生设备包括：装置，用于通过再现弱于其原始立体效果的立体效果来显示要显示的立体图像，并且要求指示是否允许具有原始立体效果的立体图像的输入；以及装置，当从用户侧接收到指示允许的信息时，执行具有原始效果的立体图像的显示。

利用这样的配置，即使未将指示立体效果强度的信息添加到立体图像上，此外，不存在用于确定立体效果强度的装置，也能够表现出与上述相同的效果。

而且，在上述立体图像产生设备的任一个中，优选地，在缩减尺寸显示的状态下或在立体效果减弱显示的状态下，在屏幕上执行指示警告的显示。

此外，根据本发明的立体图像传递方法的特征在于通过再现小于其原始尺寸的尺寸来传送立体图像，要求指示是否允许原始尺寸的立体图像的输入，并且当从用户侧接收到指示允许的信息时，传送所述原始尺寸立体图像。

此外，根据本发明的立体图像传递方法的特征在于通过再现弱于其原始立体效果的立体效果来传送立体图像，要求指示是否允许具有原始立体效果的立体图像的输入，并且当从用户侧接收到指示允许的信息时，传送具有原始立体效果的立体图像。

利用这样的配置，在立体图像作为因特网浏览的HTML文件的图像存在的情况下，首先，将立体图像显示为小于原始尺寸再现其尺寸的图像、或弱于原始立体效果再现其立体效果的图像。结果，即使立体图像作品具有强立体效果，仍能将其立体效果再现为较弱，并且能够防止观看者感到不舒适。由观看者通过指示允许的操作来显示具有原始立体效果的图像，从而还能够根据产生者的意图来观看立体图像作品。此外，在作为执行因特网浏览的计算机或移动电话的接收侧设备中，用于检测立体效果标记的装置或用于确定立体效果的装置并非必须的，而且也不必执行立体图像的缩减处理和立体效果的改变处理。

附图说明

图1是示出了本发明实施例的立体图像传递和接收侧设备的结构的说明图；

图2是描述接收侧设备的处理内容的说明图；

图3是描述接收侧设备的处理内容的说明图；

图4是描述接收侧设备的处理内容的说明图；以及

图5是描述接收侧设备的处理内容的说明图。

具体实施方式

下面将参考图1到5来描述立体图像再现设备。

将根据图1来描述由二维图像和深度图(深度信息)来产生立体图像。应该注意，在图1中，将系统描述为由以下组件构成的系统：发送侧设备1，构造为广播台、因特网上的服务器等；以及接收侧设备2，包括个人计算机、移动电话等，配备有广播接收器和因特网连接环境。

由图1中的(a)所示的部分示出了所拍摄的二维图像100。发送侧设备1对二维图像100执行图像分析，并提取背景图像101、建筑物的图像102、以及汽车103的图像，如图1中的(b)指示的部分中所示。将这些提取的图像处理为对象(例如，边缘信息)。而且，针对每一点应用深度值，并且产生深度图。应该注意，还能够将深度值应用到每一个对象。可以自动地(根据推测)应用深度值，或者可以通过手动过程来应用深度值。

因此，在提供(传送、广播)图像时，发送侧设备1传送深度图，作为图像的附加信息。此外，在该实施例中，还传送立体效果标记，作为图像的附加信息。所述立体效果标记表示立体效果的强度，并且所述强度由如0、1、2或3等数值来表示。在数字广播的情况下，通过在一个传输流上复用图像数据和各种附加信息，能够进行复用广播。在利用计算机网络传递时，通过在一个传输流上复用图像数据和各种附加信息，也能够进行复用广播。

如图1中(c)指示的部分所示，接收侧设备2接收以下每一个数据，包括：背景图像101、建筑物的图像102和汽车的图像103、以及深度图和立体效果标记。如果这些数据被复用，则执行解复用(DEMUX)处理。作为对图像数据的解码处理，基本上，采用基于如MPEG等处理。此外，接收侧设备2根据背景图像101、建筑物的图像102和汽车的图像103以及深度图的每一个图像数据，产生其上应用了视差的右眼图像104R和左眼图像104L。因此，接收侧设备2具有：用于接收数据的接收部分21(调制解调器、调谐器等)；解复用器22(DEMUX)；解码器23；图像产生部分24，用于根据二维图像和深度图来产生视差视觉图像；监视器25等。不必说，设置了用于控制上述设备的CPU 26和使用户执行操作的操作部分27(在广播接收器的情况下，设置了遥控发送器；而在个人计算机的情况下，设置了鼠标、键盘等)。应该注意，在产生视差图像时，执行处理，从而对象的深度值越小，则水平运动量(移动点的数量)越大。

作为在监视器的近侧位置配置液晶隔板的结果，接收侧设备2允许执行平面视觉图像的显示和立体视觉图像的显示。如果通过以垂直条状交替排列右眼图像和左眼图像而形成了立体视觉图像，则通过CPU 26的控制，在液晶隔板中形成条状遮蔽区。而且，当在平面上区域的一部分中(再现文件的窗口部分、或HTML文件中的图像部分的一部分)显示视觉图像时，CPU 26根据窗口部分和图像部分的一部分的显示坐标和尺寸，控制条状遮蔽区的尺寸和其形成位置。应该注意，不仅可以采用以垂直条状交替排列右眼图像和左眼图像的立体视觉图像，而且可以采用倾斜排列右眼图像和左眼图像的立体视觉图像(参见日本专利公开No.3096613)。在这种情况下，在液晶隔板中形成了倾斜隔板。

接收侧设备2的CPU 26从解复用器22中接收附加到要显示的立体图像上的立体效果标记，并且根据该立体效果标记来执行图像显示控制处理。之后，将描述图像显示控制处理。

如图2所示，当将指示立体效果的强度最低的“0”应用为立体效果标记时，允许原样显示该立体图像。另一方面，当将“1”、“2”和“3”应用为立体效果标记时，CPU 26根据立体效果标记的值来确定缩减率(一半、三分之一等)。应该注意，可以设置某个固定的缩减率。然后，将该缩减率应用于图像产生部分24。图像产生部分24配备有缩放功能，用于控制显示图像的尺寸，并利用该功能来显示缩减的图像。而且，CPU 26向并未示出的OSD(屏幕上显示)电路发布产生“warning”(警告)的字母的命令。由图像产生部分24将构成由OSD电路产生的“warning”的字母的位图数据组合为图像数据。结果，如图2所示，在监视器25上显示缩减的立体图像和“warning”的字母。用户选择是显示与产生者意图一致的立体图像还是保持尺寸缩减的立体图像。例如，在屏幕上显示解释“操作“1”来选择显示原始图像(OK)，操作“2”来选择保持尺寸缩减的图像(NG)”的OSD显示的情况下，根据该解释，通过操作操作单元27来执行该选择。应该注意，这样的处理适合于由右眼图像和左眼图像构成的立体图像。

此外，如图3所示，如果将指示立体效果的强度最低的“0”应用为立体效果标记时，则允许原样显示该立体图像。另一方面，如果将“1”、“2”和“3”应用为立体效果标记时，CPU 26响应立体效果标记的值来改变(压缩)深度图数据(一半、三分之一等)。而且，将该减弱的立体效果深度图数据应用于图像产生部分24。该图像产生部分24根据该减弱的立体深度图数据来产生视差图像。此外，由OSD电路来显示“warning”的字母。结果，如图3所示，在监视器25上显示减弱的立体效果图像和“warning”的字母。用户选择是显示与产生者意图一致的立体图像还是保持减弱的立体效果图像。例如，在屏幕上显示解释“操作“1”来选择显示原始图像(OK)，操作“2”来选择保持减弱的立体效果图像(NG)”的OSD显示的情况下，根据该解释，通过操作操作单元27来执行该选择。

而且，如图4所示，在立体效果标记并不存在而仅接收深度图的情况下，根据深度图来确定立体效果。例如，依赖于应用于形成图像的每一个点和对象的深度图的最大值和最小值之间的差别，能够确定立体效果。当该差别大于预先设置的阈值时，则断定该立体效果较强，而当该差别小于预先设置的阈值时，则断定该立体效果较弱。当断定立体效果较弱时，则原样显示该立体图像。同时，当断定立体效果较强时，则根据程度(深度图值)来改变(压缩)深度图(一半、三分之一等)。然后，将该减弱的立体效果深度图数据应用于图像产生部分24。该图像产生部分24根据该减弱的立体效果深度图数据来产生视差图像。此外，由OSD电路在屏幕上显示“warning”的字母。结果，如图4所示，在监视器25上显示减弱的立体效果图像和“warning”的字母。用户选择是显示与产生者意图一致的立体图像还是保持减弱的立体效果图像。例如，在屏幕上显示解释“操作“1”来选择显示原始图像(OK)，操作“2”来选择保持减弱的立体效果图像(NG)”的OSD显示的情况下，根据该解释，通过操作操作单元27来执行该选择。

此外，如图5所示，对于静态图像，通过图案匹配来确定立体效果的强度。例如，在接收右眼图像和左眼图像时，检测与这些图像相对应的点或对象的偏差量(偏移量)，并且根据该偏差量来确定立体效果的强度。CPU 26根据所确定的立体效果的强度来确定缩减率(一半、三分之一等)。应该注意，可以设置某个固定的缩减率。然后，将该缩减率应用于图像产生部分24。图像产生部分24显示尺寸缩减的图像。此外，由OSD电路在屏幕上显示“warning”的字母。结果，如图5所示，在监视器25上显示尺寸缩减的立体图像和“warning”的字母。用户选择是显示与产生者意图一致的立体图像还是保持尺寸缩减的立体图像。例如，在屏幕上显示解释“操作“1”来选择显示原始图像(OK)，操作“2”来选择保持尺寸缩减的图像(NG)”的OSD显示的情况下，根据该解释，通过操作操作单元27来执行该选择。

在以上描述中，由图像的点数、监视器25的显示分辨率(每一英寸的像素、每一个英寸的点)和显示分辨率的设置值(屏幕模式、显示点的数量)来确定要在监视器25上显示的图像的尺寸。这样来确定其尺寸的显示图像是原始尺寸的显示图像。此外，如果根据屏幕设置来自动执行在图像尺寸大于屏幕尺寸的情况下缩减图像尺寸并调节屏幕尺寸的处理，则经过这样的处理的图像是原始尺寸图像。而且，与电视机中类似，如果设置了自动扩宽模式，则可以说，根据该设置扩展和显示的图像是原始尺寸的显示图像。在本申请的发明中，如上所提到的扩展和缩减显示处于原始尺寸显示的类别内，并且将缩减显示处理执行为与这样的扩展和缩减显示不同的处理。如果更详细地进行描述，执行基于显示分辨率的设置值等的缩减显示而与立体图像显示和平面图像显示无关。另一方面，在立体图像显示中执行根据本申请的发明的缩减显示处理。此外，立体效果根据显示分辨率的设置值等而改变。然而，这样的已改变显示图像变为具有原始立体效果的图像。在本申请的发明中，上述立体效果的改变处于原始立体效果的显示类别内，并且与立体效果的这种改变分离地执行减弱的立体效果图像的显示。

此外，在以上描述中，尽管通过接收侧设备2的处理来执行缩减显示和减弱的立体效果显示，但是能够由发送侧的处理来执行这样的显示。例如，作为因特网上的服务器存在的发送侧设备1缩减了小于原始尺寸的立体图像的尺寸，并且将该图像作为HTML文件上的图像来传送，此外，需要用户执行指示是否允许原始尺寸图像的输入。此时，在接收侧设备2的监视器25上，显示尺寸缩减的立体图像，并且例如，在屏幕上显示如“请点击原始选择(OK)或尺寸缩减保持选择(NG)”等消息。如果根据该解释，用户选择了(OK)，则从发送侧设备1传送该原始立体图像。

而且，例如，作为因特网上的服务器存在的发送侧设备1缩减了弱于原始立体效果的立体效果，并且将该立体图像作为HTML文件上的图像来传送，此外，需要用户执行指示是否允许具有原始立体效果的立体图像的输入。此时，在接收侧设备2的监视器25上，显示减弱的立体效果图像，并且例如，在屏幕上显示如“请点击原始选择(OK)或减弱立体效果图像保持选择(NG)”等消息。如果根据该解释，用户选择了(OK)，则向发送侧设备1传送该信息。发送侧设备1确定允许(需要)原始立体图像的传送，并向接收侧设备1传送原始立体图像。

利用这样的配置，在立体图像作为因特网浏览上的HTML文件的图像存在的情况下，首先，将立体图像显示为其尺寸比原始尺寸缩减的图像、或其立体效果弱于原始立体效果的图像。结果，即使立体图像作品具有强立体效果，仍能减弱其立体效果，并且能够防止观看者感到不舒适。由观看者通过指示允许的操作来显示具有原始立体效果的图像，从而能够根据产生者的意图来观看立体图像作品。此外，在作为执行因特网浏览的计算机或移动电话的接收侧设备1中，用于检测立体效果标记的装置或用于确定立体效果的装置并非必须的，而且也不必执行立体图像的缩减处理和立体效果的改变处理。

如上所述，本发明使观看者能够看到产生者所预期的立体图像作品，而不会使观看者对立体图像作品感到不舒适。

Claims (9)

1、一种立体图像产生设备，包括：

装置，用于检测指示添加到要显示的立体图像上的立体效果强度的信息；

装置，通过根据指示立体图像的立体效果强度的所述信息来再现小于原始尺寸的尺寸，显示立体图像，并且要求指示是否允许原始尺寸的立体图像的输入；以及

装置，当从用户侧接收到指示允许的信息时，执行原始尺寸立体图像的显示。

2、一种立体图像产生设备，包括：

装置，用于检测指示添加到要显示的立体图像上的立体效果强度的信息；

装置，通过根据指示立体图像的立体效果强度的所述信息来再现弱于原始立体效果的立体效果，显示立体图像，并且要求指示是否允许具有原始立体效果的立体图像的输入；以及

装置，当从用户侧接收到指示允许的信息时，执行具有原始立体效果的立体图像的显示。

3、一种立体图像产生设备，包括：

装置，用于确定要显示的立体图像的立体效果强度；

装置，通过根据所确定的立体效果强度来再现小于原始尺寸的尺寸，显示立体图像，并且要求指示是否允许原始尺寸的立体图像的输入；以及

装置，当从用户侧接收到指示允许的信息时，执行原始尺寸立体图像的显示。

4、一种立体图像产生设备，包括：

装置，用于确定要显示的立体图像的立体效果强度；

装置，通过根据所确定的立体效果强度来再现弱于原始立体效果的立体效果，显示立体图像，并且要求指示是否允许具有原始立体效果的立体图像的输入；以及

装置，当从用户侧接收到指示允许的信息时，执行具有原始立体效果的立体图像的显示。

5、一种立体图像产生设备，包括：

装置，用于通过再现小于其原始尺寸的尺寸来显示要显示的立体图像，并且要求指示是否允许原始尺寸的立体图像的输入；以及

装置，当从用户侧接收到指示允许的信息时，执行原始尺寸立体图像的显示。

6、一种立体图像产生设备，包括：

装置，用于通过再现弱于其原始立体效果的立体效果来显示要显示的立体图像，并且要求指示是否允许具有原始立体效果的立体图像的输入；以及

装置，当从用户侧接收到指示允许的信息时，执行具有原始效果的立体图像的显示。

7、根据权利要求1到6任一个所述的立体图像产生设备，其特征在于：在缩减尺寸显示的状态下或在立体效果减弱显示的状态下，在屏幕上显示警告。

8、一种立体图像传递方法，其特征在于通过再现小于其原始尺寸的尺寸来传送立体图像，要求指示是否允许原始尺寸的立体图像的输入，并且当从用户侧接收到指示允许的信息时，传送所述原始尺寸立体图像。

9、一种立体图像传递方法，其特征在于通过再现弱于其原始立体效果的立体效果来传送立体图像，要求指示是否允许具有原始立体效果的立体图像的输入，并且当从用户侧接收到指示允许的信息时，传送具有原始立体效果的立体图像。

Images