[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

CN110047430A - 光场数据重构方法、光场数据重构器件及光场显示装置 - Google Patents

光场数据重构方法、光场数据重构器件及光场显示装置 Download PDF

Info

Publication number
CN110047430A
CN110047430A CN201910343960.0A CN201910343960A CN110047430A CN 110047430 A CN110047430 A CN 110047430A CN 201910343960 A CN201910343960 A CN 201910343960A CN 110047430 A CN110047430 A CN 110047430A
Authority
CN
China
Prior art keywords
light field
coordinate axis
images
acquisition points
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910343960.0A
Other languages
English (en)
Other versions
CN110047430B (zh
Inventor
王瑞勇
张洪术
吴俊�
刘晓茹
尤杨
赵合彬
邱云
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BOE Technology Group Co Ltd
Beijing BOE Display Technology Co Ltd
Original Assignee
BOE Technology Group Co Ltd
Beijing BOE Display Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BOE Technology Group Co Ltd, Beijing BOE Display Technology Co Ltd filed Critical BOE Technology Group Co Ltd
Priority to CN201910343960.0A priority Critical patent/CN110047430B/zh
Publication of CN110047430A publication Critical patent/CN110047430A/zh
Application granted granted Critical
Publication of CN110047430B publication Critical patent/CN110047430B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/22—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
    • G09G3/30—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels
    • G09G3/32—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED]
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/22—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources
    • G09G3/30—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels
    • G09G3/32—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED]
    • G09G3/3208—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters using controlled light sources using electroluminescent panels semiconductive, e.g. using light-emitting diodes [LED] organic, e.g. using organic light-emitting diodes [OLED]
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/20—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters
    • G09G3/34—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source
    • G09G3/36—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes for presentation of an assembly of a number of characters, e.g. a page, by composing the assembly by combination of individual elements arranged in a matrix no fixed position being assigned to or needed to be assigned to the individual characters or partial characters by control of light from an independent source using liquid crystals
    • G09G3/3611—Control of matrices with row and column drivers

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Crystallography & Structural Chemistry (AREA)
  • Image Processing (AREA)

Abstract

本发明提供一种光场数据重构方法、光场数据重构器件及光场显示装置，该光场数据重构方法包括：获取在光场采集点采集的2D原始图像，光场采集点位于UV平面直角坐标系内，光场采集点为M×N的矩阵，光场采集点的数量小于用于生成4D光场数据的目标图像的数量；分别在U坐标轴方向和V坐标轴方向上，对M×N个光场采集点采集的2D原始图像进行插值处理，得到X×Y个目标图像；根据X×Y个目标图像，得到4D光场数据。本发明中，采用数量较少的光场采集点采集2D原始图像，对采集的2D原始图像进行插值处理，得到数量较大的目标图像，并根据数量较大的目标图像重构连续且较清晰的4D光场数据，极大地降低了2D原始数据的采集量。

Description

光场数据重构方法、光场数据重构器件及光场显示装置
技术领域
本发明涉及显示技术领域，尤其涉及一种光场数据重构方法、光场数据重构器件及光场显示装置。
背景技术
4D光场数据记录了在不同位置观察到的同一物体的信息，如图1所示为一4D光场数据的示意图，图1中，面UV记录了光场采集点的位置信息，面ST分别记录了各个光场采集点采集的像素信息。图1中示出的光场采集点为5×5的矩阵。
光场数据L(u,v,s,t)可以通过以下公式来记录：
L(u,v,s,t)＝M×N×Row×Column
其中，u,v,s,t为整数，作为光场数据的索引，u,v表示光场采集点的位置，光场采集点为M×N的矩阵，s,t表示单个光场采集点采集的像素信息，每一个光场采集点采集的像素的数量为Row×Column。L(u,v,s,t)在点(u,v,s,t)记录的值l(u,v,s,t)为在图1中对应光场采集点的像素信息。
为生成连续的图像信息，优选地M×N＝Row×Column。一般图像分辨率为HD(高清，720×1280)，FHD(全高清，1080×1920)等，这就需要光场采集点同样为720×1280或者1080×1920，明显增加了数据采集的难度。
发明内容
有鉴于此，本发明提供一种光场数据重构方法、光场数据重构器件及光场显示装置，用于解决获取4D光场数据时数据采集难度大的问题。
为解决上述技术问题，本发明提供一种光场数据重构方法，包括：
获取在光场采集点采集的2D原始图像，所述光场采集点位于UV平面直角坐标系内，所述光场采集点为M×N的矩阵，所述光场采集点的数量小于用于生成4D光场数据的目标图像的数量；
分别在U坐标轴方向和V坐标轴方向上，对M×N个所述光场采集点采集的2D原始图像进行插值处理，得到X×Y个目标图像；
根据所述X×Y个目标图像，得到所述4D光场数据。
可选的，所述分别在U坐标轴方向和V坐标轴方向上，对M×N个所述光场采集点采集的2D原始图像进行插值处理，得到X×Y个目标图像包括：
在U坐标轴方向上，对N列所述光场采集点中的每一列的M个所述光场采集点采集的2D原始图像进行插值处理，得到X×N个目标图像；
在V坐标轴方向上，对X行目标图像中的每一行的N个目标图像进行插值处理，得到X×Y个目标图像；
或者
在V坐标轴方向上，对M行所述光场采集点中的每一行的N个所述光场采集点采集的2D原始图像进行插值处理，得到M×Y个目标图像；
在U坐标轴方向上，对Y列目标图像中的每一列的M个目标图像进行插值处理，得到X×Y个目标图像。
可选的，所述插值处理包括：
针对一待得到的目标图像，通过插值算法对在U坐标轴方向上或V坐标轴方向上位于所述待得到的目标图像两侧的两个图像插值得到。
可选的，所述插值算法为线性插值算法，采用下述公式进行插值：
Insert_image.j＝alph(image.i)+bet(image.(i+1))
其中，Insert_image.j为待得到的目标图像，image.i和image.(i+1)为在U坐标轴方向上或V坐标轴方向上位于待得到的目标图像两侧的图像，alph和bet之和为一确定数值。
可选的，X和Y其中之一为所述目标图像的像素的行数，另一为所述目标图像的像素的列数。
可选的，在U坐标轴方向上，N列所述光场采集点中的每一列的M个所述光场采集点等间隔分布，在V坐标轴方向上M行所述光场采集点中的每一行的N个所述光场采集点等间隔分布。
本发明还提供一种光场数据重构器件，包括：
获取模块，用于获取在光场采集点采集的2D原始图像，所述光场采集点位于UV平面直角坐标系内，所述光场采集点为M×N的矩阵，所述光场采集点的数量小于用于生成4D光场数据的目标图像的数量；
插值模块，用于分别在U坐标轴方向和V坐标轴方向上，对M×N个所述光场采集点采集的2D原始图像进行插值处理，得到X×Y个目标图像；
获得模块，用于根据所述X×Y个目标图像，得到所述4D光场数据。
本发明还提供一种光场显示装置，包括上述光场数据重构器件。
可选的，所述光场显示装置还包括：
至少两层显示屏；
分解模块，与所述光场数据重构器件连接，用于将所述光场数据重构器件得到的4D光场数据分解成至少两个显示图像，并将所述至少两个显示图像分别发送给所述至少两层显示屏显示。
可选的，所述至少两层显示屏的分辨率相同均为X×Y。
本发明的上述技术方案的有益效果如下：
本发明实施例中，采用数量较少的光场采集点采集2D原始图像，对采集的2D原始图像进行插值处理，得到数量较大的目标图像，并根据数量较大的目标图像重构连续且较清晰的4D光场数据，极大地降低了2D原始数据的采集量，使得光场显示成为可能，从而实现逼真舒适的3D体验。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例的描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为4D光场数据的示意图；
图2为本发明实施例的光场数据重构方法的流程示意图；
图3为本发明实施例的光场采集点在UV坐标系中的示意图；
图4为本发明实施例的光场采集点采集的原始图像在UV坐标系中的示意图；
图5为本发明一实施例的在U坐标轴方向上的插值方法示意图；
图6为本发明一实施例的在V坐标轴方向上的插值方法示意图；
图7为本发明另一实施例的在V坐标轴方向上的插值方法示意图；
图8为本发明另一实施例的在U坐标轴方向上的插值方法示意图；
图9为本发明又一实施例的插值方法示意图；
图10为采用本发明实施例的插值方法与未采用插值方法得到的极线图的比较示意图；
图11为本发明实施例的光场数据重构器件的结构示意图；
图12为本发明实施例的光场显示装置进行光场显示的流程示意图；
图13为本发明实施例的具有两层显示屏的光场显示装置的光场显示示意图；
图14为本发明实施例的具有两层显示屏的光场显示装置显示的画面的示意图；
图15为本发明实施例的光场显示装置的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例的附图，对本发明实施例的技术方案进行清楚、完整地描述。显然，所描述的实施例是本发明的一部分实施例，而不是全部的实施例。基于所描述的本发明的实施例，本领域普通技术人员所获得的所有其他实施例，都属于本发明保护的范围。
为解决现有的获取4D光场数据时数据采集难度大的问题，请参考图2，本发明实施例提供一种光场数据重构方法，包括：
步骤21：获取在光场采集点采集的2D原始图像，所述光场采集点位于UV平面直角坐标系内，所述光场采集点为M×N的矩阵，所述光场采集点的数量小于用于生成4D光场数据的目标图像的数量；
本发明实施例中，可以通过摄像头采集2D原始图像(真实采集)，或者，通过渲染生成2D原始图像(模拟采集)。
本发明实施例中，UV平面直角坐标系中，U可以为纵坐标，V为横坐标，当然，U也可以为横坐标，V为纵坐标。
请参考图3，图3所示的实施例中，U为纵坐标，V为横坐标，光场采集点30的数量为3×4(M＝3，N＝4)。
步骤22：分别在U坐标轴方向和V坐标轴方向上，对M×N个所述光场采集点采集的2D原始图像进行插值处理，得到X×Y个目标图像；
本发明实施例中，可以首先在U坐标轴方向上进行插值处理，然后在V坐标轴方向上进行插值处理，当然，也可以先在V坐标轴方向上进行插值处理，然后在U坐标轴方向上进行插值处理。
步骤23：根据所述X×Y个目标图像，得到所述4D光场数据。
本发明实施例中，采用数量较少的光场采集点采集2D原始图像，对采集的2D原始图像进行插值处理，得到数量较大的目标图像，并根据数量较大的目标图像重构连续且较清晰的4D光场数据，极大地降低了2D原始数据的采集量，使得光场显示成为可能，从而实现逼真舒适的3D体验。
本发明实施例中，优选地，M和N均为小于10的正整数，即光场采集点的数量与目标图像的数量相比要小很多，从而可以极大地降低2D原始数据的采集量。例如，光场采集点的数量可以为5×5，7×7或者5×7等，而目标图像的数量通常为720×1280或者1080×1920等。
下面对插值处理的方法进行详细说明。
在本发明的一些实施例中，上述步骤22可以包括：
步骤221a：在U坐标轴方向上，对N列所述光场采集点中的每一列的M个所述光场采集点采集的2D原始图像进行插值处理，得到X×N个目标图像；
步骤222a：在V坐标轴方向上，对X行目标图像中的每一行的N个目标图像进行插值处理，得到X×Y个目标图像；
请参考图4，图4所示的实施例中，假设光场采集点为3×4(即M＝3，N＝4)的矩阵，需要得到8×9(即X＝8，Y＝9)的目标图像。在UV平面直角坐标系内，光场采集点采集的2D原始图像41也为3×4的矩阵，在进行插值时，请参考图5，首先在U坐标轴方向上，对4列光场采集点中的每一列的3个光场采集点采集的2D原始图像进行插值处理，得到8×4个目标图像42。请参考图6，然后，在V坐标轴方向上，对8行目标图像42中的每一行的4个目标图像进行插值处理，得到8×9个目标图像。
在本发明的另外一些实施例中，上述步骤22也可以包括：
步骤221b：在V坐标轴方向上，对M行所述光场采集点中的每一行的N个所述光场采集点采集的2D原始图像进行插值处理，得到M×Y个目标图像；
步骤222b：在U坐标轴方向上，对Y列目标图像中的每一列的M个目标图像进行插值处理，得到X×Y个目标图像。
请参考图7，首先在V坐标轴方向上，对3行所述光场采集点中的每一行的4个所述光场采集点采集的2D原始图像进行插值处理，得到3×9个目标图像。然后，请参考图8，在U坐标轴方向上，对9列目标图像中的每一列的3个目标图像进行插值处理，得到8×9个目标图像。
本发明实施例中，上述插值处理可以包括：针对一待得到的目标图像，通过插值算法对在U坐标轴方向上或V坐标轴方向上位于所述待得到的目标图像两侧的两个图像插值得到。举例来说，请参考图5，图5中的虚线框框住的目标图像42，是通过对位于其两侧的2D原始图像41插值得到。请参考图6，图6中的虚线框框住的目标图像42，是通过对位于其两侧的两(横向的)目标图像42插值得到。当然，在本发明的其他一些实施例中，也不排除采用其他的插值处理方法。
本发明实施例中，优选地，在U坐标轴方向上，N列所述光场采集点中的每一列的M个所述光场采集点等间隔分布，在V坐标轴方向上，M行所述光场采集点中的每一行的N个所述光场采集点等间隔分布，从而使得插值算法简单。该种情况下，插值处理时，在U坐标轴方向上或V坐标轴方向上，相邻的两个图像之间插入的目标图像的数量相同。举例来说，请参考图5，在U坐标轴方向上，相邻的两个2D原始图像41之间插入的目标图像42的个数均为4个。请参考图6，在V坐标轴方向上，相邻的两个(横向的)目标图像42之间插入的(竖向的)目标图像42的个数均为3个。
当然，在本发明的其他一些实施例中，N列所述光场采集点中的每一列的M个所述光场采集点也可以不等间隔分布，同样的，M行所述光场采集点中的每一行的N个所述光场采集点也可以不等间隔分布。
本发明实施例中，使用的插值算法可以为线性插值算法，可以采用下述公式进行插值：
Insert_image.j＝alph(image.i)+bet(image.(i+1))
其中，Insert_image.j为待得到的目标图像，image.i和image.(i+1)为在U坐标轴方向上或V坐标轴方向上位于待得到的目标图像两侧的图像，alph和bet之和为一确定数值。
具体的，根据待得到的目标图像与其两侧的两个图像的距离，来确定两个图像的权重(alph和bet)。
在本发明的一可选实施例中，alph和bet之和可以为1。
本发明实施例中的上述插值方法，可以理解为：
在一些实施例中，在U坐标轴方向上，将待得到的每一列的X个目标图像划分为M-1份，针对每一份待得到的X/(M-1)个目标图像，通过对其两侧的2D原始图像进行插值处理得到。在V坐标轴方向上，将待得到的每一行的Y个目标图像划分为N-1份，针对每一份待得到的Y/(N-1)个目标图像，通过对其两侧的目标图像(该目标图像是在U坐标轴方向上插值处理得到的目标图像)进行插值处理得到。
或者，
在一些实施例中，在V坐标轴方向上，将待得到的每一行的Y个目标图像划分为N-1份，针对每一份待得到的Y/(N-1)个目标图像，通过对其两侧的2D原始图像进行插值处理得到。在U坐标轴方向上，将待得到的每一列的X个目标图像划分为M-1份，针对每一份待得到的X/(M-1)个目标图像，通过对其两侧的目标图像(该目标图像是在V坐标轴方向上插值处理得到的目标图像)进行插值处理得到。
针对每一份待得到的X/(M-1)个目标图像，可选地：
alph＝j/(X/(M-1))；
bet＝((X/(M-1))-j)/(X/(M-1))；
其中，j为待得到的目标图像在所在份目标图像中的序号(j相当于与两侧的图像的距离)，取值为1～X/(M-1)；
针对每一份待得到的Y/(N-1)个目标图像，可选地：
alph＝j/(Y/(N-1))；
bet＝((Y/(N-1))-j)/(Y/(N-1))；
其中，j为待得到的目标图像在所在份目标图像中的序号(j相当于与两侧的图像的距离)，取值为1～Y/(N-1)。
上述线性插值算法可以通过以下程序执行：
在U坐标轴方向上进行插值计算：
For i From 1to(M-1)#将待得到的X个目标图像划分为M-1份，对M-1份目标图像分别进行线性插值计算
For j From 1to X/(M-1)#对M-1份目标图像中每一份目标图像分别进行线性插值计算
Insert_image.j＝alph(image.i)+bet(image.(i+1))#在2D原始图像i与i+1之间插入X/(M-1)张新图像，新图像中的像素信息由前后两张2D原始图像线性插值获得。
END For
End For
同理，在V坐标轴方向上进行另外一方向的插值计算：
For i From 1to(N-1)#将待得到的Y个目标图像划分为N-1份，对N-1份目标图像分别进行线性插值计算
For j From 1to Y/(N-1)#对N-1份目标图像中每一份目标图像分别进行线性插值计算
Insert_image.j＝alph(image.i)+bet(image.(i+1))#在U坐标轴方向上得到的目标图像i与i+1之间插入Y/(N-1)张新图像，新图像中的像素信息由前后两张目标图像线性插值获得，请参考图9。
END For
End For
这样就可以将一个M×N个2D原始图像，拓展为X×Y个2D目标图像，最终的4D光场数据L(u,v,s,t)的维度为X×Y×X×Y。
本发明实施例中，可选的，X和Y其中之一为所述目标图像的像素的行数，另一为所述目标图像的像素的列数。假设目标图像的像素的行数为Row，目标图像的像素的列数为Column，则用于生成4D光场数据的目标图像的个数为Row×Column。
本发明实施例中，请参考图10，通过上述插值算法得到的图像在极线图中表示出良好的连续性。图10中，(a)为原始图像，原始图像中的竖向的线为极线图(极线图是以U为横坐标，以S为纵坐标，或者以V为横坐标，以T为纵坐标得到的图)的切线位置，(b)为未经插值算法转换的极线图，(c)为经过本发明实施例中的插值算法转化的极线图，从(c)中可以看到明显的边缘优化。
请参考图11，本发明实施例还提供一种光场数据重构器件，包括：
获取模块，用于获取在光场采集点采集的2D原始图像，所述光场采集点位于UV平面直角坐标系内，所述光场采集点为M×N的矩阵，所述光场采集点的数量小于用于生成4D光场数据的目标图像的数量；
插值模块，用于分别在U坐标轴方向和V坐标轴方向上，对M×N个所述光场采集点采集的2D原始图像进行插值处理，得到X×Y个目标图像；
获得模块，用于根据所述X×Y个目标图像，得到所述4D光场数据。
本发明实施例中，采用数量较少的光场采集点采集2D原始图像，对采集的2D原始图像进行插值处理，得到数量较大的目标图像，并根据数量较大的目标图像重构连续且较清晰的4D光场数据，极大地降低了2D原始数据的采集量，使得光场显示成为可能，从而实现逼真舒适的3D体验。
可选的，所述分别在U坐标轴方向和V坐标轴方向上，对M×N个所述光场采集点采集的2D原始图像进行插值处理，得到X×Y个目标图像包括：
在U坐标轴方向上，对N列所述光场采集点中的每一列的M个所述光场采集点采集的2D原始图像进行插值处理，得到X×N个目标图像；
在V坐标轴方向上，对X行目标图像中的每一行的N个目标图像进行插值处理，得到X×Y个目标图像；
或者
在V坐标轴方向上，对M行所述光场采集点中的每一行的N个所述光场采集点采集的2D原始图像进行插值处理，得到M×Y个目标图像；
在U坐标轴方向上，对Y列目标图像中的每一列的M个目标图像进行插值处理，得到X×Y个目标图像。
可选的，所述插值处理包括：
针对一待得到的目标图像，通过插值算法对在U坐标轴方向上或V坐标轴方向上位于所述待得到的目标图像两侧的两个图像插值得到。
可选的，所述插值算法为线性插值算法，采用下述公式进行插值：
Insert_image.j＝alph(image.i)+bet(image.(i+1))
其中，Insert_image.j为待得到的目标图像，image.i和image.(i+1)为在U坐标轴方向上或V坐标轴方向上位于待得到的目标图像两侧的图像，alph和bet之和为一确定数值。
可选的，X和Y其中之一为所述目标图像的像素的行数，另一为所述目标图像的像素的列数。
可选的，在U坐标轴方向上，N列所述光场采集点中的每一列的M个所述光场采集点等间隔分布，在V坐标轴方向上M行所述光场采集点中的每一行的N个所述光场采集点等间隔分布。
本发明实施例还提供一种光场显示装置，包括上述光场数据重构器件。
在本发明的一些实施例中，所述光场显示装置还包括：
至少两层显示屏；
分解模块，与所述光场数据重构器件连接，用于将所述光场数据重构器件得到的4D光场数据分解成至少两个显示图像，并将所述至少两个显示图像分别发送给所述至少两层显示屏显示。
请参考图12，图12为本发明实施例的光场显示装置进行光场显示的流程示意图，首先光场数据重构器件根据采集的2D原始图像生成4D光场数据，并将4D光场数据发送给分解模块，分解模块将所述光场数据重构器件得到的4D光场数据分解成至少两个显示图像(图中示出了两个显示图像image1和image2)，并将至少两个显示图像分别发送给所述至少两层显示屏显示。
本发明实施例中，所述至少两层显示屏同步显示分解出的画面。
其中，所述显示屏可以为液晶显示屏(LCD)，也可以为其他类型的显示屏，例如有机发光二极管(OLED)、miniLED、microLED显示屏等。
下面对具有两层显示屏的光场显示装置的光场显示的理论进行说明：
请参考图13，通过显示屏1上的(u,v)点与显示屏2上的(s,t)点的光线，每透过一层显示，光线强度依次降低，l(u,v,s,t)的值即为显示屏1上(u,v)点与显示屏2上的(s,t)的乘积，即：
l(u,v,s,t)＝f(u,v)*g(s,t)
其中，f,g为显示屏1和显示屏2的透过率分布函数。
如图14所示，图14中，从左至右依次为画面1，画面2和重构画面。将画面1输出至显示屏1，画面2输出至显示屏2，得到重构画面，本发明实施例中的重构画面为0°0°视角(光场采集点所在平面中光场采集点相对与观察图像的角度(水平角度与俯仰角度均为0))，对应图1中的5×5图像中UV坐标为(3,3)的图像，其他视角通过显示屏1与显示屏2不同角度观察。
本发明实施例中，可选的，所述至少两层显示屏的分辨率相同均为X×Y，该种设计比较简单。
本发明实施例中，请参考图15，光场显示装置包括两层显示屏151，两层显示屏151之间可以通过隔垫物152进行支撑。隔垫物152的厚度可以为5毫米-20毫米。图15所示的实施例中，显示屏151为液晶显示屏，还包括背光源153。为了保证光场显示装置的结构精密，光场显示装置还可以包括平面支撑结构154，位于背光源153和显示屏151的外侧。
本发明实施例中，光场显示装置还可以包括偏光片(POL)，所述相邻的两层显示屏之间的偏光片可以共用或偏光轴平行。
当光场显示装置包括三层显示屏时，4D光场数据可以采用下式表示：
其中，i,j表示在显示屏1上的点，k,l表示在显示屏2上的点，g,h表示在显示屏3上的点，UiVj表示显示屏1上的点i,j的透过光线，SkTl表示显示屏2上的点k,l的透过光线，IgJh表示显示屏3上的点g,h的透过光线。
当光场显示装置包括两层显示屏时，4D光场数据可以采用下式表示：
其中，i,j表示在显示屏1上的点，k,l表示在显示屏2上的点，iVj表示显示屏1上的点i,j的透过光线，SkTl表示显示屏2上的点k,l的透过光线。
除非另作定义，本发明中使用的技术术语或者科学术语应当为本发明所属领域内具有一般技能的人士所理解的通常意义。本发明中使用的“第一”、“第二”以及类似的词语并不表示任何顺序、数量或者重要性，而只是用来区分不同的组成部分。“连接”或者“相连”等类似的词语并非限定于物理的或者机械的连接，而是可以包括电性的连接，不管是直接的还是间接的。“上”、“下”、“左”、“右”等仅用于表示相对位置关系，当被描述对象的绝对位置改变后，则该相对位置关系也相应地改变。
以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明所述原理的前提下，还可以作出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种光场数据重构方法，其特征在于，包括：
获取在光场采集点采集的2D原始图像，所述光场采集点位于UV平面直角坐标系内，所述光场采集点为M×N的矩阵，所述光场采集点的数量小于用于生成4D光场数据的目标图像的数量；
分别在U坐标轴方向和V坐标轴方向上，对M×N个所述光场采集点采集的2D原始图像进行插值处理，得到X×Y个目标图像；
根据所述X×Y个目标图像，得到所述4D光场数据。
2.根据权利要求1所述的光场数据重构方法，其特征在于，所述分别在U坐标轴方向和V坐标轴方向上，对M×N个所述光场采集点采集的2D原始图像进行插值处理，得到X×Y个目标图像包括：
在U坐标轴方向上，对N列所述光场采集点中的每一列的M个所述光场采集点采集的2D原始图像进行插值处理，得到X×N个目标图像；
在V坐标轴方向上，对X行目标图像中的每一行的N个目标图像进行插值处理，得到X×Y个目标图像；
或者
在V坐标轴方向上，对M行所述光场采集点中的每一行的N个所述光场采集点采集的2D原始图像进行插值处理，得到M×Y个目标图像；
在U坐标轴方向上，对Y列目标图像中的每一列的M个目标图像进行插值处理，得到X×Y个目标图像。
3.根据权利要求2所述的光场数据重构方法，其特征在于，所述插值处理包括：
针对一待得到的目标图像，通过插值算法对在U坐标轴方向上或V坐标轴方向上位于所述待得到的目标图像两侧的两个图像插值得到。
4.根据权利要求3所述的光场数据重构方法，其特征在于，所述插值算法为线性插值算法，采用下述公式进行插值：
Insert_image.j＝alph(image.i)+bet(image.(i+1))
其中，Insert_image.j为待得到的目标图像，image.i和image.(i+1)为在U坐标轴方向上或V坐标轴方向上位于待得到的目标图像两侧的图像，alph和bet之和为一确定数值。
5.根据权利要求1所述的光场数据重构方法，其特征在于，X和Y其中之一为所述目标图像的像素的行数，另一为所述目标图像的像素的列数。
6.根据权利要求1所述的光场数据重构方法，其特征在于，在U坐标轴方向上，N列所述光场采集点中的每一列的M个所述光场采集点等间隔分布，在V坐标轴方向上M行所述光场采集点中的每一行的N个所述光场采集点等间隔分布。
7.一种光场数据重构器件，其特征在于，包括：
获取模块，用于获取在光场采集点采集的2D原始图像，所述光场采集点位于UV平面直角坐标系内，所述光场采集点为M×N的矩阵，所述光场采集点的数量小于用于生成4D光场数据的目标图像的数量；
插值模块，用于分别在U坐标轴方向和V坐标轴方向上，对M×N个所述光场采集点采集的2D原始图像进行插值处理，得到X×Y个目标图像；
获得模块，用于根据所述X×Y个目标图像，得到所述4D光场数据。
8.一种光场显示装置，其特征在于，包括如权利要求7所述的光场数据重构器件。
9.根据权利要求8所述的光场显示装置，其特征在于，还包括：
至少两层显示屏；
分解模块，与所述光场数据重构器件连接，用于将所述光场数据重构器件得到的4D光场数据分解成至少两个显示图像，并将所述至少两个显示图像分别发送给所述至少两层显示屏显示。
10.根据权利要求9所述的光场显示装置，其特征在于，所述至少两层显示屏的分辨率相同均为X×Y。
CN201910343960.0A 2019-04-26 2019-04-26 光场数据重构方法、光场数据重构器件及光场显示装置 Active CN110047430B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910343960.0A CN110047430B (zh) 2019-04-26 2019-04-26 光场数据重构方法、光场数据重构器件及光场显示装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910343960.0A CN110047430B (zh) 2019-04-26 2019-04-26 光场数据重构方法、光场数据重构器件及光场显示装置

Publications (2)

Publication Number Publication Date
CN110047430A true CN110047430A (zh) 2019-07-23
CN110047430B CN110047430B (zh) 2020-11-06

Family

ID=67279682

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910343960.0A Active CN110047430B (zh) 2019-04-26 2019-04-26 光场数据重构方法、光场数据重构器件及光场显示装置

Country Status (1)

Country Link
CN (1) CN110047430B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110989154A (zh) * 2019-11-22 2020-04-10 北京大学 显微光场体成像的重建方法及其正过程和反投影获取方法
CN111080774A (zh) * 2019-12-16 2020-04-28 首都师范大学 一种应用深度采样进行光场重构的方法及系统

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080044078A1 (en) * 2006-08-18 2008-02-21 William Edward Mantzel Data Structure Representing a Plenoptic Function via Compressible Layered Orthographic Projections from Multiple Orientations
CN102694972A (zh) * 2011-03-24 2012-09-26 卡西欧计算机株式会社 具有重构图像的功能的装置以及方法
US20130120319A1 (en) * 2005-10-31 2013-05-16 Extreme Reality Ltd. Methods, Systems, Apparatuses, Circuits and Associated Computer Executable Code for Detecting Motion, Position and/or Orientation of Objects Within a Defined Spatial Region
US20140079336A1 (en) * 2012-09-14 2014-03-20 Pelican Imaging Corporation Systems and methods for correcting user identified artifacts in light field images
CN104851129A (zh) * 2015-05-21 2015-08-19 成都绿野起点科技有限公司 一种基于多视点的3d重建方法
CN105323423A (zh) * 2014-08-01 2016-02-10 佳能株式会社 图像处理方法、图像处理装置及摄像装置
CN105607453A (zh) * 2016-03-31 2016-05-25 四川大学 一种无机械运动扫描的光学扫描全息技术
CN106161922A (zh) * 2015-04-22 2016-11-23 北京智谷睿拓技术服务有限公司 图像采集控制方法和装置
CN107977938A (zh) * 2017-11-24 2018-05-01 北京航空航天大学 一种基于光场的Kinect深度图像修复方法
CN108242065A (zh) * 2017-12-26 2018-07-03 天津大学 一种基于ldpc矩阵的光场图像压缩感知方法
CN108364309A (zh) * 2018-02-09 2018-08-03 清华大学深圳研究生院 一种基于手持式光场相机的空间光场恢复方法
CN108983483A (zh) * 2018-07-27 2018-12-11 京东方科技集团股份有限公司 一种显示装置
US20190088023A1 (en) * 2016-05-25 2019-03-21 Google Llc Light-field viewpoint and pixel culling for a head mounted display device
CN109510977A (zh) * 2017-09-15 2019-03-22 英特尔公司 使用同心观察圆来生成立体光场全景

Patent Citations (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130120319A1 (en) * 2005-10-31 2013-05-16 Extreme Reality Ltd. Methods, Systems, Apparatuses, Circuits and Associated Computer Executable Code for Detecting Motion, Position and/or Orientation of Objects Within a Defined Spatial Region
US20080044078A1 (en) * 2006-08-18 2008-02-21 William Edward Mantzel Data Structure Representing a Plenoptic Function via Compressible Layered Orthographic Projections from Multiple Orientations
CN102694972A (zh) * 2011-03-24 2012-09-26 卡西欧计算机株式会社 具有重构图像的功能的装置以及方法
US20120242855A1 (en) * 2011-03-24 2012-09-27 Casio Computer Co., Ltd. Device and method including function for reconstituting an image, and storage medium
US20140079336A1 (en) * 2012-09-14 2014-03-20 Pelican Imaging Corporation Systems and methods for correcting user identified artifacts in light field images
CN105323423A (zh) * 2014-08-01 2016-02-10 佳能株式会社 图像处理方法、图像处理装置及摄像装置
CN106161922A (zh) * 2015-04-22 2016-11-23 北京智谷睿拓技术服务有限公司 图像采集控制方法和装置
CN104851129A (zh) * 2015-05-21 2015-08-19 成都绿野起点科技有限公司 一种基于多视点的3d重建方法
CN105607453A (zh) * 2016-03-31 2016-05-25 四川大学 一种无机械运动扫描的光学扫描全息技术
US20190088023A1 (en) * 2016-05-25 2019-03-21 Google Llc Light-field viewpoint and pixel culling for a head mounted display device
CN109510977A (zh) * 2017-09-15 2019-03-22 英特尔公司 使用同心观察圆来生成立体光场全景
CN107977938A (zh) * 2017-11-24 2018-05-01 北京航空航天大学 一种基于光场的Kinect深度图像修复方法
CN108242065A (zh) * 2017-12-26 2018-07-03 天津大学 一种基于ldpc矩阵的光场图像压缩感知方法
CN108364309A (zh) * 2018-02-09 2018-08-03 清华大学深圳研究生院 一种基于手持式光场相机的空间光场恢复方法
CN108983483A (zh) * 2018-07-27 2018-12-11 京东方科技集团股份有限公司 一种显示装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
DAVID M. KRAMER等: "A General Algorithm for Oblique Image Reconstruction", 《IEEE COMPUTER GRAPHICS AND APPLICATIONS》 *
周广福等: "基于小波变换与稀疏傅里叶变换相结合的光场重构方法", 《电子学报》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110989154A (zh) * 2019-11-22 2020-04-10 北京大学 显微光场体成像的重建方法及其正过程和反投影获取方法
CN111080774A (zh) * 2019-12-16 2020-04-28 首都师范大学 一种应用深度采样进行光场重构的方法及系统
WO2021121037A1 (zh) * 2019-12-16 2021-06-24 首都师范大学 一种应用深度采样进行光场重构的方法及系统

Also Published As

Publication number Publication date
CN110047430B (zh) 2020-11-06

Similar Documents

Publication Publication Date Title
Torlig et al. A novel methodology for quality assessment of voxelized point clouds
DE102015003525B4 (de) Überauflösungs-Anzeige unter Benutzung von kaskadierten Tafeln
Wetzstein et al. Tensor displays: compressive light field synthesis using multilayer displays with directional backlighting
Molina et al. Parameter estimation in Bayesian high-resolution image reconstruction with multisensors
US9924153B2 (en) Parallel scaling engine for multi-view 3DTV display and method thereof
US8848006B2 (en) Tensor displays
DE112016002043T5 (de) Durchlaufanzeige von erfassten bildern
CN112987332B (zh) 一种高分辨率光栅立体显示装置
CN110047430B (zh) 光场数据重构方法、光场数据重构器件及光场显示装置
Jeong et al. Development of a real-time integral imaging display system based on graphics processing unit parallel processing using a depth camera
CN104516135A (zh) 一种显示面板的显示方法、显示器件及显示装置
Heide et al. Compressive multi-mode superresolution display
CN106991637B (zh) 一种利用gpu并行计算实现多分辨率光场分解的方法
US8422824B2 (en) Image transformation method device for obtaining a three dimensional image
CN110322424A (zh) 高分辨率图像处理方法及装置、vr图像显示方法及vr设备
Shim et al. Development of a scalable tabletop display using projection-based light field technology
CN112866676A (zh) 一种基于单像素多视点重建的裸眼三维显示算法
Xie et al. High-quality reproduction method for three-dimensional light-field displays using parallax-view information synthesis and aberration precorrection
CN114879377B (zh) 水平视差三维光场显示系统的参数确定方法、装置及设备
US7432878B1 (en) Methods and systems for displaying three-dimensional images
CN101149486A (zh) 一种裸眼可视立体显示系统及其实现方法
CN105721816B (zh) 一种显示数据的处理方法及显示设备
Okaichi et al. Integral 3D display using multiple LCDs
Kobayashi et al. Using high-resolution binary layers and a low-resolution multibit backlight for a layered light-field display
CN115205752A (zh) 一种基于智能显示的液晶拼接lcd方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant