CN105493490B - 变换方法和变换装置 - Google Patents
变换方法和变换装置 Download PDFInfo
- Publication number
- CN105493490B CN105493490B CN201580001443.5A CN201580001443A CN105493490B CN 105493490 B CN105493490 B CN 105493490B CN 201580001443 A CN201580001443 A CN 201580001443A CN 105493490 B CN105493490 B CN 105493490B
- Authority
- CN
- China
- Prior art keywords
- brightness value
- value
- brightness
- hdr
- luminance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/57—Control of contrast or brightness
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/20—Circuitry for controlling amplitude response
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2360/00—Aspects of the architecture of display systems
- G09G2360/16—Calculation or use of calculated indices related to luminance levels in display data
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/02—Networking aspects
- G09G2370/022—Centralised management of display operation, e.g. in a server instead of locally
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2370/00—Aspects of data communication
- G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Controls And Circuits For Display Device (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Picture Signal Circuits (AREA)
- Processing Of Color Television Signals (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
为了在显示装置显示影像而对输入的影像的亮度进行变换的变换方法,影像的亮度由第1亮度范围中的第1亮度值构成,第1亮度范围的最大亮度值被定义为超过100nit的第1最大亮度值,取得表示影像的第1亮度值的第1亮度信号,进行亮度变换,亮度变换执行多个亮度变换处理中的一个亮度变换处理,亮度变换处理将取得的第1亮度信号表示的第1亮度值变换为与第2亮度范围对应的第2亮度值,第2亮度范围的最大亮度值被定义为比第1最大亮度值小、且比100nit大的第2最大亮度值,在亮度变换中,根据取得的第1亮度信号的第1元数据中包含的与基准反射率对应的基准亮度值,切换所要执行的亮度变换处理,通过切换后的亮度变换处理将第1亮度值变换为第2亮度值。
Description
技术领域
本申请涉及变换方法和变换装置。
背景技术
以往,曾公开了用于改善能够显示的亮度电平的图像信号处理装置(例如,参照专利文献1)。
现有技术文献
专利文献
专利文献1:日本特开2008-167418号公报
发明内容
本申请的一个方式的变换方法为了在显示装置显示影像而对输入的影像的亮度进行变换的变换方法,所述影像的亮度由第1亮度范围中的第1亮度值构成,该第1亮度范围的最大亮度值被定义为超过100nit的第1最大亮度值,取得表示所述影像的第1亮度值的第1亮度信号,进行亮度变换,该亮度变换执行多个亮度变换处理中的一个亮度变换处理,所述亮度变换处理将取得的所述第1亮度信号表示的所述第1亮度值变换为与第2亮度范围对应的第2亮度值,该第2亮度范围的最大亮度值被定义为比所述第1最大亮度值小、且比100nit大的第2最大亮度值,在所述亮度变换中,根据取得的所述第1亮度信号的第1元数据中包含的与基准反射率对应的基准亮度值,切换所要执行的所述亮度变换处理,通过切换后的所述亮度变换处理将所述第1亮度值变换为所述第2亮度值。
附图说明
图1是用于说明影像技术的进化的图。
图2A是用于说明SDRTV内的SDR显示处理的图。
图2B是用于说明峰值亮度为300nit的SDRTV内的SDR显示处理的图。
图3A是表示与HDR以及SDR分别对应的EOTF(Electro-Optical TransferFunction)的例子的图。
图3B是表示与HDR以及SDR分别对应的逆EOTF的例子的图。
图4是存放到内容中的亮度信号的代码值的决定方法、以及再现时从代码值复原为亮度值的过程的说明图。
图5A是表示在HDRTV内变换HDR信号而进行HDR显示的显示处理的一例的图。
图5B是表示使用对应HDR的再现装置和SDRTV来进行HDR显示的显示处理的一例的图。
图5C是表示使用经由标准接口而相互连接的对应HDR的再现装置和SDRTV来进行HDR显示的显示处理的一例的图。
图6是表示实施方式的变换装置以及显示装置的结构的框图。
图7是表示由实施方式的变换装置以及显示装置进行的变换方法以及显示方法的流程图。
图8A是用于说明第1亮度变换的一例的图。
图8B是用于说明第1亮度变换的其他的一例的图。
图9是用于说明第2亮度变换的图。
图10是表示显示设定的详细处理的流程图。
图11是用于说明第3亮度变换的图。
图12是用于说明从HDR向近似HDR的变换处理的图。
图13是表示图像拍摄时的亮度的尺度的图。
图14是表示拍摄的图像的亮度值的例子的图。
图15是用于说明制作对应SDR的家庭娱乐用母版(master)的流程、分发介质以及显示装置的关系的图。
图16A是表示将图14所示的原图像母版制作(mastering)为SDR图像的结果的亮度值的一例的图。
图16B是表示用于将原信号值变换为SDR信号值(母版制作)的原信号值与SDR信号值之间的关系的一例的图。
图17是用于说明HDR导入时的母版、分发方式、以及显示装置的关系的图。
图18A是表示将图14所示的原图像母版制作为HDR图像的结果的亮度值的一例的图。
图18B是表示用于将原信号值变换为HDR信号值(母版制作)的原信号值与HDR信号值之间的关系的一例的图。
图19A是表示将图14所示的原图像母版制作为HDR图像的结果的亮度值的另一例的图。
图19B是表示用于将原信号值变换为HDR信号值(母版制作)的原信号值与HDR信号值之间的关系的另一例的图。
图20是表示在HDRTV内变换HDR信号而生成HDR影像的显示处理的图。
图21是表示实施方式2的变换方法的流程图。即,图21是表示亮度变换处理时的算法的图。
图22A是表示取得通过图18A的母版制作而得到的HDR图像,并亮度变换为最大亮度值为500nit的显示设备用的亮度的结果的一例的图。
图22B是表示用于将HDR信号值亮度变换为TV信号值的HDR信号值与TV信号值之间的关系的一例的图。
图23A是表示取得通过图18A的母版制作而得到的HDR图像,并亮度变换为最大亮度值为500nit的显示设备用的亮度的结果的一例的图。
图23B是表示将HDR信号值亮度变换为TV信号值的HDR信号值与TV信号值之间的关系的另一例的图。
图24A是表示取得通过图19A的母版制作而得到的HDR图像,并亮度变换为最大亮度值为500nit的显示设备用的亮度的结果的一例的图。
图24B是表示用于将HDR信号值亮度变换为TV信号值的、HDR信号值与TV信号值之间的关系的另一例的图。
图25A是表示取得通过图19A的母版制作而得到的HDR图像,并亮度变换为最大亮度值为500nit的显示设备用的亮度的结果的一例的图。
图25B是表示用于将HDR信号值亮度变换为TV信号值的、HDR信号值与TV信号值之间的关系的另一例的图。
图26A是表示取得由图19A的母版制作而得到的HDR图像、并亮度变换为最大亮度值为500nit的显示设备用的亮度的结果的一例的图。
图26B是表示用于将HDR信号值亮度变换为TV信号值的、HDR信号值与TV信号值之间的关系的另一例的图。
图27A是表示取得由图19A的母版制作而得到的HDR图像,并亮度变换为最大亮度值为500nit的显示设备用的亮度的结果的一例的图。
图27B是表示用于将HDR信号值亮度变换为TV信号值的、HDR信号值与TV信号值之间的关系的另一例的图。
图28是表示实施方式2的变形例1的变换方法的流程图。
图29是表示在基于HDRTV侧的元数据的亮度变换处理中使用的、用于将HDR信号值亮度变换为TV信号值的、HDR信号值与TV信号值之间的关系的一例的图。
图30是表示基于偏移(offset)亮度值进行亮度变换处理的动作的流程图。
图31是表示并用了HDR信号的元数据和HDRTV侧的元数据时的亮度变换处理的动作的流程图。
图32是表示在连续再现的流中、基准亮度值动态变更的例子的图。
图33是表示对如图32那样HDR信号的元数据是动态地被更新的流进行再现的显示装置的动作例的流程图。
具体实施方式
(作为本发明的基础的认识)
如在“背景技术”部分记载的,本发明者对图像信号处理装置发现了如下课题。
专利文献1公开的图像信号处理装置中,基于从构成被摄体的像素计算出的线性RGB值,按照每个像素计算线性亮度,基于线性RGB值以及线性亮度计算每个像素的校正线性亮度以及合成像素的校正线性RGB值,该合成像素是将包含该像素在内的多个像素合成后的合成像素,分别对校正线性亮度以及校正线性RGB值进行伽马校正而计算显示用亮度以及显示用RGB值。这样,在图像信号处理装置中,通过基于校正线性RGB值校正线性亮度,实现了所能够显示的灰度数的增加。
但是,在专利文献1中公开的图像信号处理装置等的亮度的校正(变换)中,并没有考虑到在将亮度从第1亮度范围校正(变换)到亮度范围被缩小了的第2亮度范围时的亮度的变换方法。
基于以上研究,为了解决上述课题,本发明者研究了如下的改进方案。
本申请的一个实施方式的显示方法是为了在显示装置显示影像而对输入的影像的亮度进行变换的变换方法,所述影像的亮度由第1亮度范围中的第1亮度值构成,该第1亮度范围的最大亮度值被定义为超过100nit的第1最大亮度值,取得表示所述影像的第1亮度值的第1亮度信号,进行亮度变换,该亮度变换执行多个亮度变换处理中的一个亮度变换处理,所述亮度变换处理将取得的所述第1亮度信号表示的所述第1亮度值变换为与第2亮度范围对应的第2亮度值,该第2亮度范围的最大亮度值被定义为比所述第1最大亮度值小、且比100nit大的第2最大亮度值,在所述亮度变换中,根据取得的所述第1亮度信号的第1元数据中包含的与基准反射率对应的基准亮度值,切换所要执行的所述亮度变换处理,通过切换后的所述亮度变换处理将所述第1亮度值变换为所述第2亮度值。
由此,根据与基准反射率对应的基准亮度值,切换亮度变换处理并进行亮度变换,因此能够适当变换亮度。
并且,例如,也可以在所述亮度变换中,根据所述基准亮度值是否是第1基准值,来切换所述亮度变换处理。
并且,例如,也可以在所述亮度变换中,在所述基准亮度值是所述第1基准值的情况下,对于表示比所述第1基准值大的第2基准值以下的亮度值的所述第1亮度信号,将所述第1亮度信号表示的所述第1亮度值决定为所述第2亮度值,对于表示超过所述第2基准值的亮度值的所述第1亮度信号,针对从所述第2基准值到所述第1最大亮度值为止的所述第1亮度值,进行使所述第1最大亮度值与所述显示装置所能够显示的第2最大亮度值相对应的线性变换,由此,将所述第1亮度值变换为所述第2亮度值。
并且,例如,也可以在所述亮度变换中,至少针对表示所述第2基准值以下的亮度值的所述第1亮度信号,将表示所述显示装置的显示特性的第2元数据中包含的所述显示装置所能够显示的最小亮度值与进行了所述线性变换后的值相加,将相加后的值决定为所述第2亮度值。
并且,例如,也可以在所述亮度变换中,在所述基准亮度值是所述第1基准值的情况下,对于表示在所述显示装置所能够显示的第2最大亮度值以下的亮度值的所述第1亮度信号,将所述第1亮度信号表示的所述第1亮度值决定为所述第2亮度值,对于表示超过所述第2最大亮度值的亮度值的所述第1亮度信号,针对所述第1亮度信号表示的所述第1亮度值,将所述第2最大亮度值决定为所述第2亮度值。
并且,例如,也可以在所述亮度变换中,在所述基准亮度值是与所述第1基准值不同的第3基准值的情况下,对于表示比所述第3基准值大的第4基准值以下的亮度值的所述第1亮度信号,将所述第1亮度信号表示的所述第1亮度值决定为所述第2亮度值,对于表示超过所述第4基准值的亮度值的所述第1亮度信号,针对从所述第4基准值到所述显示装置所能够显示的第2最大亮度值为止的所述第1亮度值,进行使所述第1最大亮度值与所述第2最大亮度值相对应的线性变换,由此,将所述第1亮度值变换为所述第2亮度值。
并且,例如,也可以在所述亮度变换中,在所述基准亮度值是所述第1基准值的情况下,对于表示比所述第1基准值大的第2基准值以下的亮度值的所述第1亮度信号,将所述第1亮度信号表示的所述第1亮度值决定为所述第2亮度值,对于表示超过所述第2基准值的亮度值的所述第1亮度信号,针对从所述第2基准值到所述第1最大亮度值为止的所述第1亮度值,进行使所述第1最大亮度值与所述显示装置所能够显示的第2最大亮度值相对应的线性变换,由此,将所述第1亮度值变换为所述第2亮度值,在所述亮度变换中,在所述基准亮度值是与所述第1基准值不同的第3基准值的情况下,对于表示比所述第3基准值大的第4基准值以下的亮度值的所述第1亮度信号,将所述第1亮度信号表示的所述第1亮度值决定为所述第2亮度值,对于表示超过所述第4基准值的亮度值的所述第1亮度信号,针对从所述第4基准值到所述显示装置所能够显示的第2最大亮度值为止的所述第1亮度值,进行使所述第1最大亮度值与所述第2最大亮度值相对应的线性变换,由此,将所述第1亮度值变换为所述第2亮度值,所述第2基准值以及所述第4基准值是与比所述基准反射率大的反射率对应的亮度值。
并且,例如,也可以在所述亮度变换中,在所述基准亮度值是与所述第1基准值不同的第3基准值的情况下,对于表示所述显示装置所能够显示的第2最大亮度值以下的亮度值的所述第1亮度信号,将所述第1亮度信号表示的所述第1亮度值决定为所述第2亮度值,对于表示超过所述第2最大亮度值的亮度值的所述第1亮度信号,针对所述第1亮度信号表示的所述第1亮度值,将所述第2最大亮度值决定为所述第2亮度值。
并且,例如,也可以在所述亮度变换中,在所述基准亮度值是与所述第1基准值不同的第3基准值的情况下,对于表示比所述第3基准值大的第4基准值以下的亮度值的所述第1亮度信号,根据所述第1基准值与所述第3基准值的比率,将所述第1亮度值变换为所述第2亮度值,对于表示超过所述第3基准值的亮度值的所述第1亮度信号,针对从所述第4基准值到所述第1最大亮度值为止的所述第1亮度值,进行使所述第1最大亮度值与所述显示装置所能够显示的第2最大亮度值相对应的线性变换,由此,将所述第1亮度值变换为所述第2亮度值。
并且,例如,也可以在所述亮度变换中,在所述基准亮度值是与所述第1基准值不同的第3基准值的情况下,对于表示比所述第3基准值大的第4基准值以下的亮度值的所述第1亮度信号,根据所述第1基准值与所述第3基准值的比率,将所述第1亮度值变换为所述第2亮度值,对于表示从所述第4基准值到比所述第4基准值大的第5基准值为止的亮度值的所述第1亮度信号,针对从所述第4基准值到所述第5基准值为止的所述第1亮度值,进行使所述第5基准值与所述显示装置所能够显示的第2最大亮度值相对应的线性变换,由此,将所述第1亮度值变换为所述第2亮度值,对于表示超过所述第5亮度值的亮度值的所述第1亮度信号,将所述第2最大亮度值决定为所述第2亮度值。
并且,例如,也可以还从所述显示装置取得表示所述显示装置的显示特性的第2元数据,在所述亮度变换中,还根据取得的所述第2元数据切换所述亮度变换处理,通过切换后的所述亮度变换处理将所述第1亮度值变换为所述第2亮度值。
并且,例如,所述第2元数据也可以是表示所述显示装置的视听环境或者显示模式的数据。
并且,例如,也可以在基于所述第1亮度信号而连续再现的再现流中,当所述再现流的第1区间与第2区间的基准亮度值不同时,其中,该基准亮度值是所述HDR信号的元数据表示的与所述基准反射率对应的基准亮度值,在所述亮度变换中,对于所述第1区间和所述第2区间的各个区间,根据与该区间对应的基准亮度值,将所述第1亮度值变换为所述第2亮度值。
另外,这些整体概括性的或者具体的方式可以由装置、系统、集成电路、计算机程序或者计算机可读取的CD-ROM等的存储介质来实现,也可以由系统、方法、集成电路、计算机程序或者存储介质的任意组合来实现。
以下,参照附图,对本申请的一个实施方式的变换方法以及变换装置进行具体说明。
另外,以下说明的实施方式都是本申请的一具体例。在以下的实施方式中示出的数值、形状、材料、结构要素的配置位置以及连接方式、步骤、步骤的顺序等是一个例子,不意在限定本申请。此外,针对在以下的实施方式中的结构要素之中并没有记载在表示最上位概念的独立权利要求中的结构要素,作为任意的结构要素进行说明。
(实施方式1)
本申请涉及HDR信号形式及该HDR信号的变换方法、变换装置,用于使作为亮度范围高的高亮度信号即HDR(High Dynamic Range)信号显示在具有与HDR信号所对应的亮度范围中的最大亮度值(最高亮度值或峰值亮度值)不同的亮度范围的显示能力的显示装置(例如,TV、投影仪、平板机、智能电话等)中。
[1-1.背景]
首先,使用图1对影像技术的变迁进行说明。图1是用于说明影像技术的进化的图。
目前为止,作为影像的高画质化,主要着眼于增大显示像素数,从StandardDefinition(SD)的720×480像素的影像到High Definition(HD)的1920×1080像素的所谓2K影像都已普及。
近年来,为实现更高的高画质化,开始导入Ultra High Definition(UHD)的3840×1920像素或者4K的4096x1920像素的所谓4K影像。
正在研究进行基于4K的导入的影像的高解像度化,并且研究通过动态范围扩展、色域的扩大、或者帧频的追加、提高等来将影像高画质化。
关于动态范围扩展(HDR),通过提高数字相机、CMOS(Complementary metal-oxide-semiconductor)图像传感器的性能,能够进行表示曝光的档数(档)为14级(14档)以上的较广的动态范围的图像的拍摄。因此,能够在维持暗部灰度的同时,拍摄100%反射光以上明亮的光(镜面反射光等的明亮的光)。为了将该相机或图像传感器的性能提高在表现力的提高方面进行活用,作为也能够传输更高亮度的信号的信号规格,人们关注到HDR(High Dynamic Range)。
目前为止的TV信号被称为SDR(Standard Dynamic Range),相对于最大亮度值原是100nit,HDR中假设将最大亮度值扩大到1000nit以上。在SMPTE(Society of MotionPict10ure&Television Engineers)和ITU-R(International Telecommunications UnionRadiocommunications Sector)等中,HDR的母版制作播放用规格的标准化也在进行之中。
作为HDR的具体的适用目标,与HD或UHD同样,假定在广播和封装媒体(Blu-ray(注册商标,以下相同)盘等)、因特网分发等中使用。
另外,下面,在与HDR对应的影像中,该影像的亮度由HDR的亮度范围中的亮度值构成,将表示该影像的亮度值的亮度信号称为HDR信号,HDR的亮度范围的最大亮度值被定义为超过100nit的第1最大亮度值。在与SDR对应的影像中,该影像的亮度由SDR的亮度范围的亮度值构成,将表示该影像的亮度值的亮度信号称为SDR信号。并且,HDR的亮度范围是最大亮度值比SDR的亮度范围的最大亮度值更大的亮度范围。另外,HDR的亮度范围的最小亮度值与SDR的亮度范围的最小亮度值相同,是0nit。
[1-2.SDRTV]
只能应对与SDR对应的影像的显示(以下称为“SDR显示”)的TV(以下称为“SDRTV”),通常输入截止到亮度值为100nit为止的输入信号。因此,SDRTV如果其显示能力是100nit,则足以表现输入信号的亮度值。但是,SDRTV实际上具有按照视听环境(较暗房间:电影模式,较亮房间:动态模式等)再现最佳的亮度值的影像的功能,往往具有能够实现200nit以上的影像表现的能力。即,这样的SDRTV通过选择对应于视听环境的显示模式,能够显示到显示能力的最大亮度(例如300nit)为止的影像。
但是,在输入SDRTV的SDR方式的输入信号中,输入信号的亮度上限被决定为100nit,因而仅限于如以往那样使用SDR方式的输入接口,在再现HDR信号时难以使用超过SDRTV具有的100nit的高亮度的影像再现能力(参照图2A和图2B)。
[1-3.关于EOTF]
在此,关于EOTF,使用图3A和图3B进行说明。
图3A是表示与HDR及SDR分别对应的EOTF(Electro-Optical Transfer Function)的示例的图。
EOTF通常被称为伽码曲线,表示代码值和亮度值的对应,用于将代码值变换为亮度值。即,EOTF是表示多个代码值和亮度值的对应关系的关系信息。
另外,图3B是表示与HDR及SDR分别对应的逆EOTF的示例的图。
逆EOTF表示亮度值和代码值的对应,与EOTF相反,用于将亮度值量化并变换为代码值。即,逆EOTF是表示亮度值和多个代码值的对应关系的关系信息。例如,在用10比特的灰度的代码值表现与HDR对应的影像的亮度值的情况下,将截止到10,000nit的HDR的亮度范围中的亮度值量化并映射至0~1023的1024个整数值。即,通过根据逆EOTF进行量化,将截止到10,000nit的亮度范围的亮度值(与HDR对应的影像的亮度值)变换为10比特的代码值的HDR信号。在与HDR对应的EOTF(以下称为“HDR的EOTF”)或者与HDR对应的逆EOTF(以下称为“HDR的逆EOTF”)中,能够表现比与SDR对应的EOTF(以下称为“SDR的EOTF”)或者与SDR对应的逆EOTF(以下称为“SDR的逆EOTF”)高的亮度值,例如在图3A和图3B中,亮度的最大值(峰值亮度)是10,000nit。即,HDR的亮度范围包括SDR的全部亮度范围,HDR的峰值亮度大于SDR的峰值亮度。HDR的亮度范围是将最大值从SDR的亮度范围的最大值即100nit扩大到10,000nit的亮度范围。
例如,关于HDR的EOTF和HDR的逆EOTF,作为一例可以举出由美国电影电视技术者协会(SMPTE)进行标准化的SMPTE 2084。
[1-4.EOTF的使用方式]
图4是在内容中存储的亮度信号的代码值的决定方法、以及在再现时从代码值复原亮度值的程序的说明图。
本例中的表示亮度的亮度信号是与HDR对应的HDR信号。分级后的图像通过HDR的逆EOTF被量化,并决定与该图像的亮度值对应的代码值。根据该代码值进行图像编码等,并生成视频的流。在再现时,通过根据HDR的EOTF对流的解码结果进行逆量化而变换为线性的信号,并复原出每个像素的亮度值。以下,将利用HDR的逆EOTF的量化称为“逆HDR的EOTF变换”。将利用HDR的EOTF的逆量化称为“HDR的EOTF变换”。同样,将利用SDR的逆EOTF的量化称为“逆SDR的EOTF变换”。将利用SDR的EOTF的逆量化称为“SDR的EOTF变换”。
[1-5.近似HDR的必要性]
下面,关于近似HDR的必要性,使用图5A~图5C进行说明。
图5A是表示在HDRTV中变换HDR信号来进行HDR显示的显示处理的一例的图。
如图5A所示,在显示HDR影像的情况下,即使显示装置是HDRTV,也存在不能直接显示HDR的亮度范围的最大值(峰值亮度(HPL(HDR Peak Luminance):例如1500nit))的情况。在这种情况下,进行如下的亮度变换,使利用HDR的EOTF进行逆量化后的线性的信号适合于该显示装置的亮度范围的最大值(峰值亮度(DPL(Display Peak Luminance):例如750nit))。并且,将通过进行亮度变换得到的影像信号输入显示装置,由此能够显示与该显示装置的临界即最大值的亮度范围适合的HDR影像。
图5B是表示使用HDR对应的再现装置和SDRTV来进行HDR显示的显示处理的一例的图。
如图5B所示,在显示HDR影像的情况下,如果显示装置是SDRTV,利用要显示的SDRTV的亮度范围的最大值(峰值亮度(DPL:例如300nit))超过100nit的特点,在图5B的HDR对应的再现装置(Blu-ray设备)内的“HDR→近似HDR变换”中,进行在HDRTV内进行的“HDR的EOTF变换”和使用了SDRTV的亮度范围的最大值即DPL(例如:300nit)的“亮度变换”,如果能够将通过进行“亮度变换”得到的信号直接输入SDRTV的“显示装置”,则即使是使用SDRTV,也能够实现与HDRTV相同的效果。
但是,在SDRTV中,由于没有用于从外部直接输入这样的信号的机构,因此无法实现。
图5C是表示使用通过标准接口相互连接的HDR对应的再现装置和SDRTV来进行HDR显示的显示处理的一例的图。
如图5C所示,通常需要使用SDRTV具备的输入接口(HDMI(注册商标,以下同样)等)向SDRTV输入诸如能够得到图5B的效果的信号。在SDRTV中,通过输入接口输入的信号依次通过“SDR的EOTF变换”和“每个模式的亮度变换”和“显示装置”,显示与该显示装置的最大值的亮度范围适合的影像。因此,在HDR对应的Blu-ray(注册商标)设备内,生成诸如能够将在SDRTV中紧挨在输入接口后面通过的、“SDR的EOTF变换”和“每个模式的亮度变换”取消的信号(近似HDR信号)。即,在HDR对应的Blu-ray(注册商标)设备内,通过在“HDR的EOTF变换”和使用SDRTV的峰值亮度(DPL)的“亮度变换”之后马上进行“每个模式的亮度变换”和“逆SDR的EOTF变换”,近似地实现与将刚刚“亮度变换”后的信号输入“显示装置”的情况(图5C的虚线箭头)相同的效果。
[1-6.变换装置和显示装置]
图6是表示实施方式的变换装置及显示装置的结构的框图。图7是表示由实施方式的变换装置及显示装置进行的变换方法及显示方法的流程图。
如图6所示,变换装置100具有HDR的EOTF变换部101、亮度变换部102、逆亮度变换部103和逆SDR的EOTF变换部104。另外,显示装置200具有显示设定部201、SDR的EOTF变换部202、亮度变换部203和显示部204。
关于变换装置100和显示装置200的各个构成要素的详细说明,将在变换方法和显示方法的说明中进行。
以下,将HDR的亮度范围(0~HPL[nit])表示为“第1亮度范围”。将显示器的亮度范围(0~DPL[nit])表示为“第2亮度范围”。将SDR的亮度范围(0~100[nit])表示为“第3亮度范围”。
[1-7.变换方法和显示方法]
使用图7说明变换装置100进行的变换方法。另外,变换方法包括以下说明的步骤S101~步骤S104。
首先,变换装置100的HDR的EOTF变换部101取得进行了逆HDR的EOTF变换后的HDR影像。变换装置100的HDR的EOTF变换部101对所取得的HDR影像的HDR信号实施HDR的EOTF变换(S101)。由此,HDR的EOTF变换部101将所取得的HDR信号变换为表示亮度值的线性的信号。关于HDR的EOTF例如有SMPTE 2084。
然后,变换装置100的亮度变换部102进行如下的第1亮度变换,使用显示器特性信息和内容亮度信息对通过HDR的EOTF变换部101变换后的线性的信号进行变换(S102)。在第1亮度变换中,将与作为第1亮度范围的HDR的亮度范围对应的亮度值(以下称为“HDR的亮度值”)变换为与作为第2亮度范围的显示器的亮度范围对应的亮度值(以下称为“显示器亮度值”)。详情后述。
根据上述处理,HDR的EOTF变换部101作为取得部发挥作用,取得表示通过将影像的亮度值量化得到的代码值的作为第1亮度信号的HDR信号。并且,HDR的EOTF变换部101和亮度变换部102作为变换部发挥作用,将由取得部取得的HDR信号所表示的代码值变换为、根据显示器(显示装置200)的亮度范围决定的、比HDR的亮度范围的最大值(HPL)小且大于100nit的最大值(DPL)的、与显示器的亮度范围对应的显示器亮度值。
更具体地讲,HDR的EOTF变换部101在步骤S101,使用所取得的HDR信号和HDR的EOTF,对于所取得的HDR信号所表示的作为第1代码值的HDR的代码值,决定在HDR的EOTF中与HDR的代码值相关联的HDR的亮度值。另外,HDR信号表示使用将HDR的亮度范围中的亮度值和多个HDR的代码值关联起来的HDR的逆EOTF,将影像(内容)的亮度值量化而得到的HDR的代码值。
另外,亮度变换部102在步骤S102,对于在步骤S101决定的HDR的亮度值,决定与该HDR的亮度值预先相关联的、与显示器的亮度范围对应的显示器亮度值,并进行将与HDR的亮度范围对应的HDR的亮度值变换为与显示器的亮度范围对应的显示器亮度值的第1亮度变换。
另外,变换装置100在步骤S102之前,取得包括影像(内容)的亮度的最大值(CPL:Content Peak luminance)和影像的平均亮度值(CAL:Content Average luminance)至少一方的内容亮度信息,作为有关HDR信号的信息。CPL(第1最大亮度值)例如是针对构成HDR影像的多个图像的亮度值中的最大值。另外,CAL例如是针对构成HDR影像的多个图像的亮度值的平均即平均亮度值。
并且,变换装置100在步骤S102之前,从显示装置200取得显示装置200的显示器特性信息。另外,显示器特性信息是表示显示装置200的显示特性的信息,如显示装置200能够显示的亮度的最大值(DPL)、显示装置200的显示模式(参照后述)、输入输出特性(显示装置对应的EOTF)等。
另外,变换装置100也可以向显示装置200发送推荐显示设定信息(参照后述,以下也称为“设定信息”)。
然后,变换装置100的逆亮度变换部103进行与显示装置200的显示模式对应的逆亮度变换。因此,逆亮度变换部103进行如下的第2亮度变换,将与显示器的亮度范围对应的亮度值变换为与作为第3亮度范围的SDR的亮度范围(0~100[nit])对应的亮度值(S103)。详情后述。即,逆亮度变换部103对于在步骤S102得到的显示器亮度值,决定与该显示器亮度值预先相关联的、与作为第3亮度值的SDR对应的亮度值(以下称为“SDR亮度值”)的SDR的亮度值,该第3亮度值与以100nit为最大值的SDR的亮度范围对应,然后进行将与显示器的亮度范围对应的显示器亮度值变换为与SDR的亮度范围对应的SDR的亮度值的第2亮度变换。
并且,变换装置100的逆SDR的EOTF变换部104进行逆SDR的EOTF变换,由此生成近似HDR影像(S104)。即,逆SDR的EOTF变换部104使用将HDR的亮度范围中的亮度值和多个第3代码值关联起来的第3关系信息即SDR(Standard Dynamic Range)的逆EOTF(Electro-Optical Transfer Function),将所决定的SDR的亮度值量化,并决定通过量化而得到的第3代码值,将与SDR的亮度范围对应的SDR的亮度值变换为作为表示第3代码值的第3亮度信号的SDR信号,由此生成近似HDR影像。另外,第3代码值是与SDR对应的代码值,以下称为“SDR的代码值”。即,SDR信号利用SDR的代码值进行表示,该代码值是通过使用将SDR的亮度范围中的亮度值和多个SDR的代码值关联起来的SDR的逆EOTF,将影像的亮度值量化而得到的。并且,变换装置100将在步骤S104生成的近似HDR信号(SDR信号)向显示装置200输出。
变换装置100对通过将HDR信号逆量化而得到的HDR的亮度值进行第1亮度变换和第2亮度变换,由此生成与近似HDR对应的SDR的亮度值,通过使用SDR的EOTF将SDR的亮度值量化,生成与近似HDR对应的SDR信号。另外,SDR的亮度值虽然是与SDR对应的0~100nit的亮度范围内的数值,但是由于进行了基于显示器的亮度范围的变换,因而是与如下得到的SDR所对应的0~100nit的亮度范围内的亮度值不同的数值,该数值是通过对HDR的亮度值进行使用了HDR的EOTF和SDR的EOTF的亮度变换而得到的。
下面,使用图7说明显示装置200进行的显示方法。另外,显示方法包括以下说明的步骤S105~步骤S108。
首先,显示装置200的显示设定部201使用从变换装置100取得的设定信息,设定显示装置200的显示设定(S105)。在此,显示装置200是SDRTV。设定信息是表示对显示装置推荐的显示设定的信息,是表示如何对近似HDR影像进行EOTF、按照哪种设定进行显示能够显示出美丽的影像的信息(即,用于将显示装置200的显示设定切换为最佳的显示设定的信息)。设定信息例如包括显示装置中的输出时的伽码曲线特性、直播模式(通常模式)和动态模式等显示模式、背照灯(明亮度)的数值等。并且,也可以在显示装置200(以下也称为“SDR显示器”)显示诸如催促用户通过手动操作来变更显示装置200的显示设定的消息。详情后述。
另外,显示装置200在步骤S105之前,取得SDR信号(近似HDR信号)、和表示在显示影像时对显示装置200推荐的显示设定的设定信息。
并且,显示装置200既可以在步骤S106之前、也可以在步骤S105之后进行SDR信号(近似HDR信号)的取得。
然后,显示装置200的SDR的EOTF变换部202对所取得的近似HDR信号进行SDR的EOTF变换(S106)。即,SDR的EOTF变换部202使用SDR的EOTF对SDR信号(近似HDR信号)进行逆量化。因此,SDR的EOTF变换部202将SDR信号所表示的SDR的代码值变换为SDR的亮度值。
并且,显示装置200的亮度变换部203进行与对显示装置200设定的显示模式对应的亮度变换。因此,亮度变换部203进行如下的第3亮度变换,将与SDR的亮度范围(0~100[nit])对应的SDR的亮度值、变换为与显示器的亮度范围(0~DPL[nit])对应的显示器亮度值(S107)。详情后述。
根据上述处理,显示装置200在步骤S106和步骤S107,使用在步骤S105取得的设定信息,将所取得的SDR信号(近似HDR信号)表示的第3代码值、变换为与显示器的亮度范围(0~DPL[nit])对应的显示器亮度值。
更具体地讲,在从SDR信号(近似HDR信号)向显示器亮度值的变换中,在步骤S106,使用将SDR的亮度范围中的亮度值和多个第3代码值关联起来的EOTF,对所取得的SDR信号所表示的SDR的代码值,决定在SDR的EOTF中与SDR的代码值相关联的SDR的亮度值。
并且,在向显示器亮度值的变换中,在步骤S107,决定与所决定的SDR的亮度值预先相关联的、与显示器的亮度范围对应的显示器亮度值,并进行将与SDR的亮度范围对应的SDR的亮度值、变换为与显示器的亮度范围对应的显示器亮度值的第3亮度变换。
最后,显示装置200的显示部204根据变换后的显示器亮度值,在显示装置200显示近似HDR影像(S108)。
[1-8.第1亮度变换]
下面,使用图8A说明步骤S102的第1亮度变换(HPL→DPL)的详情。图8A是用于说明第1亮度变换的一例的图。
变换装置100的亮度变换部102进行如下的第1亮度变换,使用显示器特性信息和HDR影像的内容亮度信息,对在步骤S101得到的线性的信号(HDR的亮度值)进行变换。第1亮度变换将HDR的亮度值(输入亮度值)变换为不超过显示器亮度(DPL)的显示器亮度值(输出亮度值)。DPL是使用作为显示器特性信息的SDR显示器的最大亮度和显示模式决定的。显示模式例如是在SDR显示器中偏暗地显示的电影模式、和偏亮地显示的动态模式等模式信息。在显示模式例如是SDR显示器的最大亮度为1,500nit、而且显示模式为最大亮度的50%的明亮度的模式的情况下,DPL达到750nit。其中,DPL(第2最大亮度值)是指在SDR显示器当前设定的显示模式中能够显示的亮度的最大值。即,在第1亮度变换中,使用作为表示SDR显示器的显示特性的信息即显示器特性信息决定作为第2最大亮度值的DPL。
另外,在第1亮度变换中使用内容亮度信息中的CAL和CPL,CAL附近以下的亮度值在变换的前后是相同的、而仅对且在CAL附近以上的亮度值变更亮度值。即,如图8A所示,在第1亮度变换中,在该HDR的亮度值为CAL以下的情况下,不变换该HDR的亮度值,将该HDR的亮度值决定为显示器亮度值,在该HDR的亮度值为CPL以上的情况下,将作为第2最大亮度值的DPL决定为显示器亮度值。
另外,在第1亮度变换中使用亮度信息中的HDR影像的峰值亮度(CPL),在HDR的亮度值为CPL时将DPL决定为显示器亮度值。
另外,在第1亮度变换中,也可以如图8B所示,将在步骤S101得到的线性的信号(HDR的亮度值)以剪取(cliping)为不超过DPL的值的方式进行变换。通过进行这样的亮度变换,能够简化在变换装置100中的处理,实现装置的小型化、低功耗化、处理的高速化。另外,图8B是用于说明第1亮度变换的另一例的图。
[1-9.第2亮度变换]
下面,使用图9说明步骤S103的第2亮度变换(DPL→100[nit])的详细情况。图9是用于说明第2亮度变换的图。
变换装置100的逆亮度变换部103对通过步骤S102的第1亮度变换被变换后的显示器的亮度范围(0~DPL[nit])的显示器亮度值实施与显示模式对应的逆亮度变换。逆亮度变换是在进行了与SDR显示器的显示模式对应的亮度变换处理(步骤S107)的情况下,用于取得步骤S102的处理后的显示器的亮度范围(0~DPL[nit])的显示器亮度值的处理。即,第2亮度变换是第3亮度变换的逆亮度变换。
通过上述的处理,第2亮度变换将作为第2亮度范围的显示器的亮度范围的显示器亮度值(输入亮度值)变换为作为第3亮度范围的SDR的亮度范围的SDR的亮度值(输出亮度值)。
在第2亮度变换中,根据SDR显示器的显示模式切换变换式。例如,在SDR显示器的显示模式是通常模式的情况下,进行亮度变换为与显示器亮度值成正比例的正比例值。并且,在第2亮度变换中,在SDR显示器的显示模式是使高亮度像素比通常模式更加明亮、而且使低亮度像素更加暗淡的动态模式的情况下,通过使用其反函数,将低亮度像素的SDR的亮度值亮度变换为比与显示器亮度值成正比例的正比例值高的值、将高亮度像素的SDR的亮度值亮度变换为比与显示器亮度值成正比例的正比例值低的值。即,在第2亮度变换中,对于在步骤S102决定的显示器亮度值,使用与表示SDR显示器的显示特性的信息即显示器特性信息对应的亮度关系信息,将与该显示器亮度值相关联的亮度值决定为SDR的亮度值,根据显示器特性信息切换亮度变换处理。其中,与显示器特性信息对应的亮度关系信息例如是指如图9所示的将对SDR显示器的每个显示参数(显示模式)设定的显示器亮度值(输入亮度值)、和SDR的亮度值(输出亮度值)关联起来的信息。
[1-10.显示设定]
下面,使用图10说明步骤S105的显示设定的详细情况。图10是表示显示设定的详细处理的流程图。
SDR显示器的显示设定部201在步骤S105进行下述的步骤S201~步骤S208的处理。
首先,显示设定部201使用设定信息判定对SDR显示器设定的EOTF(SDR显示器用EOTF)是否与在生成近似HDR影像(SDR信号)时假定的EOTF一致(S201)。
显示设定部201在判定为对SDR显示器设定的EOTF与设定信息所表示的EOTF(与近似HDR影像整合的EOTF)不同的情况下(S201:是),判定是否能够在系统侧切换SDR显示器用EOTF(S202)。
显示设定部201在判定为能够切换的情况下,使用设定信息将SDR显示器用EOTF切换为合适的EOTF(S203)。
通过步骤S201~步骤S203,在显示设定的设定(S105)中,将对SDR显示器设定的EOTF设定为与所取得的设定信息对应的推荐EOTF。并且,通过这样设定,在步骤S105之后进行的步骤S106中,能够使用推荐EOTF决定SDR的亮度值。
在判定为在系统侧不能切换的情况下(S202:否),在画面中显示催促用户通过手动操作变更EOTF的消息(S204)。例如,在画面中显示“请将显示伽马设定为2.4”的消息。即,显示设定部201当在显示设定的设定(S105)中不能切换对SDR显示器设定的EOTF的情况下,在SDR显示器显示用于催促用户将对SDR显示器设定的EOTF(SDR显示器用EOTF)切换为推荐EOTF的消息。
然后,在SDR显示器中显示近似HDR影像(SDR信号),但在显示之前使用设定信息判定SDR显示器的显示参数是否与设定信息一致(S205)。
显示设定部201在判定为对SDR显示器设定的显示参数与设定信息不同的情况下(S205:是),判定是否能够切换SDR显示器的显示参数(S206)。
显示设定部201在判定为能够切换SDR显示器的显示参数的情况下(S206:是),按照设定信息切换SDR显示器的显示参数(S207)。
通过步骤S204~步骤S207,在显示设定的设定(S105)中,将对SDR显示器设定的显示参数设定为与所取得的设定信息对应的推荐显示参数。
在判定为在系统侧不能切换的情况下(S206:否),在画面中显示催促用户通过手动操作变更对SDR显示器设定的显示参数的消息(S208)。例如,在画面中显示“请将显示模式设为动态模式,将背照灯设为最大”的消息。即当在设定(S105)中不能切换对SDR显示器设定的显示参数的情况下,在SDR显示器显示用于催促用户将对SDR显示器设定的显示参数切换为推荐显示参数的消息。
[1-11.第3亮度变换]
下面,使用图11说明步骤S107的亮度变换(100→DPL[nit])的详细情况。图11是用于说明第3亮度变换的图。
显示装置200的亮度变换部203按照在步骤S105设定的显示模式,将SDR的亮度范围(0~100[nit])的SDR的亮度值变换为(0~DPL[nit])。本处理是用于使成为S103的每个模式的逆亮度变换的反函数的处理。
在第3亮度变换中,按照SDR显示器的显示模式切换变换式。例如,在SDR显示器的显示模式是通常模式的情况下(即,所设定的显示参数是与通常模式对应的参数的情况下),将显示器亮度值亮度变换为与SDR的亮度值成正比例的正比例值。并且,在第3亮度变换中,在SDR显示器的显示模式是使高亮度像素比通常模式更加明亮、而且使低亮度像素更加暗淡的动态模式的情况下,将低亮度像素的显示器亮度值亮度变换为比与SDR的亮度值成正比例的正比例值低的值、将高亮度像素的显示器亮度值亮度变换为比与SDR的亮度值成正比例的正比例高值的值。即,在第3亮度变换中,对于在步骤S106决定的SDR的亮度值,使用与表示SDR显示器的显示设定的显示参数对应的亮度关系信息,将与该SDR的亮度值预先相关联的亮度值决定为显示器亮度值,根据显示参数切换亮度变换处理。其中,与显示参数对应的亮度关系信息例如是指如图11所示的将对SDR显示器的每个显示参数(显示模式)设定的SDR的亮度值(输入亮度值)、和显示器亮度值(输出亮度值)关联起来的信息。
[1-12.效果等]
通常的SDRTV的输入信号是100nit,但具有根据视听环境(较暗房间:影院模式,较亮房间:动态模式等)实现200nit以上的影像表现的能力。但是,对SDRTV的输入信号的亮度上限被决定为100nit,因而不能直接使用该能力。
当在SDRTV中显示HDR影像的情况下,利用要显示的SDRTV的峰值亮度超过100nit(通常200nit以上)的特点,不将HDR影像变换为100nit以下的SDR影像,而以在某种程度上保持超过100nit的亮度范围的灰度的方式进行“HDR→近似HDR变换处理”。因此,能够在SDRTV中显示与原来的HDR接近的近似HDR影像。
在将该“HDR→近似HDR变换处理”技术应用于Blu-ray的情况下,如图12所示,在HDR盘中仅存储HDR信号,在将Blu-ray设备与SDRTV连接的情况下,Blu-ray设备进行“HDR→近似HDR变换处理”,将HDR信号变换为近似HDR信号发送给SDRTV。由此,SDRTV通过从接收到的近似HDR信号变换为亮度值,能够显示具有近似的HDR效果的影像。这样,即使是没有HDR对应TV的情况下,如果准备HDR对应的BD和HDR对应的Blu-ray设备,则即使是SDRTV也能够显示比SDR影像高画质的近似HDR影像。
因此,虽然认为观看HDR影像需要HDR对应TV,但是能够在已有的SDRTV中观看能够感受到HDR效果的近似HDR影像。因此,能够期待HDR对应Blu-ray的普及。
通过进行HDR-近似HDR变换处理,将通过广播、Blu-ray等封装媒介、OTT等因特网分发而发送的HDR信号变换为近似HDR信号。因此,能够在已有的SDRTV中将HDR信号显示为近似HDR影像。
(实施方式2)
接着,对实施方式2进行说明。
实施方式2中,对在实施方式1的图5A中所说明的HDRTV内、变换HDR信号而进行HDR显示的显示处理中实施的变换方法的详情进行说明。即,对如下的亮度变换处理的详情进行说明,该亮度变换处理是在图5A中说明的显示装置是HDRTV但不能将HDR的亮度范围的最大值直接显示在HDRTV上的情况下,用于使进行了采用HDR的EOTF的逆量化后的线性信号与HDRTV的亮度范围的最大值(DPL)一致的亮度变换处理。
在亮度变换处理中,根据在作为取得的第1亮度信号的HDR信号的第1元数据中包含的与基准反射率对应的基准亮度值,切换所执行的亮度变换处理,通过切换后的亮度变换处理将HDR的亮度值变换为显示器亮度值。
以下,对基准反射率进行详细说明。
[2-1.图像拍摄时的亮度的尺度的考虑方式]
图13是表示图像拍摄时的亮度的尺度的图。
如图13所示,在用相机拍摄图像的情况下,将反射率为18%的灰即18%灰作为明亮度的基准点进行拍摄。即,18%灰是成为明亮度的基准的基准反射率。档数(stop数)是被定义为,以18%灰的亮度值为基准点,每当亮度值达到2倍,就增加1档。
在实际用相机拍摄图像时,从相机的CMOS等的图像传感器得到的亮度值根据基于光圈、快门速度、灵敏度设定等的曝光而变化。即,从图像传感器得到的亮度值即使是用相机拍摄的相同亮度的部分,也会根据曝光的不同而成为不同的值。因此,档数的值本身不是绝对的值,而是相对的值。也就是说,不能用档数表示亮度。
例如,在拍摄图13的(1)的夜晚场景的情况下,为了不引起曝光不足(blocked upshadows),通过使快门速度延迟、打开光圈等来改变曝光,由此对相机进行残留暗的部分的灰度、舍弃明亮的部分这样的曝光的设定。
并且,在拍摄图13的(2)的白天的室内的场景的情况下,对相机进行使暗的部分和明亮的部分的平衡良好的曝光的设定。并且,在拍摄图13的(3)的白天的屋外的场景的情况下,为了防止明亮的部分的曝光过度(blown out highlights)而对相机进行减小曝光的曝光设定。
为了将这样获得的相对的亮度值变换为绝对的亮度值,需要计算与18%灰之间的相对关系。
[2-2.图像拍摄时的亮度值]
图14是表示所拍摄的图像的亮度值的例子的图。
如图14所示,所拍摄到的图像(以下,称为“原图像”)10的A)表示具有如下亮度值的像素,该亮度值是与作为明亮度的基准的基准反射率即18%灰(0档)对应的亮度值(以下,称为“基准亮度值”或者“18%灰(Gray)值”。)。原图像10的B)表示具有与90%的反射率(90%灰)(2.3档)对应的亮度值的像素。HDR原图像10的C)表示具有与大致黑的2.3%灰(-3档)对应的亮度值的像素。原图像10的D)表示通过拍摄太阳而得到的像素,获得了非常明亮的亮度值,具有与1150%灰(6档)对应的亮度值。原图像10的E)表示通过拍摄引起镜面反射的位置而得到的像素,具有与290%灰(4档)对应的亮度值。
[2-3.母版生成、分发方式、以及显示装置的关系]
图15是用于说明制作与SDR对应的家庭娱乐用母版的流程、分发介质以及显示装置的关系的图。
图14中说明的原图像10是最大亮度值为1300nit的图像。即,在使用原图像10制作与最大亮度值为100nit的SDR对应的母版图像(SDR图像)的情况下,由于不能在SDR中表现具有100nit以上的亮度值的像素,因此不改变原图像10的亮度值而直接使用,是不能制作与SDR对应的母版图像的。即,如果想要使用原图像10制作与SDR对应的母版图像,需要将原图像10的亮度值变换为与SDR对应的亮度范围的亮度值。
[2-4.从原图像向SDR图像的母版制作]
图16A是表示将图14所示的原图像母版制作为SDR图像的结果的亮度值的一例的图。图16B是表示用于将原信号值变换为SDR信号值(母版制作)的原信号值与SDR信号值的关系的一例的图。另外,原信号值是原图像10的0~1300nit的亮度范围中的亮度值(以下,称为“原图像的亮度值”),SDR信号值是SDR的亮度范围中的亮度值(以下,称为“SDR的亮度值”)。
如图16B所示,该例中的从原图像10向SDR图像11的母版制作中,与作为基准反射率的18%灰(0档)对应的像素是具有作为明亮度的基准的基准亮度值的像素。因此,在向SDR图像的母版制作中,即使将原图像10变换为SDR图像11之后,也不会变更原图像10中的与18%灰对应的原图像10的亮度值(18nit),而将其决定为SDR的亮度值。
这里,如图16B所示,在从原图像10向SDR图像11的母版制作中,在与原图像10的90%灰对应的原图像的亮度值(90nit)以下的亮度范围(0~90nit)中,不变更原图像的亮度值,而决定为SDR的亮度值。并且,如图16B所示,对于比与原图像10的90%灰对应的原图像的亮度值(90nit)大的原图像10的亮度范围(90~1300〔nit〕)中的原图像的亮度值,通过线性变换而分配于90~100nit的亮度范围的SDR的亮度值中。
例如,在向SDR图像11的B)那样的针对与90%灰(2.3档)对应的像素的SDR图像11的母版制作中,即使将原图像10变换为SDR图像11之后,也不变更原图像10中的与90%灰对应的原图像的亮度值(90nit),而将其决定为SDR的亮度值。
并且,例如,在向SDR图像11的C)那样的针对与2.3%灰(-3档)对应的像素的SDR图像的母版制作中,与上述相同,即使将原图像10变换为SDR图像11之后,也不变更原图像10中的与2.3%灰对应的原图像的亮度值(2nit),而将其决定为SDR的亮度值。
例如,在向SDR图像11的D)那样的针对与1150%灰(6档)对应的像素的SDR图像的母版制作中,将原图像10中的与1150%灰对应的原图像的亮度值(1150nit)变换为SDR的亮度范围的最大亮度值即100nit。
并且,例如,在向SDR图像11的E)那样的针对与290%灰(4档)对应的像素的SDR图像的母版制作中,将原图像10中的与290%灰对应的原图像的亮度值变换为95nit。
[2-5.HDR导入时的母版、分发方式、以及显示装置的关系]
图17是用于说明HDR导入时的母版、分发方式、以及显示装置的关系的图。图14所示的原图像10的情况下,由于原图像10的最大亮度值是1300nit,所以能够利用原亮度值来表现原图像10。
[2-6.从原图像向HDR图像的第1母版制作]
图18A是表示将图14所示的原图像母版制作为HDR图像的结果的亮度值的一例的图。图18B是表示用于将原信号值变换为HDR信号值(母版制作)的原信号值与HDR信号值之间的关系的一例的图。另外,HDR信号值是HDR的亮度范围中的亮度值(以下,称为“HDR的亮度值”)。另外,在该例中的从原图像向HDR图像的母版制作中,允许将直到2000nit为止的亮度值分配为HDR的亮度值,所以即使是HDR图像也能够直接保持原图像的亮度值。
例如,HDR图像12的A)那样的与作为基准反射率的18%灰(0档)对应的像素是具有作为明亮度的基准的基准亮度值的像素,因此,在向HDR图像的母版制作中,即使将原图像10变换为HDR图像12之后,也不变更原图像10中的与18%灰对应的原图像10的亮度值(18nit),而将其决定为HDR的亮度值。
同样,例如,针对HDR图像12的B)那样的与90%灰(2.3档)对应的像素、HDR图像12的C)那样的与2.3%灰(-3档)对应的像素、HDR图像12的D)那样的与1150%灰(6档)对应的像素、以及HDR图像12的E)那样的与290%灰(4档)对应的像素,在向HDR图像的母版制作中,不变更该原图像的亮度值,而决定为HDR的亮度值。
[2-7.从原图像向HDR图像的第2母版制作]
图19A是表示将图14所示的原图像向HDR图像母版制作的结果的亮度值的另一例的图。图19B是表示用于将原信号值变换为HDR信号值(母版制作)的原信号值与HDR信号值之间的关系的另一例的图。另外,在该例中的从原图像向HDR图像的母版制作中,允许将直到2000nit为止的亮度值分配为HDR的亮度值。
如图19B所示,该例中的从原图像10向HDR图像13的母版制作中,针对与作为基准反射率的18%灰(0档)对应的像素,考虑到HDR图像13的整体的平衡,根据制作者的意图,将原图像的基准亮度值的2倍的值决定为该像素的亮度值即HDR图像13的基准亮度值。
这里,如图19B所示,在从原图像10向HDR图像13的母版制作中,在原图像10的与90%灰对应的原图像的亮度值(90nit)以下的亮度范围(0~90nit)中,将原图像的亮度值的2倍的值决定为HDR的亮度值。并且,在如图19B所示从原图像10向HDR图像13的母版制作中,将原图像10的超过与90%灰对应的原图像的亮度值(90nit)的亮度范围(90~1300〔nit〕)中的原图像的亮度值,通过线性变换而分配于180~HPL(HDR Peak Luminance)的HDR的亮度值中。这里,HPL是HDR的亮度范围的最大值。
例如,在HDR图像13的B)那样的针对与90%灰(2.3档)对应的像素的向HDR图像13的母版制作中,将原图像10中的与90%灰对应的原图像的亮度值(90nit)的2倍的值(180nit)决定为HDR的亮度值。
并且,例如,在HDR图像13的C)那样的针对与2.3%灰(-3档)对应的像素的向HDR图像13的母版制作中,将原图像10中的与2.3%灰对应的原图像的亮度值的2倍的值决定为HDR的亮度值。
并且,例如,在HDR图像13的D)那样的针对与1150%灰(6档)对应的像素的向HDR图像13的母版制作中,对于原图像10中的与1150%灰对应的原图像的亮度值,将通过进行上述线性变换而得到的亮度值(1160nit)决定为HDR的亮度值。
并且,例如,在HDR图像13的E)那样的针对与290%灰(4档)对应的像素的向HDR图像13的母版制作中,对于原图像10中的与290%灰对应的原图像的亮度值,将通过进行上述线性变换而得到的亮度值(360nit)决定为HDR的亮度值。
[2-8.HDRTV内的HDR的显示处理]
由于即使是HDRTV也能够显示的最大亮度值(第2最大亮度值)例如是750nit等这样的比HDR信号的最大亮度值即第1最大亮度值(HPL:例1500nit)低的值,所以,不能将HDR信号直接显示在HDRTV上。因此,针对进行了HDR的EOTF变换后的线性的信号,需要根据显示装置所能够显示的第2最大亮度值(DPL:例如750nit),进行亮度变换。
图20是表示实施方式2的变换装置的结构的框图。具体而言,图20是表示在HDRTV内变换HDR信号而生成HDR影像的显示处理的图。图21是表示实施方式2的变换方法的流程图。即,图21是表示亮度变换处理时的算法的图。
如图20所示,变换装置300具有HDR的EOTF变换部301、亮度变换部302以及显示部303。另外,变换装置300例如具有HDRTV,是为了在HDRTV显示影像而变换影像的亮度的装置。
在变换方法的说明中对变换装置300的各结构要素进行详细说明。
关于变换装置300进行的变换方法,使用图21进行说明。另外,变换方法包含以下说明的步骤S301~S304。
首先,变换装置300的HDR的EOTF变换部301取得作为HDR信号的第1元数据而发送来的与18%灰对应的亮度值(基准亮度值)(S301)。另外,HDR的EOTF变换部301也可以通过计测HDR信号所表示的HDR的亮度值,通过计测基准亮度值来取得。根据上述内容,HDR的EOTF变换部301也作为取得表示影像的HDR的亮度值的HDR信号的取得部起作用。并且,HDR的EOTF变换部301针对取得的HDR影像的HDR信号,实施HDR的EOTF变换,由此,将HDR信号变换为与HDR信号对应的HDR的亮度值。
接着,亮度变换部302判定所取得的基准亮度值是否是18nit(S302)。
亮度变换部302在判定为所取得的基准亮度值是18nit的情况下(S302中,是),可知基准亮度值没变化,因此进行通常的亮度变换处理(S303)。另一方面,亮度变换部302在判定为所取得的基准亮度值不是18nit的情况下(S302中,否),可知制作者意图变更基准亮度值,因此基于基准亮度值的值进行校正,由此进行亮度变换处理(S304)。即,亮度变换部302进行亮度变换,该亮度变换执行多个亮度变换处理中的一个亮度变换处理,该亮度变换处理是将所取得的HDR信号表示的HDR的亮度值(即,通过在HDR的E33OTF变换部301中变换HDR信号而得到的HDR的亮度值)变换为与显示器的亮度范围对应的显示器亮度值的处理,其中,显示器的亮度范围的最大亮度值被定义为比HDR的亮度范围的最大值(HPL)小、并且比SDR的亮度范围的最大值(100nit)大的第2亮度最大值(DPL)。而且,亮度变换部302根据所取得的HDR信号的元数据(第1元数据)中的基准亮度值是否是18nit,来切换亮度变换处理,通过切换后的亮度变换处理将HDR的亮度值变换为显示器亮度值。
另外,亮度变换部302与实施方式1的亮度变换部102同样,变换为与显示器的亮度范围对应的显示器亮度值,但与亮度变换部102不同的是,显示器不是SDRTV而是HDRTV。这样,通过将变换后的HDR信号输入HDRTV,能够使显示部303在HDRTV上显示与HDRTV的界限即最大值的显示器的亮度范围一致的HDR影像。
以下,说明亮度变换处理的具体例。
[2-9.具体例1]
图22A取得通过图18A的母版制作而得到的HDR图像,是亮度变换为第2最大亮度值是500nit的显示设备用的亮度后的结果的一例。图22B是表示为了将HDR信号值亮度变换为TV信号值的HDR信号值与TV信号值之间的关系的一例的图。另外,TV信号值是表示HDRTV的显示器的亮度范围中的亮度值的信号。
在该例中,HDRTV能够显示的第2最大亮度值被限制为500nit。因此,需要将HDR信号表示的HDR的亮度值变换为显示器的亮度范围中的显示器亮度值。
在步骤S301中,根据所取得的HDR信号,取出作为明亮度的基准的与18%灰(0档)对应的亮度值(基准亮度值)。而且,在步骤S302中,可知表示HDR图像12的亮度值的HDR信号保持18nit作为基准亮度值。因此,执行步骤S303,针对与90%灰对应的亮度值(90nit)以下的、该HDR信号所表示的亮度值,保持该HDR信号所示的亮度值的原值,针对超过与90%灰对应的亮度值(90nit)的、该HDR信号所表示的亮度值,进行线性变换,以使该HDR信号表示的第1最大亮度值(HPL:1300nit)成为HDRTV所能够显示的第2最大亮度值(DPL:500nit)。
即,在该例情况下的亮度变换(S303)中,在基准亮度值是作为第1基准值的18nit的情况下,针对表示比18nit大的作为第2基准值的90nit以下的亮度值的HDR信号,将HDR信号表示的HDR的亮度值决定为显示器亮度值。并且,在亮度变换(S303)中,在基准亮度值是作为第1基准值的18nit的情况下,对于表示超过90nit的亮度值的HDR信号,针对从90nit到第1最大亮度值(HPL:例如,1300nit)为止的HDR的亮度值,通过进行使HPL与HDRTV所能够显示的第2最大亮度值(DPL:例如500nit)对应的线性变换,将HDR的亮度值变换为显示器亮度值。
通过这样进行亮度变换,对于HDR图像12的与18%灰对应的像素A)、HDR图像12的90%灰对应的像素B)、以及HDR图像12的与2.3%灰对应的像素C)各自的亮度值,不变更HDR图像12的亮度值而直接决定为显示器亮度值。而且,对于HDR图像12的与1150%灰对应的像素D),将通过进行上述线性变换而得到的450nit决定为显示器亮度值,对于HDR图像12的与290%灰对应的像素E),将通过进行上述线性变换而得到的163nit决定为显示器亮度值。
[2-10.具体例2]
图23A是取得通过图18A的母版制作而得到的HDR图像,并亮度变换为第2最大亮度值是500nit的显示设备用的亮度的结果的一例。图23B是表示用于将HDR信号值亮度变换为TV信号值的、HDR信号值与TV信号值之间的关系的另一例的图。
该例子中,将HDRTV所能够显示的第2最大亮度值限制为500nit。因此,需要将HDR信号所表示的HDR的亮度值变换为显示器的亮度范围中的显示器亮度值。
在步骤S301中,从取得的HDR信号中取出作为明亮度的基准的与18%灰(0档)对应的亮度值(基准亮度值)。而且,在步骤S302中,可知表示HDR图像12的亮度值的HDR信号保持18nit作为基准亮度值。因此,进行步骤S303,针对与90%灰对应的亮度值(90nit)以下的、该HDR信号所表示的亮度值,保持该HDR信号所示的亮度值的原值。并且,在步骤S303中,针对在与90%灰对应的亮度值(90nit)以上而小于HDRTV的第2最大亮度值(500nit)的、该HDR信号所表示的亮度值,保持该HDR信号所示的亮度值的原值。并且,在步骤S303中,针对HDRTV的第2最大亮度值(500nit)以上的、该HDR信号表示的亮度值,将通过针对该HDR信号所表示的亮度值剪取(cliping)到500nit而得到的亮度值,决定为显示器亮度值。
即,在该例的情况的亮度变换(S303)中,在基准亮度值是作为第1基准值的18nit的情况下,对于表示HDRTV所能够显示的第2最大亮度值(DPL:500nit)以下的亮度值的HDR信号,将HDR信号表示的HDR的亮度值决定为显示器亮度值。并且,在亮度变换(S303)中,对于表示超过DPL的亮度值的HDR信号,针对HDR信号表示的HDR的亮度值,将DPL决定为显示器亮度值。
通过这样进行亮度变换,对于HDR图像12的与18%灰对应的像素A)、HDR图像12的与90%灰对应的像素B)、HDR图像12的与2.3%灰对应的像素C)、以及HDR图像12的与290%灰对应的像素E),不变更HDR图像12的亮度值而直接决定为显示器亮度值。而且,针对HDR图像12的与1150%灰对应的像素D),将通过剪取到500nit而得到的500nit决定为显示器亮度值。
[2-11.具体例3]
图24A是取得通过图19A的母版制作而得到的HDR图像,并亮度变换为第2最大亮度值是500nit的显示设备用的亮度的结果的一例。图24B是表示用于将HDR信号值亮度变换为TV信号值的HDR信号值与TV信号值之间的关系的另一例的图。
在该例中,HDRTV所能够显示的第2最大亮度值被限制为500nit。因此,需要将HDR信号所示的HDR的亮度值变换为显示器的亮度范围中的显示器亮度值。
在步骤S301中,根据取得的HDR信号,取出作为明亮度的基准的与18%灰(0档)对应的亮度值(基准亮度值)。而且,在步骤S302中,表示HDR图像13的亮度值的HDR信号保持36nit来作为基准亮度值,可知制作者意图要改变基准亮度值。因此,进行步骤S304,对于与90%灰对应的亮度值(180nit)以下的、该HDR信号所表示的亮度值,保持该HDR信号所表示的亮度值的原值,对于超过与90%灰对应的亮度值(180nit)的、该HDR信号所表示的亮度值,进行线性变换,以使该HDR信号表示的第1最大亮度值(HPL:1300nit)成为HDRTV所能够显示的第2最大亮度值(DPL:500nit)。
即,在该例的情况的亮度变换(S304)中,在基准亮度值是与第1基准值(18nit)不同的第3基准值(36nit)的情况下,对于表示比36nit大的第4基准值(90nit)以下的亮度值的HDR信号,将HDR信号表示的HDR的亮度值决定为显示器亮度值。并且,在亮度变换(S304)中,对于表示超过90nit的亮度值的HDR信号,针对从90nit到HDRTV所能够显示的第2最大亮度值(DPL)为止的HDR的亮度值,进行使第1最大亮度值(HPL)与第2最大亮度值(DPL)对应的线性变换,由此将HDR的亮度值变换为显示器亮度值。
通过这样进行亮度变换,对于HDR图像13的与18%灰对应的像素A)、HDR图像13的与90%灰对应的像素B)、以及HDR图像13的与2.3%灰对应的像素C),不变更HDR图像13的亮度值而直接决定为显示器亮度值。而且,对于HDR图像13的与1150%灰对应的像素D),将通过进行上述线性变换而得到的446nit决定为显示器亮度值,对于HDR图像13的与290%灰对应的像素E),将通过进行上述线性变换而得到的313nit决定为显示器亮度值。
[2-12.具体例4]
图25A是取得通过图19A的母版制作而得到的HDR图像,并亮度变换为第2最大亮度值为500nit的显示设备用的亮度的结果的一例。图25B是表示用于将HDR信号值亮度变换为TV信号值的、HDR信号值与TV信号值之间的关系的另一例的图。
该例中,HDRTV所能够显示的第2最大亮度值被限制为500nit。因此,需要将HDR信号表示的HDR的亮度值变换为显示器的亮度范围中的显示器亮度值。
在步骤S301中,从取得的HDR信号取出作为明亮度的基准的与18%灰(0档)对应的亮度值(基准亮度值)。而且,在步骤S302中,表示HDR图像13的亮度值的HDR信号保持36nit来作为基准亮度值,可知制作者意图改变基准亮度值。因此,进行步骤S304,对于小于HDRTV所能够显示的第2最大亮度值(500nit)的、该HDR信号表示的亮度值,保持该HDR信号所表示的亮度值的原值,对于HDRTV所能够显示的第2最大亮度值(500nit)以上的、该HDR信号所表示的亮度值,将通过对该HDR信号所表示的亮度值剪取到500nit而得到的亮度值决定为显示器亮度值。
即,在该例的情况的亮度变换(S304)中,在基准亮度值是与第1基准(18nit)不同的第3基准值(36nit)的情况下,对于表示HDRTV所能够显示的第2最大亮度值(DPL:500nit)以下的亮度值的HDR信号,将HDR信号表示的HDR的亮度值决定为显示器亮度值。并且,在亮度变换(S304)中,对于表示超过DPL的亮度值的HDR信号,针对HDR信号所表示的HDR的亮度值,将DPL决定为显示器亮度值。
通过这样进行亮度变换,对于HDR图像13的与18%灰对应的像素A)、HDR图像13的与90%灰对应的像素B)、HDR图像13的与2.3%灰对应的像素C)、以及HDR图像13的与290%灰对应的像素E),不变更HDR图像13的亮度值而直接决定为显示器亮度值。而且,对于HDR图像13的与1150%灰对应的像素D),将通过剪取到500nit而得到的500nit决定为显示器亮度值。
[2-13.具体例5]
图26A是取得通过图19A的母版制作而得到的HDR图像,并亮度变换为第2最大亮度值是500nit的显示设备用的亮度的结果的一例。图26B是表示用于将HDR信号值亮度变换为TV信号值的、HDR信号值与TV信号值之间的关系的另一例的图。
该例中,HDRTV所能够显示的第2最大亮度值被限制为500nit。因此,需要将HDR信号表示的HDR的亮度值变换为显示器的亮度范围中的显示器亮度值。
在步骤S301中,从所取得的HDR信号,取出作为明亮度的基准的与18%灰(0档)对应的亮度值(基准亮度值)。而且,在步骤S302中,表示HDR图像13的亮度值的HDR信号保持36nit来作为基准亮度值,可知制作者意图改变基准亮度值。但是,由于HDRTV的第2最大亮度值是500nit,与HPL相比不那么高,因此,将HDRTV侧显示的基准亮度值变换为18nit。在该情况下,进行步骤S304,将HDR图像13中的与90%灰对应的亮度值(180nit)以下的、该HDR信号所表示的亮度值,变换为乘以变换后的基准亮度值与原基准亮度值之比(18/36=1/2)后的值。并且,在步骤S304中,对于超过与90%灰对应的亮度值(180nit)的、该HDR信号所表示的亮度值,进行线性变换,以使该HDR信号表示的第1最大亮度值(HPL:1300nit)达到HDRTV所能够显示的第2最大亮度值(DPL:500nit)。
即,该例的情况下的亮度变换(S304)中,在基准亮度值是与第1基准值(18nit)不同的第3基准值(36nit)的情况下,对于表示比36nit大的第4基准值(180nit)以下的亮度值的HDR信号,根据18nit与36nit的比率(1/2),将HDR的亮度值变换为显示器亮度值。并且,在亮度变换(S304)中,对于表示超过36nit的亮度值的HDR信号,针对从180nit到第1最大亮度值(HPL:例如,1300nit)为止的HDR的亮度值,通过进行使HPL与HDRTV所能够显示的第2最大亮度值(DPL:例如500nit)对应的线性变换,从而将HDR的亮度值变换为显示器亮度值。
通过进行这样的亮度变换,对于HDR图像13的与18%灰对应的像素A),将通过向HDR的亮度值(36nit)乘以1/2而得到的18nit决定为显示器亮度值。并且,对于HDR图像13的与90%灰对应的像素B),将通过向HDR的亮度值(180nit)乘以1/2而得到的90nit决定为显示器亮度值。并且,对于HDR图像13的与2%灰对应的像素C),通过将向HDR的亮度值乘以1/2而得到的2nit决定为显示器亮度值。并且,对于HDR图像13的与1150%灰对应的像素D),将通过对HDR的亮度值(1160nit)进行上述线性变换而得到的450nit决定为显示器亮度值。并且,对于HDR图像13的与290%灰对应的像素E),将通过对HDR的亮度值(360nit)进行上述线性变换而得到的190nit决定为显示器亮度值。
[2-14.具体例6]
图27A是取得通过图19A的母版制作而得到的HDR图像,将第2最大亮度值亮度变换为500nit的显示设备用的亮度后的结果的一例。图27B是表示用于将HDR信号值亮度变换为TV信号值的、HDR信号值与TV信号值之间的关系的另一例的图。
在该例中,将HDRTV所能够显示的最大亮度值限制为500nit。因此,需要将HDR信号所表示的HDR的亮度值变换为显示器的亮度范围中的显示器亮度值。
在步骤S301中,从所取得的HDR信号取出作为明亮度的基准的与18%灰(0档)对应的亮度值(基准亮度值)。而且,在步骤S302中,可知表示HDR图像13的亮度值的HDR信号保持36nit来作为基准亮度值,可知制作者意图改变基准亮度值。但是,HDRTV的第2最大亮度值是500nit,与HPL相比不那么高,因此将HDRTV侧显示的基准亮度值变换为18nit。在该情况下,进行步骤S304,将HDR图像13中的与90%灰对应的亮度值(180nit)以下的、该HDR信号所表示的亮度值,变换为乘以变换后的基准亮度值与原基准亮度值之比(18/36=1/2)后的值。并且,在步骤S304中,针对超过与90%灰对应的基准亮度值(180nit)、并且小于HDRTV所能够显示的第2最大亮度值(500nit)的、该HDR信号表示的亮度值,进行线性变换,针对HDRTV所能够显示的第2最大亮度值(500nit)以上的、该HDR信号表示的亮度值,将该HDR信号表示的亮度值剪取到500nit,将由此得到的亮度值决定为显示器亮度值。
即,在该例的情况下的亮度变换(S304)中,基准亮度值是与第1基准值(18nit)不同的第3基准值(36nit)的情况下,对于表示比36nit大的第4基准值(180nit)以下的亮度值的HDR信号,根据18nit与36nit的比率,将HDR的亮度值变换为显示器亮度值。并且,在亮度变换(S304)中,对于表示从180nit到比180nit大的第5基准值为止的亮度值的HDR信号,针对从180nit到第5基准值的HDR的亮度值,通过进行使第5基准值与HDRTV所能够显示的第2最大亮度值(DPL:例如500nit)对应的线性变换,将HDR的亮度值变换为显示器亮度值。并且,在亮度变换(S304)中,对于表示超过第5亮度值的亮度值的HDR信号,将DPL决定为显示器亮度值。
通过进行这样的亮度变换,对于HDR图像13的与18%灰对应的像素A),向HDR的亮度值(36nit)乘以1/2,将由此得到的18nit决定为显示器亮度值。并且,对于HDR图像13的与90%灰对应的像素B),向HDR的亮度值(180nit)乘以1/2,将由此得到的90nit决定为显示器亮度值。并且,对于HDR图像13的与2%灰对应的像素C),向HDR的亮度值乘以1/2,将由此得到的2nit决定为显示器亮度值。并且,对于HDR图像13的与1150%灰对应的像素D),对HDR的亮度值(1160nit)进行剪取,将由此得到的500nit决定为显示器亮度值。并且,对于HDR图像13的与290%灰对应的像素E),对HDR的亮度值(360nit)进行上述线性变换,将由此得到的290nit决定为显示器亮度值。
[2-15.实施方式2的变形例1]
在上述实施方式2中,描述了根据HDR信号的作为第1元数据而传送的与18%灰对应的亮度值(基准亮度值),切换HDRTV中的亮度变换处理的方法,并决定将HDR信号输出给显示部303时的信号值的处理。在HDRTV中,不仅根据作为输入而取得的HDR信号,而且也能够根据屋子的明亮度等的视听环境、或者动态模式和影院模式等HDRTV中的各种显示模式,切换色调映射(tone mapping)(亮度变换处理)的方法。即,变换装置300不仅根据HDR信号的第1元数据切换亮度变换处理,还根据HDRTV侧的元数据(第2元数据)切换亮度变换处理。
例如,在试听HDRTV的屋子是明亮的情况下,与暗的情况相比,也可以以基准亮度值变大的方式进行映射。并且,在动态模式等以全体亮度值变高的方式进行显示的显示模式中,也可以以基准亮度值变大的方式进行映射。相反,在影院模式等重视低亮度区域的再现性的显示模式的情况下,也可以以基准亮度值固定为18nit的方式进行动作。
图28是表示实施方式2的变形例1的变换方法的流程图。即,图28是基于视听环境和显示模式等的HDRTV侧的元数据进行亮度变换处理的情况的动作的流程图。
首先,亮度变换部302判定是否进行根据HDRTV侧的元数据的亮度变换处理(S401)。根据上述情况,亮度变换部302从HDRTV取得表示HDRTV的显示特性的HDRTV侧的元数据。
在判定为进行根据HDRTV侧的元数据的亮度变换处理的情况下(S401中,是),亮度变换部302根据HDRTV侧的元数据设定基准亮度值,校正亮度变换处理(S402)。
另一方面,在判定为不进行根据HDRTV侧的元数据的亮度变换处理的情况下(S402中,否),亮度变换部302进行通常的亮度变换处理(S403)。
即,作为亮度变换,亮度变换部302还根据取得的HDRTV侧的元数据进一步切换亮度变换处理,通过切换后的亮度变换处理将HDR的亮度值变换为显示器亮度值。
图29是表示在基于HDRTV侧的元数据的亮度变换处理中使用的、用于将HDR信号值亮度变换为TV信号值的、HDR信号值与TV信号值之间的关系的一例的图。
在一般的HDRTV中,根据内置在HDRTV中的光量传感器等,测定HDRTV周边的明亮度,并搭载有用于调整HDRTV的显示亮度的功能。这样的HDRTV中,例如,在周边明亮的情况下,进行提高全体的亮度值而显示图像的处理。或者,在动态模式等对强调高亮度区域的信号的显示模式设定了HDRTV的情况下,进行提高液晶等背灯的全体的亮度值而显示图像的处理。这里,HDRTV侧的元数据是表示HDRTV的视听环境或者显示模式的元数据。
这样,作为进行根据HDRTV提高全体的亮度值来显示图像的处理的结果,HDRTV所能够显示的最小亮度值(最低亮度值)产生偏移,有时存在所谓成为浮黑(black floating)的状态。这样的事例中,不能将HDR信号中的低亮度区域的信号值以原值显示。例如,在通过进行了上述处理而能够显示的最小亮度值成为5nit的情况下,变得不能显示到5nit为止的信号。
因此,将所能够显示的最小亮度值设为基准亮度值(偏移亮度值:例如5nit)的情况下,为了表现与直到5nit对应的HDR信号,在决定显示器亮度值(TV信号值)时,考虑对HDR信号所表示的HDR的亮度值加上偏移亮度值。具体来说,在所输入的HDR信号中,在基准亮度值是18nit的情况下,如果偏移亮度值是5nit,则TV信号值中的基准亮度值成为通过在HDR信号中的基准亮度值18nit上加上偏移亮度值5nit而得到的23nit。
在本实施方式中的亮度变换处理中,针对与90%灰对应的亮度值以下的亮度值,保持18%灰所对应的HDR的亮度值与18%灰所对应的显示器亮度值的比率,将HDR的亮度值变换为显示器亮度值。在图29中所示的亮度变换处理中,关于保持18%灰所对应的HDR的亮度值与18%灰所对应的显示器亮度值的比率而进行输出的区域的亮度值,至少保证保持与偏移亮度值相对的相对亮度值的关系。即,所输出的显示器亮度值成为在本实施方式中的亮度变换处理的输出值上加上偏移亮度值后的值。这里,保持18%灰所对应的HDR的亮度值与18%灰所对应的显示器亮度值的比率,将HDR的亮度值变换为显示器亮度值的情况下的HDR的亮度值被作为与90%灰对应的亮度值以下的亮度值,但与90%灰对应的亮度值是一个例子。即,保持18%灰所对应的HDR的亮度值与18%灰所对应的显示器亮度值的比率,将HDR的亮度值变换为显示器亮度值的情况下的上限以及下限的亮度值由在HDRTV中预先设定的任意的值来决定,另外,取得表示上限以及下限的亮度值的元数据,根据取得的元数据来决定。
图30是表示根据偏移亮度值进行亮度变换处理的动作的流程图。另外,图30所示的亮度变换处理也可以在图28的步骤S402中进行。
首先,亮度变换部302根据HDRTV侧的元数据决定偏移亮度值(S501)。
接着,亮度变换部302对于保持HDR信号所表示的HDR的亮度值而输出的亮度范围的HDR的亮度值,在HDR的亮度值上加上偏移亮度值(S502)。
即,亮度变换部302在亮度变换中,至少针对表示第2基准值(90nit)以下的亮度值的HDR信号,对表示HDRTV的显示特性的第2元数据(HDRTV侧的元数据)中包含的HDRTV所能够显示的最小亮度值加上进行了线性变换后的值,将相加后的值决定为第2亮度值。
[2-16.实施方式2的变形例2]
上述实施方式2的变形例1中,说明了根据HDRTV侧的元数据切换亮度变换处理,但不限于此,也可以根据HDR信号的元数据与HDRTV侧的元数据分别切换亮度变换处理。
图31是表示并用了HDR信号的元数据和HDRTV侧的元数据时的亮度变换处理的动作的流程图。
首先,变换装置300的HDR的EOTF变换部301取得作为HDR信号的第1元数据送来的基准亮度值(S601)。
接着,亮度变换部302判定所取得的基准亮度值是否是18nit(S602)。
亮度变换部302在判定为所取得的基准亮度值是18nit的情况下(S602中,是),判定是否进行根据HDRTV侧的元数据的亮度变换处理(S603)。
亮度变换部302在判定为根据HDRTV侧的元数据的亮度变换处理的情况下(S603中,是),根据HDRTV侧的元数据设定基准亮度值,并校正亮度变换处理(S604)。
另一方面,亮度变换部302在判定为不进行根据HDRTV侧的元数据的亮度变换处理的情况下(S604中,否),进行通常的亮度变换处理(S605)。
另一方面,亮度变换部302在所取得的基准亮度值是与18nit不同的值的情况下(S602中,否),判定是否进行根据HDRTV侧的元数据的亮度变换处理(S606)。
亮度变换部302在判定为进行根据HDRTV侧的元数据的亮度变换处理的情况下(S606中,是),并用HDR信号的元数据中包含的基准亮度值和HDRTV侧的元数据来进行亮度变换处理(S607)。具体来说,在步骤S607中,至少对于保持18%灰所对应的HDR的亮度值与18%灰所对应的显示器亮度值的比率而输出的区域的亮度值,以保持与基准亮度值相对的相对亮度值的关系的方式,进行亮度变换。例如,在图24B中说明的亮度变换中,对于从与90%灰对应的亮度值以下的亮度范围的HDR的亮度值进行了变换后的显示器亮度值,将向该显示器亮度值加上偏移亮度值后的值作为校正后的显示器亮度值(TV信号值)。
另一方面,亮度变换部302在判定为不进行根据HDRTV侧的元数据的亮度变换处理的情况下(S606中,否),根据HDR信号的元数据中包含的基准亮度值校正亮度变换处理(S608)。
[2-17.实施方式2的变形例3]
上述实施方式2以及其变形例中,说明了基准亮度值被固定的例子,但不限于此,也可以按照HDR影像的多个区间的每个区间,设定相互不同的亮度值来作为基准亮度值。
图32是表示在连续再现的流中,基准亮度值动态变更的例子的图。
如图32所示,基准亮度值在区间1、区间2、以及区间4中是18nit,但在区间3是36nit。HDR信号的元数据能够动态更新,因此与基准亮度值被更新的帧同步,或者,在该亮度值被更新的帧的附近,发送元数据。HDRTV中,从HDR信号的元数据被指示更新的帧、或者在该帧以后元数据可能被更新的最初的帧开始,反映更新内容而进行亮度变换处理。这里,HDR信号的元数据的更新可以是仅能够在视频中的GOP(Group Of Pictures)等的随机存取单元的开头进行,而在随机存取单元内是固定的。或者,也可以在无缝地连续再现的单元中是固定的。例如,也可以在BD中无缝连接的播放项目中是固定的。
图33是表示如图32所示再现HDR信号的元数据动态更新的流的显示装置的动作例的流程图。
首先,亮度变换部302预先设定基准亮度值的缺省值(S701)。
接着,亮度变换部302判定是否取得了HDR信号的元数据(S702)。
亮度变换部302在判定为取得了HDR信号的元数据的情况下(S702中,是),根据取得的元数据的内容重设定基准亮度值,根据重设定的基准亮度值进行亮度变换处理(S703)。
另一方面,亮度变换部302判定为未取得HDR信号的元数据的情况下(S702中,否),根据步骤S701中设定的缺省值、或者从最初取得的HDR信号的元数据确定的基准亮度值,决定亮度变换处理(S704)。另外,在BD等的存储介质中,也可以仅在非无缝连续的播放项目的开头、或者广播中的节目切换的时刻等,改变亮度变换处理。
根据上述情况,在基于HDR信号连续再现的再现流中,再现流的第1区间与第2区间之间的HDR信号的元数据所表示的基准亮度值不同的情况下,亮度变换部302在亮度变换中,针对第1区间与第2区间分别根据与该区间对应的基准亮度值,将第1亮度值变换为所述第2亮度值。
(其他实施方式)
如上所述,作为本申请中公开的技术的例示,已说明了实施方式。但是,本申请中的技术不限于此,也能够适用于进行了适当变更、置换、附加、省略等的实施方式。并且,也可以组合在上述实施方式中说明的各结构要素,构成新的实施方式。
因此,以下例示其他实施方式。
HDR影像例如是蓝光盘、DVD、因特网的动态图像分发站点、广播、HDD内的影像。
变换装置100(HDR→近似HDR变换处理部)也可以存在于盘播放器,盘录制器、机顶盒、电视、个人计算机、智能电话的内部。变换装置100也可以存在于因特网内的服务器装置的内部。
显示装置200(SDR显示部)例如是电视、个人计算机、智能电话。
变换装置100取得的显示器特性信息可以使用HDMI或其他通信协议经由HDMI电缆或LAN电缆从显示装置200取得。变换装置100取得的显示器特性信息49也可以经由因特网取得显示装置200的机型信息等中包含的显示器特性信息。并且,用户进行手动操作,将显示器特性信息设定于变换装置100。并且,变换装置100的显示器特性信息的取得可以是在即将进行近似HDR影像生成(步骤S101~S104)时之前,也可以是在设备的初期设定时或显示器连接时的定时。例如,显示器特性信息的取得可以是在即将进行向显示器亮度值的变换之前,也可以是在变换装置100通过HDMI电缆最初连接在显示装置200上的定时进行。
并且,HDR影像的CPL或CAL可以针对一个内容存在一个,也可以按照每个场景存在。即,在变换方法中,作为与影像的多个场景中的每个场景对应的亮度信息,可以按照每个该场景,取得包含与作为构成该场景的多个图像相对的亮度值中的最大值即第1最大亮度值、和与构成该场景的多个图像相对的亮度值的平均即平均亮度值中的至少一方的亮度信息(CPL、CAL),在第1亮度变换中,针对多个场景中的每个场景,根据与该场景对应的亮度信息决定显示器亮度值。
并且,CPL以及CAL可以与HDR影像相同捆绑在介质(Blu-ray Disc,DVD等)中,也可以是由变换装置100从因特网取得等从与HDR影像不同的场所取得。即,可以将包含CPL以及CAL中的至少一方的亮度信息作为影像的元信息取得,也可以经由因特网取得。
并且,在变换装置100的第1亮度变换(HPL→DPL)中,可以不使用CPL、CAL以及显示器峰值亮度(DPL),而使用固定值。并且,也可以从外部使该固定值变更。并且,CPL、CAL以及DPL也可以在数个种类间切换,例如,DPL可以仅是200nit、400nit、800nit这三个种类,也可以使用与显示器特性信息最接近的值。
并且,HDR的EOTF可以不是SMPTE 2084,也可以使用其他种类的HDR的EOTF。并且,HDR影像的最大亮度(HPL)也可以不是10,000nit,例如可以是4,000nit或1,000nit。
并且,代码值的比特宽度可以是例如16、14、12、10、8bit。
并且,逆SDR的EOTF变换根据显示器特性信息而决定,但也可以使用(能够从外部进行改变)固定的变换函数。逆SDR的EOTF变换例如可以使用由Rec.ITU-R BT.1886规定的函数。并且,也可以将逆SDR的EOTF变换的种类圈定为几个种类,选择与显示装置200的输入输出特性最接近的种类来使用。
并且,显示模式可以使用固定的模式,也可以不包含在显示器特性信息中。
并且,变换装置100可以不发送设定信息,也可以在显示装置200作为固定的显示设定,也可以不改变显示设定。在该情况下,不需要显示设定部201。并且,设定信息可以是是否为近似HDR影像的标志信息,例如,在是近似HDR影像的情况下,变更为进行最明亮显示的设定。即,在显示设定的设定(S105)中,在取得的设定信息表示是使用DPL进行变换后的近似HDR影像的信号的情况下,将显示装置200的明亮度设定切换为进行最明亮的显示的设定。
并且,变换装置100的第1亮度变换(HPL→DPL)利用例如下面的算式进行变换。
【数学式1】
这里,L表示正规化为0~1的亮度值,S1、S2、a、b、M是基于CAL、CPL以及DPL设定的值。ln是自然对数。V是正规化为0~1的变换后的亮度值。如图8A的例子所示,将CAL设为300nit,将CPL设为2,000nit,将DPL设为750nit,设到CAL+50nit为止不变换,而对350nit以上进行变换的情况下,各个值成为例如下述的值。
S1=350/10000
S2=2000/10000
M=750/10000
a=0.023
b=S1-a*ln(S1)=0.112105
即,在第1亮度变换中,在SDR的亮度值是平均亮度值(CAL)与第1最大亮度值(CPL)之间的情况下,使用自然对数,决定与该HDR的亮度值对应的显示器亮度值。
使用HDR影像的内容峰值亮度或内容平均亮度等的信息变换HDR影像,由此,根据内容改变变换式,以尽可能保持HDR的灰度的方式进行变换。并且,能够抑制过暗、过亮的恶劣影响。具体来说,通过将HDR影像的内容峰值亮度映射到显示器峰值亮度,而尽可能地保持灰度。并且,通过不改变平均亮度附近以下的像素值,全体的明亮度不改变。
并且,使用SDR显示器的峰值亮度值以及显示模式变换HDR影像,能够根据SDR显示器的显示环境改变变换式,并能够与SDR显示器的性能一致地,将具有HDR感的影像(近似HDR影像)以与原来的HDR影像同样的灰度或明亮度进行显示。具体来说,通过SDR显示器的最大亮度以及显示模式来决定显示器峰值亮度,通过以不超过其峰值亮度值的方式变换HDR影像,直到SDR显示器所能够显示的明亮度为止不减少HDR影像的灰度地进行显示,所不能显示的明亮度下降了亮度值直到所能够显示的明亮度为止。
以上,削减了所不能显示的明亮度信息,不降低所能够显示的明亮度的灰度,能够以接近于原HDR影像的形式进行显示。例如,在峰值亮度为1,000nit的显示器用时,通过变换为控制到峰值亮度1,000nit的近似HDR影像,维持全体的明亮度,根据显示器的显示模式改变亮度值。因此,根据显示器的显示模式,改变亮度的变换式。如果,当在近似HDR影像中允许比显示器的峰值亮度大的亮度时,有时将该大的亮度置换为显示器侧的峰值亮度进行显示,该情况下全体比原HDR影像暗。相反,当将比显示器的峰值亮度小的亮度变换为最大亮度时,将该小的亮度置换为显示器侧中的峰值亮度,全体变得比原HDR影像明亮。而且,由于比显示器侧的峰值亮度小,而变得不能最大限度地使用与显示器的灰度相关的性能。
并且,在显示器侧,通过使用设定信息来切换显示设定,能够更好地显示近似HDR影像。例如,在将明亮度设定地较暗的情况下,由于不能进行高亮度显示,因此损害了HDR感。在该情况下,通过变更显示设定,或者显示催促进行变更的消息,能够最大限度地展现显示器的性能,显示高灰度的影像。
对应对4K的BD或者应对HDR的BD进行再现的Blu-ray设备需要与应对2K_SDR的TV、应对2K_HDR的TV、应对4K_SDR的TV以及应对4K_HDR的TV这4个TV对应。具体来说,Blu-ray设备需要支持3组HDMI/HDCP规格(HDMI1.4/HDCP1.4、HDMI2.0/HDCP2.1、HDMI2.1/HDCP2.2)。
另外,Blu-ray设备在进行4个种类的Blu-ray盘(应对2K_SDR的BD、应对2K_HDR的BD、应对4K_SDR的BD以及应对4K_HDR的BD)的再现的情况下,需要按照每个BD(内容)、以及按照每个连接的显示装置(TV),选择适当的处理和HDMI/HDCP。另外,在视频中合成图形的情况下,也需要根据与BD的种类连接的显示装置(TV)的种类改变处理。
因此,Blu-ray设备的内部处理非常复杂。在上述实施方式3中,提供了用于使Blu-ray设备内部处理比较简单的各种方法。
[1]例如,在非应对HDR的TV显示HDR信号的情况下,需要从HDR向SDR的变换。相对于此,在上述实施方式3中,为了将该变换在Blu-ray设备中可选择化,提出了双流盘(DualStreams Disc)这样的BD的结构。
[2]并且,在上述实施方式3中,对图形流附加制限,减少了视频流与图形流的组合的种类。
[3]在上述实施方式3中,根据双流盘和图形流的制限,大幅减少了在Blu-ray设备内的复杂处理的组合数。
[4]在上述实施方式3中,即使在导入了近似HDR变换的情况下,相对于双流盘的处理也不会产生矛盾,提示了内部处理以及HDMI处理。
在本申请的变换方法中,在将HDR影像在SDRTV进行显示的情况下,利用显示的SDRTV的峰值亮度超过100nit(通常200nit以上)的情况,不将HDR影像变换为100nit以下的SDR影像,而是进行变换以便将超过100nit的区域的灰度在某程度上保持,实现能够变换为近似于原HDR的近似HDR影像而使其显示在SDRTV上的“HDR→近似HDR变换处理”。
并且,在变换方法中,通过SDRTV的显示器特性(最大亮度值、输入输出特性以及显示模式)来切换“HDR→近似HDR变换处理”的变换方法。
作为显示器特性信息的取得方法,考虑有(1)通过HDMI或网络来自动取得、(2)通过使用户输入制造商名、商品编号等信息、以及(3)使用制造商名和商品编号等信息从云等取得的方法。
并且,作为变换装置100的显示器特性信息的取得定时,考虑有(1)在即将进行近似HDR变换之前取得、以及(2)与显示装置200(SDRTV等)初次连接时(建立了连接时)取得的方法。
并且,在变换方法中,也可以通过HDR影像的亮度信息(CAL,CPL)切换变换方法。
例如,作为变换装置100的HDR影像的亮度信息的取得方法,考虑有(1)作为随附于HDR影像的元信息而取得、(2)使用户输入内容的标题信息而取得、以及(3)使用输入到用户的输入信息而从云等取得的方法等。
并且,作为变换方法的详情,(1)以不超过DPL的方式进行变换、(2)以CPL成为DPL的方式进行变换、(3)不变更CAL以及其周边以下的亮度、(4)使用自然对数进行变换、(5)以DPL进行剪取处理。
并且,在变换方法中,为了提高近似HDR的效果,能够将SDRTV的显示模式、显示参数等的显示设定发送给显示装置200而进行切换,例如,也可以将促使用户进行显示设定的消息显示到画面上。
HDR信号的元数据不限定于与18%灰对应的亮度值,如果是作为HDRTV中的灰等级(grey level)的参考而使用则也可以是其他值。
保持与18%灰对应的HDR的亮度值和与18%灰对应的显示器的亮度值的比率,将HDR的亮度值变换为显示器亮度值情况下的上限以及下限的亮度值可以是根据HDRTV能够输出的最大亮度值、以及最小亮度值来设定。例如,在HDRTV的最大亮度值是与80%灰对应的亮度值的情况下,直到与70%灰对应的亮度值为止,保持与18%灰对应的HDR的亮度值和与18%灰对应的显示器的亮度值的比率而进行输出,对于其以上的亮度,也可以根据HDRTV的第2最大亮度值(DPL)进行线性变换。另外,对最小亮度值也可以进行同样的处理。
另外,在上述各实施方式中,各结构要素也可以通过由专用的硬件来构成,或者通过执行与各结构要素相应的软件程序来实现。各结构要素可以通过CPU或者处理器等程序执行部读出记录在硬盘或者半导体存储器等存储介质中的软件程序来实现。
以上,对本申请的一个或者多个实施方式的显示方法以及显示装置,基于实施方式进行了说明,本申请不限定于该实施方式。只要不脱离本申请的主旨,也可以对本实施方式实施本领域技术人员能够想到的各种变形,组合不同实施方式中的结构要素而构成的方式也包含在本申请的一个或者多个范围内。
工业实用性
本申请作为能够从第1亮度范围将亮度适当变换为亮度范围被缩小后的第2亮度范围的变换方法、变换装置等而使用。
符号说明
100变换装置、101HDR的EOTF变换部、102亮度变换部、103逆亮度变换部、104逆SDR的EOTF变换部、200显示装置、201显示设定部、202SDR的EOTF变换部、203亮度变换部、204显示部、301HDR的EOTF变换部、302亮度变换部、303显示部。
Claims (14)
1.一种为了在显示装置显示影像而对输入的影像的亮度进行变换的变换方法,
所述影像的亮度由第1亮度范围中的第1亮度值构成,该第1亮度范围的最大亮度值被定义为超过100nit的第1最大亮度值,
取得表示所述影像的第1亮度值的第1亮度信号,
进行亮度变换,该亮度变换执行多个亮度变换处理中的一个亮度变换处理,所述亮度变换处理将取得的所述第1亮度信号表示的所述第1亮度值变换为与第2亮度范围对应的第2亮度值,该第2亮度范围的最大亮度值被定义为比所述第1最大亮度值小、且比100nit大的第2最大亮度值,
在所述亮度变换中,根据取得的所述第1亮度信号的第1元数据中包含的与基准反射率对应的基准亮度值,切换所要执行的所述亮度变换处理,通过切换后的所述亮度变换处理将所述第1亮度值变换为所述第2亮度值。
2.如权利要求1所述的变换方法,
在所述亮度变换中,根据所述基准亮度值是否是第1基准值,来切换所述亮度变换处理。
3.如权利要求2所述的变换方法,
在所述亮度变换中,在所述基准亮度值是所述第1基准值的情况下,
对于表示比所述第1基准值大的第2基准值以下的亮度值的所述第1亮度信号,将所述第1亮度信号表示的所述第1亮度值决定为所述第2亮度值,
对于表示超过所述第2基准值的亮度值的所述第1亮度信号,针对从所述第2基准值到所述第1最大亮度值为止的所述第1亮度值,进行使所述第1最大亮度值与所述显示装置所能够显示的第2最大亮度值相对应的线性变换,由此,将所述第1亮度值变换为所述第2亮度值。
4.如权利要求3所述的变换方法,
在所述亮度变换中,进一步至少针对表示所述第2基准值以下的亮度值的所述第1亮度信号,对于所述第1亮度信号表示的所述第1亮度值进行线性变换,将表示所述显示装置的显示特性的第2元数据中包含的所述显示装置所能够显示的最小亮度值与进行了所述线性变换后的值相加,将相加后的值决定为所述第2亮度值。
5.如权利要求2所述的变换方法,
在所述亮度变换中,在所述基准亮度值是所述第1基准值的情况下,
对于表示在所述显示装置所能够显示的第2最大亮度值以下的亮度值的所述第1亮度信号,将所述第1亮度信号表示的所述第1亮度值决定为所述第2亮度值,
对于表示超过所述第2最大亮度值的亮度值的所述第1亮度信号,针对所述第1亮度信号表示的所述第1亮度值,将所述第2最大亮度值决定为所述第2亮度值。
6.如权利要求2所述的变换方法,
在所述亮度变换中,在所述基准亮度值是与所述第1基准值不同的第3基准值的情况下,
对于表示比所述第3基准值大的第4基准值以下的亮度值的所述第1亮度信号,将所述第1亮度信号表示的所述第1亮度值决定为所述第2亮度值,
对于表示超过所述第4基准值的亮度值的所述第1亮度信号,针对从所述第4基准值到所述显示装置所能够显示的第2最大亮度值为止的所述第1亮度值,进行使所述第1最大亮度值与所述第2最大亮度值相对应的线性变换,由此,将所述第1亮度值变换为所述第2亮度值。
7.如权利要求2所述的变换方法,
在所述亮度变换中,在所述基准亮度值是所述第1基准值的情况下,
对于表示比所述第1基准值大的第2基准值以下的亮度值的所述第1亮度信号,将所述第1亮度信号表示的所述第1亮度值决定为所述第2亮度值,
对于表示超过所述第2基准值的亮度值的所述第1亮度信号,针对从所述第2基准值到所述第1最大亮度值为止的所述第1亮度值,进行使所述第1最大亮度值与所述显示装置所能够显示的第2最大亮度值相对应的线性变换,由此,将所述第1亮度值变换为所述第2亮度值,
在所述亮度变换中,在所述基准亮度值是与所述第1基准值不同的第3基准值的情况下,
对于表示比所述第3基准值大的第4基准值以下的亮度值的所述第1亮度信号,将所述第1亮度信号表示的所述第1亮度值决定为所述第2亮度值,
对于表示超过所述第4基准值的亮度值的所述第1亮度信号,针对从所述第4基准值到所述显示装置所能够显示的第2最大亮度值为止的所述第1亮度值,进行使所述第1最大亮度值与所述第2最大亮度值相对应的线性变换,由此,将所述第1亮度值变换为所述第2亮度值,
所述第2基准值以及所述第4基准值是与比所述基准反射率大的反射率对应的亮度值。
8.如权利要求2所述的变换方法,
在所述亮度变换中,在所述基准亮度值是与所述第1基准值不同的第3基准值的情况下,
对于表示所述显示装置所能够显示的第2最大亮度值以下的亮度值的所述第1亮度信号,将所述第1亮度信号表示的所述第1亮度值决定为所述第2亮度值,
对于表示超过所述第2最大亮度值的亮度值的所述第1亮度信号,针对所述第1亮度信号表示的所述第1亮度值,将所述第2最大亮度值决定为所述第2亮度值。
9.如权利要求2所述的变换方法,
在所述亮度变换中,在所述基准亮度值是与所述第1基准值不同的第3基准值的情况下,
对于表示比所述第3基准值大的第4基准值以下的亮度值的所述第1亮度信号,根据所述第1基准值与所述第3基准值的比率,将所述第1亮度值变换为所述第2亮度值,
对于表示超过所述第3基准值的亮度值的所述第1亮度信号,针对从所述第4基准值到所述第1最大亮度值为止的所述第1亮度值,进行使所述第1最大亮度值与所述显示装置所能够显示的第2最大亮度值相对应的线性变换,由此,将所述第1亮度值变换为所述第2亮度值。
10.如权利要求2所述的变换方法,
在所述亮度变换中,在所述基准亮度值是与所述第1基准值不同的第3基准值的情况下,
对于表示比所述第3基准值大的第4基准值以下的亮度值的所述第1亮度信号,根据所述第1基准值与所述第3基准值的比率,将所述第1亮度值变换为所述第2亮度值,
对于表示从所述第4基准值到比所述第4基准值大的第5基准值为止的亮度值的所述第1亮度信号,针对从所述第4基准值到所述第5基准值为止的所述第1亮度值,进行使所述第5基准值与所述显示装置所能够显示的第2最大亮度值相对应的线性变换,由此,将所述第1亮度值变换为所述第2亮度值,
对于表示超过所述第5基准值的亮度值的所述第1亮度信号,将所述第2最大亮度值决定为所述第2亮度值。
11.如权利要求1所述的变换方法,
还从所述显示装置取得表示所述显示装置的显示特性的第2元数据,
在所述亮度变换中,还根据取得的所述第2元数据切换所述亮度变换处理,通过切换后的所述亮度变换处理将所述第1亮度值变换为所述第2亮度值。
12.如权利要求11所述的变换方法,
所述第2元数据是表示所述显示装置的视听环境或者显示模式的数据。
13.如权利要求1所述的变换方法,
在基于所述第1亮度信号而连续再现的再现流中,当所述再现流的第1区间与第2区间的基准亮度值不同时,其中,该基准亮度值是所述第1亮度信号的所述第1元数据表示的与所述基准反射率对应的基准亮度值,
在所述亮度变换中,对于所述第1区间,根据该第1区间的基准亮度值,将所述第1亮度值变换为所述第2亮度值,对于所述第2区间,根据该第2区间的基准亮度值,将所述第1亮度值变换为所述第2亮度值。
14.一种为了在显示装置显示影像而对输入的影像的亮度进行变换的变换装置,
所述影像的亮度由第1亮度范围中的第1亮度值构成,该第1亮度范围的最大亮度值被定义为超过100nit的第1最大亮度值,
所述变换装置具有:
取得部,取得表示所述影像的第1亮度值的第1亮度信号;以及
变换部,进行亮度变换,该亮度变换执行多个亮度变换处理中的一个亮度变换处理,所述亮度变换处理将所述取得部取得的所述第1亮度信号表示的所述第1亮度值变换为与第2亮度范围对应的第2亮度值,该第2亮度范围的最大亮度值被定义为比所述第1最大亮度值小、且比100nit大的第2最大亮度值,
所述变换部为,根据取得的所述第1亮度信号的第1元数据中包含的与基准反射率对应的基准亮度值,切换所要执行的所述亮度变换处理,通过切换后的所述亮度变换处理将所述第1亮度值变换为所述第2亮度值。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201462015702P | 2014-06-23 | 2014-06-23 | |
US62/015,702 | 2014-06-23 | ||
JP2015113504 | 2015-06-03 | ||
JP2015-113504 | 2015-06-03 | ||
PCT/JP2015/002974 WO2015198554A1 (ja) | 2014-06-23 | 2015-06-15 | 変換方法および変換装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105493490A CN105493490A (zh) | 2016-04-13 |
CN105493490B true CN105493490B (zh) | 2019-11-29 |
Family
ID=54937665
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201580001443.5A Active CN105493490B (zh) | 2014-06-23 | 2015-06-15 | 变换方法和变换装置 |
Country Status (6)
Country | Link |
---|---|
US (2) | US9736419B2 (zh) |
EP (1) | EP3174280A1 (zh) |
JP (2) | JP5991502B2 (zh) |
CN (1) | CN105493490B (zh) |
MX (1) | MX357793B (zh) |
WO (1) | WO2015198554A1 (zh) |
Families Citing this family (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP3157242B1 (en) * | 2014-06-10 | 2019-07-03 | Panasonic Intellectual Property Management Co., Ltd. | Display system, display method, and display device |
EP3276968B1 (en) * | 2015-03-24 | 2021-02-24 | Sony Corporation | Transmission device, transmission method, reception device, and reception method |
US10735755B2 (en) | 2015-04-21 | 2020-08-04 | Arris Enterprises Llc | Adaptive perceptual mapping and signaling for video coding |
EP3139342A1 (en) * | 2015-09-02 | 2017-03-08 | Thomson Licensing | Methods, systems and apparatus for over-exposure correction |
JP2017175459A (ja) * | 2016-03-24 | 2017-09-28 | シャープ株式会社 | 信号変換装置、信号変換方法、テレビジョン受像機、プログラム、および記録媒体 |
JP6830244B2 (ja) * | 2016-03-29 | 2021-02-17 | パナソニックIpマネジメント株式会社 | 表示装置及びその制御方法 |
JP6757157B2 (ja) * | 2016-03-29 | 2020-09-16 | キヤノン株式会社 | 投影装置およびその制御方法 |
JP6771947B2 (ja) * | 2016-05-09 | 2020-10-21 | キヤノン株式会社 | 表示装置及びその制御方法 |
JP6739257B2 (ja) * | 2016-07-06 | 2020-08-12 | キヤノン株式会社 | 画像処理装置とその制御方法及びプログラム |
JP6779695B2 (ja) * | 2016-07-28 | 2020-11-04 | キヤノン株式会社 | 画像処理装置及びその制御方法、表示装置 |
JP6759813B2 (ja) * | 2016-07-29 | 2020-09-23 | 株式会社Jvcケンウッド | 処理装置、表示システム、表示方法、及びプログラム |
TWI631505B (zh) * | 2016-08-26 | 2018-08-01 | 晨星半導體股份有限公司 | 應用於播放裝置的影像處理方法及相關的電路 |
EP3512188B1 (en) * | 2016-09-06 | 2020-09-30 | Sony Corporation | Image processing apparatus and image processing method, and program |
JP6751233B2 (ja) * | 2016-09-12 | 2020-09-02 | オンキヨー株式会社 | 映像処理装置 |
EP3522514A4 (en) * | 2016-09-28 | 2019-08-07 | Panasonic Intellectual Property Management Co., Ltd. | ADJUSTMENT DEVICE, ADJUSTMENT METHOD, AND PROGRAM |
EP3544280B1 (en) | 2016-11-17 | 2024-04-03 | Panasonic Intellectual Property Management Co., Ltd. | Image processing device, image processing method, and program |
WO2018147196A1 (ja) * | 2017-02-09 | 2018-08-16 | シャープ株式会社 | 表示装置、テレビジョン受像機、映像処理方法、バックライト制御方法、受信装置、映像信号生成装置、送信装置、映像信号伝送システム、受信方法、プログラム、制御プログラム、及び記録媒体 |
JP6381701B2 (ja) * | 2017-02-09 | 2018-08-29 | シャープ株式会社 | 受信装置、テレビジョン受像機、映像信号生成装置、送信装置、映像信号伝送システム、受信方法、プログラム、及び記録媒体 |
JP6466488B2 (ja) * | 2017-02-09 | 2019-02-06 | シャープ株式会社 | 表示装置、テレビジョン受像機、映像処理方法、制御プログラム、及び記録媒体 |
JP2018180266A (ja) * | 2017-04-13 | 2018-11-15 | キヤノン株式会社 | 表示装置およびその制御方法 |
JP2019041269A (ja) * | 2017-08-25 | 2019-03-14 | シャープ株式会社 | 映像処理装置、表示装置、映像処理方法、制御プログラム、および記録媒体 |
EP4220541A1 (en) * | 2017-09-13 | 2023-08-02 | Panasonic Intellectual Property Management Co., Ltd. | Luminance characteristics generation method |
JP6723969B2 (ja) | 2017-11-06 | 2020-07-15 | 株式会社ソニー・インタラクティブエンタテインメント | 画像処理装置、表示装置、および画像処理方法 |
WO2019098054A1 (ja) * | 2017-11-17 | 2019-05-23 | ソニー株式会社 | 情報処理装置、情報処理方法、記録媒体、再生装置、再生方法、およびプログラム |
US10600163B2 (en) | 2017-11-22 | 2020-03-24 | Interdigital Vc Holdings, Inc. | Method and device for reconstructing a display adapted HDR image |
US10832613B2 (en) | 2018-03-07 | 2020-11-10 | At&T Intellectual Property I, L.P. | Image format conversion using luminance-adaptive dithering |
WO2019172100A1 (ja) * | 2018-03-08 | 2019-09-12 | キヤノン株式会社 | 映像表示装置 |
US10917583B2 (en) * | 2018-04-27 | 2021-02-09 | Apple Inc. | Standard and high dynamic range display systems and methods for high dynamic range displays |
CN108881758B (zh) * | 2018-05-29 | 2020-11-13 | 联发科技股份有限公司 | 电子设备及其处理图像的方法 |
EP3764346A1 (en) * | 2019-07-09 | 2021-01-13 | Koninklijke Philips N.V. | Adjustment of display optimization behaviour for hdr images |
US11412174B2 (en) * | 2020-09-22 | 2022-08-09 | Microsoft Technology Licensing, Llc | Efficient electro-optical transfer function (EOTF) curve for standard dynamic range (SDR) content |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012147018A2 (en) * | 2011-04-28 | 2012-11-01 | Koninklijke Philips Electronics N.V. | Apparatuses and methods for hdr image encoding and decoding |
CN103503429A (zh) * | 2011-04-15 | 2014-01-08 | 杜比实验室特许公司 | 编码、解码和表现高动态范围图像 |
CN103582911A (zh) * | 2011-05-10 | 2014-02-12 | 皇家飞利浦有限公司 | 高动态范围图像信号生成和处理 |
CN109064433A (zh) * | 2013-02-21 | 2018-12-21 | 皇家飞利浦有限公司 | 改进的hdr图像编码和解码方法及设备 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100497395B1 (ko) * | 2003-06-30 | 2005-06-23 | 삼성전자주식회사 | 화질을 자동으로 설정하는 방법 |
JP5145017B2 (ja) | 2006-12-05 | 2013-02-13 | 日本放送協会 | 画像信号処理装置 |
JP5220118B2 (ja) * | 2008-10-10 | 2013-06-26 | シャープ株式会社 | 画像表示装置及び画像表示方法 |
JP4803284B2 (ja) * | 2009-07-08 | 2011-10-26 | カシオ計算機株式会社 | 画像処理装置、及び画像処理プログラム |
CN102842288B (zh) * | 2011-06-21 | 2017-03-01 | 飞思卡尔半导体公司 | 具有动态亮度缩放的背光视频显示器 |
AU2012313936B2 (en) * | 2011-09-27 | 2017-06-29 | Koninklijke Philips N.V. | Apparatus and method for dynamic range transforming of images |
CN105284106B8 (zh) * | 2013-06-20 | 2020-01-24 | 索尼公司 | 再现装置以及再现方法 |
US9584786B2 (en) * | 2014-03-05 | 2017-02-28 | Dolby Laboratories Licensing Corporation | Graphics blending for high dynamic range video |
JP6443857B2 (ja) * | 2014-06-05 | 2018-12-26 | キヤノン株式会社 | 画像処理装置、画像処理方法、及び、プログラム |
TWI530927B (zh) * | 2014-06-06 | 2016-04-21 | 瑞軒科技股份有限公司 | 顯示亮度的調校方法、畫面顯示方法以及顯示裝置 |
CN110572605B (zh) * | 2014-06-20 | 2022-01-07 | 松下知识产权经营株式会社 | 再现方法及再现装置及存储介质 |
-
2015
- 2015-06-15 CN CN201580001443.5A patent/CN105493490B/zh active Active
- 2015-06-15 EP EP15812305.9A patent/EP3174280A1/en not_active Withdrawn
- 2015-06-15 MX MX2016016116A patent/MX357793B/es active IP Right Grant
- 2015-06-15 WO PCT/JP2015/002974 patent/WO2015198554A1/ja active Application Filing
- 2015-06-15 JP JP2016514199A patent/JP5991502B2/ja active Active
-
2016
- 2016-03-21 US US15/075,228 patent/US9736419B2/en active Active
- 2016-08-02 JP JP2016152326A patent/JP2017005737A/ja active Pending
-
2017
- 2017-06-05 US US15/613,494 patent/US9948884B2/en active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103503429A (zh) * | 2011-04-15 | 2014-01-08 | 杜比实验室特许公司 | 编码、解码和表现高动态范围图像 |
WO2012147018A2 (en) * | 2011-04-28 | 2012-11-01 | Koninklijke Philips Electronics N.V. | Apparatuses and methods for hdr image encoding and decoding |
CN103582911A (zh) * | 2011-05-10 | 2014-02-12 | 皇家飞利浦有限公司 | 高动态范围图像信号生成和处理 |
CN109064433A (zh) * | 2013-02-21 | 2018-12-21 | 皇家飞利浦有限公司 | 改进的hdr图像编码和解码方法及设备 |
Non-Patent Citations (1)
Title |
---|
Signalling of Luminance Dynamic Range in Tone mapping information SEI;S. Hattori 等;《Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 10th Meeting: Stockholm, SE, 11–20 July 2012, JCTVC-J0149》;20120702;全文 * |
Also Published As
Publication number | Publication date |
---|---|
WO2015198554A1 (ja) | 2015-12-30 |
EP3174280A1 (en) | 2017-05-31 |
US9736419B2 (en) | 2017-08-15 |
JP5991502B2 (ja) | 2016-09-14 |
JPWO2015198554A1 (ja) | 2017-04-20 |
US9948884B2 (en) | 2018-04-17 |
MX357793B (es) | 2018-07-25 |
US20170272687A1 (en) | 2017-09-21 |
CN105493490A (zh) | 2016-04-13 |
JP2017005737A (ja) | 2017-01-05 |
MX2016016116A (es) | 2017-04-25 |
US20160205338A1 (en) | 2016-07-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105493490B (zh) | 变换方法和变换装置 | |
CN106134172B (zh) | 显示系统、显示方法及显示装置 | |
CN106105177B (zh) | 变换方法及变换装置 | |
CN105409208B (zh) | 再现方法及再现装置 | |
CN106170985B (zh) | 再现方法及再现装置 | |
CN105981396A (zh) | 传输方法、再现方法及再现装置 | |
CN105393549A (zh) | 数据输出装置、数据输出方法及数据生成方法 | |
CN106165403A (zh) | 数据输出装置、数据输出方法以及数据生成方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |