[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

CN114679551B - 固体摄像装置、固体摄像装置的信号处理方法以及电子机器 - Google Patents

固体摄像装置、固体摄像装置的信号处理方法以及电子机器 Download PDF

Info

Publication number
CN114679551B
CN114679551B CN202110709169.4A CN202110709169A CN114679551B CN 114679551 B CN114679551 B CN 114679551B CN 202110709169 A CN202110709169 A CN 202110709169A CN 114679551 B CN114679551 B CN 114679551B
Authority
CN
China
Prior art keywords
pixel
correction
pixels
pixel unit
sensitivity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110709169.4A
Other languages
English (en)
Other versions
CN114679551A (zh
Inventor
田中俊介
野房勇希
山本伸
鹤田雅明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Jingzhiying Technology Co ltd
Original Assignee
Guangdong Jingzhiying Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Jingzhiying Technology Co ltd filed Critical Guangdong Jingzhiying Technology Co ltd
Publication of CN114679551A publication Critical patent/CN114679551A/zh
Application granted granted Critical
Publication of CN114679551B publication Critical patent/CN114679551B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
    • H04N25/671—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction
    • H04N25/672—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction between adjacent sensors or output registers for reading a single image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/57—Control of the dynamic range
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50—Control of the SSIS exposure
    • H04N25/57—Control of the dynamic range
    • H04N25/58—Control of the dynamic range involving two or more exposures
    • H04N25/581—Control of the dynamic range involving two or more exposures acquired simultaneously
    • H04N25/585—Control of the dynamic range involving two or more exposures acquired simultaneously with pixels having different sensitivities within the sensor, e.g. fast or slow pixels or pixels having different sizes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/67—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response
    • H04N25/671—Noise processing, e.g. detecting, correcting, reducing or removing noise applied to fixed-pattern noise, e.g. non-uniformity of response for non-uniformity detection or correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors
    • H04N25/77—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components
    • H04N25/778—Pixel circuitry, e.g. memories, A/D converters, pixel amplifiers, shared circuits or shared components comprising amplifiers shared between a plurality of pixels, i.e. at least one part of the amplifier must be on the sensor array itself
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/131—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements including elements passing infrared wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/135—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on four or more different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/703—SSIS architectures incorporating pixels for producing signals other than image signals
    • H04N25/704—Pixels specially adapted for focusing, e.g. phase difference pixel sets
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/76—Addressed sensors, e.g. MOS or CMOS sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Solid State Image Pick-Up Elements (AREA)
  • Color Television Image Signal Generators (AREA)
  • Exposure Control For Cameras (AREA)

Abstract

本发明涉及固体摄像装置、固体摄像装置的信号处理方法以及电子机器，能够修正在广泛的区域中因为多种要因所产生的灵敏度不均，且能够实现更高精确度的画质。修正电路(710)对于修正对象的画素单元(PU)中的在修正时要参照的各画素的画素信号所对应的灵敏度值Pi，以及邻接于修正对象的画素单元(PU)的至少一个同色的画素单元(PU)中的在修正时要参照的各画素的画素信号所对应的灵敏度值Pi，以加权系数Wi进行加权，且将经过加权得出的灵敏度值的总和除以在修正时要参照的画素的总数n而算出修正系数μ。

Description

固体摄像装置、固体摄像装置的信号处理方法以及电子机器
技术领域
本发明关于一种固体摄像装置、固体摄像装置的信号处理方法以及电子机器，尤其关于可供进行画素的灵敏度等的修正的固体摄像装置、固体摄像装置的信号处理方法以及电子机器。
背景技术
已有一种CMOS(Complementary Metal Oxide Semiconductor，互补性金属氧化半导体)被作为固体摄像装置(影像感测器(image sensor))而提供于实际使用上，该固体摄像装置使用了检测光而产生电荷的光电转换元件。
CMOS影像感测器一般使用红(R)、绿(G)、蓝(B)的三原色滤光器(filter)或蓝绿(cyan)、深红(magenta)、黄(yellow)、绿(green)的四色补色滤光器来拍摄彩色画像。
一般而言，在CMOS影像感测器中，画素(pixel，像素)个别地具备有彩色滤光器。作为滤光器来说，包含主要使红色光穿透的红(R)滤光器、主要使绿色光穿透的绿(Gr、Gb)滤光器及主要使蓝色光穿透的蓝(B)滤光器。
包含各彩色滤光器的画素单元经正方排列而形成一个画素群，多个画素群经排列成二维状而形成画素部(画素阵列(array))。
作为此彩色滤光器排列来说，已有一种贝尔(Bayer)排列被广为所知。此外，例如针对各画素形成有微透镜(microlens)。
此外，也已提出了一种通过多个同色画素形成贝尔排列的各画素单元而成的CMOS影像感测器，以谋求高灵敏度化或高动态范围(dynamic range)化(例如参照专利文献1、2)。
此种CMOS影像感测器已被广泛地应用作为数码摄像机(digital camera)、摄录影机(video camera)、监视摄像机、医疗用内视镜、个人电脑(Personal Computer，PC)、移动电话等行动终端装置(行动(mobile)机器)等各种电子机器的一部分。
尤其近年来搭载在移动电话等行动终端装置(行动机器)上的影像感测器的小型化、多画素化不断进展，像素大小也以打破1μm的大小逐渐成为主流。
为了维持多画素化形成的高分辨率化，而且抑制画素间距缩小所导致的灵敏度或动态范围的降低，一般采用将邻接的多个同色画素例如按各4画素配置，在要追求分辨率的际读取个别的画素信号，而在需要高灵敏度或动态范围性能的情况下则将同色的画素的信号予以加总进行读取的方法。
另外，此CMOS影像感测器以例如邻接于画素单元的多个同色画素共享一个微透镜。
在以多个画素共享一个微透镜的固体摄像装置(CMOS影像感测器)中，能够在画素中存在有距离信息，且具有PDAF(Phase Detection Auto Focus，相位检测自动对焦)功能。
另一方面，在此CMOS影像感测器中，由于在画素阵列中以同色形成有PDAF(相位检测自动对焦)画素，故在通常的摄影模式中，必须修正这些PDAF画素的灵敏度等。
为了进行此修正，例如，已提出一种利用与邻接的同色画素的平均值的差的修正方法(例如参照专利文献3、4)。
[现有技术文献]
[专利文献]
专利文献1：日本特开平11-298800号公报
专利文献2：日本特许第5471117号
专利文献3：日本特许第6369233号
专利文献4：美国US9918031B2。
发明内容
[发明所欲解决的课题]
然而，依据上述专利文献3及4所记载的利用与邻接的同色画素的平均值的差的修正方法，由于要成为修正对象的画素的范围被限定在同一画素单元内的同色画素，修正方法也受到限制，故对于在更广范围所产生的颜色不均等的灵敏度不均，或因为多种要因所产生的灵敏度不均难以进行正确的修正。
以下将针对专利文献3及4所记载的利用与邻接的同色画素的平均值的差的修正方法进一步地探究。
图1显示采用了利用与邻接的同色画素的平均值的差的修正方法的被形成作为RGB感测器的固体摄像装置(CMOS影像感测器)的画素阵列的画素群的一例的图。
图1的画素群1由Gr画素的画素单元PU1、R画素的画素单元PU2、B画素的画素单元PU3及Gb画素的画素单元PU4进行了贝尔排列而成。
画素单元PU1配置有邻接的多个例如2×2的同色(Gr)的4画素PXGrA、PXGrB、PXGrC、PXGrD。在画素单元PU1中，对应4画素PXGrA、PXGrB、PXGrC、PXGrD配置有一个微透镜MCL1。
画素单元PU2配置有邻接的多个例如2×2的同色(R)的4画素PXRA、PXRB、PXRC、PXRD。在画素单元PU2中，对应4画素PXRA、PXRB、PXRC、PXRD配置有一个微透镜MCL2。
画素单元PU3配置有邻接的多个例如2×2的同色(B)的4画素PXBA、PXBB、PXBC、PXBD。在画素单元PU4中，对应4画素PXBA、PXBB、PXBC、PXBD配置有一个微透镜MCL3。
画素单元PU4配置有邻接的多个例如2×2的同色(Gb)的4画素PXGbA、PXGbB、PXGbC、PXGbD。在画素单元PU4中，对应4画素PXGbA、PXGbB、PXGbC、PXGbD配置有一个微透镜MCL4。
例如，当要修正图1的画素群1的Gr画素中的像素PXGrA的灵敏度时，若将画素单元PU1的4画素PXGrA、PXGrB、PXGrC、PXGrD的灵敏度设为Pa至Pd，且将朝倾斜方向邻接于画素单元PU1的画素单元PU4的4画素PXGbA、PXGbB、PXGbC、PXGbD的灵敏度设为Pe至Ph，则修正系数Sa依下式被设作为灵敏度Pa与画素单元的灵敏度的平均值的比来给定。
[式1]
Sa＝Pa/((Pa+Pb+Pc+Pd)/4)
如此，在熟知的修正方法中，成为使用同一画素单元内的同色画素的平均值而进行的灵敏度修正。
例如，当因为局部性的灵敏度参差不齐及扩及更大范围的其它要因的灵敏度参差不齐的复合要因而产生了灵敏度参差不齐时，无法将例如图1中邻接的Gb画素PXGbA、PXGbB、PXGbC、PXGbD的灵敏度值Pe至Ph作为修正的参考。
因此，熟知的修正方法，有时会发生灵敏度修正不足的情形。例如，由于若要修正灵敏度仅是参照画素单元的画素的灵敏度，故会难以修正遍及多个画素单元或画素群的例如条纹等的缺陷。
此外，如上所述，移动电话等行动终端装置(行动机器)等的摄像机模块，为了谋求小型化、薄型化，会有要将模块的高度降低的需求。
为了回应此需求，入射至所搭载的影像感测器的画角周边部的光线的角度会有变大的倾向。
当无法将画角周边部的倾斜入射光予以效率良好地导入至光电转换区域(photodiode，光电二极管)的情形下，将会在画角周边部与画角中央部出现极大的灵敏度差异，而有可能会产生被称为是暗影(shading)的画素特性的劣化。
然而，在熟知的修正方法中，由于无法将因为朝向透镜端部所产生的单调的暗影所引起的灵敏度降低和个别的画素的参差不齐予以个别地修正，故难以进行正确的灵敏度修正。
本发明提供一种能够修正在广泛的区域中因为多种要因所产生的灵敏度不均，且能够实现更高精确度的画质的固体摄像装置、固体摄像装置的信号处理方法以及电子机器。
本发明提供一种能够修正在广泛的区域中因为多种要因所产生的灵敏度不均，且能够实现更高精确度的画质，更能够以高精确度修正局部性的区域的灵敏度不均的固体摄像装置、固体摄像装置的信号处理方法以及电子机器。
[用以解决问题的手段]
本发明的第一型态的固体摄像装置具有：画素部，配置有多个画素单元，所述画素单元包含进行光电转换的多个同色画素；及修正电路，将成为修正对象的所述画素单元的画素的灵敏度以与所取得的修正系数产生关联的方式进行修正；所述修正电路对于所述修正对象的画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以及邻接于所述修正对象的画素单元的至少一个画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以加权系数进行加权求得加权灵敏度值的加权平均，并据此取得所述修正系数。
本发明的第二型态为一种固体摄像装置的信号处理方法，该固体摄像装置具有：画素部，配置有多个画素单元，所述画素单元包含进行光电转换的多个同色画素；及修正电路，将成为修正对象的所述画素单元的画素的灵敏度以与所取得的修正系数产生关联的方式进行修正；所述修正电路对于所述修正对象的画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以及邻接于所述修正对象的画素单元的至少一个画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值以加权系数进行加权，且通过经过加权所得的加权灵敏度值的加权平均而取得所述修正系数。
本发明的第三型态的电子机器具有：固体摄像装置；及光学系统，将被摄体像成像于所述固体摄像装置；所述固体摄像装置包含：画素部，配置有多个画素单元，所述画素单元包含进行光电转换的多个同色画素；及修正电路，将成为修正对象的所述画素单元的画素的灵敏度以与所取得的修正系数产生关联的方式进行修正；所述修正电路对于所述修正对象的画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以及邻接于所述修正对象的画素单元的至少一个画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值以加权系数进行加权而求得加权灵敏度值的加权平均，并据此取得所述修正系数。
[发明的功效]
依据本发明，能够修正在广泛的区域中因为多种要因所产生的灵敏度不均，且能够实现更高精确度的画质。
依据本发明，能够修正在广泛的区域中因为多种要因所产生的灵敏度不均，且能够实现更高精确度的画质，更能够以高精确度修正局部性的区域的灵敏度不均。
附图说明
图1显示采用了利用与邻接的同色画素的平均值的差的修正方法的被形成作为RGB感测器的固体摄像装置(CMOS影像感测器)的画素阵列的画素群的一例的图。
图2显示本发明的第一实施方式的固体摄像装置的构成例的方块图。
图3显示本发明的第一实施方式的画素部中的画素阵列的形成例的图。
图4抽出本发明的第一实施方式的形成画素阵列的画素群的一例予以显示的图。
图5显示本发明的第一实施方式的固体摄像装置的画素群的4个画素共享一个浮游扩散层(floating diffusion)的画素单元的一例的电路图。
图6显示本发明的第一实施方式的修正电路取得修正系数的修正对象画素单元，以及包含邻接于修正对象画素单元的邻接画素单元的画素阵列上的修正关联区域的一例的图。
图7用以说明本发明的第一实施方式的修正系数取得处理的第一具体例的图。
图8用以说明本发明的第一实施方式的修正系数取得处理的第二具体例的图。
图9用以说明本发明的第一实施方式的修正系数取得处理的第三具体例的图。
图10用以说明本发明的第二实施方式的修正系数取得处理的图。
图11用以说明本发明的第三实施方式的修正系数取得处理的第一具体例的图。
图12用以说明本发明的第三实施方式的修正系数取得处理的第二具体例的图。
图13用以说明本发明的第三实施方式的修正系数取得处理的第三具体例的图。
图14用以说明本发明的第四实施方式的修正系数取得处理的图。
图15用以说明本发明的第五实施方式的修正系数取得处理的图。
图16用以说明本发明的第六实施方式的修正系数取得处理的图。
图17用以说明本发明的第七实施方式的修正系数取得处理的图。
图18用以说明本发明的第八实施方式的修正系数取得处理的图。
图19用以说明本发明的第九实施方式的修正系数取得处理的图。
图20显示应用本发明的实施方式的固体摄像装置的电子机器的构成的一例的图。
附图标记说明
10:固体摄像装置
12:内存
20:画素部
30:垂直扫描电路
40:读取电路
50:水平扫描电路
60:时序控制电路
70:信号处理电路
200:画素阵列
710:修正电路
720:内存
800:电子机器
810:CMOS影像感测器
820:光学系统
830:信号处理电路(PRC)
AJPU,AJPU1至AJPU4:邻接画素单元
CTPU:修正对象画素单元
CTW1:第一加权系数
CRA:关联区域
FD:浮游扩散层
LSGN:垂直信号线
MCL:微透镜
Mo:模式值
P,P1至P20:灵敏度值
PD:光电二极管
PU:画素单元
PX:画素
PXG:画素群
RST11-Tr:重设晶体管
Sa:修正系数
SEL11-Tr:选择晶体管
SF-Tr:源极随耦器晶体管
TG11-Tr:转送晶体管
VDD:电源线
VSL:画素信号
W,Wi:加权系数。
具体实施方式
以下将本发明的实施方式与附图建立关联进行说明。
(第一实施方式)
图2显示本发明的第一实施方式的固体摄像装置的构成例的方块图。
在本实施方式中，固体摄像装置10例如通过CMOS影像感测器而构成。
如图2所示，此固体摄像装置10具有包含画素阵列的画素部20、垂直扫描电路(行扫描电路)30、读取电路(纵列(column)读取电路)40、水平扫描电路(列扫描电路)50、时序(timing)控制电路60及信号处理电路70作为主要构成要素。
在本第一实施方式中，如后所详述，固体摄像装置10在画素部20配置有多个包含进行光电转换的多个同色画素(PX)的画素单元(PU)，且在信号处理电路70具有将成为灵敏度的修正对象的画素单元(PU)的画素PX的灵敏度与所取得的修正系数μ建立关联进行修正的修正电路710。
在本第一实施方式中，修正电路710对于修正对象的画素单元(PU)中的在修正时要参照的各画素PX的画素信号所对应的灵敏度值，以及邻接于修正对象的画素单元的至少一个同色的画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以加权系数Wi进行加权，且通过经加权所得的加权灵敏度值的加权平均而取得修正系数μ。
在本第一实施方式中，修正电路710对于修正对象的画素单元(PU)中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以及邻接于修正对象的画素单元的至少一个同色的画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以加权系数Wi进行加权，且将加权后得出的灵敏度值的总和除以在修正时要参照的画素的总数而取得(算出)修正系数μ。
据此，本第一实施方式的固体摄像装置10构成为能够修正在广泛的区域中因为多种要因所产生的灵敏度不均，且能够实现更高精确度的画质。
以下，在说明了固体摄像装置10的画素部20中包含多个同色画素(在本例中为同色的4画素)的画素单元等具体的构成、配置等以及各部的构成和功能的概要之后，针对画素的灵敏度的修正方法进行详述。
(画素部20的画素阵列200、画素群PXG、画素单元PU的构成)
图3显示本发明的第一实施方式的画素部中的画素阵列的形成例的图。
图4抽出本发明的第一实施方式的形成画素阵列的画素群的一例予以显示的图。
画素部20由包含光电二极管(光电转换部)和画素内放大器(amplifier)的多个画素PX排列成二维行列状(矩阵状)而形成有画素阵列200。
画素PX基本上以包含光电二极管和多个画素晶体管(transistor)的方式构成。作为多个画素晶体管来说，例如包含转送晶体管、重设(reset)晶体管、具有放大功能的源极随耦器晶体管(source follower transistor)、选择晶体管。
然而，在本第一实施方式中，如图4所示，采用了以画素单元的4个同色画素共享一个浮游扩散层FD(Floating Diffusion)的4画素共享构成。具体而言，如后所详述，以4个色像素共享了浮游扩散层FD11、重设晶体管RST11-Tr、源极随耦器晶体管SF11-Tr和选择晶体管SEL11-Tr。
此外，被共享的浮游扩散层FD例如在修正任意的画素的灵敏度值之际，作为从在修正时要参照的相同画素单元PU的多个画素读取的画素信号的加法运算部而产生作用。
本第一实施方式的画素阵列200，如后所说明，以将邻接的多个(在本第一实施方式中为4个)同色画素作成m×m(m为二以上的整数，在本第一实施方式中为2×2)的正方排列而形成画素单元PU，且通过邻接的4个画素单元PU而形成画素群PXG，且由多个画素群PXG排列成矩阵状的方式构成。
在图3的例中，为了简化附图，显示了由9个画素群PXG11、PXG12、PXG13、PXG21、PXG22、PXG23、PXG31、PXG32、PXG33配置成3×3的矩阵状而成的画素阵列200。
(画素群PXG及画素单元PU的构成)
图3及图4的画素群PXG11由Gr画素的画素单元PU111、R画素的画素单元PU112、B画素的画素单元PU113及Gb画素的画素单元PU114进行了贝尔排列而成。
画素群PXG12由Gr画素的画素单元PU121、R画素的画素单元PU122、B画素的画素单元PU123及Gb画素的画素单元PU124进行了贝尔排列而成。
画素群PXG13由Gr画素的画素单元PU131、R画素的画素单元PU132、B画素的画素单元PU133及Gb画素的画素单元PU134进行了贝尔排列而成。
画素群PXG21由Gr画素的画素单元PU211、R画素的画素单元PU212、B画素的画素单元PU213及Gb画素的画素单元PU214进行了贝尔排列而成。
画素群PXG22由Gr画素的画素单元PU221、R画素的画素单元PU222、B画素的画素单元PU223及Gb画素的画素单元PU224进行了贝尔排列而成。
画素群PXG23由Gr画素的画素单元PU231、R画素的画素单元PU232、B画素的画素单元PU233及Gb画素的画素单元PU234进行了贝尔排列而成。
画素群PXG31由Gr画素的画素单元PU311、R画素的画素单元PU312、B画素的画素单元PU313及Gb画素的画素单元PU314进行了贝尔排列而成。
画素群PXG32由Gr画素的画素单元PU321、R画素的画素单元PU322、B画素的画素单元PU323及Gb画素的画素单元PU324进行了贝尔排列而成。
画素群PXG33由Gr画素的画素单元PU331、R画素的画素单元PU332、B画素的画素单元PU333及Gb画素的画素单元PU334进行了贝尔排列而成。
如此，画素群PXG11、PXG12、PXG13、PXG21、PXG22、PXG23、PXG31、PXG32、PXG33具有相同的构成，以反复的方式排列成矩阵状。
构成画素群的画素单元也具有画素群共通的构成。因此，在此，说明形成画素群PXG11的画素单元PU111、PU112、PU113、PU114进行说明作为代表例。
画素单元PU111配置有邻接的多个例如2×2的同色(Gr)的4画素PXGr-A、PXGr-B、PXGr-C、PXGr-D。在画素单元PU111中，对应4画素PXGr-A、PXGr-B、PXGr-C、PXGr-D配置有一个微透镜MCL111。
画素单元PU112配置有邻接的多个例如2×2的同色(R)的4画素PXR-A、PXR-B、PXR-C、PXR-D。在画素单元PU112中，对应4画素PXR-A、PXR-B、PXR-C、PXR-D配置有一个微透镜MCL112。
画素单元PU113配置有邻接的多个例如2×2的同色(B)的4画素PXB-A、PXB-B、PXB-C、PXB-D。在画素单元PU113中，对应4画素PXB-A、PXB-B、PXB-C、PXB-D配置有一个微透镜MCL113。
画素单元PU114配置有邻接的多个例如2×2的同色(Gb)的4画素PXGb-A、PXGb-B、PXGb-C、PXGb-D。在画素单元PU114中，对应4画素PXGb-A、PXGb-B、PXGb-C、PXGb-D配置有一个微透镜MCL114。
其它画素群PXG12、PXG13、PXG21、PXG22、PXG23、PXG31、PXG32、PXG33也具有与上述的画素群PXG11相同的构成。
另外，如后所详述，在本第一实施方式中，修正电路710对于修正对象的画素单元(PU)中的在修正时要参照的各画素PX的画素信号所对应的灵敏度值，以及再将邻接于修正对象的画素单元的至少一个同色的画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以加权系数Wi进行加权，且通过经加权所得的加权灵敏度值的加权平均而取得修正系数μ。
如后所详述，修正系数μ将经加权后的各灵敏度值除以(进行除法)要参照的画素的总和来获得。
在此，与图3的画素阵列建立关联，针对邻接于修正对象的Gr或Gb画素的画素单元(PU)的至少一个同色(Gr或Gb)的画素单元(PU)的多例进行说明。
例如，当要修正画素群PXG11的画素单元PU114的4个Gb画素中的任一个Gb画素的灵敏度(或色差信号位准)时，邻接于修正对象的画素单元PU114的同色的画素单元，相对于修正对象的画素单元PU114为斜左上方的画素单元PU111、斜右上方的画素单元PU121、斜左下方的画素单元PU211及斜右下方的画素单元PU221的4个。
基本上，修正是参照包含修正对象的画素的画素单元PU114的各画素PX的读取值(画素信号所对应的灵敏度值)，还参照画素单元PU111、PU121、PU211、PU221中的至少一个画素单元的各画素的读取值(画素信号所对应的灵敏度值)。
当要修正画素群PXG12的画素单元PU124的4个Gb画素中的任一个Gb画素的灵敏度(或色差信号位准)时，邻接于修正对象的画素单元PU124的同色的画素单元，相对于修正对象的画素单元PU114为斜左上方的画素单元PU121、斜右上方的画素单元PU131、斜左下方的画素单元PU221及斜右下方的画素单元PU231的4个。
基本上，修正是参照包含修正对象的画素的画素单元PU214的各画素PX的读取值(画素信号所对应的灵敏度值)，还参照画素单元PU121、PU131、PU221、PU231中的至少一个画素单元的各画素的读取值(画素信号所对应的灵敏度值)。
当要修正画素群PXG22的画素单元PU221的4个Gr画素中的任一个Gr画素的灵敏度(或色差信号位准)时，邻接于修正对象的画素单元PU221的同色的画素单元，相对于修正对象的画素单元PU221为斜左上方的画素单元PU114、斜右上方的画素单元PU124、斜左下方的画素单元PU214及斜右下方的画素单元PU224的4个。
基本上，修正是参照包含修正对象的画素的画素单元PU221的各画素PX的读取值(画素信号所对应的灵敏度值)，还参照画素单元PU114、PU124、PU214、PU224中的至少一个画素单元的各画素的读取值(画素信号所对应的灵敏度值)。
当要修正画素群PXG23的画素单元PU231的4个Gr画素中的任一个Gr画素的灵敏度(或色差信号位准)时，邻接于修正对象的画素单元PU231的同色的画素单元，相对于修正对象的画素单元PU221为斜左上方的画素单元PU124、斜右上方的画素单元PU134、斜左下方的画素单元PU224及斜右下方的画素单元PU234的4个。
基本上，修正是参照包含修正对象的画素的画素单元PU221的各画素PX的读取值(画素信号所对应的灵敏度值)，还参照画素单元PU124、PU134、PU224、PU234中的至少一个画素单元的各画素的读取值(画素信号所对应的灵敏度值)。
当要修正画素群PXG21的画素单元PU214的4个Gb画素中的任一个Gb画素的灵敏度(或色差信号位准)时，邻接于修正对象的画素单元PU214的同色的画素单元，相对于修正对象的画素单元PU214为斜左上方的画素单元PU211、斜右上方的画素单元PU221、斜左下方的画素单元PU311及斜右下方的画素单元PU321的4个。
基本上，修正是参照包含修正对象的画素的画素单元PU214的各画素PX的读取值(画素信号所对应的灵敏度值)，还参照画素单元PU211、PU221、PU311、PU321中的至少一个画素单元的各画素的读取值(画素信号所对应的灵敏度值)。
当要修正画素群PXG22的画素单元PU224的4个Gb画素中的任一个Gb画素的灵敏度(或色差信号位准)时，邻接于修正对象的画素单元PU224的同色的画素单元，相对于修正对象的画素单元PU224为斜左上方的画素单元PU221、斜右上方的画素单元PU231、斜左下方的画素单元PU321及斜右下方的画素单元PU331的4个。
基本上，修正是参照包含修正对象的画素的画素单元PU224的各画素PX的读取值(画素信号所对应的灵敏度值)，还参照画素单元PU221、PU231、PU321、PU331中的至少一个画素单元的各画素的读取值(画素信号所对应的灵敏度值)。
当要修正画素群PXG32的画素单元PU321的4个Gr画素中的任一个Gr画素的灵敏度(或色差信号位准)时，邻接于修正对象的画素单元PU321的同色的画素单元，相对于修正对象的画素单元PU321为斜左上方的画素单元PU214、斜右上方的画素单元PU224、斜左下方的画素单元PU314及斜右下方的画素单元PU324的4个。
基本上，修正是参照包含修正对象的画素的画素单元PU321的各画素PX的读取值(画素信号所对应的灵敏度值)，还参照画素单元PU214、PU224、PU314、PU324中的至少一个画素单元的各画素的读取值(画素信号所对应的灵敏度值)。
当要修正画素群PXG33的画素单元PU331的4个Gr画素中的任一个Gr画素的灵敏度(或色差信号位准)时，邻接于修正对象的画素单元PU331的同色的画素单元，相对于修正对象的画素单元PU331为斜左上方的画素单元PU224、斜右上方的画素单元PU234、斜左下方的画素单元PU324及斜右下方的画素单元PU334的4个。
基本上，修正是参照包含修正对象的画素的画素单元PU321的各画素PX的读取值(画素信号所对应的灵敏度值)，还参照画素单元PU324、PU234、PU324、PU334中的至少一个画素单元的各画素的读取值(画素信号所对应的灵敏度值)。
如上所述，在本第一实施方式中，如图4所示，采用了以画素单元的4个同色画素共享一个浮游扩散层FD的4画素共享构成。
在此，针对以画素单元的4个同色画素共享一个浮游扩散层FD的4画素共享的一构成例进行说明。
(画素单元的4画素共享的构成例)
图5显示本发明的第一实施方式的固体摄像装置以画素群的4个画素共享一个浮游扩散层的画素单元的一例的电路图。
在图5的画素部20中，画素群PXG的画素单元PU由4个画素(在本实施方式中为色画素，在此为G画素)，也就是第一色画素PX11、第二色画素PX12、第三色画素PX21及第四色画素PX22配置为2×2的正方而成。
第一色画素PX11以包含通过第一光电转换区域所形成的光电二极管PD11及转送晶体管TG11-Tr的方式构成。
第二色画素PX12以包含通过第二光电转换区域所形成的光电二极管PD12及转送晶体管TG12-Tr的方式构成。
第三色画素PX13以包含通过第三光电转换区域所形成的光电二极管PD21及转送晶体管TG21-Tr的方式构成。
第四色画素PX22以包含光电二极管PD22及转送晶体管TG22-Tr的方式构成。
另外，形成画素群PXG的画素单元PU，以4个色画素PX11、PX12、PX21、PX22共享了浮游扩散层FD11、重设晶体管RST11-Tr、源极随耦器晶体管SF-Tr、及选择晶体管SEL11-Tr。
在此种4画素共享构成中，例如第一色画素PX11、第二色画素PX12、第三色画素PX21、第四色画素PX22形成为同色，例如形成为G(Gr、Gb(绿))画素。
例如，第一色画素PX11的光电二极管PD11作为第一绿色(G)光电转换部而发挥功能，第二色画素PX12的光电二极管PD12作为第二绿色(G)光电转换部而发挥功能，第三色画素PX21的光电二极管PD21作为第三绿色(G)光电转换部而发挥功能，第四色画素PX22的光电二极管PD22作为第四绿色(G)光电转换部而发挥功能。
作为光电二极管PD11、PD12、PD21、PD22来说，例如使用嵌入型光电二极管(PPD)。
由于在形成光电二极管PD11、PD12、PD21、PD22的基板表面上存在有源于因为悬键(dangling bond)等缺陷所致的表面准位，故会因为热能量而产生许多电荷(暗电流)，而将无法读取正确的信号。
在嵌入型光电二极管(PPD)中，通过将光电二极管PD的电荷蓄积部嵌入于基板内，从而能够降低暗电流混入至信号中。
光电二极管PD11、PD12、PD21、PD22产生相应于入射光量的量的信号电荷(在此为电子)且予以蓄积。
以下，将针对信号电荷为电子，各晶体管为n型晶体管的情形进行说明，但信号电荷为空穴，各晶体管为p型晶体管也无妨。
转送晶体管TG11-Tr连接于光电二极管PD11与浮游扩散层FD11之间，且通过控制信号TG11来控制导通状态。
转送晶体管TG11-Tr在读取控制系统的控制之下，使控制信号TG11于既定位准的高位准(H)期间被选择而成为导通状态，且将经过光电二极管PD11进行光电转换且蓄积的电荷(电子)转送至浮游扩散层FD11。
转送晶体管TG12-Tr连接于光电二极管PD12与2浮游扩散层FD11之间，且通过控制信号TG12来控制导通状态。
转送晶体管TG12-Tr在读取控制系统的控制之下，使控制信号TG12于既定位准的高位准(H)期间被选择而成为导通状态，且将经过光电二极管PD12进行光电转换且蓄积的电荷(电子)转送至浮游扩散层FD11。
转送晶体管TG21-Tr连接于光电二极管PD21与浮游扩散层FD11之间，且通过控制信号TG21来控制导通状态。
转送晶体管TG21-Tr在读取控制系统的控制之下，使控制信号TG21于既定位准的高位准(H)期间被选择而成为导通状态，且将经过光电二极管PD21进行光电转换且蓄积的电荷(电子)转送至浮游扩散层FD11。
转送晶体管TG22-Tr连接于光电二极管PD22与2浮游扩散层FD11之间，且通过控制信号TG22来控制导通状态。
转送晶体管TG22-Tr在读取控制系统的控制之下，使控制信号TG22于既定位准的高位准(H)期间被选择而成为导通状态，且将经过光电二极管PD22进行光电转换且蓄积的电荷(电子)转送至浮游扩散层FD11。
如图5所示，重设晶体管RST11-Tr连接于电源线VDD(或电源电位)与浮游扩散层FD11之间，且通过控制信号RST11来控制导通状态。
重设晶体管RST11-Tr在读取控制系统的控制之下，例如于读取扫描时，使控制信号RST11于H位准的期间被选择而成为导通状态，且将浮游扩散层FD11重设为电源线VDD(或VRst)的电位。
源极随耦器晶体管SF11-Tr与选择晶体管SEL11-Tr串联连接于电源线VDD与垂直信号线LSGN之间。
源极随耦器晶体管SF11-Tr的栅极与浮游扩散层FD11连接，选择晶体管SEL11-Tr通过控制信号SEL11来控制导通状态。
选择晶体管SEL11-Tr控制信号SEL11在H位准的期间被选择而成为导通状态。据此，源极随耦器晶体管SF11-Tr将浮游扩散层FD11的电荷经过以符合电荷量(电位)的增益的方式转换为电压信号后的列输出的读取电压(信号)VSL(PIXOUT)予以输出于垂直信号线LSGN。
在此种构成中，当使画素单元PU的各画素PX11、PX12、PX21、PX22的转送晶体管TG11-Tr、TG12-Tr、TG21-Tr、TG22-Tr个别地接通(on)断开(off)，且使经过光电二极管PD11、PD12、PD21、PD22进行光电转换且蓄积的电荷依次转送至共通浮游扩散层FD11时，像素单位的画素信号VSL被送出至垂直信号线LSGN，且被输入于纵列读取电路40。
在本实施方式中将此摄像模式称为画素独立模式。
另一方面，当使各画素PX11、PX12、PX21、PX22的转送晶体管TG11-Tr、TG12-Tr、TG21-Tr、TG22-Tr的多个同时接通断开，使TG12-Tr、TG21-Tr、TG22-Tr个别地接通断开，且使经过光电二极管PD11、PD12、PD21、PD22进行光电转换且蓄积的电荷同时并联地转送至共通浮游扩散层FD11时，浮游扩散层FD11作为加法运算部而发挥功能。
此时，将画素单元PU内的多个也就是2、3或4画素的画素信号经过加总所得的加算信号送出至垂直信号线LSGN，且输入至纵列读取电路40。
在本实施方式中将此摄像模式称为画素加法运算模式。
垂直扫描电路30依据时序控制电路60的控制在快门(shutter)行及读取行通过行扫描控制线来进行画素的驱动。
此外，垂直扫描电路30依照位址(address)信号，将进行信号的读取的引导行与重设蓄积于光电二极管PD中的电荷的快门行的行位址的行选择信号予以输出。
在通常的像素读取动作中，通过读取控制系统的垂直扫描电路30所作的驱动来进行快门扫描，之后，进行读取扫描。
读取电路40也可构成为包含对应于画素部20的各列输出所配置的多个列信号处理电路(未图示)，并通过多个列信号处理电路进行列并联处理。
读取电路40可以包含相关加倍取样(CDS：Correlated Double Sampling)电路或ADC(analog-digital converter，AD(类比数码)转换器)、放大器(AMP，增幅器)、抽样保持(sample hold)(S/H)电路等的方式构成。
水平扫描电路50扫描经过读取电路40的ADC等多个列信号处理电路进行处理所得的信号并朝水平方向转送，且输出于信号处理电路70。
时序控制电路60产生画素部20、垂直扫描电路30、读取电路40、水平扫描电路50等信号处理所需的时序信号。
信号处理电路70也可具有通过既定的信号处理来产生二维画像的功能。
信号处理电路70至少具有修正电路710和内存720，执行例如修正各画素的灵敏度差的灵敏度差修正处理，且将处理后的画素信号输出至后段的ISP(Image SignalProcessor，图像信号处理器)等。
另外，修正电路710可配置于CMOS影像感测器芯片(chip)内部，也可配置于外部。
修正电路710具有例如根据记忆于内存720中的加权系数Wi来执行修正各画素的灵敏度差的灵敏度差修正处理的功能。
修正电路710执行取得(算出)执行灵敏度差修正处理之际所需的修正系数μ并使之记忆于内存12的修正系数取得处理。
内存720记忆经由修正电路710的修正系数取得处理所求出的修正系数μ，且任选供给至修正电路710。
以下针对修正电路710的修正处理，以算出并取得应用于作为修正处理的灵敏度差修正处理的修正系数μ的修正系数取得处理为中心，与具体例建立关联进行说明。
(修正电路710的修正系数取得处理)
在本第一实施方式中，修正电路710将成为修正对象的画素单元PU的画素的灵敏度以与通过下式(2)所取得(算出)的修正系数μ产生关联的方式进行修正。
[式2]
＊μ：corrected sensitivity：画素的修正系数
Wi：weighted factor(constant)：加权系数(常数)
Pi：each pixels sensitivity：各画素的灵敏度值
n：要参照的画素的总数
修正电路710对于修正对象的画素单元中PU的在修正时要参照的各画素的画素信号所对应的灵敏度值Pn，以及邻接于修正对象的画素单元PU的至少一个画素单元PU中的在修正时要参照的各画素的画素信号所对应的灵敏度值Pn，以加权系数Wi进行加权而求得的加权灵敏度值的加权平均，并据此取得修正系数μ。
在本第一实施方式中，修正电路710将经过加权平均所得的灵敏度值Pn的总和除以在修正时要参照的画素的总数n来算出修正系数μ。
也就是，修正电路710对于修正对象的画素单元PU中的在修正时要参照的各画素的画素信号所对应的灵敏度值Pn，以及邻接于修正对象的画素单元PU的至少一个同色的画素单元PU中的在修正时要参照的各画素的画素信号所对应的灵敏度值Pn，以加权系数Wi进行加权，且将经过加权所得的灵敏度值的总和除以在修正时要参照的画素的总数n来算出修正系数μ。
另外，在第一实施方式中，如后所述，修正电路710也可构成为可视情形将经过加权平均所得的灵敏度值Pn的总和，除以修正对象画素单元的画素数而非除以在修正时要参照的画素的总数n来算出修正系数μ。
图6显示本发明的第一实施方式的包含修正电路要取得修正系数的修正对象画素单元，以及邻接于修正对象画素单元的邻接画素单元的画素阵列上的修正关联区域的一例的图。
在此，例如，图3所示的画素群PXG11的画素单元PU114为修正对象画素单元CTPU，能够从相对于修正对象画素单元CTPU为斜左上方的画素单元PU111、斜右上方的画素单元PU121、斜左下方的画素单元PU211及斜右下方的画素单元PU221的4个之中任意地选择采用1、2、3或4个画素单元作为邻接画素单元AJPU1至AJPU4。
此外，属于修正对象画素单元CTPU的4画素的读取值的灵敏度值以P1、P2、P3、P4来表示，邻接画素单元AJPU1的4画素的灵敏度值以P5、P6、P7、P8来表示，邻接画素单元AJPU2的4画素的灵敏度值以P9、P10、P11、P12来表示，邻接画素单元AJPU3的4画素的灵敏度值以P13、P14、P15、P16来表示，邻接画素单元AJPU4的4画素的灵敏度值以P17、P18、P19、P20来表示。
另外，通过图6所示的3×3的9个画素单元来划定修正关联区域CRA。
在此，针对本第一实施方式的修正系数取得处理的三个具体例进行说明。
(第一实施方式的修正系数取得处理的第一具体例)
图7用以说明本第一实施方式的修正系数取得处理的第一具体例的图。
此外，式(2-1)显示将第一加权系数CTW1及第二加权系数AJW1代入具体的数值以作为上述式2的加权系数的例。
[式2-1]
在此第一具体例中，画素单元PU114相当于修正对象画素单元CTPU，采用相对于修正对象画素单元CTPU为斜左上方的画素单元PU111、斜右上方的画素单元PU121、斜左下方的画素单元PU211及斜右下方的画素单元PU221的4个作为邻接画素单元AJPU1至AJPU4。
修正系参照包含修正对象的画素的修正对象画素单元CTPU的各画素PX的读取值(画素信号所对应的灵敏度值P1至P4)，还参照邻接画素单元AJPU1的各画素的读取值(画素信号所对应的灵敏度值P5至P8)、邻接画素单元AJPU2的各画素的读取值(画素信号所对应的灵敏度值P9至P12)、邻接画素单元AJPU3的各画素的读取值(画素信号所对应的灵敏度值P13至P16)、邻接画素单元AJPU4的各画素的读取值(画素信号所对应的灵敏度值P17至P20)。
另外，如式(2-1)所示，加权系数W将要对于修正对象画素单元CTPU(PU114)的画素设定的第一加权系数CTW1设定为“0.15”，且将要对于邻接画素单元AJPU1至AJPU4的画素设定的第二加权系数AJW1设定为“0.025”。此设定值满足了上述的条件CTW＞AJW。
此外，作为第一加权系数CTW1的“0.15”对应修正对象画素单元CTPU的4画素的灵敏度值P1至P4作设定，而作为第二加权系数AJW1的“0.025”对应邻接画素单元AJPU1至AJPU4的16画素作设定。
因此，加权系数W的总和成为(0.15×4+0.025×16)＝1，满足了式2的条件。
此外，在本例中，在修正时要参照的画素的总数n成为“20”。
如此，在第一具体例中，修正电路710在取得(算出)用以修正修正对象画素单元CTPU的左上方的修正对象画素的灵敏度值P1的修正系数μ之际，取得对于配置在与修正对象画素(G画素)相同的修正对象画素单元CTPU的4个G画素的灵敏度值P1至P4的各者乘上第一加权系数CTW1(0.15)而进行加权所得出的灵敏度值的第一总和。
与此同时，取得对于配置在邻接于修正对象画素单元CTPU的斜上方的邻接画素单元AJPU1至AJPU4的16个G画素的灵敏度值P5至P20的各者乘上第二加权系数AJW1(0.025)而进行加权所得出的灵敏度值的第二总和。
另外，将加权得出的灵敏度值的第一总和与第二总和进行加总而取得加权总灵敏度值，且将此加权总灵敏度值除以在修正时要参照的画素的总数n(＝20)，而取得所希望的修正系数μ。
据此，即可在包含如G画素的同色的多个画素的画素单元所邻接的画素阵列200中，并非使用单纯的平均值，而是使用不仅包含修正对象画素单元CTPU，还包含邻接于修正对象画素单元CTPU的邻接画素单元AJPU的加权平均，而修正例如在一个微透镜下因为多种要因所产生的灵敏度不均，而实现更高精确度的画质。
另外，在本第一实施方式中，各加权系数Wi由常数所规定，且其总和也成为常数，在本例中，以加权系数Wi的总和成为1的方式设定加权系数。也就是，构成为要在修正上参照的邻接画素单元的数愈多，参照画素愈多，第二加权系数AJW1就变为愈小的值，在修正时要参照的邻接画素单元的数愈少，参照画素愈少，第二加权系数AJW2就变为愈大的值。
结果，受到在修正时要参照的邻接画素单元的数(参照画素的数)的影响较少，无关于取样区域等即能够稳定地取得参差不齐较少的高精确度的修正系数μ。
(第一实施方式的修正系数取得处理的第二具体例)
图8用以说明本第一实施方式的修正系数取得处理的第二具体例的图。
此外，式(2-2)显示将第一加权系数CTW1及第二加权系数AJW1代入具体的数值以作为上述式2的加权系数的例。
[式2-2]
在此第二具体例中，画素单元PU114相当于修正对象画素单元CTPU，采用相对于修正对象画素单元CTPU为斜左上方的画素单元PU111的一个作为邻接于修正对象画素单元CTPU的同色的邻接画素单元AJPU1。
另外，此为一例，可从相对于修正对象画素单元CTPU为斜左上方的画素单元PU111、斜右上方的画素单元PU121、斜左下方的画素单元PU211及斜右下方的画素单元PU221的4个之中任意地选择采用1、2或3个画素单元作为邻接画素单元。
修正参照包含修正对象的画素的修正对象画素单元CTPU的各画素PX的读取值(画素信号所对应的灵敏度值P1至P4)，还参照邻接画素单元AJPU1的各画素的读取值(画素信号所对应的灵敏度值P5至P8)。
另外，如式(2-2)所示，加权系数W将要对于修正对象画素单元CTPU(PU114)的画素设定的第一加权系数CTW1设定为“0.15”，且将要对于邻接画素单元AJPU1的画素设定的第二加权系数AJW1设定为“0.1”。此设定值满足了上述的条件CTW＞AJW。
此外，作为第一加权系数CTW1的“0.15”对应修正对象画素单元CTPU的4画素的灵敏度值P1至P4作设定，而作为第二加权系数AJW1的“0.1”对应邻接画素单元AJPU1的4画素作设定。
因此，加权系数W的总和成为(0.15×4+0.1×4)＝1，满足了公式2的条件。
此外，在本例中，在修正时要参照的画素的总数n成为“8”。
如此，在第二具体例中，修正电路710在取得(算出)用以对修正对象画素单元CTPU的左上方的修正对象画素的灵敏度值P1进行修正的修正系数μ之际，取得对于配置在与修正对象画素(G画素)相同的修正对象画素单元CTPU的4个G画素的灵敏度值P1至P4的各者乘上第一加权系数CTW1(0.15)而进行加权所得出的灵敏度值的第一总和。
与此同时，取得对于配置在邻接于修正对象画素单元CTPU的斜上方的邻接画素单元AJPU1的4个G画素的灵敏度值P5至P20的各者乘上第二加权系数AJW1(0.1)而进行加权所得出的灵敏度值的第二总和。
另外，将加权得出的灵敏度值的第一总和与第二总和进行加总而取得加权总灵敏度值，且将此加权总灵敏度值除以在修正时要参照的画素的总数n(＝8)，而取得所希望的修正系数μ。
据此，即可在包含如G画素的同色的多个画素的画素单元所邻接的画素阵列200中，并非使用单纯的平均值，而是使用不仅包含修正对象画素单元CTPU，还包含邻接于修正对象画素单元CTPU的邻接画素单元AJPU的加权平均，而修正例如在一个微透镜下因为多种要因所产生的灵敏度不均，并实现更高精确度的画质。
(第一实施方式的修正系数取得处理的第三具体例)
图9用以说明本第一实施方式的修正系数取得处理的第三具体例的图。
在此第三具体例中，修正电路710可依画素部20中画素的配置区域而采用不同数量的用于修正的邻接画素单元AJPU。
在本例中，采用了第一配置区域AR1和第二配置区域AR2作为画素的配置区域。
第一配置区域AR1包含画素部20的中央部侧的区域ACTR，第二配置区域AR2包含画素部20的缘部侧区域AEDG。
修正电路710在第一配置区域AR1中，所采用的邻接画素单元AJPU可较少，且随之将依据上述式(2-2)加权得出的灵敏度值的总和除以在修正时要参照的画素的第一总数(在图9的例中为8)而算出修正系数μ。
修正电路710在第二配置区域AR2中，以将所采用的邻接画素单元AJPU增多而提高精确度为优选，且随之将依据上述式(2-1)加权得出的灵敏度值的总和除以在修正时要参照的画素的第一总数(在图9的例中为20)而算出修正系数μ。
依据此修正方法，也易于依画素部20中的画素的每一配置位置来变更修正的样区(sampling area)或修正系数。
例如，在图9中，于影像感测器的画素部20的中央部区域ACTR，以式(2-2)的修正式来取得灵敏度值修正用的修正系数μ。
此外，例如，在倾斜光的入射较多且暗影的影响较大的芯片(chip)周边部区域AEDG中也能够使用式(2-1)，进行使用更广范围的邻接画素的修正。
综上所述，在本第一实施方式中，修正电路710对于修正对象的画素单元PU中的在修正时要参照的各画素的画素信号所对应的灵敏度值Pn以及邻接于修正对象的画素单元PU的至少一个同色的画素单元PU中的在修正时要参照的各画素的画素信号所对应的灵敏度值Pn，以加权系数Wi进行加权，且将经过加权得出的灵敏度值的总和除以在修正时要参照的画素的总数n而算出修正系数μ。
因此，依据本第一实施方式，具有能够修正在广泛区域中因为多种要因所产生的灵敏度不均，且能够实现更高精确度的画质的优点。
此外，依据本第一实施方式，修正电路710可依画素部20中画素的配置区域而采用不同数量的用于修正的邻接画素单元AJPU。
因此，依据本第一实施方式，能够将广泛区域中因为多种要因所产生的灵敏度不均分别以最优选的修正方法进行个别地修正，且能够实现更高精确度的画质，更能够以高精确度修正局部性区域的灵敏度不均。
(第二实施方式)
图10用以说明本发明的第二实施方式的修正系数取得处理的图。
此外，式(2-3)显示将第一加权系数CTW1及第二加权系数AJW1、AJW2代入具体的数值以作为上述式2的加权系数的例。
[式2-3]
本第二实施方式与第一实施方式不同的点如下所述。
在第一实施方式中，各画素单元PU通过2×2的4个同色画素(G)所构成，且对应各画素单元PU的所有的4画素配置有一个微透镜MCL。
相对于此，在本第二实施方式中，各画素单元PU通过3×3的9个同色画素(G)所构成，且仅对应修正对象画素单元CTPU的左上方的4画素G1至G4，例如配置有一个微透镜MCL11以具备PDAF功能。
另外，对应相对于修正对象画素单元CTPU的其余的画素G5至G9、邻接画素单元AJPU1至AJPU4的画素G10至G45、修正对象画素单元CTPU为上下左右邻接的B画素及R画素的画素单元的所有画素，配置有一个微透镜MCL12。
另外，在本第二实施方式中，将修正对象画素单元CTPU区分为配置有修正对象的画素G1至G4的第一区域AR11，及配置有其余的画素G9至G9的第二区域AR12，对于第一区域AR11设定第一加权系数CTW1，对于第二区域AR12设定第二加权系数AJW2而取得在各个区域经过加权得出的灵敏度值的总和，且将包含邻接画素单元JPU1的经过加权得出的灵敏度值的总和的经过加权后的灵敏度值，除以在修正时要参照的画素的总数n而取得修正系数μ。
另外，如式(2-3)所示，加权系数W将要对于修正对象画素单元CTPU(PU114)的第一区域AR11的画素设定的第一加权系数CTW1设定为“0.111”，且将要对于第二区域AR12的画素设定的第二加权系数AJW2设定为“0.056”，将要对于邻接画素单元AJPU1的画素设定的第二加权系数AJW1设定为“0.0531”。此设定值满足了上述的条件CTW＞AJW2＞AJW1。
此外，作为第一加权系数CTW1的“0.111”对应修正对象画素单元CTPU的第一区域AR11的4画素G11至G4的灵敏度值P1至P4作设定，而作为第二加权系数AJW2的“0.056”对应修正对象画素单元CTPU1的5画素G5至G9作设定。作为第二加权系数AJW1的“0.0531”对应邻接画素单元AJPU1的9画素G10至G18作设定。
因此，加权系数W的总和成为(0.111×4+0.056×5+0.0531×9)＝1，满足了式2的条件。
此外，在本例中，在修正时要参照的画素的总数n成为“18”。
综上所述，在本第二实施方式中，于同色的3×3画素所邻接的画素排列中，为了修正位于中央的修正对象画素单元CTPU的具有同一微透镜的绿画素G1至G4的灵敏度值，将位于相同画素单元CTPU的画素G5至G9，和邻接的邻接画素单元AJPU系数μ相乘进行加权而进行灵敏度的修正。
换言之，在本实施方式中，加权系数将配置有对于供修正对象的画素的对象区域所用的第一加权系数CTW1设为最大值，而将其它画素配置区域所用的第二加权系数AJW设定为符合对象区域所用的配置条件的值。
如此，通过将因为起自修正对象画素的距离或结构对于灵敏度造成的影响度予以加权并进行加总，从而能够进行比起单纯的平均值的加总更精密的灵敏度修正。
(第三实施方式)
以下的式3系显示用以取得应用于本发明的第三实施方式的修正系数取得处理的修正系数的演算式。
[式3]
＊μ：weighted average：画素的修正系数
Wi：weighted factor(constant)：加权系数(常数)
Pi：each pixels sensitivity：各画素的灵敏度值
本第三实施方式的修正系数取得处理(式3)与第一实施方式的修正系数取得处理不同的点如下所述。
在第一实施方式的修正系数取得处理中，修正电路710对于修正对象的画素单元PU中的在修正时要参照的各画素的画素信号所对应的灵敏度值Pn，以及邻接于修正对象的画素单元PU的至少一个同色的画素单元PU中的在修正时要参照的各画素的画素信号所对应的灵敏度值Pn，以加权系数Wi进行加权，且将经过加权得出的灵敏度值的总和除以在修正时要参照的画素的总数n而算出修正系数μ。
相对于此，在本第三实施方式的修正系数取得处理中，修正电路710对于修正对象的画素单元PU中的在修正时要参照的各画素的画素信号所对应的灵敏度值Pn，以及邻接于修正对象的画素单元PU的至少一个同色的画素单元PU中的在修正时要参照的各画素的画素信号所对应的灵敏度值Pn，以加权系数Wi进行加权，且将经过加权得出的灵敏度值的总和除以在修正时要参照的画素单元的加权系数值的总和而算出修正系数μ。
在此说明本第三实施方式的修正系数取得处理的三个具体例。
(第三实施方式的修正系数取得处理的第一具体例)
图11用以说明本第三实施方式的修正系数取得处理的第一具体例的图。
此外，式(3-1)系显示将第一加权系数CTW1及第二加权系数AJW1代入具体的数值以作为上述式3的加权系数的例。
[式3-1]
在此第一具体例中，画素单元PU114相当于修正对象画素单元CTPU，采用相对于修正对象画素单元CTPU为斜左上方的画素单元PU111、斜右上方的画素单元PU121、斜左下方的画素单元PU211及斜右下方的画素单元PU221的4个作为邻接画素单元AJPU1至AJPU4。
修正系参照包含修正对象的画素的修正对象画素单元CTPU的各画素PX的读取值(画素信号所对应的灵敏度值P1至P4)，还参照属于邻接画素单元AJPU1至AJPU4的各画素的读取值的画素信号所对应的灵敏度值P5至P8、P9至P12、P13至P16、P17至P20。
另外，如式(3-1)所示，加权系数W将要对于修正对象画素单元CTPU(PU114)的画素设定的第一加权系数CTW1设定为“5”，且将要对于邻接画素单元AJPU1至AJPU4的画素设定的第二加权系数AJW1设定为“3”。此设定值满足了上述的条件CTW＞AJW。
此外，作为第一加权系数CTW1的“5”对应修正对象画素单元CTPU的4画素的灵敏度值P1至P4作设定，而作为第二加权系数AJW1的“3”对应邻接画素单元AJPU1至AJPU4的16画素作设定。
此外，在本例中，在修正时要参照的画素单元的加权系数值的总和成为“68”。
如此，在第一具体例中，修正电路710在取得(算出)用以对修正对象画素单元CTPU的左上方的修正对象画素的灵敏度值P1进行修正的修正系数μ之际，取得对于配置在与修正对象画素(G画素)相同的修正对象画素单元CTPU的4个G画素的灵敏度值P1至P4的各者乘上第一加权系数AJW1(5)而进行加权所得出的灵敏度值的第一总和。
与此同时，取得对于配置在邻接于修正对象画素单元CTPU的斜上方的邻接画素单元AJPU1至AJPU4的16个G画素的灵敏度值P5至P20的各者乘上第二加权系数AJW1(3)而进行加权所得出的灵敏度值的第二总和。
另外，将加权得出的灵敏度值的第一总和与第二总和进行加总而取得加权总灵敏度值，且将此加权总灵敏度值除以在修正时要参照的画素单元的加权系数值的总和n(＝68)而取得所希望的修正系数μ。
据此，即可在包含如G画素的同色的多个画素的画素单元所邻接的画素阵列200中，并非使用单纯的平均值，而是使用不仅包含修正对象画素单元CTPU，还包含邻接于修正对象画素单元CTPU的邻接画素单元AJPU的加权平均，而修正例如在一个微透镜下因为多种要因所产生的灵敏度不均，而实现更高精确度的画质。
(第三实施方式的修正系数取得处理的第二具体例)
图12用以说明本第三实施方式的修正系数取得处理的第二具体例的图。
此外，式(3-2)显示将第一加权系数CTW1及第二加权系数AJW1代入具体的数值以作为上述式3的加权系数的例。
[式3-2]
在此第二具体例中，画素单元PU114相当于修正对象画素单元CTPU，采用相对于修正对象画素单元CTPU为斜左上方的画素单元PU111的一个作为邻接于修正对象画素单元CTPU的同色的邻接画素单元AJPU1。
另外，此为一例，可从相对于修正对象画素单元CTPU为斜左上方的画素单元PU111、斜右上方的画素单元PU121、斜左下方的画素单元PU211及斜右下方的画素单元PU221的4个的中任意地选择采用1、2或3个画素单元作为邻接画素单元。
修正参照包含修正对象的画素的修正对象画素单元CTPU的各画素PX的读取值(画素信号所对应的灵敏度值P1至P4)，还参照邻接画素单元AJPU1的各画素的读取值(画素信号所对应的灵敏度值P5至P8)。
另外，如式(3-2)所示，加权系数W将要对于修正对象画素单元CTPU(PU114)的画素设定的第一加权系数CTW1设定为“3”，且将要对于邻接画素单元AJPU1的画素设定的第二加权系数AJW1设定为“2”。此设定值满足了上述的条件CTW＞AJW。
此外，作为第一加权系数CTW1的“3”对应修正对象画素单元CTPU的4画素的灵敏度值P1至P4作设定，而作为第二加权系数AJW1的“2”对应邻接画素单元AJPU1的4画素作设定。
此外，在本例中，在修正时要参照的画素单元的加权系数值的总和n成为“20”。
如此，在第二具体例中，修正电路710在取得(算出)用以对修正对象画素单元CTPU的左上方的修正对象画素的灵敏度值P1进行修正的修正系数μ之际，取得对于配置在与修正对象画素(G画素)相同的修正对象画素单元CTPU的4个G画素的灵敏度值P1至P4的各者乘上第一加权系数AJW1(3)而进行加权所得出的灵敏度值的第一总和。
与此同时，取得对于配置在邻接于修正对象画素单元CTPU的斜上方的邻接画素单元AJPU1的4个G画素的灵敏度值P5至P8的各者乘上第二加权系数AJW1(2)而进行加权所得出的灵敏度值的第二总和。
另外，将加权得出的灵敏度值的第一总和与第二总和进行加总而取得加权总灵敏度值，且将此加权总灵敏度值除以在修正时要参照的画素单元的加权系数值的总和n(＝20)，而取得所希望的修正系数μ。
据此，即可在包含如G画素的同色的多个画素的画素单元所邻接的画素阵列200中，并非使用单纯的平均值，而是使用不仅包含修正对象画素单元CTPU，还包含邻接于修正对象画素单元CTPU的邻接画素单元AJPU的加权平均，而修正例如在一个微透镜下因为多种要因所产生的灵敏度不均，而实现更高精确度的画质。
(第三实施方式的修正系数取得处理的第三具体例)
图13用以说明本第三实施方式的修正系数取得处理的第三具体例的图。
在此第三具体例中，修正电路710可依画素部20中画素的配置区域而采用不同数量的用于修正的邻接画素单元AJPU。
在本例中，采用了第一配置区域AR21和第二配置区域AR22作为画素的配置区域。
第一配置区域AR21包含画素部20的中央部侧的区域ACTR，第二配置区域AR22包含画素部20的缘部侧区域AEDG。
修正电路710在第一配置区域AR1中，所采用的邻接画素单元AJPU可较少，且随之将依据上述式(3-2)加权得出的灵敏度值的总和除以在修正时要参照的画素的第一总数(在图13的例中为20)而算出修正系数μ。
修正电路710在第二配置区域AR2中，以将所采用的邻接画素单元AJPU增多而提高精确度为优选，且随之将依据上述式(3-1)加权得出的灵敏度值的总和除以在修正时要参照的画素的第一总数(在图13的例中为68)而算出修正系数μ。
依据此修正方法，也易于依画素部20中的画素的每一配置位置来变更修正的样区(sampling area)或修正系数。
例如，在图13中，于影像感测器的画素部20的中央部区域ACTR，以式(3-2)的修正式来取得灵敏度值修正用的修正系数μ。
此外，例如，在倾斜光的入射较多且暗影的影响较大的芯片(chip)周边部区域AEDG中也能够使用式(3-1)，进行使用更广范围的邻接画素的修正。
综上所述，在本第三实施方式中，修正电路710对于修正对象的画素单元PU中的在修正时要参照的各画素的画素信号所对应的灵敏度值Pn，以及邻接于修正对象的画素单元PU的至少一个同色的画素单元PU中的在修正时要参照的各画素的画素信号所对应的灵敏度值Pn，以加权系数Wi进行加权，且将经过加权得出的灵敏度值的总和除以在修正时要参照的画素单元的加权系数值的总数n而算出修正系数μ。
因此，依据本第三实施方式，具有能够分别以最优选的修正方法来个别修正在广泛区域中因为多种要因所产生的灵敏度不均，且能够实现更高精确度的画质的优点。
此外，依据本第三实施方式，修正电路710可依画素部20中画素的配置区域而采用不同数量的用于修正的邻接画素单元AJPU。
因此，依据本第三实施方式，能够将广泛区域中因为多种要因所产生的灵敏度不均分别以最优选的修正方法进行个别地修正，且能够实现更高精确度的画质，更能够以高精确度修正局部性区域的灵敏度不均。
(第四实施方式)
以下的式4显示用以取得应用在本发明的第四实施方式的修正系数取得处理上的修正系数的演算式。
[式4]
＊＊μ：weighted average：画素的修正系数
fi：weighted factor(function)：加权系数(函数)
Pi：each pixels sensitivity：各画素的灵敏度值
n：要参照的画素的总数
本第四实施方式的修正系数取得处理(式4)与第一、第二及第三实施方式的修正系数取得处理不同的点如下所述。
在第四实施方式的修正系数取得处理中，通过函数f(i)形成所述的加权系数Wi。
在本第四实施方式中，函数f(i)包含显示依据微透镜暗影(lens shading)的理论值的函数。
在此，针对本第四实施方式的修正系数取得处理的具体例进行说明。
(第四实施方式的修正系数取得处理的具体例)
图14(A)至(C)系用以说明本发明的第四实施方式的修正系数取得处理的图。
图14(A)显示画素群的画素单元排列，图14(B)显示图14(A)的x-x线上的修正对象画素单元CTPU的亮度值分布，图14(C)示意性地显示以与函数f(i)产生关联的方式进行修正暗影的情形。
在本第四实施方式中，各画素单元PU通过4×4的16个同色画素(G)所构成，且对应修正对象画素单元CTPU及邻接画素单元AJPU1至AJPU4的各16画素G1至G16等，例如分别配置有一个微透镜MCL21以具备PDAF功能。
在本第四实施方式中，形成有函数f(i)以对修正对象画素单元CTPU的各画素G1至G16的微透镜MCL21所导致的暗影进行修正。另外，函数f(i)被使用作为待机函数。
在本例中，也使用邻接画素单元AJPU1至AJPU4的灵敏度值而也加总有起自修正对象画素的距离，也就是相符于影响度的系数。
此外，在本例中，在修正时要参照的画素的总数n成为“16”。
依据本第四实施方式，也能够更正确地修正因微透镜MCL21本身的形状的参差不齐所产生的灵敏度不良。
如此，依据本第四实施方式，即可通过使用函数作为待机函数，而修正更多样的灵敏度不均。
(第五实施方式)
以下的式5显示用以取得应用在本发明的第五实施方式的修正系数取得处理上的修正系数的演算式。
[式5]
＊＊μ：weighted average：画素的修正系数
Wi：weighted factor(constant)：加权系数(常数)
Pi：each pixels sensitivity：各画素的灵敏度值
n：要参照的画素的总数
fi：weighted factor(function)：加权系数(函数)
本第五实施方式的修正系数取得处理(式5)与第四实施方式的修正系数取得处理不同的点如下所述。
在第五实施方式的修正系数取得处理中，在通过加权系数进行加权而求出加权灵敏度值之际，于以与“显示符合画素的配置条件的状态的理论值的”函数产生关联的方式进行修正之后，通过加权平均而取得修正系数μ。
也就是，在本第五实施方式中，所谓显示符合画素的配置条件的理论值的函数，相当于显示依据上述的微透镜MCL21的暗影的理论值的函数f(i)，且将由此函数f(i)与起自修正对象画素的距离所决定的修正系数予以相乘而修正微透镜MCL21所导致的暗影。
在此，针对本第五实施方式的修正系数取得处理的具体例进行说明。
(第五实施方式的修正系数取得处理的具体例)
图15(A)至(C)用以说明本发明的第五实施方式的修正系数取得处理的图。
图15(A)显示画素群的画素单元排列，图15(B)显示图15(A)的x-x线上的修正对象画素单元CTPU的亮度值分布，图15(C)示意性地显示以与函数f(i)产生关联的方式进行修正暗影的情形。
在本第五实施方式中，也与第四实施方式同样地，各画素单元PU通过4×4的16个同色画素(G)而构成，且对应修正对象画素单元CTPU及邻接画素单元AJPU1至AJPU4的各16画素G1至G16等，例如分别配置有一个微透镜MCL21以具有PDAF功能。
在本第五实施方式中，也于4×4画素的同色画素所邻接的画素排列中，在中央的修正对象(注重)画素单元CTPU的G画素P1至P16上形成有一个微透镜MCL21。
当要修正各画素的灵敏度参差不齐之际，非仅只是取得位于相同4×4的画素单元内的16画素的灵敏度值的平均，而要经过修正透镜所导致的暗影之后取得加权平均，才更能够更正确地修正一个一个画素的灵敏度参差不齐。
在本例中，也使用邻接画素单元AJPU1至AJPU4的灵敏度值而加总起自修正对象画素的距离，也就是相符于影响度的系数。
此外，在本例中，在修正时要参照的画素的总数n成为“80”。
依据本第五实施方式，也能够更正确地修正从微透镜MCL21本身的形状的参差不齐所产生的灵敏度不良。
如此，依据本第五实施方式，即能通过使用函数作为待机函数而修正更多样的灵敏度不均。
(第六实施方式)
图16(A)及(B)用以说明本发明的第六实施方式的修正系数取得处理的图。
本第六实施方式与第一实施方式不同的点如下所述。
在第一实施方式中，各画素单元PU通过2×2的4个同色画素(G)所构成，且对应各画素单元PU的所有的4画素配置有一个微透镜MCL。
相对于此，在本第六实施方式中，如图16(A)所示，各画素单元PU通过3×3的9个同色画素(G)所构成，且仅对应修正对象画素单元CTPU的2画素G4、G5，例如配置有一个微透镜MCL31以具有PDAF功能。
或者，如图16(B)所示，各画素单元PU通过3×3的9个同色画素(G)所构成，且仅对应修正对象画素单元CTPU的2画素G4、G5，例如配置有金属屏蔽(shield)MSL31以具有PDAF功能。
依据本第六实施方式，即能够将局部性包含在画素单元中的具有PDAF功能的画素的灵敏度，以根据相同修正对象画素单元CTPU或其它邻接画素单元AJPU的同一色画素的加权平均或周边画素的灵敏度值而来的经过加权后的函数来进行修正。
(第七实施方式)
图17(A)及(B)用以说明本发明的第七实施方式的修正系数取得处理的图。
本第七实施方式与第一实施方式不同的点如下所述。
在第一实施方式中，各画素单元PU通过2×2的4个同色画素(G)所构成，且对应各画素单元PU的所有的4画素配置有一个微透镜MCL。
相对于此，在本第七实施方式中，如图16(A)所示，构成为各画素单元PU通过3×3的9个同色画素(G)所构成，且仅对应修正对象画素单元CTPU的2画素G4、G5，配置例如白黑画素或近红外(NIR)画素，而在画素单元PU包含有不同的颜色。
依据本第七实施方式，即能够将局部性包含在画素单元中的白黑画素或NIR画素的灵敏度，以根据相同画素单元CTPU或其它邻接画素单元AJPU的同一色画素的加权平均或周边画素的灵敏度值而来的经过加权后的函数来进行修正。
(第八实施方式)
以下的式6显示用以取得应用在本发明的第八实施方式的修正系数取得处理上的修正系数的演算式。
[式6]
＊μi/2：media value：中央值
x：each pixels sensitivity：各画素的灵敏度值
图18用以说明本发明的第八实施方式的修正系数取得处理的图。
本第八实施方式与上述的第一、第二、第三、第四、第五、第六及第七实施方式不同的点如下所述。
在本第八实施方式中，所进行的修正系数取得处理对于画素的灵敏度取得同一画素单元或其它邻接画素单元的中央值作为修正系数的，以取代加权平均。
依据本第八实施方式，即能够通过使用同色的邻接画素的中央值，而修正熟知难以进行修正的较广区域的灵敏度不均。
(第九实施方式)
以下的式7系显示用以取得应用在本发明的第九实施方式的修正系数取得处理上的修正系数的演算式。
[式7]
＊Mo：mode value：模式值
l：lower point of the class containing the mode value Mo：包含模式值Mo的层级的下限
f+1：the number of degrees between the following classes：下一个层级间的度数
f+2：the number of degrees between the preceding classes：先前的层级间的度数
h：the width between classes：层级间的宽度
在式7中，Mo表示模式值，l表示包含模式值Mo的层级的下限，(f+1)表示下一个层级间的度数，(f-1)表示在前的层级间的度数，h表示层级间的宽度。
图19用以说明本发明的第九实施方式的修正系数取得处理的图。
本第九实施方式与上述的第一、第二、第三、第四、第五、第六及第七实施方式不同的点如下所述。
在本第九实施方式中，通过同一画素单元或其它邻接画素单元的模式值来修正画素的灵敏度，以取代加权平均。
依据本第九实施方式，即能够通过使用同一画素单元或其它邻接画素单元的模式值，而修正熟知难以进行修正的较广区域的灵敏度不均。
以上所说明的固体摄像装置10可作为摄像装置应用在数码摄像机或摄录影机、行动终端或监视用摄像机、医疗用内视镜用摄像机等的电子机器上。
图20显示搭载有应用本发明的实施方式的固体摄像装置的摄像机系统的电子机器的构成的一例的图。
如图20所示，本电子机器800具有可应用本实施方式的固体摄像装置10的CMOS影像感测器810。
另外，电子机器800具有引导入射光于该CMOS影像感测器810的像素区域(使被摄体像成像)的光学系统(透镜等)820。
电子机器800具有处理CMOS影像感测器810的输出信号的信号处理电路(PRC)830。
信号处理电路830对于CMOS影像感测器810的输出信号实施既定的信号处理。
经过信号处理电路830所处理的画像信号，作为动画放映于由液晶显示器等所构成的监视器，或者也能够输出至打印机(printer)，此外也能够为直接记录于记忆卡(memory card)等记录媒体等各种态样。
综上所述，能够通过搭载所述的固体摄像装置10作为CMOS影像感测器810，而提供高性能、小型、低成本的摄像机系统。
另外，能够实现在摄像机的设置要件具有安装大小、可供连接的缆线条数、缆线长度、设置高度等限制的用途上所使用的例如监视用摄像机、医疗用内视镜用摄像机等电子机器。

Claims (18)

1.一种固体摄像装置，具有：
画素部，配置有多个画素单元，所述画素单元包含进行光电转换的多个同色画素；及
修正电路，将成为修正对象的所述画素单元的画素的灵敏度以与所取得的修正系数产生关联的方式进行修正；
所述修正电路对于所述修正对象的画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以及邻接于所述修正对象的画素单元的至少一个同色的画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以加权系数进行加权，且将经过加权得出的灵敏度值的总和除以在修正时要参照的画素的总数而算出所述修正系数。
2.根据权利要求1所述的固体摄像装置，其中，所述修正电路可依所述画素部中画素的配置区域而采用不同数量的邻接画素单元。
3.根据权利要求2所述的固体摄像装置，其中，所述修正电路在所采用的邻接画素单元较少的第一配置区域中，将所述经过加权得出的灵敏度值的总和除以在修正时要参照的画素的第一总数而算出所述修正系数，
所述修正电路在所采用的邻接画素单元较多的第二配置区域中，将经过加权得出的灵敏度值的总和除以在修正时要参照的画素的第二总数而算出所述修正系数。
4.根据权利要求1至3中任一项所述的固体摄像装置，其中，所述修正对象的画素单元区分为多个区域，所述多个区域包含：包括修正对象画素的区域，
所述修正电路以对于所述区分出的多个区域设定的加权系数，取得该各区域中加权灵敏度值的总和，且将包含邻接画素单元的加权过后的灵敏度值的总和的加权灵敏度值除以在修正时要参照的画素的总数而取得修正系数。
5.根据权利要求1所述的固体摄像装置，其中，所述修正电路对于所述修正对象的画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以及邻接于所述修正对象的画素单元的至少一个同色的画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以加权系数进行加权，且将经过加权得出的灵敏度值的总和除以在修正时要参照的画素单元的加权系数值的总和而算出所述修正系数。
6.根据权利要求5所述的固体摄像装置，其中，所述修正电路可依所述画素部中画素的配置区域而采用不同数量的邻接画素单元。
7.根据权利要求6所述的固体摄像装置，其中，所述修正电路在所采用的邻接画素单元较少的第一配置区域中，将所述经过加权得出的灵敏度值的总和除以在修正时要参照的画素单元的加权系数值的第一总和而算出所述修正系数，
所述修正电路在所采用的邻接画素单元较多的第二配置区域中，将经过加权得出的灵敏度值的总和除以在修正时要参照的画素单元的加权系数值的第二总和而算出所述修正系数。
8.根据权利要求3或7所述的固体摄像装置，其中，所述第一配置区域包含所述画素部的中央部侧的区域，
所述第二配置区域包含所述画素部的缘部侧区域。
9.根据权利要求1至3中任一项所述的固体摄像装置，其中，所述加权系数为常数。
10.根据权利要求1至3中任一项所述的固体摄像装置，其中，所述加权系数系符合画素的配置条件的函数。
11.根据权利要求9所述的固体摄像装置，其中，所述修正电路在通过所述加权系数进行加权而求出加权灵敏度值之际，以与函数产生关联的方式进行修正，且通过加权平均而取得所述修正系数，该函数显示符合画素的配置条件的状态的理论值。
12.根据权利要求10所述的固体摄像装置，对应所述画素单元的多个画素形成有一个微透镜，
所述函数显示依据透镜暗影的理论值的函数。
13.根据权利要求1至3中任一项所述的固体摄像装置，其中，所述加权系数对于所述修正对象的画素单元的画素所设定的第一加权系数，比对于其它画素单元的画素所设定的第二加权系数更大。
14.根据权利要求1至3中任一项所述的固体摄像装置，其中，所述加权系数将配置有所述修正对象的画素的对象区域所用的第一加权系数设为最大值，将其它画素配置区域所用的第二加权系数设定为符合该对象区域所用的配置条件的值。
15.根据权利要求1至3中任一项所述的固体摄像装置，其中，所述修正电路对于所述画素的灵敏度值或色差信号，取得同一所述画素单元或邻接的所述画素单元的中央值作为所述修正系数，以取代加权平均，且依据同一所述画素单元或邻接的所述画素单元的灵敏度值或色差信号计算出所述中央值。
16.根据权利要求1至3中任一项所述的固体摄像装置，其中，所述修正电路对于所述画素的灵敏度值或色差信号，取得同一所述画素单元或邻接的所述画素单元的模式值作为所述修正系数，以取代加权平均，且依据所述模式值的层级的下限、下一个层级间的度数、先前的层级间的度数、层级间的宽度计算出所述模式值。
17.一种应用于固体摄像装置的信号处理方法，该固体摄像装置具有：
画素部，配置有多个画素单元，所述画素单元包含进行光电转换的多个同色画素；及
修正电路，将成为修正对象的所述画素单元的画素的灵敏度以与所取得的修正系数产生关联的方式进行修正；
所述修正电路对于所述修正对象的画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以及邻接于所述修正对象的画素单元的至少一个同色的画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以加权系数进行加权，
且通过经过加权得出的灵敏度值的总和除以在修正时要参照的画素的总数而算出所述修正系数。
18.一种电子机器，具有：
固体摄像装置；及
光学系统，将被摄体像成像于所述固体摄像装置；
所述固体摄像装置具有：
画素部，配置有多个画素单元，所述画素单元包含进行光电转换的多个同色画素的；及
修正电路，将成为修正对象的所述画素单元的画素的灵敏度以与所取得的修正系数产生关联的方式进行修正；
所述修正电路对于所述修正对象的画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以及邻接于所述修正对象的画素单元的至少一个同色的画素单元中的在修正时要参照的各画素的画素信号所对应的灵敏度值，以加权系数进行加权，且将经过加权得出的灵敏度值的总和除以在修正时要参照的画素的总数而算出所述修正系数。
CN202110709169.4A 2020-12-24 2021-06-25 固体摄像装置、固体摄像装置的信号处理方法以及电子机器 Active CN114679551B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020215183A JP7499695B2 (ja) 2020-12-24 2020-12-24 固体撮像装置、固体撮像装置の信号処理方法、および電子機器
JP2020-215183 2020-12-24

Publications (2)

Publication Number Publication Date
CN114679551A CN114679551A (zh) 2022-06-28
CN114679551B true CN114679551B (zh) 2024-01-02

Family

ID=82071113

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110709169.4A Active CN114679551B (zh) 2020-12-24 2021-06-25 固体摄像装置、固体摄像装置的信号处理方法以及电子机器

Country Status (4)

Country Link
US (1) US11647305B2 (zh)
JP (1) JP7499695B2 (zh)
CN (1) CN114679551B (zh)
TW (1) TWI795796B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7487151B2 (ja) * 2021-06-29 2024-05-20 ゼタテクノロジーズ株式会社 固体撮像装置、固体撮像装置の製造方法、および電子機器
JP7496406B1 (ja) 2022-12-21 2024-06-06 ゼタテクノロジーズ株式会社 固体撮像装置、固体撮像装置の製造方法、および電子機器
WO2025028235A1 (ja) * 2023-08-02 2025-02-06 ソニーセミコンダクタソリューションズ株式会社 撮像素子および撮像装置

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006005694A (ja) * 2004-06-18 2006-01-05 Fujitsu Ltd 赤外線検出器の感度補正機能を有する赤外線撮像装置
JP2008028447A (ja) * 2006-07-18 2008-02-07 Winbond Electron Corp 画像信号のノイズ削減方法及び装置
JP2008263650A (ja) * 2008-07-07 2008-10-30 Fujifilm Corp 固体撮像装置
JP2011029379A (ja) * 2009-07-24 2011-02-10 Sony Corp 固体撮像装置とその製造方法並びにカメラ
CN103650480A (zh) * 2011-07-14 2014-03-19 索尼公司 图像处理设备、摄像设备、图像处理方法和程序
JP2014194440A (ja) * 2013-02-27 2014-10-09 Canon Inc 撮像装置
CN104285437A (zh) * 2012-05-10 2015-01-14 富士胶片株式会社 信号处理装置、摄像装置、信号校正方法
JP2015088947A (ja) * 2013-10-31 2015-05-07 ソニー株式会社 固体撮像装置、信号処理装置、および電子機器
CN104935900A (zh) * 2014-03-19 2015-09-23 智原科技股份有限公司 图像感测装置及色彩校正矩阵修正方法与查找表建立方法
CN105580352A (zh) * 2014-09-01 2016-05-11 索尼公司 固体摄像器件、固体摄像器件的信号处理方法和电子装置
CN105580349A (zh) * 2013-09-27 2016-05-11 富士胶片株式会社 图像处理装置、摄像装置、图像处理方法及图像处理程序
CN110036630A (zh) * 2016-12-08 2019-07-19 松下知识产权经营株式会社 固体摄像装置以及摄像装置

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3128486B2 (ja) * 1995-08-29 2001-01-29 三洋電機株式会社 撮像装置
JP3578384B2 (ja) * 1998-08-06 2004-10-20 シャープ株式会社 固体撮像素子の欠陥画素検出・補正装置
JP3795715B2 (ja) 1999-10-20 2006-07-12 自動車電機工業株式会社 ワイパー装置およびその取付方法
JP4054184B2 (ja) * 2001-10-03 2008-02-27 オリンパス株式会社 欠陥画素補正装置
EP1605403A1 (en) * 2004-06-08 2005-12-14 STMicroelectronics S.r.l. Filtering of noisy images
JP2006042267A (ja) * 2004-07-30 2006-02-09 Canon Inc 画像処理方法、画像処理装置、およびプログラム
JP4794978B2 (ja) * 2005-10-25 2011-10-19 キヤノン株式会社 画像処理装置、制御方法、及びプログラム
JP2007251698A (ja) * 2006-03-16 2007-09-27 Sharp Corp 欠陥画素補正方法、及び欠陥画素補正回路
JP2011114473A (ja) * 2009-11-25 2011-06-09 Hitachi Kokusai Electric Inc 画素欠陥補正装置
TWI684363B (zh) * 2015-02-13 2020-02-01 日商新力股份有限公司 圖像感測器、讀出控制方法、及電子機器
US10298888B2 (en) * 2015-08-25 2019-05-21 Kabushiki Kaisha Toshiba Adaptive analyzer of sensitivity difference of same color pixels and adaptive corrector of sensitivity difference of same color pixels
JP6851744B2 (ja) * 2016-07-29 2021-03-31 キヤノン株式会社 信号処理装置、信号処理方法、プログラムおよび記憶媒体
JP6759088B2 (ja) * 2016-12-20 2020-09-23 キヤノン株式会社 撮像装置とその制御方法及びプログラム
US11153514B2 (en) * 2017-11-30 2021-10-19 Brillnics Singapore Pte. Ltd. Solid-state imaging device, method for driving solid-state imaging device, and electronic apparatus
JP2020043435A (ja) * 2018-09-07 2020-03-19 ソニーセミコンダクタソリューションズ株式会社 画像処理装置、画像処理方法および画像処理プログラム

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006005694A (ja) * 2004-06-18 2006-01-05 Fujitsu Ltd 赤外線検出器の感度補正機能を有する赤外線撮像装置
JP2008028447A (ja) * 2006-07-18 2008-02-07 Winbond Electron Corp 画像信号のノイズ削減方法及び装置
JP2008263650A (ja) * 2008-07-07 2008-10-30 Fujifilm Corp 固体撮像装置
JP2011029379A (ja) * 2009-07-24 2011-02-10 Sony Corp 固体撮像装置とその製造方法並びにカメラ
JP5471117B2 (ja) * 2009-07-24 2014-04-16 ソニー株式会社 固体撮像装置とその製造方法並びにカメラ
CN103650480A (zh) * 2011-07-14 2014-03-19 索尼公司 图像处理设备、摄像设备、图像处理方法和程序
CN104285437A (zh) * 2012-05-10 2015-01-14 富士胶片株式会社 信号处理装置、摄像装置、信号校正方法
JP2014194440A (ja) * 2013-02-27 2014-10-09 Canon Inc 撮像装置
CN105580349A (zh) * 2013-09-27 2016-05-11 富士胶片株式会社 图像处理装置、摄像装置、图像处理方法及图像处理程序
JP2015088947A (ja) * 2013-10-31 2015-05-07 ソニー株式会社 固体撮像装置、信号処理装置、および電子機器
CN104935900A (zh) * 2014-03-19 2015-09-23 智原科技股份有限公司 图像感测装置及色彩校正矩阵修正方法与查找表建立方法
CN105580352A (zh) * 2014-09-01 2016-05-11 索尼公司 固体摄像器件、固体摄像器件的信号处理方法和电子装置
CN110036630A (zh) * 2016-12-08 2019-07-19 松下知识产权经营株式会社 固体摄像装置以及摄像装置

Also Published As

Publication number Publication date
US20220210354A1 (en) 2022-06-30
US11647305B2 (en) 2023-05-09
CN114679551A (zh) 2022-06-28
JP2022100908A (ja) 2022-07-06
TWI795796B (zh) 2023-03-11
TW202226824A (zh) 2022-07-01
JP7499695B2 (ja) 2024-06-14

Similar Documents

Publication Publication Date Title
US8031246B2 (en) Image sensor, electronic apparatus, and driving method of electronic apparatus
CN114679551B (zh) 固体摄像装置、固体摄像装置的信号处理方法以及电子机器
US11637975B2 (en) Solid state image sensor and electronic equipment
CN103220477B (zh) 固态图像传感器、信号处理方法以及电子装置
US20100309340A1 (en) Image sensor having global and rolling shutter processes for respective sets of pixels of a pixel array
US20100309351A1 (en) Image sensors and color filter arrays for charge summing and interlaced readout modes
JPWO2012046522A1 (ja) 撮像装置及び混色補正方法
US20060202932A1 (en) Single plate system color solid-state image pick-up device of microlens loading type and image input device
JP6970595B2 (ja) 固体撮像装置、固体撮像装置の製造方法、および電子機器
JP2012075050A (ja) 固体撮像素子、撮像装置、黒レベル決定方法
JP2009177436A (ja) 固体撮像装置、信号処理装置、および電子情報機器
JP7487151B2 (ja) 固体撮像装置、固体撮像装置の製造方法、および電子機器
JP7404447B1 (ja) 固体撮像装置、固体撮像装置の製造方法、および電子機器
JP7496406B1 (ja) 固体撮像装置、固体撮像装置の製造方法、および電子機器
JP7455945B1 (ja) 固体撮像装置、固体撮像装置の製造方法、および電子機器
JP7525586B2 (ja) 固体撮像装置、固体撮像装置の製造方法、および電子機器
JP2011114474A (ja) 撮像装置及び固体撮像素子の駆動方法
JP2011216730A (ja) 固体撮像素子及びその製造方法並びに撮像装置
JP2012178765A (ja) 固体撮像装置、固体撮像装置の駆動方法、及びカメラシステム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant