[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

JPWO2013042518A1 - デジタルカメラ - Google Patents

デジタルカメラ Download PDF

Info

Publication number
JPWO2013042518A1
JPWO2013042518A1 JP2013534650A JP2013534650A JPWO2013042518A1 JP WO2013042518 A1 JPWO2013042518 A1 JP WO2013042518A1 JP 2013534650 A JP2013534650 A JP 2013534650A JP 2013534650 A JP2013534650 A JP 2013534650A JP WO2013042518 A1 JPWO2013042518 A1 JP WO2013042518A1
Authority
JP
Japan
Prior art keywords
color
pixel
phase difference
pixels
normal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013534650A
Other languages
English (en)
Other versions
JP5547349B2 (ja
Inventor
小柴 賢明
賢明 小柴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujifilm Corp
Original Assignee
Fujifilm Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujifilm Corp filed Critical Fujifilm Corp
Priority to JP2013534650A priority Critical patent/JP5547349B2/ja
Application granted granted Critical
Publication of JP5547349B2 publication Critical patent/JP5547349B2/ja
Publication of JPWO2013042518A1 publication Critical patent/JPWO2013042518A1/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/40Optical focusing aids
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28Systems for automatic generation of focusing signals
    • G02B7/34Systems for automatic generation of focusing signals using different areas in a pupil plane
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/207Image signal generators using stereoscopic image cameras using a single 2D image sensor
    • H04N13/218Image signal generators using stereoscopic image cameras using a single 2D image sensor using spatial multiplexing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/257Colour aspects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/286Image signal generators having separate monoscopic and stereoscopic modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/296Synchronisation thereof; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/67Focus control based on electronic image sensor signals
    • H04N23/672Focus control based on electronic image sensor signals based on the phase difference signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • H04N25/58Control of the dynamic range involving two or more exposures
    • H04N25/581Control of the dynamic range involving two or more exposures acquired simultaneously
    • H04N25/585Control of the dynamic range involving two or more exposures acquired simultaneously with pixels having different sensitivities within the sensor, e.g. fast or slow pixels or pixels having different sizes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/703SSIS architectures incorporating pixels for producing signals other than image signals
    • H04N25/704Pixels specially adapted for focusing, e.g. phase difference pixel sets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/646Circuits for processing colour signals for image enhancement, e.g. vertical detail restoration, cross-colour elimination, contour correction, chrominance trapping filters

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Color Television Image Signal Generators (AREA)
  • Studio Devices (AREA)
  • Automatic Focus Adjustment (AREA)
  • Focusing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)

Abstract

色相が片寄った被写体であっても、正確に焦点調節を行う。固体撮像装置(20)は、通常画素(RN,GN,BN)と、第1位相差画素(RL,GL,BL)と、第2位相差画素(RR,GR,BR)有している。R,G,Bは、各画素に設けられたカラーフィルタの色を表している。色依存特性算出部(64)は、画面中央の通常画素(RN,GN,BN)からの出力信号を色ごとに平均化して、平均出力(PR,PG,PB)を算出する。色決定部(65)は、3原色の中から平均出力(PR,PG,PB)に基づいて、被写体の主たる色を決定する。AF制御部(27)は、第1位相差画素(RL,GL,BL)及び第2位相差画素(RR,GR,BR)のうち、決定された色の出力信号に基づき、撮影レンズ(14)の焦点調節を行う。

Description

本発明は、位相差方式の自動焦点調節を行うデジタルカメラに関する。
デジタルカメラの殆どは、焦点調節を自動的に行うオートフォーカス装置(AF装置)を備えている。このAF装置は、撮影レンズの結像状態を調べて、撮影レンズの全体またはその一部であるフォーカスレンズを移動して、CCDやCMOS等の固体撮像装置の撮像面上に、主要被写体の像を鮮明に結像させる。
AF装置には、コントラスト方式と、位相差方式とがある。コントラスト方式は、フォーカスレンズを光軸方向に移動しながら、隣接する画素間の信号差の積分値が最大となるレンズ位置を合焦位置と判断するものである。位相差方式は、撮影レンズの異なった部分を透過した光の入射位置のズレの有無とその大きさから、合焦位置を求めるものである。コントラスト方式は、固体撮像装置の画素信号を使用して合焦検出をするものであるから、安価に実施することが可能である。位相差方式では、フォーカスレンズを移動することなく、合焦状態を知ることができるため、迅速なAF制御が可能である。しかし、位相差センサが必要であるため、高級な機種に採用される傾向にある。
位相差方式のAF装置を備えたデジタルカメラは、例えば特許文献1及び2に記載されている。また、通常の画素の他に、2種類の位相差画素(第1位相差画素と第2位相差画素)を設け、特別な位相差センサを不要にした固体撮像装置も知られている(特許文献3〜5)。通常画素は、フォトダイオードの受光面の中心上に位置する通常開口部を有しており、この通常開口部を通して入射した光を光電変換する。第1位相差画素は、フォトダイオードの受光面の中心位置に対し第1の方向に偏心した第1偏心開口部を有している。第2位相差画素は、第1の方向とは反対側の第2の方向に偏心した第2偏心開口部を有している。
これらの通常開口部、第1偏心開口部、及び第2偏心開口部は、フォトダイオードが形成された半導体基板上を覆う遮光膜に形成されている。第1及び第2偏心開口部のサイズは、通常開口部のサイズよりも小さい。
位相差画素は、画素の中心線に対して斜め方向から入射する光に対して感度が高い。例えば、第1位相差画素は右斜め上からの入射光に対して感度が高く、第2位相差画素は左斜め上からの入射光に対して感度が高い。
第1位相差画素により得られる画像と第2位相差画素により得られる画像とは、撮影レンズの合焦状態に応じて左右方向にシフトする。この2つの画像の間のずれ量は、撮影レンズの焦点のずれ量に対応している。2つの画像は、撮影レンズが合焦しているときには一致してずれ量がゼロとなり、焦点がずれるほどそのずれ量は大きくなる。従って、第1及び第2位相差画素により得られる各画像のずれ方向と、各画像間のずれ量を検知することで、撮影レンズの焦点調節量を求めることができる。
特許文献3〜5に記載の固体撮像装置では、通常画素に加えて、第1及び第2位相差画素にもカラーフィルタが設けられている。この固体撮像装置を備えたデジタルカメラは、通常画像の撮像時には、通常画素、第1位相差画素、及び第2位相差画素のすべての画素を用いて通常画像の撮像を行うことができる。
特開2010−252277号公報 特開2007−158597号公報 特開2008−312073号公報 特開2009−157198号公報 特開2009−017152号公報
しかしながら、特許文献3〜5に記載の固体撮像装置では、第1及び第2位相差画素がカラーフィルタを有しているため、被写体の色によっては第1及び第2位相差画素からの出力レベルが著しく低下して、焦点調節量が正確に求まらないという問題がある。例えば、第1及び第2位相差画素が、赤色、緑色、及び青色の3色のカラーフィルタを有している場合に、赤色の被写体を撮像すると、緑色及び青色カラーフィルタを有する第1及び第2位相差画素の出力レベルが小さい。
本発明は、色相が片寄った被写体であっても、正確に焦点調節を行うことができるデジタルカメラを提供することを目的とする。
上記目的を達成するため、本発明のデジタルカメラは、撮影レンズと、固体撮像装置と、色依存特性算出部と、色決定部と、オートフォーカス検出部と、フォーカス機構とを備える。撮影レンズは、被写体の像を結像する。固体撮像装置は、光の入射方向に依存しない感度を有する複数の通常画素と、第1の入射方向に対して高い感度を有する複数の第1位相差画素と、第1の入射方向とは逆の第2の入射方向に対して高い感度を有する複数の第2位相差画素との3種類の画素が撮像面に配置され、各画素は少なくとも3原色のうちの1色のカラーフィルタを有する。色依存特性算出部は、被写体像のカラー撮像後に、通常画素と、第1及び第2位相差画素との一方または両方の出力信号を色毎に演算し、出力信号の色依存特性を算出する。色決定部は、色依存特性に基づいて特定な色を決定する。オートフォーカス検出部は、複数の第1及び第2位相差画素のうち、特定な色のカラーフィルタを有するものの出力に基づいて、撮影レンズの焦点調節量を求める。フォーカス機構は、焦点調節量に応じて、撮影レンズを合焦位置にセットする。
色依存特性算出部は、3原色を構成する赤色、緑色、青色の各色毎に、各画素の出力信号を平均化して、赤色平均出力Pと、緑色平均出力Pと、青色平均出力Pとを求め、そのうちの2色の出力比P/Pと、P/Pと、P/Pとの大きさから、特定色を決定することが好ましい。また、色依存特性算出部は、撮像面の中央領域内に存在する各画素の出力信号を用いて色依存特性を算出することが好ましい。
通常画素からの出力信号に基づき2次元の通常画像を生成する通常画像生成部を備えることが好ましい。また、通常画素からの出力信号と、第1及び第2位相差画素からの出力信号とに基づいて、通常画像よりもダイナミックレンジの広い広ダイナミックレンジ画像を生成する広ダイナミックレンジ画像生成部を備えることが好ましい。さらに、第1及び第2位相差画素からの出力信号に基づいて視差画像を生成する視差画像生成部を備えることが好ましい。
撮像面上の複数の画素は、2×2の画素ブロックに区画され、この各画像ブロックは、2つの通常画素と、第1及び第2位相差画素を有することが好ましい。3原色は、第1色、第2色、第3色であり、各画素ブロックは、同色のカラーフィルタを有することが好ましい。
画素ブロックは、第1の第1色画素ブロックと、第2の第1色画素ブロックと、第1の第2色画素ブロックと、第2の第2色画素ブロックと、第1の第3色画素ブロックと、第2の第3色画素ブロックとの6種であることが好ましい。第1の第N色画素ブロックは、第1の対角方向に配列された2つの通常画素と、第2の対角方向に配列された第1及び第2位相差画素とからなり、第N色のカラーフィルタを有する。第2の第N色画素ブロックは、第1の第N色画素ブロックとは、第1及び第2位相差画素の位置が逆に配置されている。
第1画素ブロック行と第2画素ブロック行とを有し、第1画素ブロック行と第2画素ブロック行とは、列方向に交互に配列されていることが好ましい。第1画素ブロック行には、第1の第1色画素ブロック、第1の第2色画素ブロック、第2の第1色画素ブロック、第2の第2色画素ブロックが、この順に行方向に繰り返し配列されている。第2画素ブロック行には、第1の第2色画素ブロック、第1の第3色画素ブロック、第2の第2色画素ブロック、第2の第3色画素ブロックが、この順に行方向に繰り返し配列されている。この場合には、第1色は緑色、第2色は青色、第3色は赤色であることが好ましい。
通常画素は、奇数行に所定のピッチで配置されており、第1及び第2位相差画素は、偶数行に上記ピッチで配置されており、第1及び第2位相差画素は、通常画素に対して、行方向に上記ピッチの半分だけずれた位置に配置されていてもよい。
この場合、3原色は、第1色、第2色、第3色であり、列方向に繰り返し配列された第1〜第4画素行を有することが好ましい。第1画素行には、第1色のカラーフィルタを有する通常画素と、第2色のカラーフィルタを有する通常画素とが上記ピッチで交互に配列されている。第2画素行には、第1色のカラーフィルタを有する第1位相差画素と、第2色のカラーフィルタを有する第1位相差画素と、第1色のカラーフィルタを有する第2位相差画素と、第2色のカラーフィルタを有する第2位相差画素とが、この順に上記ピッチで繰り返し配列されている。第3画素行には、第2色のカラーフィルタを有する通常画素と、第3色のカラーフィルタを有する通常画素とが上記ピッチで交互に配列されている。第4画素行には、第2色のカラーフィルタを有する第1位相差画素と、第3色のカラーフィルタを有する第1位相差画素と、第2色のカラーフィルタを有する第2位相差画素と、第3色のカラーフィルタを有する第2位相差画素とが、この順に上記ピッチで繰り返し配列されている。この場合、第1色は青色、第2色は緑色、第3色は赤色であることが好ましい。
通常画素、第1位相差画素、第2位相差画素のそれぞれは、フォトダイオードと、遮光膜と、カラーフィルタ上に配置されたマイクロレンズとを有することが好ましい。この遮光膜は、通常画素のフォトダイオードの中心上に形成された通常開口と、第1位相差画素のフォトダイオードの中心上から一方向にずれた位置に形成された第1偏心開口と、第2位相差画素のフォトダイオードの中心上から一方向とは反対の方向にずれた位置に形成された第2偏心開口とを有する。
各通常画素は、フォトダイオードと、このフォトダイオード上の遮光膜に形成された開口と、この開口の中心線上に配置されたマイクロレンズとを有し、各第1位相差画素は、フォトダイオードと、このフォトダイオード上の遮光膜に形成された開口と、この開口の中心線から一方向にずれて配置された径が小さいマイクロレンズとを有し、各第2位相差画素は、フォトダイオードと、このフォトダイオード上の遮光膜に形成された開口と、この開口の中心線から一方向とは反対側にずれて配置された径が小さいマイクロレンズとを有するものであってもよい。
本発明によれば、各色毎に、通常画素と、第1及び第2位相差画素とのいずれか一方または両方からの出力信号を演算して、出力信号の色依存特性を算出する。この算出された色依存特性に基づいて複数色の中から1つの色を決定し、決定された色と同じカラーフィルタを有する第1及び第2位相差画素からの出力信号に基づいて焦点調節量を求めるので、色相の片寄った被写体でも、正確に焦点調節を行うことができる。
デジタルカメラのブロック図である。 固体撮像装置の平面図である。 図2のIII−III線に沿った断面図である。 図2のIV−IV線に沿った断面図である。 遮光膜の平面図である。 画像処理回路を示すブロック図である。 撮影手順を示すフローチャートである。 AF処理を示すフローチャートである。 第1及び第2位相差画素の変形例を示す断面図である。 固体撮像装置の別の例を示す平面図である。
図1において、デジタルカメラ10はCPU11を有する。CPU11は、シャッタボタンや各種操作ボタンを含む操作部12からの制御信号に基づき、メモリ(図示せず)から読み出した各種プログラムを逐次実行して、デジタルカメラ10の各部を統括的に制御する。
デジタルカメラ10は、通常撮像モードと、視差撮像モードと、広ダイナミックレンジ画像撮像モードを有している。通常撮像モードは、通常画像(2次元の静止画)を生成する。視差撮像モードは、立体視用の視差画像を生成する。広DR撮像モードは、通常画像よりもダイナミックレンジが広い広ダイナミックレンジ画像(以下、広DR画像という)を生成する。デジタルカメラ10の撮像モードの切り替えは操作部12で行われる。
レンズユニット13には、撮影レンズ14及びメカシャッタ15が組み込まれている。撮影レンズ14には、変倍レンズ16とフォーカスレンズ17が含まれている。変倍レンズ16及びフォーカスレンズ17は、それぞれ変倍機構18及びフォーカス機構19により駆動され、撮影光軸O1の方向に移動する。メカシャッタ15、変倍機構18、及びフォーカス機構19は、レンズドライバ21を介してCPU11によって動作制御される。ズーミング時には、変倍レンズ16とフォーカスレンズ17とが光軸方向に移動する。焦点調節時には、フォーカスレンズ17が光軸方向に移動する。なお、撮影レンズ14の全体を移動して焦点調節をすることも可能である。
メカシャッタ15は、固体撮像装置20への被写体光の入射を阻止する閉じ位置と、被写体光の入射を許容する開き位置との間で移動するシャッタ羽根(図示せず)を有する。メカシャッタ15は、シャッタ羽根を各位置に移動させることによって、撮影レンズ14から固体撮像装置20へと至る光路を開放または遮断する。また、レンズユニット13には、固体撮像装置20に入射する被写体光の光量を制御する絞り(図示せず)が含まれている。
固体撮像装置20は、CMOS型イメージセンサであり、撮影レンズ14からの被写体光を電気的な信号に変換して出力する。CMOSドライバ23は、CPU11の制御の下で固体撮像装置20の駆動を制御する。
画像処理回路22は、固体撮像装置20からの撮像信号に対して階調変換、ホワイトバランス補正、γ補正処理などの各種処理を施して画像データを生成する。また、画像処理回路22は、通常撮像モード時には、画像処理された画像データから通常画像を生成する。視差撮像モード時には、L視点画像とR視点画像で構成される視差画像を生成する。広DR撮像モード時には広DR画像を生成する。また、画像処理回路22は、焦点調節のために、各撮像モード中に、L焦点検出用画像データとR焦点検出用画像データを生成する。
AF検出部26は、L焦点検出用画像データとR焦点検出用画像データに基づき、撮影レンズ14を合焦させるための焦点調節量(デフォーカス量)を求める。CPU11のAF制御部27は、AF検出部26が求めた焦点調節量に基づき、レンズドライバ21を介してフォーカスレンズ17を移動させて焦点調節を行う。なお、焦点調節量の調節量の符号からフォーカスレンズ17の移動方向が定まる。
圧縮伸長処理回路29は、画像処理回路22で処理された各画像の画像データに対して圧縮処理を施す。また、圧縮伸長処理回路29は、メディアI/F30を介してメモリカード31から読み出された圧縮画像データに対して伸長処理を施す。メディアI/F30は、メモリカード31に対する各画像データの記録及び読み出しを行う。表示部32は、液晶ディスプレイなどであり、スルー画(ライブビュー画像)や再生画像などを表示する。この表示部32は、視差画像に対しては立体画像を表示する。
図2において、固体撮像装置20の撮像面20aには、通常画素R,G,Bと、第1位相差画素R,G,Bと、第2位相差画素R,G,Bが配置されている。これらの画素は、正方配列されている。ここで、R,G,Bは、各画素に設けられたカラーフィルタの3原色を表している。Rは赤色、Gは緑色、Bは青色を表す。各画素は、カラーフィルタの色に対応した波長の光を選択的に受光する。
通常画素R,G,Bは、通常撮像モード時に、通常画像(静止画)データの生成に用いられる画素である。通常画素R,G,Bの感度は、入射光の入射方向には依存しない。なお、この通常画素R,G,Bのうち、画面の中央部にあるものは、AF時の色の決定にも用いられる。
第1位相差画素R,G,Bと第2位相差画素R,G,Bは、視差画像データの作成及び焦点検出用画像データの作成に用いられる画素である。第1位相差画素R,G,Bと第2位相差画素R,G,Bの感度は、入射光の入射方向に依存する。第1位相差画素R,G,Bと、第2位相差画素R,G,Bとは、互いに異なる特定の方向からの入射光に対して感度が高い。
2×2の正方配列された4つの画素により、第1R画素ブロック34R1、第2R画素ブロック34R2、第1G画素ブロック34G1、第2G画素ブロック34G2、第1B画素ブロック34B1、第2B画素ブロック34B2がそれぞれ構成されている。
第1R画素ブロック34R1は、第1の対角方向(右上から左下に向かう方向)に配列された2つの通常画素Rと、第2の対角方向(左上から右下に向かう方向)に配列された第1位相差画素R及び第2位相差画素Rを有している。第2R画素ブロック34R2は、第1位相差画素R及び第2位相差画素Rの位置が第1R画素ブロック34R1と逆であること以外は、第1R画素ブロック34R1と同一である。
第1G画素ブロック34G1は、第1の対角方向に配列された2つの通常画素Gと、第2の対角方向に配列された第1位相差画素G及び第2位相差画素Gを有している。第2G画素ブロック34G2は、第1位相差画素G及び第2位相差画素Gの位置が第1G画素ブロック34G1と逆であること以外は、第1G画素ブロック34G1と同一である。
第1B画素ブロック34B1は、第1の対角方向に配列された2つの通常画素Bと、第2の対角方向に配列された第1位相差画素B及び第2位相差画素Bを有している。第2B画素ブロック34B2は、第1位相差画素B及び第2位相差画素Bの位置が第1B画素ブロック34B1と逆であること以外は、第1B画素ブロック34B1と同一である。
第1G画素ブロック34G1、第1B画素ブロック34B1、第2G画素ブロック34G2、第2B画素ブロック34B2が、この順に行方向に繰り返し配列され、第1画素ブロック行36が構成されている。また、第1R画素ブロック34R1、第1G画素ブロック34G1、第2R画素ブロック34R2、第2G画素ブロック34G2が、この順に行方向に繰り返し配列され、第2画素ブロック行37が構成されている。第1画素ブロック行36と第2画素ブロック行37は、列方向に交互に配列されている。
固体撮像装置20の各画素には、周知のように、画素回路(図示せず)が設けられている。この画素回路は、各画素のフォトダイオード41(図3、4参照)に蓄積された信号電荷を信号電圧に変換して出力する。また、固体撮像装置20には、画素回路を駆動するための複数の駆動線(図示せず)と、各画素から信号電圧を読み出すための複数の信号線(図示せず)が設けられている。なお、信号線に読み出された信号電圧は、出力回路やアンプ(いずれも図示せず)を経て出力信号として画像処理回路22に出力される。
図3及び図4において、P型シリコンで形成された半導体基板(Psub)40の表層には、N型層により形成されたフォトダイオード(PD)41が設けられている。また、半導体基板40内には、図示は省略するが、上記の画素回路が形成されている。
半導体基板40上には、例えば酸化シリコン(SiO)で形成された透明な絶縁膜43が設けられている。絶縁膜43上には、例えばタングステンで形成された遮光膜44が設けられている。
図5に示すように、遮光膜44には、通常開口45と、第1偏心開口46aと、第2偏心開口46bとが形成されている。これらの開口は、円形である。第1及び第2偏心開口46a,46bは、通常開口45よりも開口径が小さい。
通常開口45は、通常画素R,G,Bに設けられており、その中心は、PD41の中心線上に位置している。これにより、通常画素R,G,Bは、PD41の表面上が全て開口されている。
第1偏心開口46aは、第1位相差画素R,G,Bに設けられており、その中心は、PD41の中心線から右方向にずれている。これにより、第1位相差画素R,G,Bは、PD41の表面上の右側領域が開口されている。
第2偏心開口46bは、第2位相差画素R,G,Bに設けられており、その中心は、PD41の中心線から左方向にずれている。これにより、第2位相差画素R,G,Bは、PD41の表面上の左側領域が開口されている。
遮光膜44上には、表面が平坦で透明な平坦化層48が設けられている。この平坦化層48上にはカラーフィルタアレイ50が設けられている。カラーフィルタアレイ50は、赤色カラーフィルタ50Rと、緑色カラーフィルタ50Gと、青色カラーフィルタ50Bで構成されている。
赤色カラーフィルタ50Rは、通常画素R、第1位相差画素R、第2位相差画素RのPD41の上方に配置されており、これらのPD41には赤色光が入射する。緑色カラーフィルタ50Gは、通常画素G、第1位相差画素G、第2位相差画素GのPD41の上方に配置されており、これらのPD41には緑色光が入射する。青色カラーフィルタ50Bは、通常画素B、第1位相差画素B、第2位相差画素BのPD41の上方に配置されており、これらのPD41には青色光が入射する。
カラーフィルタアレイ50上には、各PD41の中心線に光軸O2が一致するようにマイクロレンズ52がそれぞれ設けられている。
通常画素R,G,Bのマイクロレンズ52に左斜め方向から入射した入射光54LはPD41の右側領域に集光され、右斜め方向から入射した入射光54RはPD41の左側領域に集光される。このため、通常画素R,G,Bは、入射光54Lと入射光54Rの両方に対して感度が高く、入射光の方向依存性はない。なお、光軸O2に沿って入射する入射光は、PD41の中央に入射する。
第1位相差画素R,G,Bのマイクロレンズ52に左斜め方向から入射した入射光54Lは第1偏心開口46aを通過してPD41の右側領域に集光されるが、右斜め方向から入射した入射光54Rは遮光膜44により遮光される。このため、第1位相差画素R,G,Bは、入射光54Lに対して感度が高い。
第2位相差画素R,G,Bのマイクロレンズ52に右斜め方向から入射した入射光54Rは第2偏心開口46bを通過してPD41の左側領域に集光されるが、左斜め方向から入射した入射光54Lは遮光膜44により遮光される。このため、第2位相差画素R,G,Bは、入射光54Rに対して感度が高い。
図6において、画像処理回路22は、通常画像生成部58と、視差画像生成部59と、広DR画像生成部60と、焦点検出用画像生成部61とを有している。
通常画像生成部58は、通常撮像モード時に動作する。通常画像生成部58は、通常画素R,G,Bのからの出力信号に基づき、通常画像データを生成する。
視差画像生成部59は、視差撮像モード時に動作する。視差画像生成部59は、第1位相差画素R,G,Bからの出力信号に基づいてL視点画像データを生成し、第2位相差画素R,G,Bからの出力信号に基づいてR視点画像データを生成する。これにより、L,R視点画像データを有する視差画像データが得られる。
広DR画像生成部60は、広DR撮像モード時に動作する。広DR画像生成部60は、通常画素R,G,B、第1位相差画素R,G,B、及び第2位相差画素R,G,Bのすべての出力信号に基づいて、広DR画像データを生成する。
前述のように、第1及び第2偏心開口46a,46bは、通常開口45より開口径が小さいため、第1位相差画素R,G,B及び第2位相差画素R,G,Bへの入射光量は、通常画素R,G,Bへの入射光量よりも少ない。このため、第1位相差画素R,G,B及び第2位相差画素R,G,Bは低感度画素であり、通常画素R,G,Bは高感度画素である。低感度画素からの出力信号と高感度画素からの出力信号とを加算することにより、広DR画像データが得られる。この方法は、特開2011−059337号などで知られている。
通常撮像モード時または広DR撮像モード時には、撮像動作が所定のサイクルで繰り返し行われ、通常画像または広DR画像が表示部32に出力され、スルー画表示が行われる。また、視差撮像モード時には、L視点画像及びR視点画像が所定のサイクルで作成され、表示部32に送られて立体画像が表示される。なお、表示部32が立体表示用でない場合には、L視点画像またはR視点画像の一方が表示部32に表示される。これにより、表示部32に2次元画像または3次元画像のスルー画が表示される。
焦点検出用画像生成部61は、全ての撮像モード時に動作する。焦点検出用画像生成部61は、第1位相差画素R,G,B及び第2位相差画素R,G,Bからの出力信号に基づき、位相差AFに用いられるL焦点検出用画像データ及びR焦点検出用画像データを生成する。具体的には、焦点検出用画像生成部61は、第1位相差画素R,G,B及び第2位相差画素R,G,Bから、赤(R)、緑(G)、青(B)のいずれか1色に対応する出力信号のみを用いてL焦点検出用画像データ及びR焦点検出用画像データを生成する。
焦点検出用画像生成部61は、色依存特性算出部64と色決定部65を有する。色依存特性算出部64は、撮像面20aの中央領域に含まれる通常画素R,G,Bからの出力信号を、対応する色ごとに平均化して平均値(平均出力)を求める。具体的には、中央領域に含まれる通常画素Rの出力信号を平均化して赤色平均出力Pを求める。同様に、中央領域に含まれる通常画素Gの出力信号から緑色平均出力Pを求め、中央領域に含まれる通常画素Bの出力信号から青色平均出力Pを求める。
色決定部65は、色依存特性算出部64により得られた各平均出力P,P,Pに基づき、赤色、緑色、青色から1つの色を決定する。具体的には、色決定部65は、赤色平均出力Pと青色平均出力Pとの出力比(P/P)、赤色平均出力Pと緑平均出力Pとの出力比(P/P)、青色平均出力Pと緑色平均出力Pとの出力比(P/P)をそれぞれ求め、所定値α,β,γと比較判定することにより1つの色を決定する。P/P>αでかつP/P>βである場合には赤色に決定する。P/P>αでかつP/P<βである場合、またはP/P<αでかつP/P<γである場合には緑色に決定する。そして、P/P<αでかつP/P>γである場合には青色に決定する。
焦点検出用画像生成部61は、第1位相差画素R,G,B及び第2位相差画素R,G,Bのうち、色決定部65が決定した色に対応する画素からの出力信号に基づき、L焦点検出用画像データ及びR焦点検出用画像データを生成する。例えば、赤色に決定されたときには、第1位相差画素Rと第2位相差画素Rを用いてL焦点検出用画像データ及びR焦点検出用画像データを作成する。これらの画像データは、AF検出部26に出力される。
所定値α,β,γは「1」よりも大きいことが好ましい。この場合には、被写体の主たる色が色決定部65により決定され、この色に対応した第1及び第2位相差画素からの出力信号に基づいてL焦点検出用画像データ及びR焦点検出用画像データが生成される。例えば、画面の中央に存在する主要被検体の主たる色が緑色の場合には、緑色が色決定部65により決定される。これにより、主要被写体の色が片寄ったものであっても、正確に焦点調節量が求められる。
次に、図7及び図8のフローチャートを参照しながらデジタルカメラ10の作用を説明する。操作部12により通常撮像モード、視差撮像モード、広DR撮像モードのうちいずれか1つが選択されると、CPU11は、レンズドライバ21を介してメカシャッタ16の動作を制御するとともに、CMOSドライバ23を介して固体撮像装置20を駆動する。
メカシャッタ15が開放されると、固体撮像装置20に被写体からの光が入射する。通常画素R,G,B、第1位相差画素R,G,B、及び第2位相差画素R,G,Bの各PD41は、入射光を光電変換して信号電荷を発生し、これを蓄積する。これらの信号電荷は、CMOSドライバ23の制御の下、画素回路により信号電圧として時系列に読み出される。読み出された各信号電圧は、出力回路(図示せず)を経て、固体撮像装置20から撮像信号として出力される。この撮像信号は、アンプ、A/D変換器(いずれも図示せず)を経て、画像信号として画像処理回路22に送られる。
この画像処理回路22は、各色の画像信号に対して画像処理(階調変換、ホワイトバランス補正、γ補正、色補正等)を施す。初期状態では通常撮像モードであるため、画像処理された3色の画像データは、通常画像生成部58に送られる。この通常画像生成部58は、撮影前はスルー画を生成し、表示部32に表示する。
スルー画の表示中に、画像処理回路22の色依存特性算出部64は、撮像面20aの中央領域に含まれる通常画素R,G,Bからの出力信号を、対応する色ごとに平均化して平均出力P,P,Pを算出する。得られた各平均出力P,P,Pは色決定部65に送られる。
色決定部65は、平均出力P,P,Pに基づき、P/P>αでかつP/P>βである場合には、被写体の主要な色が赤色であると決定する。P/P>αでかつP/P<βである場合、またはP/P<αでかつP/P<γである場合には、被写体の主要な色が緑色であると決定する。そして、P/P<αでかつP/P>γである場合には青色に決定する。
焦点検出用画像生成部61は、色決定部65が決定した色が赤色である場合には、全領域内の第1位相差画素Rを用いてL焦点検出用画像データを生成し、全領域内の第2位相差画素Rを用いてR焦点検出用画像データを生成する。同様に、色決定部65が決定した色が緑色である場合には、第1位相差画素Gを用いてL焦点検出用画像データを生成し、第2位相差画素Gを用いてR焦点検出用画像データを生成する。色決定部65が決定した色が青色である場合には、第1位相差画素Bを用いてL焦点検出用画像データを生成し、第2位相差画素Bを用いてR焦点検出用画像データを生成する。L焦点検出用画像とR焦点検出用画像は、合焦時には一致しているが、合焦していない場合には、その程度に応じて左右方向にずれている。
AF検出部26は、L焦点検出用画像データとR焦点検出用画像データを解析して、L焦点検出用画像とR焦点検出用画像のずれ方向及びずれ量を求め、レンズユニット13の焦点調節量(デフォーカス量)を算出する。
AF制御部27は、AF検出部26により算出された焦点調節量に基づき、レンズドライバ21を介して、フォーカス機構19によりフォーカスレンズ17を光軸方向に移動することで焦点調節を行う。なお、フォーカスレンズ17の移動方向は、焦点調節量の正負に応じて決まる。この位相差AFは、特許第2959142号、特開2009−128892号、特開2007−158597号などに詳細に記載されているので、ここでは詳しい説明を省略する。このAF制御は、スルー画の表示中に所定のサイクルで繰り返し行われる。
操作部12のレリーズボタンが押下されて撮影が指示されると、固体撮像装置20の各画素が強制的にリセットされてから、信号電荷の蓄積を開始する。そして、被写体の明るさに応じた露光時間が経過すると、メカシャッタ15が閉じて露光が終了する。この後に、固体撮像装置20から1フレーム分の出力信号が取り出され、通常画像生成部58により通常画像データが生成される。この通常画像データは、圧縮伸張処理回路29にて圧縮された後、メディアI/F30を経由してメモリカード31に記録される。なお、固体撮像装置20からの信号取り出し後に、メカシャッタ15が開口し、スルー画の撮像が再開される。
視差撮像モード時には、視差画像生成部59によりL視点画像データ及びR視点画像データが生成される。このL視点画像データ及びR視点画像データは、視差画像データとして1つの画像ファイルに圧縮されて、メモリカード31に記録される。また、広DR撮像モード時には、広DR画像生成部60により広DR画像データが生成される。この広DR画像データは、圧縮された後、メモリカード31に記録される。
なお、第1及び第2偏心開口46a,46bによって、第1位相差画素R,G,B、及び第2位相差画素R,G,Bの感度が入射光の方向性依存を得るように構成しているが、これに代えて、マイクロレンズの形状や配置を変更することにより、入射光の方向性依存を与えてもよい。
例えば、図9に示す固体撮像装置67では、第1位相差画素R,G,Bは、第1偏心マイクロレンズ68aを有しており、第2位相差画素R,G,Bは、第2偏心マイクロレンズ68bを有している。第1位相差画素R,G,B及び第2位相差画素R,G,Bは、いずれも通常開口45を有している。これらの偏心マイクロレンズ68a,68bは、通常画素R,G,Bのマイクロレンズ52よりもサイズが小さい。
第1偏心マイクロレンズ68aは、その下方のPD41の中心から左方向にずれた位置に形成されている。第1偏心マイクロレンズ68aは、その下方のPD41に入射光54Lを集光させる。また、第2偏心マイクロレンズ68aは、その下方のPD41の中心から右方向にずれた位置に形成されている。第2偏心マイクロレンズ68bは、その下方のPD41に入射光54Rを集光させる。これにより、第1位相差画素R,G,Bは入射光54Lに対して感度が高く、第2位相差画素R,G,Bは入射光54Rに対して感度が高い。
図2に示す固体撮像装置20では、2×2の各画素ブロックの対角方向に第1及び第2位相画素を配置しているが、この配置に限られず、各画素ブロックの4つの画素のうち、2つの画素が第1及び第2位相画素であればよい。
次に、図10を用いて固体撮像装置の別の例について説明する。この固体撮像装置70では、画素配列が、いわゆるEXR配列パターンとなっている。固体撮像装置70は、第1画素行71、第2画素行72、第3画素行73、第4画素行74を有し、この配列パターンで列方向に繰り返し配列されている。第1画素行71では、通常画素Bと通常画素GがピッチPで交互に配列されている。第2画素行72では、第1位相差画素B、第1位相差画素G、第2位相差画素B、第2位相差画素Gが、この順にピッチPで繰り返し配列されている。第3画素行73では、通常画素Gと通常画素RがピッチPで交互に配列されている。第4画素行74では、第1位相差画素G、第1位相差画素R、第2位相差画素G、第2位相差画素Rが、この順にピッチPで繰り返し配列されている。
第1位相差画素R,G,B、及び第2位相差画素R,G,Bは、偶数行に位置しており、奇数行に位置する通常画素R,G,Bに対して、行方向に半ピッチ(P/2)だけずれた位置に配列されている。すなわち、正方配列である第1位相差画素R,G,B、及び第2位相差画素R,G,Bと、正方配列である通常画素R,G,Bとが、行方向及び列方向に半ピッチだけずらして位置に重ねられている。なお、通常画素R,G,B、第1位相差画素R,G,B、及び第2位相差画素R,G,Bの構成は、図3〜5と同じである。
この固体撮像装置70においても、固体撮像装置20と同様に、L及びR焦点検出用画像、通常画像、視差画像、及び広DR画像の生成が行われる。
固体撮像装置の画素配列としては、このEXR配列パターン以外に、ハニカム配列パターン等の各種配列パターンを用いることができる。
なお、表示部32としては、液晶ディスプレイなどの2次元画像表示を行うもの、または、3次元画像表示を行うものが用いられる。この3次元画像表示には、レンチキュラ方式、視差バリア方式、パララックスバリア方式、アナグリフ方式、フレームシーケンシャル方式、ライトディレクション方式などが用いられている。
上記実施形態では、色依存特性算出部64は、カラーフィルタの色別に、撮像面20aの中央領域に含まれる通常画素R,G,Bからの出力信号を平均化して平均出力P,P,Pを求めているが、中央領域以外の領域や全領域に含まれる通常画素R,G,Bからの出力信号を平均化して平均出力P,P,Pを求めてもよい。
また、色依存特性算出部64は、通常画素R,G,Bに加えて、第1位相差画素R,G,B及び第2位相差画素R,G,Bからの出力信号を平均化して平均出力P,P,Pを求めてもよい。また、色依存特性算出部64は、第1位相差画素R,G,B及び第2位相差画素R,G,Bからの出力信号のみを平均化して平均出力P,P,Pを求めてもよい。さらに、色依存特性算出部64は、出力信号の平均値に限られず、出力信号の積算値等を算出してもよい。
また、上記実施形態では、画像処理回路22に色依存特性算出部64と色決定部65を設けているが、これらを固体撮像装置20,67,70やCPU11に組み込んでもよい。
撮像モードとしては、通常撮像モード、視差撮像モード、広DR撮像モードの他に、高速撮像モードを設けてもよい。この高速撮像モードは、例えば、固体撮像装置20の奇数行または偶数行の画素の読み出しを行う、いわゆる間引き読み出しを行うモードである。なお、図2に示す画素配列では、奇数行と偶数行のいずれにも、通常画素R,G,B、第1位相差画素R,G,B、及び第2位相差画素R,G,Bのすべてが含まれているため、高速撮像モードでは、通常画像、視差画像、広DR画像を高速読み出しすることができる。なお、高速撮像モードでは、解像度は低下するものの、短時間で各撮像が行われる。
また、上記実施形態では、被写体の主たる色に応じて位相差画素を選択しているが、普通は緑色が選択されるように、α、β、γの値を定めてもよい。そして、被写体の赤色が相当に強い場合または青色が相当に強い場合に、赤色または青色を選択し、選択した色の位相差画素からAF制御を行う。また、AF制御に利用する位相差画素は、画面の中央、すなわち、固体撮像装置の撮像面の中央に存在するものだけを用いてもよい。
また、固体撮像装置20,67,70は、赤色、緑色、青色の原色カラーフィルタ50R,50G,50Bを有しているが、これに代えて、黄色、マゼンタ色、シアン色の補色カラーフィルタを用いてもよい。さらに、4色以上のカラーフィルタを用いてもよい。さらに、固体撮像装置20,67,70は、CMOS型に限られず、CCD型であってもよい。
10 デジタルカメラ
17 フォーカスレンズ
20,67,70 固体撮像装置
34R1 第1R画素ブロック
34R2 第2R画素ブロック
34G1 第1G画素ブロック
34G2 第2G画素ブロック
34B1 第1B画素ブロック
34B2 第2B画素ブロック
41 フォトダイオード
44 遮光膜
45 通常開口
46a,46b 第1,第2偏心開口
50,71 カラーフィルタアレイ
50G,50B,50R カラーフィルタ
,G,B 通常画素
,G,B 第1位相差画素
,G,B 第2位相差画素
上記目的を達成するため、本発明のデジタルカメラは、撮影レンズと、固体撮像装置と、色依存特性算出部と、色決定部と、オートフォーカス検出部と、フォーカス機構とを備える。撮影レンズは、被写体の像を結像する。固体撮像装置は、光の入射方向に依存しない感度を有する複数の通常画素と、第1の入射方向に対して高い感度を有する複数の第1位相差画素と、第1の入射方向とは逆の第2の入射方向に対して高い感度を有する複数の第2位相差画素との3種類の画素が撮像面に配置され、各画素は少なくとも3原色のうちの1色のカラーフィルタを有する。色依存特性算出部は、被写体像のカラー撮像後に、通常画素と、第1及び第2位相差画素との一方または両方の出力信号を色毎に演算し、出力信号の色依存特性を算出する。色決定部は、色依存特性に基づいて特定な色を決定する。オートフォーカス検出部は、複数の第1及び第2位相差画素のうち、特定な色のカラーフィルタを有するものの出力信号に基づいて、撮影レンズの焦点調節量を求める。フォーカス機構は、焦点調節量に応じて、撮影レンズを合焦位置にセットする。
色依存特性算出部は、3原色を構成する赤色、緑色、青色の各色毎に、各画素の出力信号を平均化して、赤色平均出力信号と、緑色平均出力信号と、青色平均出力信号とを求め、そのうちの2色の信号比P/Pと、P/Pと、P/Pとの大きさから、特定色を決定することが好ましい。また、色依存特性算出部は、撮像面の中央領域内に存在する各画素の出力信号を用いて色依存特性を算出することが好ましい。
焦点検出用画像生成部61は、色依存特性算出部64と色決定部65を有する。色依存特性算出部64は、撮像面20aの中央領域に含まれる通常画素R,G,Bからの出力信号を、対応する色ごとに平均化して平均値(平均出力信号)を求める。具体的には、中央領域に含まれる通常画素Rの出力信号を平均化して赤色平均出力信号を求める。同様に、中央領域に含まれる通常画素Gの出力信号から緑色平均出力信号を求め、中央領域に含まれる通常画素Bの出力信号から青色平均出力信号を求める。
色決定部65は、色依存特性算出部64により得られた各平均出力信号,P,Pに基づき、赤色、緑色、青色から1つの色を決定する。具体的には、色決定部65は、赤色平均出力信号と青色平均出力信号との信号比(P/P)、赤色平均出力信号と緑平均出力信号との信号比(P/P)、青色平均出力信号と緑色平均出力信号との信号比(P/P)をそれぞれ求め、所定値α,β,γと比較判定することにより1つの色を決定する。P/P>αでかつP/P>βである場合には赤色に決定する。P/P>αでかつP/P<βである場合、またはP/P<αでかつP/P<γである場合には緑色に決定する。そして、P/P<αでかつP/P>γである場合には青色に決定する。
スルー画の表示中に、画像処理回路22の色依存特性算出部64は、撮像面20aの中央領域に含まれる通常画素R,G,Bからの出力信号を、対応する色ごとに平均化して平均出力信号,P,Pを算出する。得られた各平均出力信号,P,Pは色決定部65に送られる。
色決定部65は、平均出力信号,P,Pに基づき、P/P>αでかつP/P>βである場合には、被写体の主要な色が赤色であると決定する。P/P>αでかつP/P<βである場合、またはP/P<αでかつP/P<γである場合には、被写体の主要な色が緑色であると決定する。そして、P/P<αでかつP/P>γである場合には青色に決定する。
上記実施形態では、色依存特性算出部64は、カラーフィルタの色別に、撮像面20aの中央領域に含まれる通常画素R,G,Bからの出力信号を平均化して平均出力信号,P,Pを求めているが、中央領域以外の領域や全領域に含まれる通常画素R,G,Bからの出力信号を平均化して平均出力信号,P,Pを求めてもよい。
また、色依存特性算出部64は、通常画素R,G,Bに加えて、第1位相差画素R,G,B及び第2位相差画素R,G,Bからの出力信号を平均化して平均出力信号,P,Pを求めてもよい。また、色依存特性算出部64は、第1位相差画素R,G,B及び第2位相差画素R,G,Bからの出力信号のみを平均化して平均出力信号,P,Pを求めてもよい。さらに、色依存特性算出部64は、出力信号の平均値に限られず、出力信号の積算値等を算出してもよい。

Claims (16)

  1. 被写体の像を結像する撮影レンズと、
    光の入射方向に依存しない感度を有する複数の通常画素と、第1の入射方向に対して高い感度を有する複数の第1位相差画素と、前記第1の入射方向とは逆の第2の入射方向に対して高い感度を有する複数の第2位相差画素との3種類の画素が撮像面に配置され、各画素は少なくとも3原色のうちの1色のカラーフィルタを有する固体撮像装置と、
    前記被写体像のカラー撮像後に、前記通常画素と、前記第1及び第2位相差画素との一方または両方の出力信号を色毎に演算し、前記出力信号の色依存特性を算出する色依存特性算出部と、
    前記色依存特性に基づいて特定な色を決定する色決定部と、
    前記複数の第1及び第2位相差画素のうち、前記特定な色のカラーフィルタを有するものの出力に基づいて、前記撮影レンズの焦点調節量を求めるオートフォーカス検出部と、
    前記焦点調節量に応じて、前記撮影レンズを合焦位置にセットするフォーカス機構と、
    を備えることを特徴とするデジタルカメラ。
  2. 前記色依存特性算出部は、前記3原色を構成する赤色、緑色、青色の各色毎に、前記各画素の出力信号を平均化して、赤色平均出力Pと、緑色平均出力Pと、青色平均出力Pとを求め、そのうちの2色の出力比P/Pと、P/Pと、P/Pとの大きさから、前記特定色を決定することを特徴とする請求の範囲第1項に記載のデジタルカメラ。
  3. 前記色依存特性算出部は、前記撮像面の中央領域内に存在する前記各画素の前記出力信号を用いて前記色依存特性を算出することを特徴とする請求の範囲第1項に記載のデジタルカメラ。
  4. 前記通常画素からの出力信号に基づき2次元の通常画像を生成する通常画像生成部を備えることを特徴とする請求の範囲第1項に記載のデジタルカメラ。
  5. 前記通常画素からの出力信号と、前記第1及び第2位相差画素からの出力信号とに基づいて、前記通常画像よりもダイナミックレンジの広い広ダイナミックレンジ画像を生成する広ダイナミックレンジ画像生成部を備えることを特徴とする請求の範囲第4項に記載のデジタルカメラ。
  6. 前記第1及び第2位相差画素からの出力信号に基づいて視差画像を生成する視差画像生成部を備えることを特徴とする請求の範囲第5項に記載のデジタルカメラ。
  7. 前記撮像面上の前記複数の画素は、2×2の画素ブロックに区画され、
    この各画像ブロックは、2つの前記通常画素と、前記第1及び第2位相差画素を有することを特徴とする請求の範囲第1項に記載のデジタルカメラ。
  8. 前記3原色は、第1色、第2色、第3色であり、前記各画素ブロックは、同色のカラーフィルタを有することを特徴とする請求の範囲第7項に記載のデジタルカメラ。
  9. 前記画素ブロックは、
    第1の対角方向に配列された2つの前記通常画素と、第2の対角方向に配列された前記第1及び第2位相差画素とからなり、前記第1色のカラーフィルタを有する第1の第1色画素ブロックと、
    前記第1の第1色画素ブロックとは、前記第1及び第2位相差画素の位置が逆に配置された第2の第1色画素ブロックと、
    第1の対角方向に配列された2つの前記通常画素と、第2の対角方向に配列された前記第1及び第2位相差画素とからなり、前記第2色のカラーフィルタを有する第1の第2色画素ブロックと、
    前記第1の第2色画素ブロックとは、前記第1及び第2位相差画素の位置が逆に配置された第2の第2色画素ブロックと、
    第1の対角方向に配列された2つの前記通常画素と、第2の対角方向に配列された前記第1及び第2位相差画素とからなり、前記第3色のカラーフィルタを有する第1の第3色画素ブロックと、
    前記第1の第3色画素ブロックとは、前記第1及び第2位相差画素の位置が逆に配置された第2の第3色画素ブロックと、
    の6種であることを特徴とする請求の範囲第8項に記載のデジタルカメラ。
  10. 前記第1の第1色画素ブロック、前記第1の第2色画素ブロック、前記第2の第1色画素ブロック、前記第2の第2色画素ブロックが、この順に行方向に繰り返し配列された第1画素ブロック行と、
    前記第1の第2色画素ブロック、前記第1の第3色画素ブロック、前記第2の第2色画素ブロック、前記第2の第3色画素ブロックが、この順に行方向に繰り返し配列された第2画素ブロック行とを有し、
    前記第1画素ブロック行と前記第2画素ブロック行とは、列方向に交互に配列されている、
    ことを特徴とする請求の範囲第9項に記載のデジタルカメラ。
  11. 前記第1色は緑色、前記第2色は青色、前記第3色は赤色であることを特徴とする請求の範囲第10項に記載のデジタルカメラ。
  12. 前記通常画素は、奇数行に所定のピッチで配置されており、前記第1及び第2位相差画素は、偶数行に前記ピッチで配置されており、
    前記第1及び第2位相差画素は、前記通常画素に対して、行方向に前記ピッチの半分だけずれた位置に配置されている、
    ことを特徴とする請求の範囲第1項に記載のデジタルカメラ。
  13. 前記3原色は、第1色、第2色、第3色であり、
    前記第1色のカラーフィルタを有する前記通常画素と、前記第2色のカラーフィルタを有する前記通常画素とが前記ピッチで交互に配列された第1画素行と、
    前記第1色のカラーフィルタを有する前記第1位相差画素と、前記第2色のカラーフィルタを有する前記第1位相差画素と、前記第1色のカラーフィルタを有する前記第2位相差画素と、前記第2色のカラーフィルタを有する前記第2位相差画素とが、この順に前記ピッチで繰り返し配列された第2画素行と、
    前記第2色のカラーフィルタを有する前記通常画素と、前記第3色のカラーフィルタを有する前記通常画素とが前記ピッチで交互に配列された第3画素行と、
    前記第2色のカラーフィルタを有する前記第1位相差画素と、前記第3色のカラーフィルタを有する前記第1位相差画素と、前記第2色のカラーフィルタを有する前記第2位相差画素と、前記第3色のカラーフィルタを有する前記第2位相差画素とが、この順に前記ピッチで繰り返し配列された第4画素行とを有し、
    前記第1〜第4画素行は、この順に列方向に繰り返し配列されている、
    ことを特徴とする請求の範囲第12項に記載のデジタルカメラ。
  14. 前記第1色は青色、前記第2色は緑色、前記第3色は赤色であることを特徴とする請求の範囲第13項に記載のデジタルカメラ。
  15. 前記通常画素、前記第1位相差画素、前記第2位相差画素のそれぞれは、フォトダイオードと、遮光膜と、前記カラーフィルタ上に配置されたマイクロレンズとを有し、
    前記遮光膜は、前記通常画素の前記フォトダイオードの中心上に形成された通常開口と、前記第1位相差画素の前記フォトダイオードの中心上から一方向にずれた位置に形成された第1偏心開口と、前記第2位相差画素の前記フォトダイオードの中心上から前記一方向とは反対の方向にずれた位置に形成された第2偏心開口とを有することを特徴とする請求の範囲第1項から第14項いずれか1項に記載のデジタルカメラ。
  16. 前記各通常画素は、フォトダイオードと、このフォトダイオード上の遮光膜に形成された開口と、この開口の中心線上に配置されたマイクロレンズとを有し、
    前記各第1位相差画素は、フォトダイオードと、このフォトダイオード上の遮光膜に形成された開口と、この開口の中心線から一方向にずれて配置された径が小さいマイクロレンズとを有し、
    前記各第2位相差画素は、フォトダイオードと、このフォトダイオード上の遮光膜に形成された開口と、この開口の中心線から前記一方向とは反対側にずれて配置された径が小さいマイクロレンズとを有する、
    ことを特徴とする請求の範囲第1項から第14項いずれか1項に記載のデジタルカメラ。
JP2013534650A 2011-09-22 2012-08-30 デジタルカメラ Expired - Fee Related JP5547349B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013534650A JP5547349B2 (ja) 2011-09-22 2012-08-30 デジタルカメラ

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2011207576 2011-09-22
JP2011207576 2011-09-22
PCT/JP2012/071958 WO2013042518A1 (ja) 2011-09-22 2012-08-30 デジタルカメラ
JP2013534650A JP5547349B2 (ja) 2011-09-22 2012-08-30 デジタルカメラ

Publications (2)

Publication Number Publication Date
JP5547349B2 JP5547349B2 (ja) 2014-07-09
JPWO2013042518A1 true JPWO2013042518A1 (ja) 2015-03-26

Family

ID=47914295

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013534650A Expired - Fee Related JP5547349B2 (ja) 2011-09-22 2012-08-30 デジタルカメラ

Country Status (4)

Country Link
US (1) US8866954B2 (ja)
JP (1) JP5547349B2 (ja)
CN (1) CN103782213B (ja)
WO (1) WO2013042518A1 (ja)

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI422020B (zh) * 2008-12-08 2014-01-01 Sony Corp 固態成像裝置
WO2014112002A1 (ja) * 2013-01-15 2014-07-24 オリンパス株式会社 撮像素子、及び撮像装置
KR102039464B1 (ko) * 2013-05-21 2019-11-01 삼성전자주식회사 전자 센서와, 그의 제어 방법
JP6372983B2 (ja) * 2013-09-02 2018-08-15 キヤノン株式会社 焦点検出装置およびその制御方法、撮像装置
KR101373132B1 (ko) * 2013-09-03 2014-03-14 (주)실리콘화일 마이크로 렌즈를 이용한 위상차 검출 픽셀
JP6405243B2 (ja) * 2014-03-26 2018-10-17 キヤノン株式会社 焦点検出装置及びその制御方法
JP2016009043A (ja) * 2014-06-24 2016-01-18 ソニー株式会社 イメージセンサ、演算方法、および電子装置
US9787899B1 (en) 2014-08-12 2017-10-10 Amazon Technologies, Inc. Multiple captures with a variable aperture
US9646365B1 (en) 2014-08-12 2017-05-09 Amazon Technologies, Inc. Variable temporal aperture
US9749532B1 (en) * 2014-08-12 2017-08-29 Amazon Technologies, Inc. Pixel readout of a charge coupled device having a variable aperture
JP6523656B2 (ja) * 2014-10-30 2019-06-05 オリンパス株式会社 焦点調節装置および焦点調節方法
CN107533210A (zh) * 2015-01-14 2018-01-02 因维萨热技术公司 相位检测自动聚焦
JP6518071B2 (ja) * 2015-01-26 2019-05-22 キヤノン株式会社 固体撮像装置およびカメラ
KR20160109694A (ko) * 2015-03-12 2016-09-21 삼성전자주식회사 이미지 센서 및 상기 이미지 센서를 포함하는 이미지 처리 시스템
US10002899B2 (en) * 2015-09-16 2018-06-19 Taiwan Semiconductor Manufacturing Co., Ltd. Microlens for a phase detection auto focus (PDAF) pixel of a composite grid structure
US10999543B2 (en) * 2016-06-28 2021-05-04 Sony Corporation Solid-state imaging device, electronic apparatus, lens control method, and vehicle
KR102693484B1 (ko) * 2016-09-23 2024-08-09 삼성전자주식회사 입사광의 파장 스펙트럼을 검출하는 방법 및 이를 수행하는 전자 장치
CN106454054B (zh) * 2016-11-29 2019-03-19 Oppo广东移动通信有限公司 控制方法、控制装置及电子装置
CN106341670B (zh) * 2016-11-29 2017-09-22 广东欧珀移动通信有限公司 控制方法、控制装置及电子装置
CN106454289B (zh) * 2016-11-29 2018-01-23 广东欧珀移动通信有限公司 控制方法、控制装置及电子装置
CN106504218B (zh) 2016-11-29 2019-03-12 Oppo广东移动通信有限公司 控制方法、控制装置及电子装置
CN106506969B (zh) 2016-11-29 2019-07-19 Oppo广东移动通信有限公司 摄像模组、通过其进行人像追踪的方法以及电子设备
US10187600B2 (en) * 2017-06-15 2019-01-22 SmartSens Technology (U.S.), Inc. Four shared pixel with phase detection and full array readout modes
JP7009091B2 (ja) 2017-06-20 2022-01-25 キヤノン株式会社 距離情報生成装置、撮像装置、距離情報生成方法、およびプログラム
JP2019086775A (ja) * 2017-11-06 2019-06-06 キヤノン株式会社 画像処理装置、その制御方法、プログラム及び記憶媒体
CN109819144B (zh) * 2017-11-22 2021-02-05 浙江舜宇智能光学技术有限公司 Tof摄像模组及其设计方法
JP6953297B2 (ja) * 2017-12-08 2021-10-27 キヤノン株式会社 撮像装置及び撮像システム

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003007994A (ja) * 2001-06-27 2003-01-10 Konica Corp 固体撮像素子、立体カメラ装置及び測距装置
JP2007158597A (ja) * 2005-12-02 2007-06-21 Nikon Corp 焦点検出用信号の生成機能を有する固体撮像装置、および電子カメラ
JP2008312073A (ja) * 2007-06-16 2008-12-25 Nikon Corp 固体撮像素子及びこれを用いた撮像装置
JP2011090143A (ja) * 2009-10-22 2011-05-06 Nikon Corp 焦点検出装置およびカメラ

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8035721B2 (en) * 2004-08-05 2011-10-11 Panasonic Corporation Imaging apparatus
JP4721769B2 (ja) * 2005-05-17 2011-07-13 Hoya株式会社 デジタルカメラ
JP2007158579A (ja) * 2005-12-02 2007-06-21 Canon Inc 撮像装置
JP4976160B2 (ja) * 2007-02-22 2012-07-18 パナソニック株式会社 撮像装置
JP4957413B2 (ja) * 2007-07-04 2012-06-20 株式会社ニコン 固体撮像素子及びこれを用いた撮像装置
JP4978449B2 (ja) * 2007-12-10 2012-07-18 ソニー株式会社 撮像装置
JP5034936B2 (ja) * 2007-12-27 2012-09-26 株式会社ニコン 固体撮像素子及びこれを用いた撮像装置
JP5219865B2 (ja) * 2008-02-13 2013-06-26 キヤノン株式会社 撮像装置及び焦点制御方法
JP5146295B2 (ja) * 2008-12-15 2013-02-20 ソニー株式会社 撮像装置および合焦制御方法
JP2010252277A (ja) 2009-04-20 2010-11-04 Panasonic Corp 固体撮像装置及び電子カメラ

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003007994A (ja) * 2001-06-27 2003-01-10 Konica Corp 固体撮像素子、立体カメラ装置及び測距装置
JP2007158597A (ja) * 2005-12-02 2007-06-21 Nikon Corp 焦点検出用信号の生成機能を有する固体撮像装置、および電子カメラ
JP2008312073A (ja) * 2007-06-16 2008-12-25 Nikon Corp 固体撮像素子及びこれを用いた撮像装置
JP2011090143A (ja) * 2009-10-22 2011-05-06 Nikon Corp 焦点検出装置およびカメラ

Also Published As

Publication number Publication date
US8866954B2 (en) 2014-10-21
CN103782213B (zh) 2015-11-25
US20140176780A1 (en) 2014-06-26
CN103782213A (zh) 2014-05-07
WO2013042518A1 (ja) 2013-03-28
JP5547349B2 (ja) 2014-07-09

Similar Documents

Publication Publication Date Title
JP5547349B2 (ja) デジタルカメラ
JP7298635B2 (ja) 撮像素子、及び撮像装置
JP5552214B2 (ja) 焦点検出装置
JP5513326B2 (ja) 撮像素子及び撮像装置
CN101821657B (zh) 摄像设备
US8988576B2 (en) Solid-state imaging device and digital camera
JP5621056B2 (ja) カラー撮像素子
US20150358593A1 (en) Imaging apparatus and image sensor
WO2012039180A1 (ja) 撮像デバイス及び撮像装置
US9247122B2 (en) Focus adjustment apparatus and control method therefor
JP5621059B2 (ja) カラー撮像素子及び撮像装置
CN103843318A (zh) 摄像设备及其控制方法
WO2012073727A1 (ja) 撮像装置及びその合焦位置検出方法
JP2012211942A (ja) 固体撮像素子及び撮像装置
JP5961208B2 (ja) 撮像素子及び撮像装置
WO2013042606A1 (ja) デジタルカメラ及び固体撮像装置
JP5907668B2 (ja) 撮像装置及び撮像素子
JP5929307B2 (ja) 撮像装置およびデジタルカメラ
JP6857341B2 (ja) 撮像装置及び信号処理方法
JP5961720B2 (ja) 撮像装置
JP2014215526A (ja) 撮像素子およびカメラ

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20140408

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140416

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140514

R150 Certificate of patent or registration of utility model

Ref document number: 5547349

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees