JP4286077B2 - Camera with flash light control function - Google Patents
Camera with flash light control function Download PDFInfo
- Publication number
- JP4286077B2 JP4286077B2 JP2003196548A JP2003196548A JP4286077B2 JP 4286077 B2 JP4286077 B2 JP 4286077B2 JP 2003196548 A JP2003196548 A JP 2003196548A JP 2003196548 A JP2003196548 A JP 2003196548A JP 4286077 B2 JP4286077 B2 JP 4286077B2
- Authority
- JP
- Japan
- Prior art keywords
- light
- strobe
- exposure
- image
- unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Exposure Control For Cameras (AREA)
- Focusing (AREA)
- Stroboscope Apparatuses (AREA)
- Automatic Focus Adjustment (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は、ストロボ調光機能付きカメラに関し、特に背景と主要被写体との露出のバランスを調整してストロボ撮影を行うことが可能なストロボ調光機能付きカメラに関する。
【0002】
【従来の技術】
ストロボ撮影時において、背景と主要被写体との露出のバランスを調整してストロボ発光を行う技術が、例えば特許文献1〜3で提案されている。
【0003】
特許文献1では、外光による露光量に対するストロボ光による露光量の比率を被写体の輝度などから決定してストロボ発光を行っている。また、特許文献2では、デジタルカメラにおける撮像素子によって得られた明るさに対する画素の割合を示すヒストグラムのパターンによってストロボ発光量の制御を行っている。更に、特許文献3では、主要被写体と背景の測光値から露出を決定している。
【0004】
【特許文献1】
特許3177942号公報
【0005】
【特許文献2】
特開2001−296578号公報
【0006】
【特許文献3】
特開2002−229094号公報
【0007】
【発明が解決しようとする課題】
特許文献1〜3で提案されている技術では、主要被写体と背景の明るさに基づいてストロボ制御が行われており、主要被写体に対して背景がどのようなシーンであるのかを充分に考慮したストロボ制御は行われてはいない。
【0008】
本発明は、以上の点に鑑みてなされたものであり、主要被写体に対して背景がどのようなシーンであるのかを考慮して適正なストロボ制御を行い、画面全体として調和が取れ、雰囲気が豊かであり、色再現性のよい写真を撮影することが可能なストロボ調光機能付きカメラを提供することを目的とする。
【0009】
【課題を解決するための手段】
上記の目的を達成するために、本発明の第1の態様のストロボ調光機能付きカメラは、ストロボ光を照射する発光手段と、この発光手段によるストロボ光が露出に寄与する領域と寄与しない領域を判別する領域判別手段と、この領域判別手段によって判別された上記ストロボ光が露出に寄与しない領域における像信号を検出する像信号検出手段と、上記ストロボ光が露出に寄与しない領域における像信号から上記ストロボ光が露出に寄与しない領域のコントラスト変化又は彩度を検出し、該検出したコントラスト変化又は彩度が高い領域を重要度が高いと判定し、該重要度が高いと判定した領域に基づいて露出制御を行うとともに、上記露出結果に従って上記発光手段によるストロボ光の制御を行う制御手段とを具備する。
【0022】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態を説明する。
[第1の実施形態]
図1は、本発明の第1の実施形態に係るストロボ調光機能付きカメラ(以下、カメラと称する)における電気回路構成を示すブロック構成図である。
【0023】
本第1の実施形態のカメラは、撮影光学系により結像される被写体像を、例えばCCD等の撮像素子を利用して光電変換し、この光電変換によって得られた電気信号(像信号)を所定の記録媒体に所定の形態で記録する。ここで、本第1の実施形態においては、撮影光学系と撮像素子との間の構成が比較的簡単に構成される所謂コンパクトタイプの電子カメラを例に挙げて説明する。
【0024】
即ち、図1に示すように本第1の実施形態のカメラ1は、撮影光学系11と、撮像素子(像信号検出手段)12と、AD変換部13(図1ではAD部13と記す)と、画像信号処理部(色信号検出手段)14と、記録媒体部15と、コントラスト検出部16と、演算制御回路(領域判別手段、制御手段)17と、レンズ駆動部18と、レンズ位置検出部19と、操作スイッチ20と、ストロボ部(発光手段)21、ストロボ制御部22、測距部(距離分布検出手段)23とによって構成されている。
【0025】
撮影光学系11は、複数の光学レンズ等からなり、被写体からの反射光束を集光して撮像素子12に被写体像を結像させる。像信号検出手段としての撮像素子12は、撮影光学系11を介して入射する被写体像について光電変換処理等を行って像信号を生成する。AD変換部13は、撮像素子12により生成され出力されるアナログ信号による像信号を所定の形式のデジタル像信号に変換して画像信号処理部14に出力する。
【0026】
画像信号処理部14は、AD変換部13によって変換したデジタル像信号に対して所定の画像処理、例えば当該画像データによって表されるべき画像の、色調補正、階調補正、γ(ガンマ)補正といった調整等を行った後、更に、記録媒体部15に記録するのに適する形式で圧縮を行って画像データを生成する。記録媒体部15は、画像データを所定の形態で記録する各種の媒体等及びその駆動部等からなり、画像信号処理部14によって生成される画像データを記録する。
【0027】
また、画像信号処理部14は、所定の画像処理を施したデジタル像信号をコントラスト検出部16にも出力する。コントラスト検出部16は、画像信号処理部14の出力から被写体のコントラスト信号を検出して、演算制御回路17に出力する。
【0028】
領域判別手段及び制御手段としての機能を有する演算制御回路17は、コントラスト信号を判定しながら、レンズ駆動部18を介して撮影光学系11を光軸に沿う方向に移動させる。また、演算制御回路17は、レンズ位置検出部19によって撮影光学系11の位置を検出し、撮影光学系11の合焦位置とレンズ位置検出部19によって検出されるレンズ位置との関係より、カメラ1から被写体110までの距離L(以下、被写体距離Lという)を算出する。
【0029】
ここで、演算制御回路17は、例えばCPU(Central Processing Unit)等のワンチップマイクロコントローラ等によって構成されている。そして、当該演算制御回路17は、カメラ1の操作者によって操作される図示しない操作部材に連動して切り換えられる操作スイッチ20からの信号に基づいて、各種の制御処理を実行する。また、上述した被写体距離Lを算出する演算処理やレンズ駆動部18の駆動制御や、撮像素子12により生成される像信号の信号処理、及び画像データを記録媒体部15に記録する際の記録制御等も行う。
【0030】
また、被写体110を含む所望の撮影環境が暗い場合等に、演算制御回路17は、ストロボ制御部22を制御して発光手段としてのストロボ部21から補助照明光を発光させる制御を行う。本第1の実施形態では、露出時においてストロボ部21を発光させる(以後、本発光と称する)前に、微小な光量でストロボ部21を発光させて(以後、予備発光と称する)、そのときに得られた結果に基づいて本発光時のストロボ発光量を決定する。
【0031】
更に、カメラ1は距離分布検出手段としての測距部23を有しており、上記した撮影光学系11とは異なる光学系を介して入射した被写体像に基づいて、カメラ1から被写体110までの距離Lを求めることができる。即ち、この測距部23は、1対の受光レンズ24a,24bと、1対のセンサアレイ25a,25bと、積分回路26と、定常光成分除去回路27と、AD変換部28とから構成されている。
【0032】
1対の受光レンズ24a,24bを介して入射した被写体像は、センサアレイ25a,25bに結像する。1対のセンサアレイ25a,25bは、結像した被写体像をその明るさに応じた光電流に変換して積分回路26に出力する。積分回路26は、1対のセンサアレイ25a,25bから出力された光電流をそれぞれ積分する。
【0033】
AD変換部28は、入力された積分値をデジタル化して演算制御回路17に出力する。演算制御回路17は、AD変換部28から入力された信号により被写体110の像信号を検出することができる。
【0034】
その後、演算制御回路17は、それぞれの像信号がセンサアレイ25a,25bのどの位置で検出されたかを比較する。そして、像信号の検出位置の相対位置差x、レンズ視差B、及び焦点距離fから、三角測距の原理、即ち、
L=Bf/x
に基づいて被写体距離Lを算出する。
【0035】
ここで、センサアレイ25a,25bと積分回路26との間には、定常光成分除去回路27が設けられている。この定常光成分除去回路27は、センサアレイ25a,25bから入力される光電流のうち、背景光等の定常的に発生する定常光成分の光電流とストロボ部21からストロボ光を照射した時に被写体110から反射される反射信号光成分の光電流とを分離して、定常光成分を除去する。第1の実施形態では、このような定常光成分除去回路27の動作のON/OFFの切り換えを演算制御回路17によって制御する。
【0036】
この切り換え制御及び定常光成分除去回路の動作を、図2を参照して更に詳しく説明する。図2は、積分回路26及び定常光成分除去回路27の内部の詳細な構成を示す電気回路図である。なお、図2ではセンサアレイ25a,25bに含まれる1個のセンサ25について説明する。なお、このセンサ25は、例えばフォトダイオード等の光検出素子で構成されている。
【0037】
また、図2では図示を省略しているが、測距部23は演算制御回路17に接続されており、演算制御回路17によって積分回路26及び定常光成分除去回路27のスイッチ161、162、165、及び166のON/OFFが制御される。
【0038】
即ち、演算制御回路17が、HOLD2をHレベルにしてスイッチ165をON(スイッチ165閉)すると、センサ25から出力される光電流のうち、定常的に出力される成分IPは、増幅器152側に流れずに、トランジスタ150を介してGNDに流れる。そして、時間的に変動する信号成分iPのみが増幅器152を介して増幅用のトランジスタ153のベースに流れる。この結果、トランジスタ154、155、及び156で構成されるカレントミラー回路を介して、増幅された電流がダイオード160及び積分回路26に流れる。
【0039】
ここで、ダイオード160の電位は、ホールドアンプ157によってダイオード159の電位と比較されている。即ち、ホールドアンプ157は、スイッチ166がONされている間は、定電流源158からダイオード159に流れる電流I0よりもカレントミラー回路からダイオード160に流れる電流が大きくならないようにトランジスタ150のベース電圧が制御される。
【0040】
このような作用によって、トランジスタ153によって増幅された結果の電流は、センサ25に入射する光の光量にかかわらず一定のI0となる。したがって、電流源161でトランジスタ156のコレクタ電流のうち、I0を引き抜くと、積分回路26に入力される電流は0となる。
【0041】
ここで、図3に示すように、演算制御回路17によってストロボ制御部22を制御して、ストロボ部21から微小光量のストロボ光を被写体110に投光する。また、この予備発光と同時にHOLD1をLレベルにしてスイッチ166をOFF(スイッチ166開)すると、センサ25から出力される光電流は、ストロボ光の分だけ増加するが、トランジスタ150を介してGNDに流れる電流IPは変化しない。このため、ストロボ光による増加分のみの光電流が、トランジスタ153で増幅された後、カレントミラー回路を介して積分回路26に流れる。
【0042】
ここで、積分回路内のスイッチ162をON(スイッチ162閉)しておくと、積分コンデンサ163において積分動作が行われる。その結果、積分回路26の出力電圧VINTは、センサ25に入射した反射信号光の光量に依存してVINT1の変化を生じる。このVINT1は、ストロボ光発光時にセンサ25に入射した反射信号光の光量が多ければ大きく、反射信号光の光量が少なければ小さくなる。このVINT1をAD変換部28によりデジタル化して読み込むことにより、ストロボ発光時に被写体から反射される反射信号光の光量を演算制御回路17で検出することができる。
【0043】
以上説明した定常光成分除去回路27の作用によって、積分回路26の出力電圧VINT1においては、被写体の明るさ等に基づいて検出される定常光成分が除去されて、ストロボ光発光時の反射信号光成分のみが抽出されることになる。
【0044】
一方、定常光成分除去回路27の動作をOFFして定常光成分も含めて光量を検出する場合には、図4に示すように、HOLD2をLレベルにしてスイッチ165をOFFすればよい。この場合には、センサ25に入射した光の光量に応じて出力された光電流は、全て増幅器152やトランジスタ153からなる増幅回路に流れる。その後、この光電流は、増幅回路で増幅された後、カレントミラー回路を介して積分回路26に入力される。この結果、積分回路26の出力は、図4のようにVINT2のようになる。
【0045】
このように、センサ25と積分回路26との間に定常光成分除去回路27を設けておけば、反射信号光成分と定常光成分とを分離し、反射信号光成分を増幅した後に積分を行うので高い信号検出能力が得られる。例えば、定常光が信号光の1000倍もあるような状況では、単にセンサアレイに入射した光をAD変換しただけでは、AD変換の誤差や、ノイズ成分により信号成分が埋もれてしまったりして、精度が著しく低下する。しかし、定常光成分を分離してから増幅することで、AD変換時の信号量を大きくすることができると共に、積分の効果により、時間的にランダムなノイズは平滑化されるので正しい検出がしやすくなる。
【0046】
ここで、定常光成分除去回路を、センサアレイの各センサに組みこむことで、画素毎に反射信号光量を検出することもできる。また、この機能をオートフォーカスに利用すれば、例えば逆光時などにおいても、ストロボ光による被写体110からの反射信号光の光分布によって正確な距離測定が可能となる。
【0047】
更に、ストロボ調光制御時では、明るいシーンで定常光が多くとも、また、被写体が遠くて反射信号光量が小さくとも、正しい反射信号光検出ができ、正確な露出制御に応用することができる。
【0048】
このような、定常光成分除去機能付きのセンサアレイを有するカメラのストロボ調光時の重要機能のみを図示すると図5のようになる。
【0049】
即ち、ストロボ部21の光を被写体110に投光すると、被写体110からの反射信号光は、撮影光学系11を介して撮像素子12に入射すると共に1対の受光レンズ24a,24bを介してセンサアレイ25a,25bに入射する。撮像素子12の各画素の出力は、画像信号処理部14内の画素出力検出部14aを介して演算制御回路17に入力される。一方、センサアレイ25a,25bの各画素の出力は、定常光成分除去/積分部54aで定常光成分が除去された後、積分されて演算制御回路17に入力される。
【0050】
ここで、撮像素子又はセンサアレイを用いたストロボ制御の特徴について説明する。
撮像素子12には定常光成分除去機能はないが、図6の符号111で示したように画面全域の光の分布を検出できるので、ストロボ発光量の決定時における誤差が小さい。一方、センサアレイ25a,25bは、図6の符号112で示すような限定された領域しか検出できないが定常光成分除去機能があるので、上述したような高い信号検出能力を得ることができる。なお、定常光成分除去機能を撮像素子12につける場合、撮像素子12は画素数が多いので規模が大型化してしまい、コストアップの大きな要因となる。
【0051】
図7(a)に、ストロボ発光時の撮像素子12の出力、即ち像信号の分布図を示す。図7(a)において、横軸は撮像素子の画素位置を示し、縦軸は像信号の大きさを示す。即ち、明るいシーンでは、ストロボ光の光量が定常光の光量に比べて微小なものとなり、ストロボ発光の有無による像信号の変化を検出することが困難である。
【0052】
一方、図7(b)に、ストロボ発光時のセンサアレイの出力の分布図を示す。図7(b)において、横軸はセンサアレイの画素位置を示し、縦軸は像信号の大きさを示す。即ち、定常光成分除去機能付きのセンサアレイを用いれば、図7(b)のように、ストロボ光による被写体110からの反射信号光成分のみを検出することができる。
【0053】
このような構成を有するカメラのストロボ制御時のフローチャート例を図8に示す。
まず、演算制御回路17は、ストロボ予備発光前に、撮像素子12の出力IM1を取得する(ステップS1)。撮像素子12の出力を取り込んだ後、演算制御回路17は、ストロボ部21を予備発光させた後(ステップS2)、センサアレイ25a,25bから出力された光電流から定常光成分による光電流を除去して積分を行う(ステップS3)。積分終了後、ストロボ部21の発光を終了し(ステップS4)、このときの撮像素子12の出力IM2を取得する(ステップS5)。同時に積分結果VINT1を取得する(ステップS6)。
【0054】
次にステップS1とステップS5において取り込んだ撮像素子12の出力の差分を取る(ステップS7)。ここで、ステップS1とステップS5において取得した撮像素子12の出力の撮影条件は、ストロボ発光の有無以外は全て同じ条件であるので、ステップS5で取り込んだ撮像素子12の出力IM2とステップS1で取り込んだ撮像素子12の出力IM1との差分であるΔIMは、図7(a)に示すように、ストロボ光によって増加した光量を表すものとなる。演算制御回路17は、以上のようにして得られた数値を利用して、ストロボ部21の本発光時の発光量を決定する。
【0055】
即ち、演算制御回路17は、撮像素子12の出力IM1が所定輝度IM0よりも大きいか否かを判定する(ステップS8)。この判定において、ストロボ発光なしでも撮像素子12の出力IM1が充分に大きいと判定した場合には、被写体が高輝度である。この場合には、定常光成分除去機能を持たない撮像素子12の出力からストロボ光によって増加した光量を検出するのは困難であるとして、ステップS9に分岐する。そして、演算制御回路17は、ステップS7で演算した差分ΔIMが所定量ΔIM1よりも大きいか否かを判定する(ステップS9)。このステップS9の判定において、差分ΔIMが所定量ΔIM1以下であると判定した場合には、定常光成分除去積分の結果VINT1が所定量V0よりも小さいか否かを判定する(ステップS10)。このステップS10の判定において、VINT1が所定量V0よりも小さいと判定した場合には、反射信号光が十分検出できない程、被写体が遠くに存在しているとして、ストロボ部21の発光量を予め決定された所定光量に決定する(ステップS11)。
【0056】
また、ステップS10の判定においてVINT1が所定量V0以上であると判定した場合には、VINT1よりストロボ部21の発光量を決定する(ステップS12)。
【0057】
また、ステップS8においてIM1が所定輝度IM0以下であると判定した場合又はステップS9において差分ΔIMが所定量ΔIM1よりも大きいと判定した場合に、演算制御回路17は、定常的な光(例えば、背景の光)が少なく、定常光除去機能を用いなくともストロボ光による反射信号光が十分検出できるとして、差分ΔIMよりストロボ部21の発光量を決定する(ステップS13)。
【0058】
以上のようにして、ストロボ発光量が決定された後は、この発光量に基づいてストロボ部21を本発光させて露出を行う(ステップS14)。
【0059】
次に図9、図10(a)、及び図10(b)を参照して、このような露出制御の概念について説明する。ここで、これらの図における横軸は露出時間を示し、縦軸は露出量を示している。
【0060】
即ち、図9に示すように、被写体が暗い状態でストロボなしの露出を行うと、手ぶれが起こる時間(ここでは、この時間を露出時間としている)tEまでの間に適正露出量IM4を得ることができずIM4−IM3だけの露出不足が起こる。
【0061】
このような露出不足を補うのがストロボ部21である。ストロボ部21の発光量を決定するには、まず、t1の微小時間にストロボなしで露出を行い、そのときの露出量(撮像素子12の出力)IM1を検出し、次にストロボ部21を予備発光させてt1の微小時間に露出を行い、そのときの露出量IM2を検出する。その後、これらの露出量の差分を計算することによって、実際の露出時に、どれくらいの光量でストロボ部21を発光させれば、図10(a)のように手ぶれ時間内で適正露出量を得ることができるのかを予測できる。
【0062】
演算制御回路17は、ストロボ発光量をストロボ部21の発光時間tSTとして求める。ここで、この発光時間tSTは、
【数1】
に示す(式1)〜(式3)と、図9、図10(a)、又は10(b)で示した各光量検出値によって算出することができる。
【0063】
なお、ここでは、主に撮像素子12の出力からストロボ発光時間を求める方法を説明したが、定常光成分除去積分によって得られた積分値VINT1は、(式2)又は(式3)のIM2−IM1に対応するものである。したがって、VINT1とこのVINT1をIM2−IM1に変換するための変換係数Kを用いた
【数2】
を用いてストロボ発光時間tSTを算出することができる。
【0064】
また、単にストロボ部21を用いて露出の不足分を補うだけでなく、図10(b)に示す、外光による露出量に対するストロボ光による露出量の比率(以下、ストロボ寄与率と称する)を考慮してストロボ制御を行ってもよい。このように、ストロボ寄与率を考慮してストロボ発光量を制御することにより、背景と主要被写体である人物との明るさのバランスを調整することができる。
【0065】
一般にストロボ光は風景などの背景には届かないので、ストロボ寄与率を上げると人物の露出量に対して背景の露出量が相対的に小さくなっていく。逆にストロボ寄与率を低くすると、背景の露出量に対して人物の露出量が相対的に小さくなっていく。これらのことから、状況に応じてストロボの寄与率を切り換えて露出制御を行うことが好ましい。例えば、背景が空の場合などは、露出を多少アンダーにした方が空の青みが増し、また背景が雪景色などの場合では、露出をオーバーにしないと雪の白さが正しく撮影されない。
【0066】
このようなストロボ寄与率の切り換えは、例えば図11に示すようなフローチャートに従って行われる。
【0067】
このフローチャートにおいて、演算制御回路17は、ストロボ部21を予備発光させた後、撮像素子12を用いて主要被写体110を含む画面110a内の像信号を検出する(ステップS21)。次に、演算制御回路17は、画面110aの中で、ストロボ光による反射信号光成分が検出できず、ストロボ光が露出に寄与しない領域を判別する(ステップS22)。例えば、図1のようなシーンでは、図12(a)に示す画面110aの中から人物部110を除いた背景部110bが、ストロボ光が露出に寄与しない領域となる。
【0068】
ストロボ光が露出に寄与しない背景部110bを判別した後、演算制御回路17は、撮像素子12を用いて背景部110bにおける像信号のコントラスト変化CBを検出する(ステップS23)。ここでは、単に背景部110bの全領域における明暗の差を検出していくのではなく、例えば図12(b)において符号110cや符号110dで示したような代表部分のコントラスト変化を検出する。ここで「コントラスト変化の検出」とは、低輝度部分と高輝度部分の差(所謂コントラスト)がどのように分布しているのかを調べるものである。また、代表部分は、例えば図12(c)に示すような像信号において空間周波数が大きい領域、明るい領域、彩度が高い領域(これについては後で説明する)等である。また、図12(b)のように代表部分を複数検出できるようにしておき、それら全ての領域についてステップS24以後の制御を行うようにしてもよいし、代表部分のコントラスト変化を全て加えた値を用いてステップS24以後の制御を行うようにしてもよい。更には代表部分のコントラスト変化の平均値を用いてもよい。
【0069】
また、コントラスト変化CBは、例えば図12(c)に示す像信号において、背景部の明暗変化ΔBと背景部の周期Fとの積から求めてもよい。また、重要背景部の判別は、コントラストの変化から判別するだけでなく、背景部分における2次元的な像の形状を認識することで判別してもよい。
【0070】
このように、背景の代表部分におけるコントラスト変化を検出するのは、背景の代表部分における細かなパターンが正しく再現されるような露出制御を行うためである。ここで、ステップS23で検出したコントラスト変化が小さい場合には、背景はそれほど重要ではないと考える。
【0071】
ここで、背景の明るさを基準にして露出制御を行う場合、背景が暗いときには露出時間が長くなってしまい、手ぶれなどが生じる可能性が高くなる。一方、背景が明るい場合には、主要被写体に対するストロボ寄与率を上げる、即ちストロボ発光量を上げる必要があるので、エネルギーのロスにつながる。
【0072】
そこで、本第1の実施形態では、背景が重要な場合にのみ、背景の明るさを基準にして露出制御を行い、背景のコントラストが正しく再現されるようにする。
【0073】
即ち、演算制御回路17は、背景が重要であるかを判別するために、ステップS23で検出したコントラスト変化CBが所定の大きさC0よりも大きいか否かを判定する(ステップS24)。この判定において、CBがC0よりも大きいと判定した場合には、そのコントラスト変化CBを出力する背景が重要であると判別する。そこで、演算制御回路17は、この背景部分(例えば、図12(b)の背景部110c)のコントラストが正しく再現されるような露出制御を行う。
【0074】
即ち、演算制御回路17は、この重要背景部110cの像信号が飽和しないような露出時間tEを決定する。このために、演算制御回路17は背景の平均的な輝度BBから、仮の露出時間tEを決定する(ステップS25)。更に、演算制御回路17は、重要背景部110cにおける像信号の明暗の差ΔBを考慮して、重要背景部110cにおける像信号の最大値BB+ΔB/2が、露出時間tEの積分によって飽和してしまうか否かを判定する(ステップS26)。このステップS26の判定において、像信号の最大値が積分後に飽和してしまうと判定した場合に、演算制御回路7は、新たな露出時間tEを、元のtEの1/2に設定する(ステップS27)。なお、ここでは、露出時間tEをステップS25で決定したtEの1/2に設定しているが、これに限るものではない。
【0075】
一方、ステップS26の判定において、重要背景部分110cにおける像信号の最大値が積分後に飽和しないと判定した場合に、演算制御回路17は、ステップS25で決定したtEを露出時間に設定する。
【0076】
また、ステップS24の判定において、コントラスト変化CBが所定の大きさC0以下であると判定した場合に、演算制御回路17は、背景部の色(彩度)などから重要背景部を判別する。
【0077】
例えば、図12(b)の背景部110dのように、背景部が青空の場合等には、主要被写体110の明るさのみを考慮して露出制御を行うと、背景部110bが白く飛んでしまうことがある。このような場合にも、本第1の実施形態では、主要被写体に対するストロボ寄与率を上げて露出制御を行うことにより、主要被写体110と背景部110bの両方で正しい発色の画像が得られるようにする。
【0078】
即ち、コントラスト変化CBが所定の大きさC0以下であると判定した場合に、演算制御回路17は、撮像素子12の出力からRGBの色信号を検出し、この色信号と輝度信号Yとから、色差(R−Y)及び(B−Y)を求め、これらのうちで大きいほうの値を彩度判定値SBとして選択する(ステップS28)。この彩度判定値SBは、色が鮮やかになる、即ち彩度が高いほど大きくなる値である。そこで、演算制御回路17は、SBが所定値S0よりも大きいか否か、即ち背景の彩度が高いか否かを判定する(ステップS29)。この判定において、即ちSBが所定値S0よりも大きいと判定した場合には、この背景部を彩度の高い重要背景部110dと判別し、この背景部における撮像素子12の出力から背景の明るさYを、例えば
Y=0.263R+0.655G+0.081B (式5)
の式を用いて求める(ステップS30)。なお、(式5)のYはCIE表色系の例である。ここで、部品のできや色の考え方等によって(式5)のRGBの各係数は異なるので、図11では、
Y=aR+bG+cB (式6)
のように一般化して表現している。このようにして、背景の明るさYが得られた後、演算制御回路17は、求めたYより露出時間tEを決定する(ステップS31)。
【0079】
また、ステップS29の判定において、彩度が低い、即ちSBが所定値S0以下であると判定した場合には、手ぶれが起きるまでの時間(手ぶれ秒時)から露出時間tEを決定する(ステップS32)。
【0080】
ステップS31又はS32で露出時間tEを決定した後、演算制御回路17は、このtEより(式3)を用いてストロボ発光時間tSTを算出し(ステップS33)、その後、このフローチャートの制御を抜ける。
【0081】
このように背景部分の色を判定し、この背景部分における撮像素子の色バランスが偏っている場合には、その特徴的な色が白く飛んでしまわないように主要被写体に対するストロボ寄与率を上げて露出時間を短くする。このよう露出時間を短くすることにより、例えば青空や夕焼け空等の背景が撮影時に白く飛んでしまうようなことがない。
【0082】
ここで、ステップS22のストロボ光が寄与しない領域を判別する手法の変形例を図13(a)及び図13(b)を参照して説明する。図13(a)の例は、被写体までの距離によって判別を行う例である。まず、演算制御回路17は、測距部23によって画面内における複数のポイントの距離を算出して、これら距離の分布を検出する(ステップS41)。次に、検出した距離の分布において、例えば最も近い距離を主要被写体の距離LSとして決定する(ステップS42)。その後、演算制御回路17は、この決定したLSから充分に遠距離(ここでは、4倍の距離)を出力するポイントをストロボ光が露出に寄与しない領域と判別する(ステップS43)。
【0083】
また、図13(b)の例では、図8で説明した差分ΔIMや積分値VINT1から判別を行う例である。即ち、演算制御回路17は、差分ΔIMが所定値ΔI0よりも小さい領域(ステップS51)と積分値VINT1が所定値V0よりも小さい領域とをストロボ光が露出に寄与しない領域と判別する(ステップS52)。
【0084】
以上説明したように、本第1の実施形態によれば、ストロボ光と背景の明るさとのバランスを考慮した露出制御によってストロボ発光時間を制御しているので、色再現性を高くすることができる。また、敏感な定常光除去積分回路を利用すれば、予備発光時のストロボ発光量を微弱にでき、眩しさのない省エネ効果にすぐれた予備発光方式にすることができる。
【0085】
[第2の実施形態]
図14は、本発明の第2の実施形態のカメラにおける電気回路のブロック構成図である。なお、本カメラの一部の構成は、上述した第1の実施形態のカメラと同様である。したがって、同様の構成部材については同じ符号を附してその詳細な説明は省略する。この第2の実施形態は、TTL(Trough The Lens)ダイレクト調光方式を用いた例である。
【0086】
即ち、本第2の実施形態のカメラ1は、上記した第1の実施形態の構成に加えて、可動ミラー30と、ファインダ光学系(スクリーン31、ペンタゴナルダハプリズム(以下ペンタプリズムと略記する)32、接眼レンズ33等で構成される)と、ファインダ内測光センサ34と、測光部35と、サブミラー36と、フィールドレンズ37と、光路屈曲鏡38と、再結像レンズ39と、センサアレイ40と、シャッタ幕41と、測光光学系42と、ボディ内測光センサ43と、調光部44と、表示制御部45と、電子モニタ46とを含む。
【0087】
可動ミラー30は、シャッタ幕41と撮影光学系11との間の空間において、撮影光学系11の光路上から退避する位置(以下、退避位置30aと称する)と撮影光学系11の光路上に配置される位置(以下、通常位置30bと称する)との間で回動自在に構成されている。ここで、当該可動ミラー30が通常位置30bに配置されたときには、撮影光学系11の光軸に対して角度略45度だけ傾いた状態で固定される。この状態において、可動ミラー30の反射面は、ファインダ光学系の側を向くように設定されている。
【0088】
即ち、可動ミラー30が通常位置30bにある場合、撮影光学系11を介して入射した光束は、可動ミラー30で反射されてファインダ光学系に導かれる。ファインダ光学系では、入射した光束をスクリーン31において光学像として結像させると共に結像された像をペンタプリズム32に導く。ペンタプリズム32は、スクリーン31を透過した像を接眼レンズ33方向(即ち、カメラ1の後方)へと導くと同時に、像の左右を反転させる。接眼レンズ33は入射してきた像を拡大する。これにより、撮影者111は、被写体を観察することができる。
【0089】
更に、ペンタプリズム32の近傍には、ファインダ内測光センサ34が設けられている。このファインダ内測光センサ34は、ペンタプリズム32に入射した光束の一部を受光して所定の電気信号を測光部35に出力する。ここで、ファインダ内測光センサ34は、図15に示すように撮影画面内の所定の受光領域において測光動作を行い得るように形成されている。即ち、ファインダ内測光センサ34は、略中央部近傍の所定の領域を測光する受光部34aと、略周縁部近傍の所定の領域を測光する受光部34bとからなり、例えば逆光状態の検出も可能に構成されている。
【0090】
測光部35は、ファインダ内測光センサ34から入力された電気信号に基づいて測光動作を行い、被写体の明るさを検出する。この測光部35の検出結果に基づいて、演算制御回路17は、ストロボ制御部22を制御する。
【0091】
また、可動ミラー30の一部の領域、例えば略中央部近傍の領域は、撮影光学系11からの光束の一部を透過させ得るように半透過鏡によって構成されている。そして、この半透過鏡で構成される領域に対向する部位には、サブミラー36が配設されている。
【0092】
即ち、サブミラー36は、可動ミラー30の背面側、即ち撮像素子12に対向する側の面に対して、その一端部が所定方向に回動自在となるように軸支されており、これにより、サブミラー36の反射面は、上述した可動ミラー30の半透過鏡の領域に対向するよう配置される。即ち、サブミラー36は、可動ミラー30が通常位置30bに配置されたときに、可動ミラー30に対して図14に示すような所定の角度をなすように配置されている。また、サブミラー36は、可動ミラー30が退避位置30aに配置されたときには、可動ミラー30に対して略平行となる所定の位置に配置される。これにより、可動ミラー30が退避位置30aに移動すると同時にサブミラー36も撮影光学系11の光路上から退避する。
【0093】
即ち、可動ミラー30及びサブミラー36が通常位置にあるときには、撮影光学系11を透過した入射光束の一部は、可動ミラー30の半透過鏡領域を透過した後、サブミラー36によって反射される。この反射された光束は、フィールドレンズ37を透過し、更に光路屈曲鏡38によってその光路が所定の方向へと折り曲げられた後、再結像レンズ39を透過する。そして、センサアレイ40の受光面上には1対の被写体像が結像する。センサアレイ40は、受光した被写体像を電気信号に変換して演算制御回路17に出力する。これを受けて演算制御回路17は、所定の合焦処理を行う。
【0094】
ここで、この合焦処理は、一般的に適用されているTTL位相差検出方式でよい。このTTL位相差検出方式について簡単に説明する。この方式において、演算制御回路17は、レンズ駆動部18を制御して撮影光学系11をレンズ光軸方向に移動させながら、センサアレイ40の出力を監視し、そして、センサアレイ40から出力される一対の被写体像が所定の位置関係になったときに合焦状態であると判定して、その時点で撮影光学系11の駆動を停止させる。
【0095】
また、撮像素子12の受光面側の近傍には、上述したようにシャッタ幕41が配設されている。即ち、撮像素子12は、当該シャッタ幕41が開状態となっている期間のみ撮影光学系11からの光束を受光し得るように構成されている。ここで、シャッタ幕自体の構成は、従来の一眼レフレックス方式のカメラにおいて一般的に利用されているものが適用されている。このシャッタ幕41の構成について、図16の概略図を用いて簡単に説明する。
【0096】
図16に示すようにシャッタ幕41は、先幕41a及び後幕41bの二つの幕部材によって構成されている。通常状態においては先幕41aが撮像素子12の受光面の前面に配置され、当該撮像素子12の受光面は遮蔽された状態にある。
【0097】
ここで、露出動作が実行されると、まず可動ミラー30及びサブミラー36が所定の退避位置30aに移動する。この状態で先幕41aが矢印Y1方向に動き出す。続いて所定の時間を置いてから後幕41bがY2方向(Y1と同じ方向である)に動き出す。したがって、先幕41aと後幕41bとの間には所定の隙間が生じることになる。この隙間寸法を調節する、即ち先幕41a及び後幕41bの動き出す時間を調節することにより撮像素子12への露出時間(即ちシャッタ速度)を調節することができる。
【0098】
また、先幕41aの表面には、この先幕41aの表面で反射する光束が標準反射率となるように所定のパターンが形成されている。即ち、先幕41aの表面で反射された光束は、測光光学系42を介してボディ内測光センサ43で受光される。ボディ内測光センサ43は、この入射された光束を電気信号に変換して調光部44に出力する。
【0099】
ここで、ボディ内測光センサ43は、図17に示すように、その受光面全域を三つに分割した形態の三つの測光領域43a、43b、及び43cを有して構成されている。例えば、図18に示すような構図枠(撮影画面121)を設定し、予備発光方式の調光制御を用いて撮影を行う場合においては、図17に示すボディ内測光センサ43の測光領域43cのみを用いて測光を行う。これは、例えば、図18に例示する構図のように太陽等の高輝度被写体が撮影画面121内に含まれているときに、その高輝度被写体を含めて測光を行うと測光値に誤差が生じてしまうのを避けるための措置である。
【0100】
調光部44は、ボディ内測光センサ43から出力された電気信号に基づいて、被写体110からの入射光量の測定及び所定の調光制御を行う。
【0101】
ここで、従来の一般的なカメラにおけるTTL調光方式の調光制御では、例えば露出動作中にフイルム表面からの反射光束を受光するようにしているものもある。しかし、撮像素子12の表面は、一般的に光の反射に正反射成分が多くなるので、本第2の実施形態のカメラ1においては、入射した光束を標準反射率で拡散反射させる先幕41aの表面からの反射光束により測光を行う。
【0102】
表示制御部45は、演算制御回路17に制御され、画像信号処理部14から出力された画像データに基づいて、例えば液晶モニタ(LCD)等の電子モニタ46に画像表示を行う。この電子モニタ46により、撮影終了後に撮影結果をすぐに確認することができる。また、この電子モニタ46を上記したファインダ光学系の代わりに用いることもできる。これについては後に詳述する。
【0103】
ここで、上記した(式4)の関係によれば、適正露出量IM4に対してストロボ光以外で露出される量を予測するための光量検出量(撮像素子12の出力)IM1と、ストロボ光が被写体からどれだけ反射してくるのかを示す値(積分結果)VINT1とを別々に検出して計算してよいということがわかる。
【0104】
そこで、本第2の実施形態では、撮像素子12に入射する光の光量を正確に測定するために、標準反射率の先幕41aで反射された光束の光量IM1をボディ内測光センサ43で検出する。これにより、取り付けられた撮影光学系に依存しない高精度の露出制御を行うことができる。
【0105】
また、露出におけるストロボ光の効果は、適宜、定常光成分除去積分機能付きの測光手段の出力を併用して予測する。これにより良好なストロボ撮影を行うことが可能である。ここで、測光手段の機能である定常光成分除去積分機能は、カメラ1のボディ内測光センサ43に持たせるようにしてもよいが、上述したように、積分結果VINT1を検出するのはボディ内測光センサ43でなくともよい。そこで、本第2の実施形態では、定常光除去積分機能をファインダ内測光センサ34に持たせる。即ち、本第2の実施形態では、上記した第1の実施形態における撮像素子12を用いた測光をボディ内測光センサ43により行い、センサアレイ25a,25bを用いた測光をファインダ内測光センサ34により行う。
【0106】
このような場合には、例えば、図15に示す受光部34aに設けられたセンサに定常光除去機能を持たせ、ここに入射する反射光を検出できるようにしておけば、撮影時に、この受光部34aに主要被写体を入れるようにストロボ予備発光及び露出を行うことで、ストロボ光がその受光部34aにおいてどれだけ寄与できるのかを予測することが可能である。なお、定常光成分除去積分機能は、ファインダ内センサ34でなく、第1の実施形態と同様にセンサアレイ40に持たせてもよい。
【0107】
図19にこのような構成を有するカメラのストロボ撮影時のタイミングチャートを示し、図20にこのストロボ撮影時の制御手順についてのフローチャートを示す。
【0108】
即ち、演算制御回路17は、ストロボ部21を予備発光させた後、ファインダ内測光センサ34で測光を行い、積分結果VINT1を取得する(ステップS61)。このときは、可動ミラー30を通常位置30bに位置させておく。次に、可動ミラー30を退避位置30aに退避させた後(ステップS62)、ストロボを発光せずにボディ内測光センサ43で測光を行い、そのときの露出量IM1を取得する(ステップS63)。次に演算制御回路17は、ストロボ部21を予備発光させて、ボディ内測光センサ43で測光を行い、そのときの露出量IM2を取得する(ステップS64)。ここで、図17で示したような3分割センサの場合には、ストロボ発光前後で最も光量差の大きかったセンサからの出力を露出量IM1及びIM2として採用する。ここで、シャッタ幕41は標準反射率なので、ここから反射する光の量から所定シャッタ速度時(tE)の露出量を予測することができる。
【0109】
即ち、演算制御回路17は、露出量IM1とIM2を比較して両者の差が少ないか否かを判定する(ステップS65)。この判定において両者の差が少ないと判定した場合には、撮影シーンが明るく、ストロボ光による反射信号成分のみを抽出するのは、困難であるとして、ファインダ内測光センサ34で検出した積分結果VINT1と(式4)を用いてストロボ発光量(即ち、発光時間tST)を決定する(ステップS66)。
【0110】
一方、ステップS65の判定において、IM1とIM2との差が大きいと判定した場合には、IM1及びIM2と(式3)を用いて発光時間tSTを決定する(ステップS67)。
【0111】
ストロボ部21の発光時間tSTを決定した後、演算制御回路17は、シャッタ幕41を開いて(ステップS68)、露出を開始する。そして、演算制御回路17は、シャッタ幕41が全開した所でストロボ部21を発光させ(ステップS69)。所定時間tE経過後にシャッタ幕41を閉じて(ステップS70)、撮像素子12に入る被写体からの光を遮断して露出制御を終了する。
【0112】
ここで、図14のような所謂一眼レフレックスカメラでは、一般にストロボ制御が困難であり、閃光発光はシャッタ幕41が全開のときにしか使用できない。このため、高速シャッタ時でも、比較的長時間にわたって同じ明るさでストロボ部21を発光させる制御を行う必要がある。ここで、このような発光を、ここではフラット発光と称する。しかし、このようなフラット発光を用いたストロボ制御では、あまり遠距離まで光を照射することができない。
【0113】
また、一眼レフレックスカメラは、魚眼レンズのようなものを含む広角から望遠までの様々な画角を有するレンズに加え、マクロ機能に対応したマクロレンズなどの種々のレンズを選択して用いることができる。次に、このような種々のレンズのうち、マクロレンズを用いた場合のストロボ発光量の制御を適用した場合について説明する。
【0114】
図21は、図14を簡略化して図示したものである。例えば、図21に示すように、主要被写体110として、例えば昆虫などをマクロで撮影する際には、ファインダ光学系を介して被写体110を確認して撮影を行うよりも、電子モニタ46に、撮像素子12で取得した画像をリアルタイムに表示させ、この電子モニタ46上に表示させた画像により被写体110を確認して撮影を行うほうが、様々なアングルからの撮影が可能である。また、ファインダを覗き込みながら撮影を行う必要もないので撮影の自由度が高い。
【0115】
ここで、電子モニタ46に画像をリアルタイムで表示させる際には、図21に示すように可動ミラー30及びサブミラー36を撮影光学系11の光路上から退避させ、シャッタ幕41を開いておく必要がある。このようなマクロ撮影時の制御を図22のフローチャートを参照して説明する。
【0116】
即ち、図示しないマクロモードボタンが撮影者によって操作されると、演算制御回路17は、それを判定して図21に示すように可動ミラー30及びサブミラー36を撮影光学系11の光路上から退避させ(ステップS71)、続いてシャッタ幕41を開く(ステップS72)。その後、演算制御回路17は、撮像素子12に撮像動作を開始させると同時に、演算制御回路17は、画像信号処理部14に撮像素子12から像信号の読み出しを開始させ、画像信号処理部14で処理された画像を、表示制御部45を介して電子モニタ46に表示させる(ステップS73)。
【0117】
次に演算制御回路17は、図示しないレリーズスイッチがONされたか否かを判定することにより、撮影動作を開始するかを否かを判定し(ステップS74)、レリーズスイッチがONされるまで、像信号の読み出し及び画像表示を続ける。一方、ステップS74の判定において、レリーズスイッチがONされたと判定した場合に、演算制御回路17は、撮影動作を開始する。
【0118】
ここで、マクロ撮影により撮影した写真にも、図23(a)のように主要被写体と共に背景も正しく撮影されていることが重要な場合と、図23(b)のように主要被写体のみがクローズアップされていればよく、背景はそれほど重要でない場合とがある。そこで、以後は第1の実施形態と同様に背景が重要であるか否かを判定して、背景が重要である場合には、その重要背景部分の明るさを基準にして露出制御を行う。
【0119】
即ち、露出制御開始後、まず、演算制御回路17は、ストロボ部21を予備発光させ(ステップS75)、被写体からの反射信号光が検出されない領域をストロボ光が寄与しない背景部110bの領域と判別する(ステップS76)。次に、この背景部110bの領域において図11(a)のステップS28及びS29で説明した彩度判定を行う。即ち、撮像素子12の出力から色差(R−Y)及び(B−Y)を求め、これらのうちで大きいほうの値を彩度判定値SBとして選択する(ステップS77)。そして、このSBが所定値S0よりも大きいか否か、即ち彩度が所定値よりも高いか否かを判定し(ステップS78)、彩度が高いと判定した場合に、演算制御回路17は、背景が重要であると判別して、背景の明るさを基準にして露出時間tEを決定する(ステップS79)。一方、ステップS78の判定において、彩度が低いと判定した場合には、背景が重要でないので、手ぶれ秒時に基づいて露出時間tEを決定する(ステップS80)。
【0120】
このようにして露出時間tEを決定した後、演算制御回路17は、このtEから(式3)を用いてストロボ発光時間tSTを算出する(ステップS81)。その後、ストロボ部21を発光させて露出を開始して(ステップS82)、露出時間tEが経過してからシャッタ幕41を閉じて露出を終了させる(ステップS83)。そして、リアルタイムの画像表示を終了させた後、撮影結果を電子モニタ46上に表示させて(ステップS84)、このフローチャートの制御を終了する。
【0121】
なお、高速シャッタ時では、シャッタ幕41が開の状態から閉の状態になるまでの時間も露出結果に影響してしまうので、この場合には、図示しない絞りを絞ることによって露出時間を長くして、シャッタ幕41が閉じるまでの時間を無視できるようにしてもよい。
【0122】
以上説明したように、本第2の実施形態によれば、レンズ交換式の一眼レフカメラにおいても、撮像素子の出力を有効に利用して背景の美しさを引き出したストロボ撮影を行うことができる。
【0123】
以上実施形態に基づいて本発明を説明したが、本発明は上記した実施形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形や応用が可能なことは勿論である。
【0124】
さらに、上記した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、実施の形態に示される全構成要件からいくつかの構成要件が削除されても、発明が解決しようとする課題の欄で述べた課題が解決でき、発明の効果の欄で述べられている効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。
【0125】
【発明の効果】
以上説明したように、本発明によれば、主要被写体に対して背景がどのようなシーンであるのかを考慮して適正なストロボ制御を行い、画面全体として調和が取れ、雰囲気が豊かであり、色再現性のよい写真を撮影することが可能なストロボ調光機能付きカメラを提供することができる。
【図面の簡単な説明】
【図1】 本発明の第1の実施形態に係るストロボ調光機能付きカメラにおける電気回路構成を示すブロック構成図である。
【図2】 定常光成分除去回路の電気回路図である。
【図3】 定常光成分除去回路の動作時のタイミングチャートである。
【図4】 定常光成分除去回路の非動作時のタイミングチャートである。
【図5】 ストロボ調光に関る重要機能を抜き出して記したブロック図である。
【図6】 撮像素子及びセンサアレイの検出範囲について説明するための図である。
【図7】 図7(a)は撮像素子の画素位置に応じた像信号の分布図であり、図7(b)はセンサアレイの画素位置に応じた像信号の分布図である。
【図8】 本発明の第1の実施形態におけるストロボ撮影時の制御手順を示すフローチャートである。
【図9】 ストロボ発光を行わない場合の露出時間に対する露出量を示したグラフである。
【図10】 図10(a)はストロボ発光を行った場合の露出時間に対する露出量を示したグラフであり、図10(b)はストロボ寄与率について説明するためのグラフである。
【図11】 ストロボ寄与率の切り換え制御について示したフローチャートである。
【図12】 図12(a)はストロボ光が寄与しない領域である背景部を説明するための図であり、図12(b)は重要な背景を含む撮影シーンの例を示す図であり、図12(c)は図12(b)のシーンにおける像信号の分布図である。
【図13】 図13(a)はストロボ光が寄与しない領域を判別するための制御を示すフローチャートにおける第1の変形例であり、図13(b)はストロボ光が寄与しない領域を判別するための制御を示すフローチャートにおける第2の変形例である。
【図14】 本発明の第2の実施形態に係るストロボ調光機能付きカメラにおける電気回路構成を示すブロック構成図である。
【図15】 ファインダ内測光センサの構成について説明するための図である。
【図16】 シャッタ幕について説明するための図である。
【図17】 ボディ内測光センサの測光領域について説明するための図である。
【図18】 高輝度物体が存在するシーンの例を示す図である。
【図19】 本発明の第2の実施形態におけるストロボ撮影時のタイミングチャートである。
【図20】 本発明の第2の実施形態におけるストロボ撮影時の制御手順を示すフローチャートである。
【図21】 第2の実施形態における重要機能を抜き出して記したブロック構成図である。
【図22】 本発明の第2の実施形態におけるマクロモード時のストロボ制御について示したフローチャートである。
【図23】 図23(a)はマクロ撮影の画像の例であって背景が重要な場合の図であり、図23(b)はマクロ撮影の画像の例であって背景が重要でない場合の図である。
【符号の説明】
1…カメラ、11…撮影光学系、12…撮像素子、13,28…AD変換部、14…画像信号処理部、15…記録媒体部、16…コントラスト検出部、17…演算制御回路、18…レンズ駆動部、19…レンズ位置検出部、20…操作スイッチ、21…ストロボ部、22…ストロボ制御部、23…測距部、24a,24b…受光レンズ、25a,25b,40…センサアレイ、26…積分回路、27…定常光成分除去回路、30…可動ミラー、31…スクリーン、32…ペンタプリズム、33…接眼レンズ、34…ファインダ内測光センサ、35…測光部、36…サブミラー、37…フィールドレンズ、38…光路屈曲鏡、39…再結像レンズ、41…シャッタ幕、42…測光光学系、43…ボディ内測光センサ、44…調光部、45…表示制御部、46…電子モニタ[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a camera with a flash light control function, and more particularly to a camera with a flash light control function capable of performing flash photography by adjusting the exposure balance between a background and a main subject.
[0002]
[Prior art]
For example, Patent Documents 1 to 3 propose techniques for performing strobe light emission by adjusting the exposure balance between the background and the main subject during strobe shooting.
[0003]
In Patent Document 1, strobe light emission is performed by determining the ratio of the exposure amount by the strobe light to the exposure amount by the external light from the luminance of the subject. In
[0004]
[Patent Document 1]
Japanese Patent No. 3177742
[0005]
[Patent Document 2]
JP 2001-296578 A
[0006]
[Patent Document 3]
Japanese Patent Laid-Open No. 2002-229094
[0007]
[Problems to be solved by the invention]
In the technologies proposed in Patent Documents 1 to 3, strobe control is performed based on the brightness of the main subject and the background, and the background of the main subject is fully considered. Strobe control is not performed.
[0008]
The present invention has been made in view of the above points, and performs an appropriate strobe control in consideration of what kind of scene the background is for the main subject, so that the entire screen is harmonized and has an atmosphere. An object of the present invention is to provide a camera with a stroboscopic light control function that is capable of taking pictures that are rich and have good color reproducibility.
[0009]
[Means for Solving the Problems]
In order to achieve the above object, a camera with a strobe light control function according to the first aspect of the present invention comprises a light emitting means for irradiating strobe light, and the strobe light from the light emitting means is exposed. Contributing area and An area discriminating unit that discriminates an area that does not contribute and an area discriminated by the area discriminating unit. The strobe light does not contribute to exposure Image signal detection means for detecting an image signal in the region; The contrast change or saturation of the area where the strobe light does not contribute to the exposure is detected from the image signal in the area where the strobe light does not contribute to the exposure, and the area where the detected contrast change or saturation is high is determined to have high importance. Then, the exposure control is performed based on the area determined to be high in importance, and the strobe light is controlled by the light emitting means according to the exposure result. Control means.
[0022]
DETAILED DESCRIPTION OF THE INVENTION
Embodiments of the present invention will be described below with reference to the drawings.
[First Embodiment]
FIG. 1 is a block configuration diagram showing an electric circuit configuration of a camera with a flash light control function (hereinafter referred to as a camera) according to a first embodiment of the present invention.
[0023]
The camera according to the first embodiment photoelectrically converts a subject image formed by a photographing optical system using an imaging element such as a CCD, and an electric signal (image signal) obtained by the photoelectric conversion is converted. Recording in a predetermined form on a predetermined recording medium. Here, in the first embodiment, a so-called compact type electronic camera in which the configuration between the photographing optical system and the image sensor is relatively simple will be described as an example.
[0024]
That is, as shown in FIG. 1, the camera 1 of the first embodiment includes a photographing
[0025]
The photographing
[0026]
The image
[0027]
The image
[0028]
The
[0029]
Here, the
[0030]
Further, when the desired shooting environment including the subject 110 is dark, the
[0031]
Further, the camera 1 has a
[0032]
The subject image incident through the pair of
[0033]
The
[0034]
Thereafter, the
L = Bf / x
The subject distance L is calculated based on the above.
[0035]
Here, a stationary light
[0036]
The switching control and the operation of the steady light component removing circuit will be described in more detail with reference to FIG. FIG. 2 is an electric circuit diagram showing a detailed configuration inside the integrating
[0037]
Although not shown in FIG. 2, the
[0038]
That is, when the
[0039]
Here, the potential of the
[0040]
As a result, the current amplified by the
[0041]
Here, as shown in FIG. 3, the
[0042]
Here, if the
[0043]
The output voltage V of the integrating
[0044]
On the other hand, when the operation of the steady light
[0045]
As described above, if the stationary light
[0046]
Here, the amount of reflected signal can be detected for each pixel by incorporating a stationary light component removal circuit into each sensor of the sensor array. Also, if this function is used for autofocus, accurate distance measurement can be performed by the light distribution of reflected signal light from the subject 110 by strobe light, for example, even during backlighting.
[0047]
Further, when the flash light control is performed, even if the steady light is large in a bright scene, or even if the subject is far away and the amount of reflected signal light is small, correct reflected signal light can be detected and applied to accurate exposure control.
[0048]
FIG. 5 shows only the important functions at the time of strobe dimming of a camera having a sensor array with a function of removing a steady light component.
[0049]
That is, when the light from the
[0050]
Here, the features of strobe control using an image sensor or sensor array will be described.
Although the
[0051]
FIG. 7A shows an output of the
[0052]
On the other hand, FIG. 7B shows a distribution diagram of the output of the sensor array during strobe light emission. In FIG. 7B, the horizontal axis indicates the pixel position of the sensor array, and the vertical axis indicates the magnitude of the image signal. That is, if a sensor array with a steady light component removal function is used, only the reflected signal light component from the subject 110 by strobe light can be detected as shown in FIG. 7B.
[0053]
FIG. 8 shows an example of a flowchart at the time of strobe control of the camera having such a configuration.
First, the
[0054]
Next, the difference of the output of the image pick-up
[0055]
That is, the
[0056]
In the determination of step S10, V INT1 Is the predetermined amount V 0 If it is determined that this is the case, V INT1 Thus, the light emission amount of the
[0057]
In step S8, I M1 Is the predetermined brightness I M0 If it is determined that the difference is ΔI or not in step S9 M Is a predetermined amount ΔI M1 If the
[0058]
After the strobe light emission amount is determined as described above, the
[0059]
Next, the concept of such exposure control will be described with reference to FIG. 9, FIG. 10 (a), and FIG. 10 (b). Here, the horizontal axis in these drawings indicates the exposure time, and the vertical axis indicates the exposure amount.
[0060]
That is, as shown in FIG. 9, when exposure without a strobe is performed in a dark state of the subject, camera shake occurs (here, this time is set as the exposure time) t E Appropriate exposure amount I M4 I cannot get M4 -I M3 Only underexposure occurs.
[0061]
The
[0062]
The
[Expression 1]
(Equation 1) to (Equation 3) shown in FIG. 9 and each light quantity detection value shown in FIG. 9, FIG. 10 (a), or 10 (b).
[0063]
Here, the method of obtaining the strobe light emission time mainly from the output of the
[Expression 2]
The strobe firing time t ST Can be calculated.
[0064]
In addition to compensating for the shortage of exposure using the
[0065]
In general, strobe light does not reach the background of a landscape or the like, so when the strobe contribution ratio is increased, the exposure amount of the background becomes relatively smaller than the exposure amount of the person. Conversely, when the strobe contribution ratio is lowered, the exposure amount of the person becomes relatively smaller than the exposure amount of the background. For these reasons, it is preferable to perform exposure control by switching the strobe contribution rate according to the situation. For example, when the background is empty, the blueness of the sky increases when the exposure is slightly underexposed, and when the background is snowy, the snow white is not captured correctly unless the exposure is overexposed.
[0066]
The switching of the strobe contribution rate is performed according to a flowchart as shown in FIG. 11, for example.
[0067]
In this flowchart, the
[0068]
After discriminating the
[0069]
Also, contrast change C B For example, in the image signal shown in FIG. 12C, it may be obtained from the product of the change in brightness ΔB of the background portion and the period F of the background portion. The important background portion may be determined not only from the change in contrast but also by recognizing the shape of a two-dimensional image in the background portion.
[0070]
Thus, the contrast change in the representative portion of the background is detected in order to perform exposure control so that a fine pattern in the representative portion of the background is correctly reproduced. Here, when the contrast change detected in step S23 is small, the background is considered not so important.
[0071]
Here, when exposure control is performed based on the brightness of the background, the exposure time becomes long when the background is dark, and there is a high possibility that camera shake will occur. On the other hand, when the background is bright, it is necessary to increase the strobe contribution rate to the main subject, that is, to increase the strobe emission amount, which leads to energy loss.
[0072]
Therefore, in the first embodiment, only when the background is important, exposure control is performed based on the brightness of the background so that the background contrast is correctly reproduced.
[0073]
That is, the
[0074]
That is, the
[0075]
On the other hand, if it is determined in step S26 that the maximum value of the image signal in the
[0076]
In step S24, the contrast change C B Is a predetermined size C 0 When it is determined that the following is true, the
[0077]
For example, as in the
[0078]
That is, contrast change C B Is a predetermined size C 0 When it is determined that it is below, the
Y = 0.263R + 0.655G + 0.081B (Formula 5)
(Step S30). Y in (Formula 5) is an example of the CIE color system. Here, since each RGB coefficient in (Equation 5) differs depending on the component creation, color concept, etc., in FIG.
Y = aR + bG + cB (Formula 6)
It is expressed in generalized as follows. After the background brightness Y is thus obtained, the
[0079]
Further, in the determination of step S29, the saturation is low, that is, S B Is the predetermined value S 0 If it is determined that the exposure time t is less than the time until camera shake occurs (camera shake time), the exposure time t E Is determined (step S32).
[0080]
Exposure time t in step S31 or S32 E Is determined, the
[0081]
In this way, if the color of the background part is determined and the color balance of the image sensor in this background part is biased, increase the strobe contribution ratio for the main subject so that the characteristic color does not fly white. Reduce the exposure time. By shortening the exposure time in this way, a background such as a blue sky or a sunset sky does not fly white during photographing.
[0082]
Here, a modified example of the method for determining the region to which the strobe light does not contribute in step S22 will be described with reference to FIGS. 13 (a) and 13 (b). The example of FIG. 13A is an example in which discrimination is performed based on the distance to the subject. First, the
[0083]
In the example of FIG. 13B, the difference ΔI described in FIG. M And integral value V INT1 This is an example in which the determination is performed. That is, the
[0084]
As described above, according to the first embodiment, since the strobe light emission time is controlled by the exposure control in consideration of the balance between the strobe light and the background brightness, the color reproducibility can be improved. . In addition, if a sensitive steady light removal integration circuit is used, the amount of strobe light emission during the preliminary light emission can be weakened, and a preliminary light emission system with excellent energy saving effect without glare can be achieved.
[0085]
[Second Embodiment]
FIG. 14 is a block configuration diagram of an electric circuit in the camera according to the second embodiment of the present invention. A part of the configuration of the camera is the same as that of the camera of the first embodiment described above. Therefore, the same components are denoted by the same reference numerals, and detailed description thereof is omitted. The second embodiment is an example using a TTL (Trough The Lens) direct dimming method.
[0086]
That is, the camera 1 of the second embodiment includes a
[0087]
The
[0088]
That is, when the
[0089]
Further, an in-
[0090]
The
[0091]
In addition, a part of the
[0092]
That is, the
[0093]
That is, when the
[0094]
Here, this focusing process may be a TTL phase difference detection method that is generally applied. This TTL phase difference detection method will be briefly described. In this method, the
[0095]
Further, as described above, the
[0096]
As shown in FIG. 16, the
[0097]
Here, when the exposure operation is executed, first, the
[0098]
In addition, a predetermined pattern is formed on the surface of the
[0099]
Here, as shown in FIG. 17, the in-
[0100]
The
[0101]
Here, in a conventional TTL dimming control of a general camera, for example, a reflected light beam from a film surface is received during an exposure operation. However, since the surface of the
[0102]
The
[0103]
Here, according to the relationship of (Equation 4) described above, the appropriate exposure amount I M4 A light amount detection amount (output of the image sensor 12) I for predicting the amount of exposure other than strobe light I M1 And a value (integration result) V indicating how much strobe light is reflected from the subject. INT1 It can be seen that and can be calculated separately.
[0104]
Therefore, in the second embodiment, in order to accurately measure the amount of light incident on the
[0105]
In addition, the effect of the strobe light on the exposure is predicted as appropriate by using the output of the photometry means with the steady light component removal integration function. This makes it possible to perform good flash photography. Here, the steady light component removal integration function, which is a function of the photometry means, may be provided in the in-
[0106]
In such a case, for example, if the sensor provided in the
[0107]
FIG. 19 shows a timing chart at the time of flash photography of the camera having such a configuration, and FIG. 20 shows a flowchart of the control procedure at the time of flash photography.
[0108]
That is, the
[0109]
That is, the
[0110]
On the other hand, in the determination of step S65, I M1 And I M2 If it is determined that the difference between M1 And I M2 And (Equation 3), the emission time t ST Is determined (step S67).
[0111]
Flash time t of the
[0112]
Here, in the so-called single-lens reflex camera as shown in FIG. 14, it is generally difficult to control the strobe, and the flash emission can be used only when the
[0113]
A single-lens reflex camera can select and use various lenses such as a macro lens corresponding to a macro function in addition to lenses having various angles of view from a wide angle to a telephoto including a fish-eye lens. . Next, a description will be given of a case in which control of the strobe light emission amount when using a macro lens among such various lenses is applied.
[0114]
FIG. 21 is a simplified illustration of FIG. For example, as shown in FIG. 21, when a macro image of an insect or the like is taken as the
[0115]
Here, when displaying an image on the
[0116]
That is, when a macro mode button (not shown) is operated by the photographer, the
[0117]
Next, the
[0118]
Here, also in a photograph taken by macro photography, it is important that the background is correctly photographed together with the main subject as shown in FIG. 23A, and only the main subject is closed as shown in FIG. The background may not be so important. Therefore, thereafter, similarly to the first embodiment, it is determined whether or not the background is important. If the background is important, exposure control is performed based on the brightness of the important background portion.
[0119]
That is, after the exposure control is started, the
[0120]
In this way, the exposure time t E Is determined, the
[0121]
In the case of a high-speed shutter, the time until the
[0122]
As described above, according to the second embodiment, even in an interchangeable lens single-lens reflex camera, it is possible to perform strobe shooting that draws out the beauty of the background by effectively using the output of the image sensor. .
[0123]
Although the present invention has been described based on the above embodiments, the present invention is not limited to the above-described embodiments, and various modifications and applications are naturally possible within the scope of the gist of the present invention.
[0124]
Further, the above-described embodiments include various stages of the invention, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements. For example, even if some constituent elements are deleted from all the constituent elements shown in the embodiment, the problem described in the column of the problem to be solved by the invention can be solved, and is described in the column of the effect of the invention. When an effect is obtained, a configuration from which this configuration requirement is deleted can be extracted as an invention.
[0125]
【The invention's effect】
As described above, according to the present invention, appropriate strobe control is performed in consideration of what the background is for the main subject, the entire screen is harmonized, and the atmosphere is rich. A camera with a stroboscopic light control function capable of taking a photograph with good color reproducibility can be provided.
[Brief description of the drawings]
FIG. 1 is a block configuration diagram showing an electric circuit configuration in a camera with a flash light control function according to a first embodiment of the present invention.
FIG. 2 is an electric circuit diagram of a stationary light component removal circuit.
FIG. 3 is a timing chart during operation of the stationary light component removal circuit.
FIG. 4 is a timing chart when the stationary light component removing circuit is not operating;
FIG. 5 is a block diagram extracting and describing important functions related to strobe light control.
FIG. 6 is a diagram for explaining detection ranges of an image sensor and a sensor array.
FIG. 7A is a distribution diagram of image signals according to the pixel positions of the image sensor, and FIG. 7B is a distribution diagram of image signals according to the pixel positions of the sensor array.
FIG. 8 is a flowchart illustrating a control procedure during strobe shooting according to the first embodiment of the present invention.
FIG. 9 is a graph showing an exposure amount with respect to an exposure time when strobe light emission is not performed.
FIG. 10A is a graph showing an exposure amount with respect to an exposure time when strobe light is emitted, and FIG. 10B is a graph for explaining a strobe contribution rate.
FIG. 11 is a flowchart showing control for switching the strobe contribution rate.
FIG. 12A is a diagram for explaining a background portion that is an area where strobe light does not contribute, and FIG. 12B is a diagram illustrating an example of a shooting scene including an important background; FIG. 12C is a distribution diagram of image signals in the scene of FIG.
FIG. 13 (a) is a first modification in the flowchart showing the control for determining the region where the strobe light does not contribute, and FIG. 13 (b) is for determining the region where the strobe light does not contribute. It is the 2nd modification in the flowchart which shows this control.
FIG. 14 is a block configuration diagram showing an electric circuit configuration in a camera with a flash light control function according to a second embodiment of the present invention.
FIG. 15 is a diagram for explaining the configuration of a finder photometric sensor;
FIG. 16 is a diagram for explaining a shutter curtain.
FIG. 17 is a diagram for explaining a photometric area of the in-body photometric sensor.
FIG. 18 is a diagram illustrating an example of a scene where a high-luminance object exists.
FIG. 19 is a timing chart at the time of flash photography according to the second embodiment of the present invention.
FIG. 20 is a flowchart showing a control procedure during strobe shooting according to the second embodiment of the present invention.
FIG. 21 is a block configuration diagram extracting and describing important functions in the second embodiment.
FIG. 22 is a flowchart showing strobe control in the macro mode in the second embodiment of the present invention.
FIG. 23A is an example of a macro shot image when the background is important, and FIG. 23B is an example of a macro shot image when the background is not important. FIG.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 ... Camera, 11 ... Imaging optical system, 12 ... Image pick-up element, 13, 28 ... AD conversion part, 14 ... Image signal processing part, 15 ... Recording medium part, 16 ... Contrast detection part, 17 ... Calculation control circuit, 18 ... Lens drive unit, 19 ... lens position detection unit, 20 ... operation switch, 21 ... strobe unit, 22 ... strobe control unit, 23 ... distance measuring unit, 24a, 24b ... light receiving lens, 25a, 25b, 40 ... sensor array, 26 ... Integral circuit, 27 ... Stationary light component removal circuit, 30 ... Moving mirror, 31 ... Screen, 32 ... Pental prism, 33 ... Eyepiece lens, 34 ... In-finder photometric sensor, 35 ... Photometry unit, 36 ... Sub-mirror, 37 ... Field Lens, 38 ... Optical path bending mirror, 39 ... Re-imaging lens, 41 ... Shutter curtain, 42 ... Photometric optical system, 43 ... In-body photometric sensor, 44 ... Light control unit, 45 ... Display Control unit, 46 ... electronic monitor
Claims (1)
この発光手段によるストロボ光が露出に寄与しない領域を判別する領域判別手段と、
この領域判別手段によって判別された上記ストロボ光が露出に寄与しない領域における像信号を検出する像信号検出手段と、
上記ストロボ光が露出に寄与しない領域における像信号から上記ストロボ光が露出に寄与しない領域のコントラスト変化又は彩度を検出し、該検出したコントラスト変化又は彩度が高い領域を重要度が高いと判定し、該重要度が高いと判定した領域に基づいて露出制御を行うとともに、上記露出結果に従って上記発光手段によるストロボ光の制御を行う制御手段と、
を具備することを特徴とするストロボ調光機能付きカメラ。A light emitting means for emitting strobe light;
Area discriminating means for discriminating an area where the strobe light from the light emitting means does not contribute to exposure; and
Image signal detection means for detecting an image signal in an area where the strobe light determined by the area determination means does not contribute to exposure ;
The contrast change or saturation of the area where the strobe light does not contribute to the exposure is detected from the image signal in the area where the strobe light does not contribute to the exposure, and the area where the detected contrast change or saturation is high is determined to have high importance. And a control means for performing exposure control based on the area determined to be high in importance, and controlling strobe light by the light emitting means according to the exposure result ,
A camera equipped with a flash light control function.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003196548A JP4286077B2 (en) | 2003-07-14 | 2003-07-14 | Camera with flash light control function |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2003196548A JP4286077B2 (en) | 2003-07-14 | 2003-07-14 | Camera with flash light control function |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2005031424A JP2005031424A (en) | 2005-02-03 |
JP4286077B2 true JP4286077B2 (en) | 2009-06-24 |
Family
ID=34207000
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2003196548A Expired - Fee Related JP4286077B2 (en) | 2003-07-14 | 2003-07-14 | Camera with flash light control function |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4286077B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5264318B2 (en) * | 2008-06-23 | 2013-08-14 | キヤノン株式会社 | Imaging apparatus and control method thereof |
-
2003
- 2003-07-14 JP JP2003196548A patent/JP4286077B2/en not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
JP2005031424A (en) | 2005-02-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US6895181B2 (en) | Camera and distance measuring method thereof | |
TWI423664B (en) | Imaging apparatus and exposure control method | |
JP3793982B2 (en) | Electronic camera, electronic camera finger detection method, and electronic camera level conversion method | |
JP2013214878A (en) | Imaging apparatus, exposure control method, and program | |
KR101700658B1 (en) | Single lens reflex camera comprising a focus detecting apparatus and method for photographing | |
JP2010178027A (en) | Camera system | |
JP2008224808A (en) | Automatic focusing device and imaging apparatus | |
JP2001169180A (en) | Digital camera | |
JP4307648B2 (en) | camera | |
JP2004085936A (en) | Camera | |
JP4309716B2 (en) | camera | |
JP2004004449A (en) | Exposure control system for camera | |
JP4286077B2 (en) | Camera with flash light control function | |
JP2012063664A (en) | Photometric device and electronic camera | |
JP5423140B2 (en) | Photometric device and imaging device | |
CN109387992B (en) | Image pickup apparatus capable of sufficiently ensuring light emission accuracy and control method thereof | |
JP4859194B2 (en) | IMAGING DEVICE, ITS CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM | |
JP4974862B2 (en) | Imaging apparatus and control method thereof | |
JP2005010366A (en) | Camera equipped with electronic flash light control function | |
JP2001100087A (en) | Multispot range finder | |
JP2006072084A (en) | Automatic focus detecting device and camera system | |
JP4657543B2 (en) | Focus detection device | |
JP2004120582A (en) | Camera | |
JP5625711B2 (en) | Imaging apparatus and imaging method | |
JP2005024858A (en) | Digital single lens reflex camera |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20060307 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20081009 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20081014 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20081215 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090303 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090324 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120403 Year of fee payment: 3 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 4286077 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120403 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120403 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130403 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140403 Year of fee payment: 5 |
|
S531 | Written request for registration of change of domicile |
Free format text: JAPANESE INTERMEDIATE CODE: R313531 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
LAPS | Cancellation because of no payment of annual fees |