JP2018146992A - Tremor correction device, imaging device and tremor correction system - Google Patents
Tremor correction device, imaging device and tremor correction system Download PDFInfo
- Publication number
- JP2018146992A JP2018146992A JP2018126340A JP2018126340A JP2018146992A JP 2018146992 A JP2018146992 A JP 2018146992A JP 2018126340 A JP2018126340 A JP 2018126340A JP 2018126340 A JP2018126340 A JP 2018126340A JP 2018146992 A JP2018146992 A JP 2018146992A
- Authority
- JP
- Japan
- Prior art keywords
- output
- posture
- angular velocity
- magnification
- sensor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012937 correction Methods 0.000 title claims abstract description 99
- 238000003384 imaging method Methods 0.000 title claims abstract description 18
- 206010044565 Tremor Diseases 0.000 title abstract 7
- 230000001133 acceleration Effects 0.000 claims abstract description 103
- 230000003287 optical effect Effects 0.000 claims abstract description 19
- 238000004364 calculation method Methods 0.000 claims description 62
- 230000006641 stabilisation Effects 0.000 claims 6
- 238000011105 stabilization Methods 0.000 claims 6
- 230000006866 deterioration Effects 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 15
- 238000001514 detection method Methods 0.000 description 13
- 230000007246 mechanism Effects 0.000 description 13
- 238000000034 method Methods 0.000 description 10
- 238000012545 processing Methods 0.000 description 7
- 239000011159 matrix material Substances 0.000 description 6
- 230000008569 process Effects 0.000 description 6
- 230000009466 transformation Effects 0.000 description 6
- 230000008859 change Effects 0.000 description 4
- 238000006073 displacement reaction Methods 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000011514 reflex Effects 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 1
- 230000002542 deteriorative effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- GGCZERPQGJTIQP-UHFFFAOYSA-N sodium;9,10-dioxoanthracene-2-sulfonic acid Chemical compound [Na+].C1=CC=C2C(=O)C3=CC(S(=O)(=O)O)=CC=C3C(=O)C2=C1 GGCZERPQGJTIQP-UHFFFAOYSA-N 0.000 description 1
Images
Landscapes
- Details Of Cameras Including Film Mechanisms (AREA)
- Adjustment Of Camera Lenses (AREA)
Abstract
Description
本発明は、ブレ補正装置、撮影装置及びブレ補正システムに関するものである。 The present invention relates to a shake correction apparatus, a photographing apparatus, and a shake correction system.
高倍率撮影時においては、平行ブレの影響が大きくなるが、角速度センサのみを用いる一般的なブレ補正システムでは、平行ブレを検出することができない。このため、高倍率撮影時にはブレ補正精度が悪化するという問題があった。
この問題を解決するため、3軸の加速度センサと、3軸の角速度センサを用いてカメラの姿勢を演算し、加速度センサの出力に含まれる重力加速度成分を演算、除去することで、並進ブレ成分のみを演算して、補正することによって、高倍率撮影時のブレ補正精度を向上させる技術(特許文献1)が提案されている。これは、6軸センサの出力を基に、平行ブレの変位量を求めるものである。
The effect of parallel blurring becomes large during high-magnification shooting, but parallel blurring cannot be detected with a general blur correction system that uses only an angular velocity sensor. For this reason, there has been a problem that blur correction accuracy deteriorates during high-magnification shooting.
In order to solve this problem, the translational blur component is calculated by calculating the posture of the camera using a triaxial acceleration sensor and a triaxial angular velocity sensor, and calculating and removing the gravitational acceleration component included in the output of the acceleration sensor. A technique (Patent Document 1) has been proposed that improves the blur correction accuracy at the time of high-magnification shooting by calculating and correcting only this. This is to determine the amount of parallel blur displacement based on the output of the 6-axis sensor.
上記従来技術により、光軸に垂直な面内でのブレ量をより正確に演算することが可能となったが、以下の課題が残る。
カメラの姿勢を演算する際には、初期値が必要であり、これは、加速度センサ値を基に演算する。しかし、加速度センサの出力には、重力加速度成分と、加速度成分が含まれているため、初期値演算時の加速度センサの出力に、大きなブレや、外乱等による加速度成分が多分に含まれている場合には、姿勢演算結果に誤差が生じてしまう。この誤差によりブレ補正精度を悪化させてしまうという問題があった。
Although the above-described conventional technique makes it possible to calculate the blur amount in a plane perpendicular to the optical axis more accurately, the following problems remain.
When calculating the posture of the camera, an initial value is required, which is calculated based on the acceleration sensor value. However, since the acceleration sensor output includes a gravitational acceleration component and an acceleration component, the acceleration sensor output at the time of initial value calculation probably includes a large amount of acceleration components due to blurring or disturbance. In this case, an error occurs in the posture calculation result. This error has a problem that the blur correction accuracy is deteriorated.
本発明の課題は、ブレ補正性能の悪化を防ぐことができるブレ補正装置、撮影装置及びブレ補正システムを提供することである。 An object of the present invention is to provide a shake correction apparatus, a photographing apparatus, and a shake correction system that can prevent deterioration in shake correction performance.
本発明は、カメラに設けられ、撮影倍率を調節する調節レンズを有し、被写体の像を形成する光学系と、前記カメラの角速度を検出する角速度センサと、前記カメラの加速度を検出する加速度センサと、前記加速度センサからの出力に基づいて、前記カメラの初期の姿勢を演算する姿勢演算部、前記撮影倍率が所定倍率未満である、及び前記撮影倍率が所定倍率以上かつ前記姿勢演算部により演算された初期の姿勢に信頼性がない、の少なくともいずれかであると前記角速度センサからの出力に基づいてブレ補正を行い、前記撮影倍率が所定倍率以上かつ前記姿勢演算部により演算される初期の姿勢に信頼性があると、前記角速度センサからの出力と前記加速度センサからの出力とに基づいてブレ補正を行うブレ補正部と、を備えるブレ補正装置に関する。
また、本発明は、上記ブレ補正装置と、前記光学系を透過して入射した光を撮像する撮像部と、を備える撮影装置に関する。
また、本発明は、撮影倍率を調節する調節レンズを有し、被写体の像を形成する光学系と、前記光学系の加速度を検出する加速度センサと、前記光学系の角速度を検出する角速度センサと、前記加速度センサからの出力に基づいて、前記光学系の初期の姿勢を演算する姿勢演算部と、前記撮影倍率が所定倍率未満である、及び前記撮影倍率が所定倍率以上かつ前記姿勢演算部により演算された姿勢に信頼性がない、の少なくともいずれかであると前記角速度センサからの出力に基づいてブレ補正を行い、前記撮影倍率が所定倍率以上かつ前記姿勢演算部により演算された姿勢に信頼性があると前記角速度センサからの出力と前記加速度センサからの出力とに基づいてブレ補正を行うブレ補正部と、を備えるブレ補正システムに関する。
The present invention is provided with a camera and has an adjustment lens for adjusting a photographing magnification, an optical system that forms an image of a subject, an angular velocity sensor that detects an angular velocity of the camera, and an acceleration sensor that detects an acceleration of the camera And an attitude calculation unit that calculates an initial attitude of the camera based on an output from the acceleration sensor, the imaging magnification is less than a predetermined magnification, and the imaging magnification is greater than or equal to a predetermined magnification and is calculated by the attitude calculation unit If the initial posture is at least one of unreliable, shake correction is performed based on the output from the angular velocity sensor, and the initial magnification calculated by the posture calculation unit is greater than a predetermined magnification. A shake correction unit comprising: a shake correction unit that performs a shake correction based on the output from the angular velocity sensor and the output from the acceleration sensor when the posture is reliable On location.
The present invention also relates to an imaging apparatus including the blur correction apparatus and an imaging unit that images incident light that has passed through the optical system.
The present invention also includes an optical system that includes an adjustment lens that adjusts the photographing magnification, forms an image of a subject, an acceleration sensor that detects acceleration of the optical system, and an angular velocity sensor that detects the angular velocity of the optical system; An attitude calculation unit that calculates an initial attitude of the optical system based on an output from the acceleration sensor, the imaging magnification is less than a predetermined magnification, and the imaging magnification is greater than or equal to a predetermined magnification and the attitude calculation unit If the calculated posture is at least one of unreliable, shake correction is performed based on the output from the angular velocity sensor, and the photographing magnification is equal to or larger than a predetermined magnification and the posture calculated by the posture calculation unit is reliable. And a blur correction unit that performs a blur correction based on an output from the angular velocity sensor and an output from the acceleration sensor.
本発明によれば、誤差によるブレ補正性能の悪化を防ぐことができる、という効果がある。 According to the present invention, there is an effect that deterioration of blur correction performance due to an error can be prevented.
(第1実施形態)
以下、図面等を参照して、本発明の実施の形態について、さらに詳しく説明する。
図1は、本発明のカメラの第1実施形態を模式的に示す断面図である。
カメラ1は、デジタル一眼レフカメラであり、カメラ筐体1Aと、このカメラ筐体1Aに対して着脱自在に装着されるレンズ鏡筒1Bとを備えている。
CPU2は、ズーム群4、フォーカス群5、ブレ補正群6等のレンズ群の移動量演算や、カメラ1の全体の制御を行う中央処理装置である。
撮像素子3は、撮影レンズ(4,5,6)により形成された被写体像を撮像する素子であり、被写体光を露光して電気的な画像信号に変換し、信号処理回路15へ出力する。撮像素子3は、例えばCCD、CMOSなどの素子により構成されている。
(First embodiment)
Hereinafter, embodiments of the present invention will be described in more detail with reference to the drawings.
FIG. 1 is a cross-sectional view schematically showing a first embodiment of the camera of the present invention.
The camera 1 is a digital single-lens reflex camera, and includes a
The CPU 2 is a central processing unit that calculates the movement amount of the lens groups such as the zoom group 4, the focus group 5, and the shake correction group 6 and controls the entire camera 1.
The
ズーム群4は、ズーム群駆動機構7により駆動され、光軸方向に沿って移動することにより、像の倍率を連続的に変化させるレンズ群である。フォーカス群5は、フォーカス群駆動機構8により駆動され、光軸方向に移動して、焦点を合わせるレンズ群である。ブレ補正群6は、ブレ補正群駆動機構9により光学的にブレ補正駆動され、光軸に垂直な面上で可動なレンズ群である。 The zoom group 4 is a lens group that is driven by the zoom group driving mechanism 7 and moves along the optical axis direction to continuously change the magnification of the image. The focus group 5 is a lens group that is driven by the focus group drive mechanism 8 and moves in the optical axis direction to focus. The shake correction group 6 is a lens group that is optically shake-corrected by a shake correction group drive mechanism 9 and is movable on a plane perpendicular to the optical axis.
絞り10は、絞り駆動機構11に駆動され、撮影レンズ(4,5,6)を通過する被写体光の光量を制御する機構である。
加速度センサ12A、角速度センサ12Bは、それぞれセンサユニットに生じる振れの加速度、角速度を検出するセンサである。
The diaphragm 10 is a mechanism that is driven by the diaphragm drive mechanism 11 and controls the amount of subject light passing through the photographing lenses (4, 5, 6).
The acceleration sensor 12 </ b> A and the angular velocity sensor 12 </ b> B are sensors that detect shake acceleration and angular velocity generated in the sensor unit, respectively.
記録媒体13は、撮像された画像データを記録するための媒体であり、SDカード、CFカード等が使用される。
EEPROM14は、加速度センサ12Aのゲイン値などの調整値情報、レンズ鏡筒固有の情報等を記憶するメモリであって、CPU2に出力する。
信号処理回路15は、撮像素子3からの出力を受けて、ノイズ処理やA/D変換等の処理を行う回路である。
AFセンサ16は、AF(自動焦点調節)を行うためのセンサであって、CCD等を用いることができる。
レリーズスイッチ17は、カメラ1の撮影操作を行う部材であって、シャッタ駆動のタイミング等を操作するスイッチである。
The
The EEPROM 14 is a memory that stores adjustment value information such as a gain value of the
The
The
The release switch 17 is a member that performs a photographing operation of the camera 1 and is a switch that operates a shutter driving timing and the like.
背面液晶18は、カメラ1のカメラ筐体1Aの背面に設けられ、撮像素子3で撮影した被写体像(再生画像、ライブビュー画像)や操作に関連した情報(メニュー)などを表示するカラー液晶ディスプレイである。
シャッタ20は、ミラー19の後方に配置されている。シャッタ20には、ミラー19が上へ回転して撮影可能状態となったときに、被写体光が入射される。シャッタ20は、レリーズスイッチ17などによる撮影指示に応じてシャッタ幕を走行させ、撮像素子3に入射する被写体光を制御する。
The rear liquid crystal 18 is provided on the rear surface of the
The
図2は、本発明によるブレ補正装置の第1実施形態を示すブロック図である。
図3は、本発明によるブレ補正装置の第1実施形態のカメラ座標系を説明する図である。
加速度センサ12Aは、図3(A)に示すように、カメラ1のX軸、Y軸、Z軸方向に感度を有する加速度を検出するGセンサなどである。この実施形態では、撮像素子3の撮像面と撮影レンズ(4,5,6)の光軸との交点を直交座標の原点Oとし、撮影レンズ(4,5,6)の光軸をZ軸、撮像素子3の撮像面をXY平面として表している。
角速度センサ12Bは、X軸回り(Pitch)、Y軸回り(Yaw)、Z軸回り(Roll)の角速度を検出する振動ジャイロ等のセンサである。
FIG. 2 is a block diagram showing a first embodiment of a shake correction apparatus according to the present invention.
FIG. 3 is a view for explaining the camera coordinate system of the first embodiment of the shake correction apparatus according to the present invention.
As shown in FIG. 3A, the
The
加速度センサ12Aの出力値には、並進運動で発生する加速度と重力加速度とが含まれている。また、カメラ1の回転運動によってカメラ1の姿勢が変化するので、カメラ座標系に固定された加速度センサ12Aの検出軸方向と重力加速度方向とのなす角が変化する。このため、加速度センサ12Aの出力値に含まれる重力加速度の大きさが変化する。従って、加速度センサ12Aの出力値から重力加速度成分を除去し、並進運動で発生する加速度成分のみを用いて変位を算出するようにする。
The output value of the
この重力加速度成分を演算するために、カメラ1は、初期姿勢演算部31、姿勢演算部32と、重力加速度演算部33、初期姿勢信頼性判断部51とを備える。
初期姿勢演算部31は、カメラ1の初期姿勢を求める部分であり、加速度センサ12Aの出力から求められる重力加速度方向を利用して求める。ここで、カメラ1には回転振動及び並進振動が存在するので、重力加速度方向を適宜の時間の間測定し続け、その測定結果の平均を算出することで平均的な重力加速度方向を求める。このようにして、図3に示すカメラ座標系42における重力加速度方向により、慣性座標系41に対するカメラの平均的な姿勢を求め、これをカメラ1の初期姿勢に設定する。
In order to calculate the gravitational acceleration component, the camera 1 includes an initial
The initial
姿勢演算部32は、静止座標系である慣性座標系41から運動座標系であるカメラ座標系42へ変換するための座標変換マトリックスを演算するものである。この座標変換マトリックスは、初期姿勢演算部31の出力であるカメラ1の初期姿勢と、角速度センサ12Bの出力である3軸回りの加速度とを用いて算出される。この演算方法は、ストラップダウン方式の慣性航法装置等に用いられている方法であり、その詳細は、例えば特開平2−309702号公報に開示されている。また、座標変換マトリックスの演算方法は、特開平7−225405号公報に開示されている。
The
重力加速度演算部33は、慣性座標系41における重力加速度成分に座標変換マトリックスを乗じて、カメラ座標系42における重力加速度成分を求めるものである。加速度センサ12Aの出力値であるX軸,Y軸方向の加速度から、減算器21X,21Yによって、この重力加速度成分を除去すると、並進運動で発生する加速度が求められる。さらにこの値は、HPF22X,22Yで低周波成分を除去され、積分回路23X,23Y、積分回路24X,24Yで2回積分することにより、X軸,Y軸方向の並進運動の変位が算出され、ブレ補正駆動量演算部35X,35Yに出力される。
The gravitational
一方、角速度センサ12BのX軸回り(Pitch)、Y軸回り(Yaw)の出力は、HPF25P,25Yで低周波成分が除去され、積分回路26P,26Yで積分されたのち、ブレ補正駆動量演算部35X,35Yにそれぞれ接続されている。
On the other hand, the output of the
ブレ補正駆動量演算部35X,35Yは、加速度センサ12A,角速度センサ12Bの信号処理された出力、被写体距離情報検出部37からの被写体距離情報、撮影倍率情報検出部38からの撮影倍率情報、及び、EEPROM14(図1)からのレンズ固有の情報等に基づいて、ブレ補正駆動機構9X,9Yの駆動量を演算する。
The blur correction drive
初期姿勢信頼性判断部51は、初期姿勢演算結果が信頼できるかどうかの判定を行う部分である。この初期姿勢信頼性判断部51については、後に詳細に説明する。
カメラ1の姿勢を演算する際は、初期値が必要であり、これは、加速度センサ12Aの検出値を基に演算する。しかし、加速度センサ12Aの出力には、重力加速度成分と、加速度成分が含まれているため、初期値演算時の加速度センサ12Aの出力に、大きなブレや、外乱等による加速度成分が多分に含まれている場合には、姿勢演算結果に誤差が生じてしまう。この誤差により、ブレ補正精度を悪化させてしまうという問題があった。
この実施形態では、初期姿勢演算結果の誤差によるブレ補正性能の悪化を防ぐため、ブレ補正が開始される前までに姿勢情報の初期値が求まらなかった場合(信頼度が低いと判断された場合)には、初期値を演算するまでの間は、角速度センサ12Bのみによるブレ補正(通常手ブレ補正)を行う。
The initial posture
When calculating the attitude of the camera 1, an initial value is required, which is calculated based on the detection value of the
In this embodiment, in order to prevent deterioration of the blur correction performance due to an error in the initial posture calculation result, the initial value of posture information is not obtained before the blur correction is started (it is determined that the reliability is low). When the initial value is calculated, shake correction (normal camera shake correction) using only the
図4は、本発明によるブレ補正装置の第1実施形態の動作を説明するフローチャートである。
S1において、レリーズスイッチ17が半押しされたか否かを判定し、半押しされた場合には、S2に進む。
ついで、焦点距離情報の取得(S2)、被写体距離情報の取得(S3)を行う。
S4において、撮影倍率:β情報の取得を行い、その撮影倍率:βが所定の閾値βth以上か否かを判断し(S5)、肯定の場合には、S6へ進み、否定の場合には、S9に進む。
FIG. 4 is a flowchart for explaining the operation of the first embodiment of the shake correction apparatus according to the present invention.
In S1, it is determined whether or not the release switch 17 is half-pressed. If the release switch 17 is half-pressed, the process proceeds to S2.
Next, acquisition of focal length information (S2) and acquisition of subject distance information (S3) are performed.
In S4, the shooting magnification: β information is acquired, and it is determined whether or not the shooting magnification: β is equal to or greater than a predetermined threshold β th (S5). If the result is affirmative, the process proceeds to S6. , Go to S9.
S6では、初期姿勢の信頼性の判断を行う。図6、図7は、第1実施形態のブレ補正装置の初期姿勢演算を説明する線図である。
信頼度の判断は、角速度センサ12Bの出力値を基に演算する。具体的には、図6(a)に示すように、t1の時点でレリーズスイッチ17の半押し信号がONになると、図6(c)に示すように、初期姿勢演算中信号がハイレベルになり、図6(b)に示すように、その間(t1〜t2)の角速度センサ12Bの信号をモニタし、演算期間中に閾値:ωthを超えていなければ、初期姿勢は信頼できると判断し、図6(d)に示すように、マイクロ用ブレ補正の開始信号を出力する。
図7(b)に示すように、ωが閾値:ωthを超える場合は、加速度センサ12Aの出力に加速度成分が多分に含まれることになり、この場合は、初期姿勢結果が信頼できないため、通常ブレ補正開始信号を出力する。
In S6, the reliability of the initial posture is determined. 6 and 7 are diagrams illustrating the initial posture calculation of the shake correction apparatus according to the first embodiment.
The determination of the reliability is calculated based on the output value of the
As shown in FIG. 7B, when ω exceeds a threshold value: ωth, an acceleration component is likely to be included in the output of the
図4に戻って、S7において、信頼性があるか否かを判断して、肯定の場合には、S8へ進み、否定の場合には、S9に進む。
S8では、マイクロ用ブレ補正演算のサブルーチンをコールする。図5(a)は、マイクロ用ブレ補正演算のサブルーチンを示すフローチャートである。
S81において、角速度データ、加速度データの読込を行う。
S82において、加速度センサ12Aから撮像面までの距離情報を取得(目標位置演算に使用)する。
Returning to FIG. 4, in S7, it is determined whether or not there is reliability. If the result is affirmative, the process proceeds to S8, and if the result is negative, the process proceeds to S9.
In S8, a micro blur correction calculation subroutine is called. FIG. 5A is a flowchart showing a subroutine for micro blur correction calculation.
In S81, angular velocity data and acceleration data are read.
In S82, distance information from the
S83において、加速度センサ12Aから演算したカメラの初期姿勢情報と、角速度センサ12Bから演算した角度情報とから、カメラの姿勢を演算する。
S84において、カメラの姿勢演算結果から、重力加速度成分を演算し、加速度センサ検出値に含まれる重力加速度成分を除去する。
前述したように、並進ブレ量は、加速度センサ12Aを用いることで検出可能であるが、加速度センサ12Aの出力値には、並進ブレで発生する加速度成分と、重力加速度成分とが含まれている。また、カメラの角度ブレによってカメラ姿勢が変化するため、加速度センサ検出値に含まれる重力加速度成分も変化する。従って、並進ブレによる加速度成分を求めるために、加速度センサ検出値から、重力加速度成分を除去するようにしたものである。
S85において、角速度情報、加速度情報から、ブレ補正駆動機構9X,9Yの目標位置を演算して、リターンする。
In S83, the camera posture is calculated from the initial camera posture information calculated from the
In S84, the gravitational acceleration component is calculated from the camera attitude calculation result, and the gravitational acceleration component included in the acceleration sensor detection value is removed.
As described above, the translational blur amount can be detected by using the
In S85, the target positions of the shake
図4に戻って、S9では、通常ブレ補正演算のサブルーチンをコールする。図5(b)は、通常ブレ補正演算のサブルーチンを示すフローチャートである。
S91において、角速度データの読込を行う。
S92において、その角速度データに基づいて、ブレ補正駆動機構9X,9Yの目標位置演算を行い、リターンする。
Returning to FIG. 4, in S9, a subroutine for normal blur correction calculation is called. FIG. 5B is a flowchart showing a subroutine of normal blur correction calculation.
In S91, angular velocity data is read.
In S92, based on the angular velocity data, the target position calculation of the shake
S10において、ブレ補正駆動量を演算する。
S11において、ブレ補正駆動機構9X,9Yを駆動する。
In S10, a shake correction driving amount is calculated.
In S11, the blur
以上説明したように、本実施形態によれば、初期姿勢演算部31の初期姿勢の信頼性を判断する初期姿勢信頼性判断部51を備え、初期姿勢信頼性判断部51が初期姿勢の信頼性が低いと判断したとき(S7:NO)には、加速度センサ12Aに基づいた信号の重みを低くする(この実施形態では、角速度センサ10Bに基づいた信号のみを用いる)ようにしたので、初期姿勢演算結果の誤差によるブレ補正性能の悪化を防ぐことができる。
As described above, according to this embodiment, the initial posture
(第2実施形態)
図8は、本発明によるブレ補正装置の第2実施形態を示すブロック図である。
図9は、第2実施形態によるブレ補正装置の動作を示すフローチャートである。
なお、以下の各実施形態では、第1実施形態と同様な機能を果たす部分には、同一の符号を付して、重複する説明を適宜省略する。
第2実施形態のブレ補正装置は、初期姿勢信頼性判断部51Aで初期姿勢演算結果が信頼できるか否かの判定を行い(S105)、信頼できないと判断された場合には(S106:NO)、利得調整部27X,27Yの加速度成分の利得を変更して(この実施形態では、利得を下げて(利得<1))、信頼性のある初期姿勢が求められた時点で(S106:YES)、利得を1倍に戻す。信頼度の判定方法は、第1実施形態と同様なため、説明を省略する。
(Second Embodiment)
FIG. 8 is a block diagram showing a second embodiment of a shake correction apparatus according to the present invention.
FIG. 9 is a flowchart showing the operation of the shake correction apparatus according to the second embodiment.
In each of the following embodiments, the same reference numerals are given to the portions that perform the same functions as those in the first embodiment, and repeated descriptions are omitted as appropriate.
In the shake correction apparatus of the second embodiment, the initial posture
第2実施形態によれば、初期姿勢演算部31の初期姿勢の信頼性を判断する初期姿勢信頼性判断部51Aを備え、初期姿勢信頼性判断部51Aが初期姿勢の信頼性が低いと判断したときには、利得調整部27X,27Yの加速度成分の利得を変更して、信頼性のある初期姿勢が求められた時点で利得を基に戻すようにしたので、初期姿勢演算結果の誤差によるブレ補正性能の悪化を防ぐことができる。
According to the second embodiment, the initial posture
(第3実施形態)
図10は、本発明によるブレ補正装置の第3実施形態を示すブロック図である。
図11は、第3実施形態によるブレ補正装置の動作を示すフローチャートである。
図12は、第3実施形態によるブレ補正装置の姿勢情報更新動作を説明する線図である。
上述の加速度センサ12Aと角速度センサ12Bを用いたブレ補正装置においては、外乱や、構図変更等による大きな角度ブレが起こった場合に、姿勢演算部32の姿勢演算結果に誤差が生じてしまう。また、角速度センサ12Bの信号にHPF25による処理をかけているため、時間と共に誤差が生じてしまう。この誤差によって、正確な並進ブレによる加速度成分の検出が行えないという課題があった。
本実施形態では、上記課題を解決するために、所定の条件を満たした場合に、姿勢演算結果を更新することとしたものである。
(Third embodiment)
FIG. 10 is a block diagram showing a third embodiment of a shake correction apparatus according to the present invention.
FIG. 11 is a flowchart showing the operation of the shake correction apparatus according to the third embodiment.
FIG. 12 is a diagram illustrating the posture information update operation of the shake correction apparatus according to the third embodiment.
In the shake correction apparatus using the
In the present embodiment, in order to solve the above-described problem, the posture calculation result is updated when a predetermined condition is satisfied.
姿勢情報更新タイミング信号検出部52は、角速度センサ12Bの出力を基に、姿勢演算結果を更新するタイミングを決定する部分である。例えば、角速度信号をモニタし、一定の時間、静止した状態(手持ち時に、構図変更等の大きなブレがない状態)であると更新タイミングと判断する。
姿勢再演算部53は、姿勢情報更新タイミング信号検出部52の更新タイミング信号を取得すると、加速度センサ12Aの出力を基に、この間に姿勢情報を再演算して、姿勢演算部32の姿勢情報を更新する。
The posture information update timing
When the
この実施形態では、マイクロ用ブレ補正のルーチン(図11)がコールされると、角速度データの読込を行い(S201)、その角速度データがHPF処理される(S202)。次に、加速度データの読込が行われ(S203)、それ以降のS204〜S207は、図5(a)のS82〜S85と同様である。
S208において、角速度信号を基に、カメラが静止状態か否かを判断する。静止状態の判定は、図12(a)に示すように、角速度の絶対値が所定値:ωth以下であることが条件であり、この状態が所定時間:Tth以上続いた場合に(図12(b))、姿勢情報を更新することとする。
また、更新する姿勢情報は、静止状態中の、加速度センサ出力の平均値から演算する。この再取得した姿勢情報を基に、座標変換マトリクスを求め、これを座標変換マトリクスの初期値とし、姿勢演算を実施する(S209)。
In this embodiment, when the micro blur correction routine (FIG. 11) is called, angular velocity data is read (S201), and the angular velocity data is HPF processed (S202). Next, acceleration data is read (S203), and subsequent steps S204 to S207 are the same as S82 to S85 in FIG.
In S208, it is determined whether or not the camera is stationary based on the angular velocity signal. As shown in FIG. 12A, the stationary state is determined on condition that the absolute value of the angular velocity is a predetermined value: ωth or less, and this state continues for a predetermined time: Tth or more (FIG. 12 ( b)) Posture information is updated.
Also, the posture information to be updated is calculated from the average value of the acceleration sensor output during the stationary state. Based on the re-acquired posture information, a coordinate transformation matrix is obtained, and this is used as an initial value of the coordinate transformation matrix to perform posture calculation (S209).
第3実施形態は、以上の処理により、カメラの姿勢更新の可否を判断して(S208)、その判断結果に基づいて、カメラの姿勢情報を再演算して(S209)、加速度センサの値を再補正するので(S205)、外乱や構図変更等による姿勢演算結果に誤差が生じた場合であっても、良好なブレ補正が可能となる。
なお、角速度センサ以外で姿勢更新の可否判断を行う場合であっても、上記と同様の考えであるため、説明は省略する。
In the third embodiment, whether or not the camera posture can be updated is determined by the above processing (S208), and the camera posture information is recalculated based on the determination result (S209), and the value of the acceleration sensor is calculated. Since re-correction is performed (S205), even if an error occurs in the posture calculation result due to disturbance, composition change, or the like, good blur correction can be performed.
Note that even when a determination is made as to whether or not the posture can be updated by a device other than the angular velocity sensor, the description is omitted because it is the same idea as described above.
(第4実施形態)
図13は、本発明によるブレ補正装置の第4実施形態を示すブロック図である。
図14は、第4実施形態によるブレ補正装置の姿勢情報更新動作を説明する線図である。
この実施形態は、姿勢再演算部53Aの姿勢更新の可否判断を、角速度センサ12Bの出力と、カメラの作動状態(この実施形態では、フォーカス群駆動機構8のフォーカス駆動状態)によって決定する。
例えば、第3実施形態で説明したように、角速度センサ12Bの信号からは姿勢状態更新可と判断される場合であっても、それがフォーカス駆動中であれば、姿勢更新を行わないこととする。
(Fourth embodiment)
FIG. 13 is a block diagram showing a fourth embodiment of a shake correction apparatus according to the present invention.
FIG. 14 is a diagram illustrating the posture information update operation of the shake correction apparatus according to the fourth embodiment.
In this embodiment, whether or not the
For example, as described in the third embodiment, even if it is determined that the posture state can be updated from the signal of the
具体的には、フォーカス群が駆動された場合(図14(b))は、ω≦ωthの状態であっても(図14(a))、静止状態継続時間Tcをリセットし、フォーカス停止後に再度、静止状態継続時間Tcを演算することとする(図14(c))。 Specifically, when the focus group is driven (FIG. 14B), even when ω ≦ ωth (FIG. 14A), the stationary state duration Tc is reset and after the focus is stopped. Again, the stationary state duration Tc is calculated (FIG. 14C).
第4実施形態によれば、角速度センサ12Bの信号からは姿勢状態更新可と判断される場合であっても、それがカメラの作動状態(フォーカス駆動中等)であれば、姿勢更新を行わないので、カメラの作動状態等による姿勢演算結果に誤差が生じた場合であっても、良好なブレ補正が可能となる。
なお、カメラの作動状態としては、ミラーアップ後についても、上記と同様である。
According to the fourth embodiment, even if it is determined that the posture state can be updated from the signal of the
The operating state of the camera is the same as described above even after the mirror is raised.
(変形形態)
以上、説明した実施形態に限定されることなく、以下に示すような種々の変形や変更が可能であり、それらも本発明の範囲内である。
本実施形態では、初期姿勢信頼性判定部51において、角速度センサ12Bの検出結果に基づいて信頼性を判定する例について説明したが、加速度センサ12Aの検出結果に基づいて信頼性を判定してもよい。
(Deformation)
The present invention is not limited to the above-described embodiment, and various modifications and changes as described below are possible, and these are also within the scope of the present invention.
In the present embodiment, the example in which the initial posture
第3、第4実施形態において、姿勢情報タイミング信号検出部(判断部)52は、角速度センサの出力を基に、姿勢更新の可否を判断した例で説明したが、加速度センサ、動きベクトル演算部、磁気センサ、GPSセンサ、傾斜センサの少なくとも1つの出力結果に基づいて、姿勢更新の可否を判断するようにしてもよい。
姿勢再演算部53は、加速度センサの出力に基づいて、姿勢情報の再演算を行う例で説明したが、角速度センサ、動きベクトル演算部、磁気センサ、GPSセンサ、傾斜センサの少なくとも1つの出力に基づいて、姿勢情報の再演算を行うようにしてもよい。
姿勢演算部32の初期姿勢の信頼性を判断する初期姿勢信頼性判断部51を備えており、この初期姿勢信頼性判断部51が、信頼性が低いと判断されたときには、姿勢更新の可否を判断する閾値ωthを変更するようにしてもよい。
In the third and fourth embodiments, the posture information timing signal detection unit (determination unit) 52 has been described based on an example in which it is determined whether or not posture update is possible based on the output of the angular velocity sensor. Whether or not the posture can be updated may be determined based on the output result of at least one of the magnetic sensor, the GPS sensor, and the tilt sensor.
The
The
さらに、図5のS85おいて、角速度情報、加速度情報から、目標位置を演算する際に、撮影倍率を検出する撮影倍率情報検出部38からのデータに基づいて、角速度情報(角度ブレ)と加速度情報(並進ブレ)の重みを変えてブレ補正を行うようにしてもよい。このようにすれば、撮影倍率に応じた的確なブレ補正を行うことができる。
Further, in S85 of FIG. 5, when calculating the target position from the angular velocity information and the acceleration information, the angular velocity information (angle blur) and the acceleration are based on the data from the photographing magnification
本実施形態では、デジタル一眼レフカメラについて説明したが、本発明はこれに限定されず、コンパクトカメラ、銀塩カメラ、ビデオカメラ、携帯電話などにも適用可能である。
なお、実施形態及び変形形態は、適宜組み合わせて用いることもできるが、詳細な説明は省略する。また、本発明は以上説明した実施形態によって限定されることはない。
In this embodiment, a digital single-lens reflex camera has been described. However, the present invention is not limited to this, and is applicable to a compact camera, a silver salt camera, a video camera, a mobile phone, and the like.
In addition, although embodiment and a deformation | transformation form can also be used in combination suitably, detailed description is abbreviate | omitted. Further, the present invention is not limited to the embodiment described above.
1;カメラ 2;CPU 3;撮像素子 4;ズーム群 5;フォーカス群 6;ブレ補正群 7;ズーム群駆動機構 8;フォーカス群駆動機構 9;ブレ補正群駆動機構 10;絞り 11;絞り駆動機構 12;加速度・角速度センサ 13;記録媒体 14;EEPROM 15;信号処理回路 16;AFセンサ 17;レリーズスイッチ 18;背面液晶 19;ミラー 20;シャッタ 31;初期姿勢演算部 32;姿勢演算部 33;重力加速度演算出部 51;初期姿勢信頼性判定部 52;姿勢情報更新タイミング信号検出部 53;姿勢再演算部
DESCRIPTION OF SYMBOLS 1; Camera 2;
Claims (7)
前記カメラの角速度を検出する角速度センサと、
前記カメラの加速度を検出する加速度センサと、
前記加速度センサからの出力に基づいて、前記カメラの初期の姿勢を演算する姿勢演算部と、
前記撮影倍率が所定倍率未満である、及び前記撮影倍率が所定倍率以上かつ前記姿勢演算部により演算された初期の姿勢に信頼性がない、の少なくともいずれかであると前記角速度センサからの出力に基づいてブレ補正を行い、前記撮影倍率が所定倍率以上かつ前記姿勢演算部により演算される初期の姿勢に信頼性があると、前記角速度センサからの出力と前記加速度センサからの出力とに基づいてブレ補正を行うブレ補正部と、
を備えるブレ補正装置。 An optical system that is provided in the camera and has an adjustment lens for adjusting the photographing magnification, and forms an image of the subject;
An angular velocity sensor for detecting the angular velocity of the camera;
An acceleration sensor for detecting the acceleration of the camera;
An attitude calculation unit that calculates an initial attitude of the camera based on an output from the acceleration sensor;
If the photographing magnification is less than a predetermined magnification, and the photographing magnification is at least a predetermined magnification and the initial posture calculated by the posture calculation unit is not reliable, the output from the angular velocity sensor Based on the output from the angular velocity sensor and the output from the acceleration sensor, the shake correction is performed, and the shooting magnification is equal to or greater than a predetermined magnification and the initial posture calculated by the posture calculation unit is reliable. An image stabilization unit for image stabilization,
An image stabilization apparatus comprising:
前記ブレ補正部は、前記姿勢演算部により初期の姿勢が演算されるまで、前記角速度センサの出力に基づいてブレ補正を行うブレ補正装置。 The blur correction device according to claim 1,
The blur correction device performs the blur correction based on the output of the angular velocity sensor until an initial posture is calculated by the posture calculation unit.
前記加速度センサの出力を補正する補正部を備え、
前記ブレ補正部は、前記撮影倍率が所定倍率以上かつ前記姿勢演算部により演算された初期姿勢に信頼性があると、前記補正部により補正された前記加速度センサからの出力と前記角速度センサからの出力とに基づいてブレ補正を行うブレ補正装置。 The blur correction device according to claim 1 or 2,
A correction unit for correcting the output of the acceleration sensor;
When the photographing magnification is equal to or greater than a predetermined magnification and the initial posture calculated by the posture calculation unit is reliable, the blur correction unit outputs the output from the acceleration sensor corrected by the correction unit and the angular velocity sensor. An image stabilization device that performs image stabilization based on the output.
前記補正部は、前記加速度センサの出力から重力加速度を除去するブレ補正装置。 The blur correction device according to claim 3,
The correction unit is a shake correction device that removes gravitational acceleration from the output of the acceleration sensor.
前記ブレ補正部は、前記角速度センサからの出力が所定の期間中に閾値を超えた場合は前記姿勢演算部により演算された初期の姿勢に信頼性がないとし、前記角速度センサからの出力が所定の期間中に閾値を超えていない場合は前記姿勢演算部により演算された初期の姿勢に信頼性があるとするブレ補正装置。 In the blur correction device according to any one of claims 1 to 4,
When the output from the angular velocity sensor exceeds a threshold value during a predetermined period, the shake correction unit assumes that the initial posture calculated by the posture calculation unit is not reliable, and the output from the angular velocity sensor is predetermined. If the threshold is not exceeded during this period, the shake correction apparatus assumes that the initial posture calculated by the posture calculation unit is reliable.
前記光学系を透過して入射した光を撮像する撮像部と、
を備える撮影装置。 The blur correction device according to any one of claims 1 to 5,
An imaging unit for imaging light incident through the optical system;
An imaging device comprising:
前記光学系の加速度を検出する加速度センサと、
前記光学系の角速度を検出する角速度センサと、
前記加速度センサからの出力に基づいて、前記光学系の初期の姿勢を演算する姿勢演算部と、
前記撮影倍率が所定倍率未満である、及び前記撮影倍率が所定倍率以上かつ前記姿勢演算部により演算された姿勢に信頼性がない、の少なくともいずれかであると前記角速度センサからの出力に基づいてブレ補正を行い、前記撮影倍率が所定倍率以上かつ前記姿勢演算部により演算された姿勢に信頼性があると前記角速度センサからの出力と前記加速度センサからの出力とに基づいてブレ補正を行うブレ補正部と、
を備えるブレ補正システム。 An optical system having an adjustment lens for adjusting the shooting magnification and forming an image of the subject;
An acceleration sensor for detecting the acceleration of the optical system;
An angular velocity sensor for detecting an angular velocity of the optical system;
An attitude calculation unit for calculating an initial attitude of the optical system based on an output from the acceleration sensor;
Based on the output from the angular velocity sensor, the photographing magnification is less than a predetermined magnification, and the photographing magnification is at least a predetermined magnification and the posture calculated by the posture calculation unit is not reliable. If the photographing magnification is equal to or greater than a predetermined magnification and the posture calculated by the posture calculation unit is reliable, the blur correction is performed based on the output from the angular velocity sensor and the output from the acceleration sensor. A correction unit;
An image stabilization system comprising
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018126340A JP6737307B2 (en) | 2018-07-02 | 2018-07-02 | Image stabilization device and photographing device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2018126340A JP6737307B2 (en) | 2018-07-02 | 2018-07-02 | Image stabilization device and photographing device |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016110278A Division JP2016181000A (en) | 2016-06-01 | 2016-06-01 | Shake correcting device and optical apparatus |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018146992A true JP2018146992A (en) | 2018-09-20 |
JP6737307B2 JP6737307B2 (en) | 2020-08-05 |
Family
ID=63592121
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2018126340A Active JP6737307B2 (en) | 2018-07-02 | 2018-07-02 | Image stabilization device and photographing device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6737307B2 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117136554A (en) | 2021-03-25 | 2023-11-28 | 三星电子株式会社 | Electronic apparatus including camera and control method thereof |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03241324A (en) * | 1990-02-20 | 1991-10-28 | Olympus Optical Co Ltd | Camera |
JPH07225405A (en) * | 1993-12-14 | 1995-08-22 | Nikon Corp | Image blurring correcting camera |
JPH11271831A (en) * | 1998-03-24 | 1999-10-08 | Nikon Corp | Interchangeable lens and shake correction camera |
JP2008070644A (en) * | 2006-09-14 | 2008-03-27 | Canon Inc | Vibration isolation controller and optical equipment |
JP2010286721A (en) * | 2009-06-12 | 2010-12-24 | Canon Inc | Optical instrument |
JP2011028137A (en) * | 2009-07-29 | 2011-02-10 | Canon Inc | Lens device and imaging system |
-
2018
- 2018-07-02 JP JP2018126340A patent/JP6737307B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH03241324A (en) * | 1990-02-20 | 1991-10-28 | Olympus Optical Co Ltd | Camera |
JPH07225405A (en) * | 1993-12-14 | 1995-08-22 | Nikon Corp | Image blurring correcting camera |
JPH11271831A (en) * | 1998-03-24 | 1999-10-08 | Nikon Corp | Interchangeable lens and shake correction camera |
JP2008070644A (en) * | 2006-09-14 | 2008-03-27 | Canon Inc | Vibration isolation controller and optical equipment |
JP2010286721A (en) * | 2009-06-12 | 2010-12-24 | Canon Inc | Optical instrument |
JP2011028137A (en) * | 2009-07-29 | 2011-02-10 | Canon Inc | Lens device and imaging system |
Also Published As
Publication number | Publication date |
---|---|
JP6737307B2 (en) | 2020-08-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4717382B2 (en) | Optical equipment | |
JP4789614B2 (en) | Anti-vibration control device and control method thereof | |
JP4994756B2 (en) | Anti-vibration control device, optical apparatus including the same, imaging device, and control method of anti-vibration control device | |
JP6700872B2 (en) | Image blur correction apparatus and control method thereof, image pickup apparatus, program, storage medium | |
JP2010183150A (en) | Camera capable of fixed-point shooting | |
JP4807855B2 (en) | Anti-vibration device, anti-vibration method and program | |
JP2002156675A (en) | Shake correcting camera | |
JP2012128356A (en) | Shake correction device and optical apparatus | |
JP2012163824A (en) | Shake correction apparatus and optical device | |
JP5957796B2 (en) | Blur correction device and optical apparatus | |
JP6737307B2 (en) | Image stabilization device and photographing device | |
JP2013054193A (en) | Shake correction device and optical apparatus | |
JP2012173302A (en) | Shake correcting device and optical apparatus | |
JP6024031B2 (en) | Blur correction device and optical apparatus | |
JP2016181000A (en) | Shake correcting device and optical apparatus | |
JP2012237884A (en) | Blur correction device and optical instrument | |
JP6268981B2 (en) | Blur correction device, interchangeable lens and camera | |
JP2014215357A (en) | Image blur correction device and optical device | |
JP2012042589A (en) | Image shake correction mechanism, lens barrel, and image sensor | |
JP2010145493A (en) | Camera system | |
JP2000081646A (en) | Camera with camera-shake correction function | |
JP2014215358A (en) | Image blur correction device and optical device | |
JP2010145500A (en) | Optical equipment | |
JP2014164290A (en) | Blur correction device and optical equipment | |
US11871112B2 (en) | Image stabilization apparatus and method and image capturing apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180704 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190903 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191031 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200324 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200518 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200616 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200629 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6737307 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |