JP5950678B2 - 撮像装置、制御方法、及びプログラム - Google Patents
撮像装置、制御方法、及びプログラム Download PDFInfo
- Publication number
- JP5950678B2 JP5950678B2 JP2012103830A JP2012103830A JP5950678B2 JP 5950678 B2 JP5950678 B2 JP 5950678B2 JP 2012103830 A JP2012103830 A JP 2012103830A JP 2012103830 A JP2012103830 A JP 2012103830A JP 5950678 B2 JP5950678 B2 JP 5950678B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- images
- imaging
- angle
- view
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/50—Control of the SSIS exposure
- H04N25/57—Control of the dynamic range
- H04N25/58—Control of the dynamic range involving two or more exposures
- H04N25/587—Control of the dynamic range involving two or more exposures acquired sequentially, e.g. using the combination of odd and even image fields
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
- Television Signal Processing For Recording (AREA)
Description
被写体を異なる露出量で順次撮像して得られた画像を取得する取得手段と、取得手段により取得された複数の画像を合成し、得られた合成画像をフレームとする動画像を生成する生成手段と、を有し、生成手段は、複数の画像について撮像時の画角が異なる場合に、複数の画像のうちの基準とする1つの基準画像と撮像時の画角が異なる画像の画角を調整することで、複数の画像を該基準画像と対応する画角を有する画像に変更して合成することを特徴とする。
以下、本発明の例示的な実施形態について、図面を参照して詳細に説明する。なお、以下に説明する一実施形態は、撮像装置の一例としての、HDR動画を撮影可能なデジタルカメラに、本発明を適用した例を説明する。しかし、本発明は、撮像により順次取得された複数の画像を合成することで動画像の1つのフレームを生成可能な任意の機器に適用可能である。
図1(a)は、本発明の実施形態に係るデジタルカメラ100の機能構成を示すブロック図である。
ここで、ズーム駆動制御部109の内部構成について、図1(b)を用いてさらに詳細を説明する。
ここで、後述する本実施形態のHDR動画撮影処理における、HDR動画の1フレームであるHDR画像の生成に係る処理の概要を、図を用いて説明する。
次に、本実施形態のデジタルカメラ100のHDR動画撮影処理について、図4のフローチャートを用いて具体的な処理を説明する。該フローチャートに対応する処理は、システム制御部114が、例えば不図示のROMに記憶されている対応する処理プログラムを読み出し、RAMに展開して実行することにより実現することができる。なお、本HDR動画撮影処理は、例えばデジタルカメラ100がHDR動画撮影モードに設定されている状態で、撮影開始指示に対応する制御信号をシステム制御部114が受信した際に開始されるものとして説明する。
ここで、S402で実行されるHDR処理(非ズーム時)について、図5(a)のフローチャートを用いて詳述する。
ここで、S403で実行されるHDR処理(ズーム時)について、図5(b)のフローチャートを用いて詳述する。なお、本HDR処理(ズーム時)において、上述した非ズーム時のHDR処理と同様の処理を行うステップについては、同一の参照符号を付して説明を省略し、以下ではズーム時のHDR処理に特徴的な処理を行うステップについてのみ説明する。
上述した実施形態では、撮像光学系の光学特性により被写体像に生じる歪曲収差について考慮をしない方法について説明した。本変形例では、撮像光学系による歪曲収差を補正したHDR動画を生成する方法について説明する。
ここで、歪曲補正を行う、本変形例のHDR処理(ズーム時)について、図7のフローチャートを用いて説明する。なお、本変形例のHDR処理(ズーム時)において、上述した実施形態のHDR処理(ズーム時)と同様の処理を行うステップについては同一の参照符号を付して説明を省略し、本変形例において特徴的な処理を行うステップについてのみ、以下に説明する。
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア(プログラム)を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ(またはCPUやMPU等)がプログラムを読み出して実行する処理である。
Claims (16)
- 被写体を異なる露出量で順次撮像して得られた画像を取得する取得手段と、
前記取得手段により取得された複数の画像を合成し、得られた合成画像をフレームとする動画像を生成する生成手段と、を有し、
前記生成手段は、前記複数の画像について撮像時の画角が異なる場合に、前記複数の画像のうちの1つの基準画像と画角が異なる画像の画角を調整することで、前記複数の画像を該基準画像と対応する画角を有する画像に変更して合成することを特徴とする画像処理装置。 - 前記生成手段は、前記複数の画像について撮像時の画角が異なる場合に、前記基準画像との画角比に応じて、前記基準画像よりも広い画角を有する画像から、前記基準画像の画角に対応する領域を抽出して拡大して合成に用いることを特徴とする請求項1に記載の画像処理装置。
- 前記生成手段は、相対的に低い露出量で撮像された画像を前記基準画像として設定することを特徴とする請求項1または2に記載の画像処理装置。
- 前記生成手段は、階調範囲に含まれる画素数が最も多い画像を前記基準画像として設定することを特徴とする請求項1乃至3のいずれか1項に記載の画像処理装置。
- 前記取得手段により取得された画像のうち、1つのフレームの生成に用いる前記複数の画像を順次選択する選択手段をさらに有し、
前記生成手段は、前記選択手段により選択された前記複数の画像を合成する
ことを特徴とする請求項1乃至4のいずれか1項に記載の画像処理装置。 - 前記生成手段は、画角が調整された前記複数の画像が異なる画素数を有する場合に、前記複数の画像を同一の画素数を有する画像に合成前に変更することを特徴とする請求項1乃至5のいずれか1項に記載の画像処理装置。
- 前記生成手段は、各々異なる露出量で撮像された前記複数の画像を合成することによりHDR合成画像を生成することを特徴とする請求項1乃至6のいずれか1項に記載の画像処理装置。
- 前記複数の画像について、撮像に用いられた撮像光学系の光学特性に基づいた歪曲補正を行う歪曲補正手段をさらに有し、
前記歪曲補正手段は、前記生成手段による前記複数の画像の調整時に、少なくとも前記基準画像と撮像時の画角が異なる画像について歪曲補正を行い、全ての前記複数の画像を同一の歪曲収差を有する画像に変更する
ことを特徴とする請求項1乃至7のいずれか1項に記載の画像処理装置。 - 請求項1乃至8のいずれか1項に記載の画像処理装置と、
被写体を異なる露出量で順次撮像する撮像手段と、を有することを特徴とする撮像装置。 - 前記複数の画像について撮像時の画角が異なるか否かは、前記複数の画像の撮像中にズーム動作が行われたか否かによって検出されることを特徴とする請求項9に記載の撮像装置。
- ズーム方向に応じて、前記被写体を異なる露出量で撮像する順序を制御する制御手段をさらに有することを特徴とする請求項9または10に記載の撮像装置。
- 前記制御手段は、ズーム方向が望遠から広角の場合は、相対的に低い露出量から順に撮像するように制御することを特徴とする請求項11に記載の撮像装置。
- 前記制御手段は、ズーム方向が広角から望遠の場合は、相対的に高い露出量から順に撮像するように制御することを特徴とする請求項11に記載の撮像装置。
- 取得手段が、被写体を異なる露出量で順次撮像して得られた画像を取得する取得工程と、
生成手段が、前記取得工程において取得された複数の画像を合成し、得られた合成画像をフレームとする動画像を生成する生成工程と、を有し、
前記生成手段は前記生成工程において、前記複数の画像について撮像時の画角が異なる場合に、前記複数の画像のうちの1つの基準画像と画角が異なる画像の画角を調整することで、前記複数の画像を該基準画像と対応する画角を有する画像に変更して合成することを特徴とする画像処理装置の制御方法。 - 請求項1乃至8のいずれか1項に記載の画像処理装置を有する撮像装置の制御方法であって、
撮像手段が、被写体を異なる露出量で順次撮像する撮像工程を有することを特徴とする撮像装置の制御方法。 - コンピュータを、請求項1乃至8のいずれか1項に記載の画像処理装置の各手段として機能させるためのプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012103830A JP5950678B2 (ja) | 2012-04-27 | 2012-04-27 | 撮像装置、制御方法、及びプログラム |
US13/863,947 US9241109B2 (en) | 2012-04-27 | 2013-04-16 | Image capturing apparatus, control method, and recording medium for moving image generation |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012103830A JP5950678B2 (ja) | 2012-04-27 | 2012-04-27 | 撮像装置、制御方法、及びプログラム |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2013232780A JP2013232780A (ja) | 2013-11-14 |
JP2013232780A5 JP2013232780A5 (ja) | 2015-04-16 |
JP5950678B2 true JP5950678B2 (ja) | 2016-07-13 |
Family
ID=49476948
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012103830A Active JP5950678B2 (ja) | 2012-04-27 | 2012-04-27 | 撮像装置、制御方法、及びプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US9241109B2 (ja) |
JP (1) | JP5950678B2 (ja) |
Families Citing this family (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6082274B2 (ja) * | 2012-06-08 | 2017-02-15 | キヤノン株式会社 | 撮像装置、及びその制御方法 |
JP6124538B2 (ja) * | 2012-09-06 | 2017-05-10 | キヤノン株式会社 | 撮像装置、撮像装置の制御方法、およびプログラム |
US8830367B1 (en) | 2013-10-21 | 2014-09-09 | Gopro, Inc. | Frame manipulation to reduce rolling shutter artifacts |
JP6217462B2 (ja) * | 2014-03-05 | 2017-10-25 | ソニー株式会社 | 画像処理装置及び画像処理方法、並びに画像処理システム |
TWI524757B (zh) * | 2014-10-09 | 2016-03-01 | 聚晶半導體股份有限公司 | 影像擷取裝置及數位變焦顯示方法 |
JP6516434B2 (ja) * | 2014-10-15 | 2019-05-22 | キヤノン株式会社 | 画像処理装置、撮像装置、画像処理方法 |
JP6445831B2 (ja) * | 2014-10-16 | 2018-12-26 | キヤノン株式会社 | 撮像装置及びその制御方法ならびにプログラム |
JP2018042198A (ja) * | 2016-09-09 | 2018-03-15 | オリンパス株式会社 | 撮像装置及び撮像方法 |
JP7212862B2 (ja) * | 2019-03-20 | 2023-01-26 | 京セラドキュメントソリューションズ株式会社 | 画像処理装置、画像処理方法、画像提供システム及び画像処理プログラム |
US11290640B2 (en) | 2020-06-10 | 2022-03-29 | Samsung Electronics Co., Ltd. | Electronic device and controlling method of electronic device |
CN115706870B (zh) * | 2021-08-12 | 2023-12-26 | 荣耀终端有限公司 | 视频处理方法、装置、电子设备和存储介质 |
KR102644294B1 (ko) * | 2023-07-20 | 2024-03-07 | 주식회사 모토웨이 | 다차원 인체 센싱용 카메라 임베디드 시스템 및 이를 활용하는 초소형 광각 카메라 |
Family Cites Families (32)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06292207A (ja) | 1993-04-02 | 1994-10-18 | Sony Corp | 撮像装置 |
JPH0797841A (ja) | 1993-09-29 | 1995-04-11 | Natl House Ind Co Ltd | 屋根の構造 |
JP3974964B2 (ja) * | 1996-11-08 | 2007-09-12 | オリンパス株式会社 | 画像処理装置 |
JPH11250239A (ja) | 1998-02-27 | 1999-09-17 | Kyocera Corp | Yuvデータによりディストーション補正を行うディジタル撮像装置 |
JPH11250238A (ja) | 1998-02-27 | 1999-09-17 | Kyocera Corp | ブロック単位でディストーション補正を行うディジタル撮像装置 |
JPH11250240A (ja) | 1998-02-27 | 1999-09-17 | Kyocera Corp | Yuvデータによりディストーション補正を行うディジタル撮像装置 |
JP2002094860A (ja) * | 2000-09-11 | 2002-03-29 | Canon Inc | 画像処理装置及び画像処理方法並びにメモリ媒体 |
JP4346938B2 (ja) * | 2003-04-09 | 2009-10-21 | キヤノン株式会社 | 画像処理装置、方法、プログラム及び記憶媒体 |
US8698924B2 (en) * | 2007-03-05 | 2014-04-15 | DigitalOptics Corporation Europe Limited | Tone mapping for low-light video frame enhancement |
KR20050041640A (ko) * | 2003-10-31 | 2005-05-04 | 삼성전자주식회사 | 영상 촬영 장치 및 방법 |
FI117843B (fi) * | 2004-08-02 | 2007-03-15 | Nokia Corp | Elektroninen laite ja menetelmä elektronisessa laitteessa kuvainformaation muodostamiseksi ja vastaava ohjelmatuote |
CN101080921A (zh) * | 2004-12-16 | 2007-11-28 | 松下电器产业株式会社 | 摄像装置 |
US7623683B2 (en) * | 2006-04-13 | 2009-11-24 | Hewlett-Packard Development Company, L.P. | Combining multiple exposure images to increase dynamic range |
JP4218723B2 (ja) * | 2006-10-19 | 2009-02-04 | ソニー株式会社 | 画像処理装置、撮像装置、画像処理方法およびプログラム |
JP2009151896A (ja) * | 2007-12-21 | 2009-07-09 | Sony Corp | 画像処理装置、動画再生装置、これらにおける処理方法およびプログラム |
JP2009296080A (ja) * | 2008-06-03 | 2009-12-17 | Hitachi Ltd | 超解像画像生成システム |
JP5072751B2 (ja) * | 2008-07-14 | 2012-11-14 | キヤノン株式会社 | 画像処理装置、画像処理方法及びプログラム |
US8842190B2 (en) * | 2008-08-29 | 2014-09-23 | Adobe Systems Incorporated | Method and apparatus for determining sensor format factors from image metadata |
JP2012521673A (ja) * | 2009-03-19 | 2012-09-13 | フレクストロニクス エイピー エルエルシー | デュアルセンサカメラ |
WO2010123923A1 (en) * | 2009-04-23 | 2010-10-28 | Zoran Corporation | Multiple exposure high dynamic range image capture |
JP2011103555A (ja) * | 2009-11-10 | 2011-05-26 | Canon Inc | 撮像装置 |
US8368771B2 (en) * | 2009-12-21 | 2013-02-05 | Olympus Imaging Corp. | Generating a synthesized image from a plurality of images |
EP2606637B1 (en) * | 2010-08-23 | 2016-09-21 | Red.Com, Inc. | High dynamic range video |
US8462221B2 (en) * | 2010-11-03 | 2013-06-11 | Eastman Kodak Company | Method for producing high dynamic range images |
US8274552B2 (en) * | 2010-12-27 | 2012-09-25 | 3Dmedia Corporation | Primary and auxiliary image capture devices for image processing and related methods |
EP2577955B1 (en) * | 2011-02-18 | 2014-07-30 | DigitalOptics Corporation Europe Limited | Dynamic range extension by combining differently exposed hand-held device-acquired images |
US8711248B2 (en) * | 2011-02-25 | 2014-04-29 | Microsoft Corporation | Global alignment for high-dynamic range image generation |
JP5333522B2 (ja) * | 2011-06-06 | 2013-11-06 | カシオ計算機株式会社 | 動画生成装置、動画生成方法、および、プログラム |
EP2810429B1 (en) * | 2012-01-30 | 2020-02-19 | SeeScan, Inc. | Adjustable variable resolution inspection systems and methods |
JP6112824B2 (ja) * | 2012-02-28 | 2017-04-12 | キヤノン株式会社 | 画像処理方法および装置、プログラム。 |
JP5947625B2 (ja) * | 2012-06-08 | 2016-07-06 | キヤノン株式会社 | 撮像装置、及びその制御方法 |
JP6082274B2 (ja) * | 2012-06-08 | 2017-02-15 | キヤノン株式会社 | 撮像装置、及びその制御方法 |
-
2012
- 2012-04-27 JP JP2012103830A patent/JP5950678B2/ja active Active
-
2013
- 2013-04-16 US US13/863,947 patent/US9241109B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2013232780A (ja) | 2013-11-14 |
US20130286254A1 (en) | 2013-10-31 |
US9241109B2 (en) | 2016-01-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5950678B2 (ja) | 撮像装置、制御方法、及びプログラム | |
JP5655667B2 (ja) | 撮像装置及び撮像制御方法、画像処理装置及び画像処理方法、並びにプログラム | |
JP5764740B2 (ja) | 撮像装置 | |
KR20100039430A (ko) | 화상 처리기, 화상 처리 방법, 디지털 카메라 및 촬영 장치 | |
JP5578442B2 (ja) | 撮像装置、画像合成方法、及びプログラム | |
JP2013046259A (ja) | 映像機器、制御方法およびプログラム | |
CN109981978B (zh) | 摄像装置 | |
JP6116299B2 (ja) | 撮像装置及びその制御方法 | |
JP2012222495A (ja) | 画像処理装置、画像処理方法、及びプログラム | |
JP2013074572A (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP2018148512A (ja) | 撮像装置と撮像装置の制御方法、及びプログラム | |
JP2007135133A (ja) | 撮像装置 | |
JP6445831B2 (ja) | 撮像装置及びその制御方法ならびにプログラム | |
JP4887840B2 (ja) | 撮影装置及びプログラム | |
JP6226536B2 (ja) | 撮像装置及びその制御方法 | |
JP2022083147A (ja) | 撮像装置、撮像方法、プログラムおよび記録媒体 | |
JP6288990B2 (ja) | 撮像装置、制御方法及びそのプログラム | |
JP2013146110A (ja) | 撮像装置及び方法、並びにプログラム | |
JP2012129900A (ja) | 撮像装置及び撮像方法 | |
JP4968389B2 (ja) | 撮影装置及びプログラム | |
JP2014138259A (ja) | 撮影機器 | |
JP2024112129A (ja) | 制御装置、制御方法、ならびに撮像装置 | |
JP2024036872A (ja) | 撮像装置、撮像方法、プログラムおよび記録媒体 | |
WO2012066768A1 (ja) | ステレオ画像生成装置及びステレオ画像生成方法 | |
JP6732572B2 (ja) | 撮像装置及び撮像方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20150226 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20150226 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151225 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160129 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160329 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160509 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160607 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5950678 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |