[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

KR100990904B1 - 다수 영상의 생성 및 합성을 통한 영상 보정 장치 및 그 방법 - Google Patents

다수 영상의 생성 및 합성을 통한 영상 보정 장치 및 그 방법 Download PDF

Info

Publication number
KR100990904B1
KR100990904B1 KR1020080112331A KR20080112331A KR100990904B1 KR 100990904 B1 KR100990904 B1 KR 100990904B1 KR 1020080112331 A KR1020080112331 A KR 1020080112331A KR 20080112331 A KR20080112331 A KR 20080112331A KR 100990904 B1 KR100990904 B1 KR 100990904B1
Authority
KR
South Korea
Prior art keywords
image
converted
original image
images
original
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
KR1020080112331A
Other languages
English (en)
Other versions
KR20100053287A (ko
Inventor
김성대
이근동
김수정
이황수
최준식
Original Assignee
한국과학기술원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술원 filed Critical 한국과학기술원
Priority to KR1020080112331A priority Critical patent/KR100990904B1/ko
Publication of KR20100053287A publication Critical patent/KR20100053287A/ko
Application granted granted Critical
Publication of KR100990904B1 publication Critical patent/KR100990904B1/ko
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/82—Camera processing pipelines; Components thereof for controlling camera response irrespective of the scene brightness, e.g. gamma correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
    • H04N23/682—Vibration or motion blur correction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/72—Combination of two or more compensation controls
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

본 발명은 다수 영상의 생성 및 합성을 통한 영상 보정 장치 및 그 방법에 관한 것으로서, 입력된 원 영상(S)의 RGB를 명도값 I(
Figure 112008078288779-pat00001
)로 변환하는 입력 영상 변환부; 상기 원 영상(S)에 감마 변환, 게인(gain) 및 오프셋(offset) 조정, 히스토그램 등화 중 어느 하나의 변환을 적용하여, 다수의 '밝은 영상(
Figure 112008078288779-pat00002
)'을 생성하는 밝은 영상 생성부; 상기 원 영상(S)과 상기 밝은 영상 생성부(120)을 통해 생성된 다수의 '밝은 영상(
Figure 112008078288779-pat00003
)'의 합성 시에 적용되는 가중치를 계산하는 가중치 계산부; 상기 가중치 계산부를 통해 계산된 가중치 값을 적용하여, 상기 원 영상(S)과 다수의 '밝은 영상(
Figure 112008078288779-pat00004
)'을 합성함으로써, 합성 영상의 명도값(Intensity)
Figure 112008078288779-pat00005
를 산출하는 영상 합성부; 및 상기 영상 합성부를 통해 합성된 영상의 명도값(
Figure 112008078288779-pat00006
)을 이용하여, 상기 원 영상(S)의 색상비율(
Figure 112008078288779-pat00007
)에 따라 합성 영상을 RGB 영역으로 변환하는 합성 영상 RGB 변환부; 를 포함하는 것을 특징으로 한다.
역광 노출 시간, 동적 범위, 영상 합성

Description

다수 영상의 생성 및 합성을 통한 영상 보정 장치 및 그 방법{THE APPARATUS FOR ENHANCING IMAGE BY GENERATING AND BLENDING MULTIPLE IMAGE AND METHOD THEREFOR}
본 발명은 영상 보정 장치에 관한 것으로서, 더욱 상세하게는 역광 상황(Backlighting)에서 촬영된 영상과 같이, 밝기 레벨의 동적 범위(Dynamic Range)가 제한된 영상을 높은 동적 범위의 영상(High Dynamic Range Image)으로 보정하기 위한 장치 및 방법에 관한 것이다.
주지된 바와 같이, 동적 범위, 즉 다이내믹 레인지(dynamic range)란 영상에서 세부 관심영역이 식별 가능한 부분 중 가장 어두운 부분과 가장 밝은 부분의 밝기 차이를 의미한다. 인간의 눈과 달리, 디지털 카메라로 촬영한 장면은, 이미지가 불연속(discrete)한 밝기 레벨로 양자화 되는 과정에서 모든 영역이 골고루 선명하게 표현되지 못하고, 포화되어 정보를 잃어버리는 부분이 발생한다.
일례로, 역광 상황(Backlighting)에서 영상을 촬영한다면, 노출부족(Underexposure)으로 피사체가 어둡게 나와 피사체의 세부 관심영역을 식별할 수 없다는 단점이 있고, 이를 개선하기 위해 노출을 증가시키면 영상의 색상이 또렷해 지고, 피사체의 세부 관심영역은 식별할 수 있으나, 배경 등 역광의 영향을 받지 않던 영역은 과다노출(Overexposure)로 인해 밝기포화 되어 배경의 세부 관심영역을 식별할 수 없고, 이미지의 대비(Contrast)가 낮아지는 문제점이 있었다.
이와 같은 문제점을 해결하기 위해, 동일한 장면에 대해 하드웨어적으로 노출 시간을 달리하여 복수의 영상을 촬영하고, 이 영상들을 합성하여 노출 시간이 짧은 영상에서는 뚜렷한 에지(Edge)와 밝은 영역에서의 고 대비(High contrast)의 장점을 취하고, 노출 시간이 긴 영상에서는 또렷한 영상의 색상과 어두운 영역에서의 세부(detail) 및 밝기 정보를 취하여 높은 동적 범위의 영상(High dynamic range) 영상을 얻는 방법이 제안되었다. 센서, 컬러 필터 등의 구조적 변경으로 한 번의 촬영으로 다중 노출 영상을 얻기 위한 시도들도 있었다.
하지만 노출 시간이 길어 질 경우, 촬영자의 손떨림이 발생할 가능성이 있고, 위에 서술된 방법을 사용하기 위해서는 피사체가 촬영 중 움직이지 않아야 한다는 제한 조건이 있다.
본 발명은 상기와 같은 문제점을 감안하여 안출된 것으로, 동적 범위가 제한된 영상을 높은 동적 범위의 영상으로 보정함에 있어서, 짧은 시간 동안 한 번의 촬영으로 얻은 영상(S)를 이용하여, 노출 시간이 긴 영상과 유사한 다수의 밝은 영상들(
Figure 112008078288779-pat00008
)을 생성하고, 이들 다수 영상을 합성해 높은 동적 범위의 영상을 얻는 영상 보정 장치 및 그 방법을 제공함에 있다.
보다 구체적으로는, 기존의 디지털 카메라 등 영상 촬영 장치를 이용해 짧은 노출을 통해 얻은 영상(S)과 이 영상에 감마 변환 또는 게인 및 오프셋 조정 등 긴 노출을 통해 얻는 영상과 유사한 영상들(
Figure 112008078288779-pat00009
)을 얻을 수 있는 변환을 적용하고, 이들 다수 영상을 적절한 합성 계수에 따라 합성하여 높은 동적 범위의 영상을 얻는데 그 목적이 있다.
이러한 기술적 과제를 달성하기 위하여, 본 발명은 다수 영상의 생성 및 합성을 통한 영상 보정 장치에 관한 것으로서, 입력된 원 영상(S)의 RGB를 명도값 I(
Figure 112008078288779-pat00010
)로 변환하는 입력 영상 변환부; 상기 원 영상(S)에 감마 변환, 게인(gain) 및 오프셋(offset) 조정, 히스토그램 등화 중 어느 하나의 변환을 적용하여, 다수의 '밝은 영상(
Figure 112008078288779-pat00011
)'을 생성하는 밝은 영상 생성부; 상기 원 영상(S)과 상기 밝은 영상 생성부(120)을 통해 생성된 다수의 '밝은 영상(
Figure 112008078288779-pat00012
)'의 합성 시에 적용되는 가중치를 계산하는 가중치 계산부; 상기 가중치 계산부를 통해 계산된 가중치 값을 적용하여, 상기 원 영상(S)과 다수의 '밝은 영상(
Figure 112008078288779-pat00013
)'을 합성함으로써, 합성 영상의 명도값(Intensity)
Figure 112008078288779-pat00014
를 산출하는 영상 합성부; 및 상기 영상 합성부를 통해 합성된 영상의 명도값(
Figure 112008078288779-pat00015
)을 이용하여, 상기 원 영상(S)의 색상비율(
Figure 112008078288779-pat00016
)에 따라 합성 영상을 RGB 영역으로 변환하는 합성 영상 RGB 변환부; 를 포함하는 것을 특징으로 한다.
상기와 같은 본 발명에 따르면, 짧은 시간 동안 한 번의 촬영으로 얻은 영상을 이용하여, 높은 동적 범위의 영상을 얻을 수 있기 때문에, 복수의 영상을 촬영하는 불편을 줄일 수 있고, 기존의 하드웨어에 구조적 변경없이 적용할 수 있으며, 짧은 노출 시간으로 촬영하기 때문에, 손떨림이나 피사체가 움직이는 문제점을 해결 할 수 있는 효과가 있다.
본 발명의 구체적 특징 및 이점들은 첨부도면에 의거한 다음의 상세한 설명으로 더욱 명백해질 것이다. 이에 앞서 본 발명에 관련된 공지 기능 및 그 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는, 그 구체적인 설명을 생략하였음에 유의해야 할 것이다.
이하, 첨부된 도면을 참조하여 본 발명을 상세하게 설명한다.
본 발명에 따른 다수 영상의 생성 및 합성을 통한 영상 보정 장치 및 그 방 법에 관하여 도 1 내지 도 4 를 참조하여 설명하면 다음과 같다.
도 1 은 본 발명에 따른 다수 영상의 생성 및 합성을 통한 영상 보정 장치(100)(이하, '영상 보정 장치')를 개념적으로 도시한 구성도로서, 도시된 바와 같이 입력 영상 변환부(110), 밝은 영상 생성부(120), 가중치 계산부(130), 영상 합성부(140) 및 합성 영상 RGB 변환부(150)를 포함하여 이루어진다.
구체적으로, 입력 영상 변환부(110)는 짧은 노출 시간동안 한 번의 촬영을 통해 획득한 영상(S)(이하, '원 영상')을 입력받아, 입력된 원 영상(S)의 RGB를 다음의 [수식 1] 과 같이 명도값 I(이하, 'Intensity I') 로 변환한다.
[수식 1]
Figure 112008078288779-pat00017
이는 입력 영상이 컬러 영상인 경우, R, G, B 영역에서의 각각 독립된 처리를 하면 원래 영상의 색상 비율이 왜곡되기 때문에 변환하는 것이다.
밝은 영상 생성부(120)는 원 영상(S)에 감마 변환, 게인(gain) 및 오프셋(offset) 조정, 히스토그램 등화 등과 같은 변환을 적용하여, '긴 노출 시간을 통해 촬영한 영상과 유사한 특성을 갖는 다수의 영상(
Figure 112008078288779-pat00018
)' (이하, '밝은 영상')을 생성한다.
이때, 생성된 '밝은 영상'은 하나의 영상이 될 수도 있고, 둘 이상의 다수 영상들이 될 수도 있다. 이러한 밝은 영상들은 역광상황에서 긴 노출 시간동안 촬 영하여 획득한 영상과 유사한 특성을 갖는다.
즉, 역광상황에서 짧은 노출시간동안 촬영하여 획득한 원 영상(S)의 어둡고 잘 보이지 않던 부분의 세부(detail)가, 긴 노출시간동안 촬영하여 획득한 영상 및 밝은 영상 생성부(120)를 통해 생성한 밝은 영상(
Figure 112008078288779-pat00019
)들에서는 잘 보이고 색상이 명확해지는 반면, 밝고 잘 보이던 부분의 세부(detail)는 밝기가 포화되어 대비(contrast)가 낮아지고 세부를 구분하기 어려워진다.
이와 같이, 짧은 노출 시간동안 촬영하여 획득한 영상을 밝은 영상들로 생성시키는 변환은, 어두운 영역의 밝기를 증가시킬 수 있는 다양한 변환 방법들이 적용 가능하지만, 본 발명에서는 '감마 변환' 방법과 '게인(gain) 및 오프셋(offset) 조절을 통한 변환' 방법을 설명하도록 한다.
[수식 2]
Figure 112008078288779-pat00020
[수식 2] 는 밝은 영상 생성부(120)가 감마 변환에서 사용하는 수식이며, 도 2 에 도시된 바와 같다. 여기서,
Figure 112008078288779-pat00021
는 입력 영상의 컬러채널의 레벨,
Figure 112008078288779-pat00022
는 감마 변환 후 컬러채널의 레벨을 의미하며,
Figure 112008078288779-pat00023
는 감마계수로, 긴 노출 시간동안 촬영한 영상과 유사한 특성을 갖는 영상을 생성하기 위해,
Figure 112008078288779-pat00024
조건을 만족하는
Figure 112008078288779-pat00025
을 사용하여야 한다.
Figure 112008078288779-pat00026
과
Figure 112008078288779-pat00027
는 각각 입력 영상(S)과 감마 변환 영상의 픽셀이 한 컬러채널 당 표현되는 비트(bit) 수 이다. 두 값은 서로 같을 수도 있고,
Figure 112008078288779-pat00028
가
Figure 112008078288779-pat00029
보다 클 수 도 있다.
Figure 112008078288779-pat00030
가
Figure 112008078288779-pat00031
보다 큰 경우는, 짧은 노출 시간동안 촬영하여 획득한 원 영상(S)을 '밝은 영상'(
Figure 112008078288779-pat00032
)으로 변환시키는 과정에서, 어두운 영역의 밝기 및 대비를 증가시키다가 밝은 영역의 밝기가 지나치게 포화되어 서로 다른 여러 밝기 레벨이 동일한 컬러채널 레벨(밝기 레벨) 값으로 변환되어버리는 문제점을 방지하기 위한 것이다.
이후, 감마 변환으로 생성한 밝은 영상(
Figure 112008078288779-pat00033
)의 픽셀의 표현 비트 수(
Figure 112008078288779-pat00034
)가 원 영상(S)의 픽셀의 표현 비트 수(
Figure 112008078288779-pat00035
)보다 클 경우, 밝은 영상 생성부(120)는 원 영상(S)에 다음의 [수식 3] 을 적용하여, 원 영상(S)의 픽셀 표현 비트 수를 밝은 영상(
Figure 112008078288779-pat00036
)의 비트 수와 동일하게 즉,
Figure 112008078288779-pat00037
에서
Figure 112008078288779-pat00038
로 변환시켜야 한다.
[수식 3]
Figure 112008078288779-pat00039
한편, 게인(gain) 및 오프셋(offset) 조절은 [수식 4] 와 같이 상수
Figure 112008078288779-pat00040
를 이용해 짧은 노출시간동안 촬영하여 획득한 원 영상(S)으로부터 밝기 범위를 증가된 영상을 얻는다.
[수식 4]
Figure 112008078288779-pat00041
짧은 노출 시간동안 촬영하여 획득한 원 영상(S)의 Intensity I의 최소, 최대 범위가
Figure 112008078288779-pat00042
일 경우, 이 범위는 [수식 4]에 의해
Figure 112008078288779-pat00043
로 선형적으로 변환된다.
Figure 112008078288779-pat00044
를 적절하게 선택하면 짧은 노출시간으로 획득한 원 영상(S)으로부터 어두운 영역의 밝기가 증가되어 세부를 식별할 수 있는 영상을 얻을 수 있다.
다수의 밝은 영상(
Figure 112008078288779-pat00045
) 를 생성할 경우, 감마 변환에서 다른
Figure 112008078288779-pat00046
을 선택하여 이에 따라 영상을 생성시킬 수 있고, 게인 및 오프셋 조절에서 다른
Figure 112008078288779-pat00047
를 선택하여 생성시킬 수도 있으며, 두 방법을 이용해 생성시킨 여러 영상을 이용할 수도 있다.
가중치 계산부(130)는 짧은 노출 시간동안 촬영하여 획득한 원 영상(S)과, 밝은 영상 생성부(120)을 통해 생성된 다수의 밝은 영상(
Figure 112008078288779-pat00048
)의 합성 시, 적용되는 가중치를 계산한다.
생성된 밝은 영상은 하나 또는 둘 이상의 영상이 될 수 있지만, 본 실시예에서는 짧은 노출 시간 동안의 촬영을 통해 획득한 원 영상(S)와, 밝은 영상 생성부(120)에서 생성한 하나의 영상(L) 합성 시, 적용되는 가중치를 결정하는 방법에 대해 기술하도록 한다.
물론, 가중치 결정 방법은 복수의 밝은 영상(
Figure 112008078288779-pat00049
)이 생성된 경우에도 쉽게 확장하여 적용할 수 있을 것이다. 가중치를 결정하는 방법은 여러 가지가 있을 수 있다. 본 발명의 바람직한 일 실시예로, 원 영상(S)의 픽셀 밝기 레벨에 따라 다른 가중치를 주는 방법이다.
짧은 노출 시간으로 획득한 원 영상(S)에서는 어두운 영역의 세부를 식별하기 어려운 대신, 밝은 영역의 에지(edge)가 선명하고 대비(contrast)와 색상이 뚜렷하다. 반면, 밝은 영상 생성부(120)를 통해 생성한 하나의 밝은 영상(L)에서는 긴 노출 시간으로 촬영하여 획득한 영상과 비슷하게, 밝은 영역의 대비가 낮아지고, 밝기와 색이 포화되지만, 어두운 영역의 세부의 대비가 향상되어, 세부가 식별 가능해진다.
따라서, 향상된 화질의 영상을 얻기 위해서, 가중치 계산부(130)는 원 영상(S)의 픽셀 밝기가 어두운 영역에서는, 원 영상(S)보다 밝은 영상(L)에 높은 가중치를 두고, 원 영상(S)의 픽셀 밝기가 밝은 영역에서는, 밝은 영상(L)보다 원 영상(S)에 높은 가중치를 두어 합성해야한다.
즉, 가중치 계산부(130)는 원 영상(S) 픽셀 밝기 레벨이 증가함에 따라, 원 영상(S)의 가중치가 증가하도록 설정하게 되며, 가중치 계산은 다음의 [수식 5] 와 같다.
[수식 5]
Figure 112008078288779-pat00050
여기서,
Figure 112008078288779-pat00051
와
Figure 112008078288779-pat00052
은 각각 원 영상(S)와 하나의 밝은 영상(L)을 합성할 때 사용되는 가중치로, 원 영상(S)의 명도값(Intensity)
Figure 112008078288779-pat00053
에 관한 함수이다. 이 두 값의 합은 합성영상의 픽셀 밝기 범위가 원 영상(S)와 밝은 영상(L)의 픽셀 표현 비트수의 최대범위를 넘지 않기 위해 1이 되어야 한다.
Figure 112008078288779-pat00054
은 원 영상(S)와 밝은 영상(L)이 가질 수 있는 최대 밝기값이며,
Figure 112008078288779-pat00055
는 원 영상(S)의 명도값(Intensity I)이며,
Figure 112008078288779-pat00056
는 감마계수이다.
Figure 112008078288779-pat00057
=1 인 경우 의 증가에 따라,
Figure 112008078288779-pat00059
가 선형적으로 증가하고,
Figure 112008078288779-pat00060
인 경우는
Figure 112008078288779-pat00061
가 점점 큰 증가도로 증가한다.
Figure 112008078288779-pat00062
인 경우는
Figure 112008078288779-pat00063
가 점점 작은 증가도로 증가한다.
Figure 112008078288779-pat00064
는 원 영상(S)와 밝기 영상(L)이 일정한 가중치로 합성되도록 하는 오프셋 상수이며,
Figure 112008078288779-pat00065
는 밝기 영상(L)이 일정한 가중치로 합성되도록 제어하는 상수이다.
이 상수들에 따르면, 모든 밝기 범위에서 항상 원 영상(S)이
Figure 112008078288779-pat00066
이상의 가중치로 합성되고, 밝기 영상(L)은
Figure 112008078288779-pat00067
이상의 가중치로 합성된다.
도 3 의 (a)는
Figure 112008078288779-pat00068
=1, (b)는
Figure 112008078288779-pat00069
, (c)는
Figure 112008078288779-pat00070
인 경우의 가중치
Figure 112008078288779-pat00071
,
Figure 112008078288779-pat00072
을 나타내고 있다.
영상 합성부(140)는 상기 가중치 계산부(130)를 통해 계산된 가중치 값을 적용하여, 짧은 노출 시간으로 획득한 원 영상(S)과 밝은 영상 생성부(120)를 통해 생성된 다수의 밝은 영상(
Figure 112008078288779-pat00073
)을 합성한다.
즉, 영상 합성부(140)는 짧은 노출 시간으로 획득한 원 영상(S)과 밝은 영상 생성부(120)를 통해 생성된 다수의 밝은 영상(
Figure 112008078288779-pat00074
)을 가중 합산하여, 합성 영상의 명도값(Intensity)
Figure 112008078288779-pat00075
를 산출한다.
합성된 영상의 명도값(Intensity)
Figure 112008078288779-pat00076
를 구하는 방법은 [수식 6] 과 같다.
[수식 6]
Figure 112008078288779-pat00077
여기서,
Figure 112008078288779-pat00078
와
Figure 112008078288779-pat00079
는 각각 원 영상(S)의 명도값(Intensity), 다수의 밝은 영상(
Figure 112008078288779-pat00080
) 의 명도값(Intensity)이다.
Figure 112008078288779-pat00081
는 합성된 영상의 명도값(Intensity)로서,
Figure 112008078288779-pat00082
에 관한 함수이다.
Figure 112008078288779-pat00083
와
Figure 112008078288779-pat00084
는 각각
Figure 112008078288779-pat00085
와
Figure 112008078288779-pat00086
에 적용되는 가중치로서,
Figure 112008078288779-pat00087
에 관한 함수이다.
한편, 앞서 서술한 바와 같이 밝은 영상 생성부(120)에서 감마 변환을 통해, 원 영상(S)과 다수의 밝은 영상(
Figure 112008078288779-pat00088
)의 픽셀의 표현 비트(bit) 수가 동일하도록, 원 영상(S)의 원래 비트 수(
Figure 112008078288779-pat00089
)를
Figure 112008078288779-pat00090
로 변형시켰다면, 영상 합성부(140)는, 영상 디스플레이를 위해 합성된 영상의 명도값(
Figure 112008078288779-pat00091
)을 다시
Figure 112008078288779-pat00092
의 비트 수로 변환함으로써, [수식 7] 과 같이 비트 수가 변환된 합성된 영상의 명도값(
Figure 112008078288779-pat00093
) 을 산출한다.
[수식 7]
Figure 112008078288779-pat00094
합성 영상 RGB 변환부(150)는 영상 합성부(140)를 통해 합성된 영상의 명도값(Intensity) (
Figure 112008078288779-pat00095
또는
Figure 112008078288779-pat00096
) 를 이용하여, 원 영상(S)의 색상비율(
Figure 112008078288779-pat00097
)에 따라 합성 영상을 RGB 영역으로 변환함으로써, [수식 8] 과 같은 합성 영상의 RGB 값(
Figure 112008078288779-pat00098
)을 얻는다.
[수식 8]
Figure 112008078288779-pat00099
이렇게 하면, 보정영상에서 원 영상(S)의 색상비율(
Figure 112008078288779-pat00100
)을 유지할 있다. 게인(gain)을
Figure 112008078288779-pat00101
로 하지 않고,
Figure 112008078288779-pat00102
로 설정한 이유는,
Figure 112008078288779-pat00103
= 0 인 경우 게인(gain)이 수치화 될 수 없는 경우를 방지하기 위해서이다.
위에서 설명한 일련의 과정을 거치면, 최종 보정 영상을 얻을 수 있다. 입력영상이 RGB 영역이 아닌 YCbCr, HSI, L*a*b* 등 다른 영역일 경우에는 이들의 색좌표를 RGB로 변환하여 상기 서술한 방법과 같이 보정하고 난 뒤 R,G,B 좌표계를 다시 해당 좌표계로 변환한다.
상술한 영상 보정 장치(100)를 이용한 영상 보정 방법에 관하여 도 4 를 참조하여 설명하면 다음과 같다.
도 4 는 본 발명에 따른 다수 영상의 생성 및 합성을 통한 영상 보정 방법에 관한 전체 흐름도로서, 도시된 바와 같이 입력 영상 변환부(110)가 짧은 노출 시간동안 한 번의 촬영을 통해 획득한 원 영상(S)를 입력받아, 원 영상의 RGB를 상기 [수식 1] 과 같이 명도값 I(이하, 'Intensity I') 로 변환한다(S100).
이후, 밝은 영상 생성부(120)는 상기 원 영상(S)에 감마 변환, 게인(gain) 및 오프셋(offset) 조정, 히스토그램 등화 등과 같은 변환을 적용하여, '긴 노출시간을 통해 촬영한 영상과 유사한 특성을 갖는 다수의 영상(
Figure 112008078288779-pat00104
)인 이른 바, '밝은 영상'을 생성한다(S200).
또한, 가중치 계산부(130)는 상기 원 영상(S)과 상기 밝은 영상 생성부(120)을 통해 생성된 다수의 '밝은 영상(
Figure 112008078288779-pat00105
)'의 합성 시, 적용되는 가중치를 계산한다(S300).
영상 합성부(140)는 가중치 계산부(130)를 통해 계산된 가중치 값을 적용하여, 짧은 노출 시간으로 획득한 원 영상(S)과 밝은 영상 생성부(120)를 통해 생성된 다수의 밝은 영상(
Figure 112008078288779-pat00106
)을 합성한다(S400).
합성 영상 RGB 변환부(150)는 영상 합성부(140)를 통해 합성된 영상의 명도값(Intensity) (
Figure 112008078288779-pat00107
또는
Figure 112008078288779-pat00108
) 를 이용하여, 원 영상(S)의 색상비율(
Figure 112008078288779-pat00109
)에 따라 합성 영상을 RGB 영역으로 변환함으로써, 상기 [수식 8] 과 같은 합성 영상의 RGB 값(
Figure 112008078288779-pat00110
)을 얻는다(S500).
이상으로 본 발명의 기술적 사상을 예시하기 위한 바람직한 실시예와 관련하여 설명하고 도시하였지만, 본 발명은 이와 같이 도시되고 설명된 그대로의 구성 및 작용에만 국한되는 것이 아니며, 기술적 사상의 범주를 일탈함이 없이 본 발명에 대해 다수의 변경 및 수정이 가능함을 당업자들은 잘 이해할 수 있을 것이다. 따라서, 그러한 모든 적절한 변경 및 수정과 균등물들도 본 발명의 범위에 속하는 것으로 간주되어야 할 것이다.
도 1 은 본 발명에 따른 다수 영상의 생성 및 합성을 통한 영상 보정 장치를 개념적으로 도시한 구성도.
도 2 는 본 발명에 따른 감마 변환을 보여주는 일예시도.
도 3 은 본 발명에 따른 가중치를 보여주는 일예시도.
도 4 는 본 발명에 따른 다수 영상의 생성 및 합성을 통한 영상 보정 방법에 관한 전체 흐름도.
** 도면의 주요 부분에 대한 부호의 설명 **
100: 다수 영상의 생성 및 합성을 통한 영상 보정 장치
110: 입력 영상 변환부 120: 밝은 영상 생성부
130: 가중치 계산부 140: 영상 합성부
150: 합성 영상 RGB 변환부

Claims (16)

  1. 다수 영상의 생성 및 합성을 통한 영상 보정 장치에 있어서,
    입력된 원 영상(S)의 RGB를 명도값 I(
    Figure 112010041368210-pat00111
    )로 변환하는 입력 영상 변환부(110);
    상기 원 영상(S)에 감마 변환, 게인(gain) 및 오프셋(offset) 조정, 히스토그램 등화 중 어느 하나의 변환을 적용하여, 다수의 '변환 영상(
    Figure 112010041368210-pat00112
    )'을 생성하는 변환 영상 생성부(120);
    상기 원 영상(S)과 상기 변환 영상 생성부(120)을 통해 생성된 다수의 '변환 영상(
    Figure 112010041368210-pat00113
    )'의 합성 시, 적용되는 가중치를 계산하는 가중치 계산부(130);
    상기 가중치 계산부(130)를 통해 계산된 가중치 값을 적용하여, 상기 원 영상(S)과 다수의 '변환 영상(
    Figure 112010041368210-pat00114
    )'을 합성함으로써, 합성 영상의 명도값(Intensity)
    Figure 112010041368210-pat00115
    를 산출하는 영상 합성부(140); 및
    상기 영상 합성부(140)를 통해 합성된 영상의 명도값(
    Figure 112010041368210-pat00116
    )을 이용하여, 상기 원 영상(S)의 색상비율(
    Figure 112010041368210-pat00117
    )에 따라 합성 영상을 RGB 영역으로 변환하는 합성 영상 RGB 변환부(150); 를 포함하되,
    상기 가중치 계산부(130)는,
    상기 원 영상(S)의 픽셀 밝기 레벨에 따라 가중치를 결정하되, 상기 원 영상(S) 픽셀 밝기가 증가함에 따라, 상기 원 영상(S)의 가중치가 증가하도록 설정하는 것을 특징으로 하는 다수 영상의 생성 및 합성을 통한 영상 보정 장치.
  2. 제 1 항에 있어서,
    상기 변환 영상 생성부(120)가 상기 원 영상(S)을 감마 변환을 수행하여 '변환 영상(
    Figure 112010041368210-pat00118
    )'을 생성할 경우, 서로 다른 컬러채널 레벨(밝기 레벨)들이 동일한 컬러채널 레벨 값으로 변환되는 것을 방지하기 위하여, [수식 2] 와 같이 '변환 영상(
    Figure 112010041368210-pat00119
    )'의 비트 수(
    Figure 112010041368210-pat00120
    )를 원 영상(S)의 픽셀 표현 비트(bit) 수(
    Figure 112010041368210-pat00121
    ) 보다 높은 픽셀 표현 비트(bit) 수로 적용하여 변환하는 것을 특징으로 하는 다수 영상의 생성 및 합성을 통한 영상 보정 장치.
    [수식 2]
    Figure 112010041368210-pat00122
    Figure 112010041368210-pat00123
    는 입력 영상의 컬러채널의 레벨,
    Figure 112010041368210-pat00124
    는 감마 변환 후 컬러채널의 레벨,
    Figure 112010041368210-pat00125
    는 감마계수
  3. 제 2 항에 있어서,
    상기 변환 영상 생성부(120)를 통해 감마 변환으로 생성한 변환 영상(
    Figure 112010041368210-pat00126
    )의 픽셀의 표현 비트 수(
    Figure 112010041368210-pat00127
    )가 원 영상(S)의 픽셀의 표현 비트 수(
    Figure 112010041368210-pat00128
    )보다 클 경우,
    변환 영상 생성부(120)는 원 영상(S)에 [수식 3] 을 적용하여, 상기 원 영상(S)의 픽셀 표현 비트 수를 변환 영상(
    Figure 112010041368210-pat00129
    )의 비트 수와 동일하게 변환시키는 것을 특징으로 하는 다수 영상의 생성 및 합성을 통한 영상 보정 장치.
    [수식 3]
    Figure 112010041368210-pat00130
    Figure 112010041368210-pat00131
    는 입력 영상의 컬러채널의 레벨,
    Figure 112010041368210-pat00132
    는 감마 변환 후 컬러채널의 레벨
  4. 삭제
  5. 삭제
  6. 제 1 항에 있어서,
    상기 가중치는 [수식 5] 를 통해 계산하되,
    Figure 112010041368210-pat00133
    와
    Figure 112010041368210-pat00134
    은 각각 원 영상(S)와 하나의 변환 영상(L)을 합성할 때 사용되는 가중치인 것을 특징으로 하는 다수 영상의 생성 및 합성을 통한 영상 보정 장치.
    [수식 5]
    Figure 112010041368210-pat00135
    Figure 112010041368210-pat00136
    은 원 영상(S)와 변환 영상(L)이 가질 수 있는 최대 밝기값,
    Figure 112010041368210-pat00137
    는 원 영상(S)의 명도값(Intensity I),
    Figure 112010041368210-pat00138
    는 감마계수이며,
    Figure 112010041368210-pat00139
    는 원 영상(S)와 변환 영상(L)이 일정한 가중치로 합성되도록 하는 오프셋 상수이며,
    Figure 112010041368210-pat00140
    는 변환 영상(L)이 일정한 가중치로 합성되도록 제어하는 상수
  7. 제 1 항에 있어서,
    상기 영상 합성부(140)는,
    상기 원 영상(S)과 변환 영상 생성부(120)를 통해 생성된 다수의 변환 영상(
    Figure 112010041368210-pat00141
    )을 가중 합산하여, [수식 6] 을 통해 합성 영상의 명도값(Intensity)
    Figure 112010041368210-pat00142
    을 산출하는 것을 특징으로 하는 다수 영상의 생성 및 합성을 통한 영상 보정 장치.
    [수식 6]
    Figure 112010041368210-pat00143
    Figure 112010041368210-pat00144
    와
    Figure 112010041368210-pat00145
    는 각각 원 영상(S)의 명도값(Intensity), 다수의 변환 영상(
    Figure 112010041368210-pat00146
    )의 명도값(Intensity)이며,
    Figure 112010041368210-pat00147
    는 합성된 영상의 명도값(Intensity)이며,
    Figure 112010041368210-pat00148
    와
    Figure 112010041368210-pat00149
    는 각각
    Figure 112010041368210-pat00150
    와
    Figure 112010041368210-pat00151
    에 적용되는 가중치
  8. 제 7 항에 있어서,
    상기 영상 합성부(140)는,
    상기 변환 영상 생성부(120)를 통해 원 영상(S)과 다수의 변환 영상(
    Figure 112010041368210-pat00152
    )의 픽셀의 표현 비트(bit) 수가 동일하도록, 원 영상(S)의 비트 수를 원래 비트 수(
    Figure 112010041368210-pat00153
    )보다 높은 비트 수(
    Figure 112010041368210-pat00154
    ) 로 변환한 경우,
    상기 합성된 영상의 명도값(
    Figure 112010041368210-pat00155
    )을 [수식 7] 을 이용하여 원 영상(S)의 원래 비트 수(
    Figure 112010041368210-pat00156
    )로 변환함으로써, 비트 수가 변환된 합성된 영상의 명도값(
    Figure 112010041368210-pat00157
    )을 산출하는 것을 특징으로 하는 다수 영상의 생성 및 합성을 통한 영상 보정 장치.
    [수식 7]
    Figure 112010041368210-pat00158
  9. 다수 영상의 생성 및 합성을 통한 영상 보정 방법에 있어서,
    (a) 영상 변환부(110)가 입력된 원 영상(S)의 RGB를 명도값 I(
    Figure 112010041368210-pat00159
    )로 변환하는 단계;
    (b) 변환 영상 생성부(120)가 상기 원 영상(S)에 감마 변환, 게인(gain) 및 오프셋(offset) 조정, 히스토그램 등화 중 어느 하나의 변환을 적용하여, 다수의 '변환 영상(
    Figure 112010041368210-pat00160
    )'을 생성하는 단계;
    (c) 가중치 계산부(130)가 상기 원 영상(S)과 상기 (b) 단계를 통해 생성된 다수의 '변환 영상(
    Figure 112010041368210-pat00161
    )'의 합성 시에 적용되는 가중치를 계산하는 단계;
    (d) 영상 합성부(140)가 상기 (c) 단계를 통해 계산된 가중치 값을 적용하여, 상기 원 영상(S)과 다수의 '변환 영상(
    Figure 112010041368210-pat00162
    )'을 합성함으로써, 합성 영상의 명도값(Intensity)
    Figure 112010041368210-pat00163
    를 산출하는 단계; 및
    (e) 합성 영상 RGB 변환부(150)가 상기 (d) 단계를 통해 합성된 영상의 명도값(
    Figure 112010041368210-pat00164
    )을 이용하여, 상기 원 영상(S)의 색상비율(
    Figure 112010041368210-pat00165
    )에 따라 합성 영상을 RGB 영역으로 변환하는 단계; 를 포함하되,
    상기 (c) 단계에서,
    상기 가중치 계산부(130)가 원 영상(S)의 픽셀 밝기 레벨에 따라 가중치를 결정하되, 상기 원 영상(S) 픽셀 밝기가 증가함에 따라, 상기 원 영상(S)의 가중치가 증가하도록 설정하는 것을 특징으로 하는 다수 영상의 생성 및 합성을 통한 영상 보정 방법.
  10. 제 9 항에 있어서,
    상기 (b) 단계에서,
    상기 원 영상(S)을 감마 변환을 수행하여 '변환 영상(
    Figure 112010041368210-pat00166
    )'을 생성할 경우,
    상기 변환 영상 생성부(120)가 서로 다른 컬러채널 레벨(밝기 레벨)들이 동일한 컬러채널 레벨 값으로 변환되는 것을 방지하기 위하여, [수식 2] 와 같이 '변환 영상(
    Figure 112010041368210-pat00167
    )'의 비트 수(
    Figure 112010041368210-pat00168
    )를 원 영상(S)의 픽셀 표현 비트(bit) 수(
    Figure 112010041368210-pat00169
    ) 보다 높은 픽셀 표현 비트(bit) 수로 적용하여 변환하는 것을 특징으로 하는 다수 영상의 생성 및 합성을 통한 영상 보정 방법.
    [수식 2]
    Figure 112010041368210-pat00170
    Figure 112010041368210-pat00171
    는 입력 영상의 컬러채널의 레벨,
    Figure 112010041368210-pat00172
    는 감마 변환 후 컬러채널의 레벨,
    Figure 112010041368210-pat00173
    는 감마계수
  11. 제 9 항에 있어서,
    상기 (b) 단계에서,
    상기 변환 영상 생성부(120)가 감마 변환으로 생성한 변환 영상(
    Figure 112010041368210-pat00174
    )의 픽셀의 표현 비트 수(
    Figure 112010041368210-pat00175
    )가 원 영상(S)의 픽셀의 표현 비트 수(
    Figure 112010041368210-pat00176
    )보다 클 경우, 변환 영상 생성부(120)는 원 영상(S)에 [수식 3] 을 적용하여, 상기 원 영상(S)의 픽셀 표현 비트 수를 변환 영상(
    Figure 112010041368210-pat00177
    )의 비트 수와 동일하게 변환시키는 것을 특징으로 하는 다수 영상의 생성 및 합성을 통한 영상 보정 방법.
    [수식 3]
    Figure 112010041368210-pat00178
    Figure 112010041368210-pat00179
    는 입력 영상의 컬러채널의 레벨,
    Figure 112010041368210-pat00180
    는 감마 변환 후 컬러채널의 레벨
  12. 삭제
  13. 삭제
  14. 제 9 항에 있어서,
    상기 가중치는 [수식 5] 를 통해 계산하되,
    Figure 112010041368210-pat00181
    와
    Figure 112010041368210-pat00182
    은 각각 원 영상(S)와 하나의 변환 영상(L)을 합성할 때 사용되는 가중치인 것을 특징으로 하는 다수 영상의 생성 및 합성을 통한 영상 보정 방법.
    [수식 5]
    Figure 112010041368210-pat00183
    Figure 112010041368210-pat00184
    은 원 영상(S)와 변환 영상(L)이 가질 수 있는 최대 밝기값,
    Figure 112010041368210-pat00185
    는 원 영상(S)의 명도값(Intensity I),
    Figure 112010041368210-pat00186
    는 감마계수이며,
    Figure 112010041368210-pat00187
    는 원 영상(S)와 변환 영상(L)이 일정한 가중치로 합성되도록 하는 오프셋 상수이며,
    Figure 112010041368210-pat00188
    는 변환 영상(L)이 일정한 가중치로 합성되도록 제어하는 상수
  15. 제 9 항에 있어서,
    상기 (d) 단계에서,
    상기 영상 합성부(140)는, 상기 원 영상(S)과 변환 영상 생성부(120)를 통해 생성된 다수의 변환 영상(
    Figure 112010041368210-pat00189
    )을 가중 합산하여, [수식 6] 을 통해 합성 영상의 명도값(Intensity)
    Figure 112010041368210-pat00190
    를 산출하는 것을 특징으로 하는 다수 영상의 생성 및 합성을 통한 영상 보정 방법.
    [수식 6]
    Figure 112010041368210-pat00191
    Figure 112010041368210-pat00192
    와
    Figure 112010041368210-pat00193
    는 각각 원 영상(S)의 명도값(Intensity), 다수의 변환 영상(
    Figure 112010041368210-pat00194
    )의 명도값(Intensity)이며,
    Figure 112010041368210-pat00195
    는 합성된 영상의 명도값(Intensity)이며,
    Figure 112010041368210-pat00196
    와
    Figure 112010041368210-pat00197
    는 각각
    Figure 112010041368210-pat00198
    와
    Figure 112010041368210-pat00199
    에 적용되는 가중치
  16. 제 9 항에 있어서,
    상기 (d) 과정에서,
    상기 영상 합성부(140)는, 상기 변환 영상 생성부(120)를 통해 원 영상(S)과 다수의 변환 영상(
    Figure 112010041368210-pat00200
    )의 픽셀의 표현 비트(bit) 수가 동일하도록, 원 영상(S)의 비트 수를 원래 비트 수(
    Figure 112010041368210-pat00201
    )보다 높은 비트 수(
    Figure 112010041368210-pat00202
    ) 로 변환한 경우,
    상기 합성된 영상의 명도값(
    Figure 112010041368210-pat00203
    )을 [수식 7] 을 이용하여 원 영상(S)의 원래 비트 수(
    Figure 112010041368210-pat00204
    )로 변환함으로써, 비트 수가 변환된 합성된 영상의 명도값(
    Figure 112010041368210-pat00205
    )을 산출하는 것을 특징으로 하는 다수 영상의 생성 및 합성을 통한 영상 보정 방법.
    [수식 7]
    Figure 112010041368210-pat00206
KR1020080112331A 2008-11-12 2008-11-12 다수 영상의 생성 및 합성을 통한 영상 보정 장치 및 그 방법 Expired - Fee Related KR100990904B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020080112331A KR100990904B1 (ko) 2008-11-12 2008-11-12 다수 영상의 생성 및 합성을 통한 영상 보정 장치 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020080112331A KR100990904B1 (ko) 2008-11-12 2008-11-12 다수 영상의 생성 및 합성을 통한 영상 보정 장치 및 그 방법

Publications (2)

Publication Number Publication Date
KR20100053287A KR20100053287A (ko) 2010-05-20
KR100990904B1 true KR100990904B1 (ko) 2010-11-01

Family

ID=42278433

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020080112331A Expired - Fee Related KR100990904B1 (ko) 2008-11-12 2008-11-12 다수 영상의 생성 및 합성을 통한 영상 보정 장치 및 그 방법

Country Status (1)

Country Link
KR (1) KR100990904B1 (ko)

Cited By (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101065719B1 (ko) * 2009-12-03 2011-09-19 인하대학교 산학협력단 적응적인 감마 적용에 의한 콘트라스트 개선 방법
US9058653B1 (en) 2011-06-10 2015-06-16 Flir Systems, Inc. Alignment of visible light sources based on thermal images
US9143703B2 (en) 2011-06-10 2015-09-22 Flir Systems, Inc. Infrared camera calibration techniques
US9208542B2 (en) 2009-03-02 2015-12-08 Flir Systems, Inc. Pixel-wise noise reduction in thermal images
US9207708B2 (en) 2010-04-23 2015-12-08 Flir Systems, Inc. Abnormal clock rate detection in imaging sensor arrays
US9235876B2 (en) 2009-03-02 2016-01-12 Flir Systems, Inc. Row and column noise reduction in thermal images
US9235023B2 (en) 2011-06-10 2016-01-12 Flir Systems, Inc. Variable lens sleeve spacer
US9292909B2 (en) 2009-06-03 2016-03-22 Flir Systems, Inc. Selective image correction for infrared imaging devices
USD765081S1 (en) 2012-05-25 2016-08-30 Flir Systems, Inc. Mobile communications device attachment with camera
US9451183B2 (en) 2009-03-02 2016-09-20 Flir Systems, Inc. Time spaced infrared image enhancement
US9473681B2 (en) 2011-06-10 2016-10-18 Flir Systems, Inc. Infrared camera system housing with metalized surface
US9509924B2 (en) 2011-06-10 2016-11-29 Flir Systems, Inc. Wearable apparatus with integrated infrared imaging module
US9521289B2 (en) 2011-06-10 2016-12-13 Flir Systems, Inc. Line based image processing and flexible memory system
US9517679B2 (en) 2009-03-02 2016-12-13 Flir Systems, Inc. Systems and methods for monitoring vehicle occupants
US9635285B2 (en) 2009-03-02 2017-04-25 Flir Systems, Inc. Infrared imaging enhancement with fusion
US9674458B2 (en) 2009-06-03 2017-06-06 Flir Systems, Inc. Smart surveillance camera systems and methods
US9706139B2 (en) 2011-06-10 2017-07-11 Flir Systems, Inc. Low power and small form factor infrared imaging
US9706137B2 (en) 2011-06-10 2017-07-11 Flir Systems, Inc. Electrical cabinet infrared monitor
US9706138B2 (en) 2010-04-23 2017-07-11 Flir Systems, Inc. Hybrid infrared sensor array having heterogeneous infrared sensors
US9716843B2 (en) 2009-06-03 2017-07-25 Flir Systems, Inc. Measurement device for electrical installations and related methods
US9723227B2 (en) 2011-06-10 2017-08-01 Flir Systems, Inc. Non-uniformity correction techniques for infrared imaging devices
US9756262B2 (en) 2009-06-03 2017-09-05 Flir Systems, Inc. Systems and methods for monitoring power systems
US9756264B2 (en) 2009-03-02 2017-09-05 Flir Systems, Inc. Anomalous pixel detection
US9807319B2 (en) 2009-06-03 2017-10-31 Flir Systems, Inc. Wearable imaging devices, systems, and methods
US9811884B2 (en) 2012-07-16 2017-11-07 Flir Systems, Inc. Methods and systems for suppressing atmospheric turbulence in images
US9819880B2 (en) 2009-06-03 2017-11-14 Flir Systems, Inc. Systems and methods of suppressing sky regions in images
US9843742B2 (en) 2009-03-02 2017-12-12 Flir Systems, Inc. Thermal image frame capture using de-aligned sensor array
US9848134B2 (en) 2010-04-23 2017-12-19 Flir Systems, Inc. Infrared imager with integrated metal layers
US9900526B2 (en) 2011-06-10 2018-02-20 Flir Systems, Inc. Techniques to compensate for calibration drifts in infrared imaging devices
US9948872B2 (en) 2009-03-02 2018-04-17 Flir Systems, Inc. Monitor and control systems and methods for occupant safety and energy efficiency of structures
US9961277B2 (en) 2011-06-10 2018-05-01 Flir Systems, Inc. Infrared focal plane array heat spreaders
US9973692B2 (en) 2013-10-03 2018-05-15 Flir Systems, Inc. Situational awareness by compressed display of panoramic views
US9986175B2 (en) 2009-03-02 2018-05-29 Flir Systems, Inc. Device attachment with infrared imaging sensor
US9998697B2 (en) 2009-03-02 2018-06-12 Flir Systems, Inc. Systems and methods for monitoring vehicle occupants
US10051210B2 (en) 2011-06-10 2018-08-14 Flir Systems, Inc. Infrared detector array with selectable pixel binning systems and methods
US10079982B2 (en) 2011-06-10 2018-09-18 Flir Systems, Inc. Determination of an absolute radiometric value using blocked infrared sensors
US10091439B2 (en) 2009-06-03 2018-10-02 Flir Systems, Inc. Imager with array of multiple infrared imaging modules
US10169666B2 (en) 2011-06-10 2019-01-01 Flir Systems, Inc. Image-assisted remote control vehicle systems and methods
US10244190B2 (en) 2009-03-02 2019-03-26 Flir Systems, Inc. Compact multi-spectrum imaging with fusion
US10389953B2 (en) 2011-06-10 2019-08-20 Flir Systems, Inc. Infrared imaging device having a shutter
US10757308B2 (en) 2009-03-02 2020-08-25 Flir Systems, Inc. Techniques for device attachment with dual band imaging sensor
US10841508B2 (en) 2011-06-10 2020-11-17 Flir Systems, Inc. Electrical cabinet infrared monitor systems and methods
US11297264B2 (en) 2014-01-05 2022-04-05 Teledyne Fur, Llc Device attachment with dual band imaging sensor

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9349166B2 (en) 2012-12-31 2016-05-24 Nokia Technologies Oy Method, apparatus and computer program product for generating images of scenes having high dynamic range
KR102288280B1 (ko) * 2014-11-05 2021-08-10 삼성전자주식회사 영상 학습 모델을 이용한 영상 생성 방법 및 장치
KR102569375B1 (ko) 2018-10-24 2023-08-22 삼성전자주식회사 전자 장치 및 전자 장치의 제어 방법
KR102788816B1 (ko) 2018-11-08 2025-03-31 삼성전자주식회사 전자 장치 및 그 제어 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004222178A (ja) 2003-01-17 2004-08-05 Fuji Photo Film Co Ltd 撮像装置
JP2005319214A (ja) 2004-05-11 2005-11-17 Canon Inc 画像処理装置及びその方法、プログラム
JP2007027967A (ja) 2005-07-13 2007-02-01 Fujifilm Holdings Corp 撮影装置
KR100843087B1 (ko) * 2006-09-06 2008-07-02 삼성전자주식회사 영상 생성 장치 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004222178A (ja) 2003-01-17 2004-08-05 Fuji Photo Film Co Ltd 撮像装置
JP2005319214A (ja) 2004-05-11 2005-11-17 Canon Inc 画像処理装置及びその方法、プログラム
JP2007027967A (ja) 2005-07-13 2007-02-01 Fujifilm Holdings Corp 撮影装置
KR100843087B1 (ko) * 2006-09-06 2008-07-02 삼성전자주식회사 영상 생성 장치 및 방법

Cited By (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9517679B2 (en) 2009-03-02 2016-12-13 Flir Systems, Inc. Systems and methods for monitoring vehicle occupants
US10757308B2 (en) 2009-03-02 2020-08-25 Flir Systems, Inc. Techniques for device attachment with dual band imaging sensor
US10244190B2 (en) 2009-03-02 2019-03-26 Flir Systems, Inc. Compact multi-spectrum imaging with fusion
US9208542B2 (en) 2009-03-02 2015-12-08 Flir Systems, Inc. Pixel-wise noise reduction in thermal images
US10033944B2 (en) 2009-03-02 2018-07-24 Flir Systems, Inc. Time spaced infrared image enhancement
US9235876B2 (en) 2009-03-02 2016-01-12 Flir Systems, Inc. Row and column noise reduction in thermal images
US9998697B2 (en) 2009-03-02 2018-06-12 Flir Systems, Inc. Systems and methods for monitoring vehicle occupants
US9986175B2 (en) 2009-03-02 2018-05-29 Flir Systems, Inc. Device attachment with infrared imaging sensor
US9948872B2 (en) 2009-03-02 2018-04-17 Flir Systems, Inc. Monitor and control systems and methods for occupant safety and energy efficiency of structures
US9451183B2 (en) 2009-03-02 2016-09-20 Flir Systems, Inc. Time spaced infrared image enhancement
US9843742B2 (en) 2009-03-02 2017-12-12 Flir Systems, Inc. Thermal image frame capture using de-aligned sensor array
US9756264B2 (en) 2009-03-02 2017-09-05 Flir Systems, Inc. Anomalous pixel detection
US9635285B2 (en) 2009-03-02 2017-04-25 Flir Systems, Inc. Infrared imaging enhancement with fusion
US9756262B2 (en) 2009-06-03 2017-09-05 Flir Systems, Inc. Systems and methods for monitoring power systems
US9807319B2 (en) 2009-06-03 2017-10-31 Flir Systems, Inc. Wearable imaging devices, systems, and methods
US10091439B2 (en) 2009-06-03 2018-10-02 Flir Systems, Inc. Imager with array of multiple infrared imaging modules
US9674458B2 (en) 2009-06-03 2017-06-06 Flir Systems, Inc. Smart surveillance camera systems and methods
US9292909B2 (en) 2009-06-03 2016-03-22 Flir Systems, Inc. Selective image correction for infrared imaging devices
US9716843B2 (en) 2009-06-03 2017-07-25 Flir Systems, Inc. Measurement device for electrical installations and related methods
US9843743B2 (en) 2009-06-03 2017-12-12 Flir Systems, Inc. Infant monitoring systems and methods using thermal imaging
US9819880B2 (en) 2009-06-03 2017-11-14 Flir Systems, Inc. Systems and methods of suppressing sky regions in images
KR101065719B1 (ko) * 2009-12-03 2011-09-19 인하대학교 산학협력단 적응적인 감마 적용에 의한 콘트라스트 개선 방법
US9207708B2 (en) 2010-04-23 2015-12-08 Flir Systems, Inc. Abnormal clock rate detection in imaging sensor arrays
US9706138B2 (en) 2010-04-23 2017-07-11 Flir Systems, Inc. Hybrid infrared sensor array having heterogeneous infrared sensors
US9848134B2 (en) 2010-04-23 2017-12-19 Flir Systems, Inc. Infrared imager with integrated metal layers
US9723227B2 (en) 2011-06-10 2017-08-01 Flir Systems, Inc. Non-uniformity correction techniques for infrared imaging devices
US9706139B2 (en) 2011-06-10 2017-07-11 Flir Systems, Inc. Low power and small form factor infrared imaging
US10841508B2 (en) 2011-06-10 2020-11-17 Flir Systems, Inc. Electrical cabinet infrared monitor systems and methods
US9538038B2 (en) 2011-06-10 2017-01-03 Flir Systems, Inc. Flexible memory systems and methods
US9473681B2 (en) 2011-06-10 2016-10-18 Flir Systems, Inc. Infrared camera system housing with metalized surface
US9723228B2 (en) 2011-06-10 2017-08-01 Flir Systems, Inc. Infrared camera system architectures
US9716844B2 (en) 2011-06-10 2017-07-25 Flir Systems, Inc. Low power and small form factor infrared imaging
US9900526B2 (en) 2011-06-10 2018-02-20 Flir Systems, Inc. Techniques to compensate for calibration drifts in infrared imaging devices
US9058653B1 (en) 2011-06-10 2015-06-16 Flir Systems, Inc. Alignment of visible light sources based on thermal images
US9961277B2 (en) 2011-06-10 2018-05-01 Flir Systems, Inc. Infrared focal plane array heat spreaders
US10389953B2 (en) 2011-06-10 2019-08-20 Flir Systems, Inc. Infrared imaging device having a shutter
US9706137B2 (en) 2011-06-10 2017-07-11 Flir Systems, Inc. Electrical cabinet infrared monitor
US9235023B2 (en) 2011-06-10 2016-01-12 Flir Systems, Inc. Variable lens sleeve spacer
US9509924B2 (en) 2011-06-10 2016-11-29 Flir Systems, Inc. Wearable apparatus with integrated infrared imaging module
US10051210B2 (en) 2011-06-10 2018-08-14 Flir Systems, Inc. Infrared detector array with selectable pixel binning systems and methods
US10079982B2 (en) 2011-06-10 2018-09-18 Flir Systems, Inc. Determination of an absolute radiometric value using blocked infrared sensors
US9521289B2 (en) 2011-06-10 2016-12-13 Flir Systems, Inc. Line based image processing and flexible memory system
US10169666B2 (en) 2011-06-10 2019-01-01 Flir Systems, Inc. Image-assisted remote control vehicle systems and methods
US10230910B2 (en) 2011-06-10 2019-03-12 Flir Systems, Inc. Infrared camera system architectures
US9143703B2 (en) 2011-06-10 2015-09-22 Flir Systems, Inc. Infrared camera calibration techniques
US10250822B2 (en) 2011-06-10 2019-04-02 Flir Systems, Inc. Wearable apparatus with integrated infrared imaging module
USD765081S1 (en) 2012-05-25 2016-08-30 Flir Systems, Inc. Mobile communications device attachment with camera
US9811884B2 (en) 2012-07-16 2017-11-07 Flir Systems, Inc. Methods and systems for suppressing atmospheric turbulence in images
US9973692B2 (en) 2013-10-03 2018-05-15 Flir Systems, Inc. Situational awareness by compressed display of panoramic views
US11297264B2 (en) 2014-01-05 2022-04-05 Teledyne Fur, Llc Device attachment with dual band imaging sensor

Also Published As

Publication number Publication date
KR20100053287A (ko) 2010-05-20

Similar Documents

Publication Publication Date Title
KR100990904B1 (ko) 다수 영상의 생성 및 합성을 통한 영상 보정 장치 및 그 방법
US7990443B2 (en) Image sensing apparatus and image processing method
CN102970549B (zh) 图像处理方法及装置
KR101099401B1 (ko) 화상 처리 장치 및 컴퓨터가 판독 가능한 기록 매체
JP4645921B2 (ja) 画像信号処理装置および方法、プログラム、並びに撮像装置
JP6116272B2 (ja) 画像処理装置及び画像処理方法、プログラム、記憶媒体
JP6097588B2 (ja) 画像処理装置及び画像処理方法
JP5901667B2 (ja) 画像処理装置及び方法、画像処理プログラム、撮像装置
JP4736939B2 (ja) 撮像装置及び画像処理方法
JP2007082181A (ja) 撮像装置及び画像処理方法
JP5911525B2 (ja) 画像処理装置及び方法、画像処理プログラム、撮像装置
JPWO2008111180A1 (ja) 画像信号処理装置、画像信号処理プログラム
WO2015190320A1 (ja) 撮像装置、及び、撮像方法
JP2009272983A (ja) 画像処理装置および方法並びにプログラム
JP5932392B2 (ja) 画像処理装置および画像処理方法
JP4479527B2 (ja) 画像処理方法、画像処理装置、画像処理プログラム、および電子カメラ
US8982244B2 (en) Image capturing apparatus for luminance correction, a control method therefor, and a recording medium
JP5609788B2 (ja) 画像処理装置及び画像処理方法
JP2002288650A (ja) 画像処理装置及びデジタルカメラ、画像処理方法、記録媒体
JP5365881B2 (ja) 画像処理装置、画像処理方法
JP6397261B2 (ja) 画像処理装置及び方法
JP2019040382A (ja) 画像処理装置
WO2008037812A2 (en) Image enhancement method and apparatus therefor
WO2015079481A1 (ja) 撮像方法及び撮像装置
JP2017011366A (ja) 画像処理装置および画像処理方法ならびに撮像装置

Legal Events

Date Code Title Description
A201 Request for examination
PA0109 Patent application

Patent event code: PA01091R01D

Comment text: Patent Application

Patent event date: 20081112

PA0201 Request for examination
E902 Notification of reason for refusal
PE0902 Notice of grounds for rejection

Comment text: Notification of reason for refusal

Patent event date: 20100428

Patent event code: PE09021S01D

PG1501 Laying open of application
E701 Decision to grant or registration of patent right
PE0701 Decision of registration

Patent event code: PE07011S01D

Comment text: Decision to Grant Registration

Patent event date: 20101022

GRNT Written decision to grant
PR0701 Registration of establishment

Comment text: Registration of Establishment

Patent event date: 20101025

Patent event code: PR07011E01D

PR1002 Payment of registration fee

Payment date: 20101026

End annual number: 3

Start annual number: 1

PG1601 Publication of registration
FPAY Annual fee payment

Payment date: 20130930

Year of fee payment: 4

PR1001 Payment of annual fee

Payment date: 20130930

Start annual number: 4

End annual number: 4

FPAY Annual fee payment

Payment date: 20140930

Year of fee payment: 5

PR1001 Payment of annual fee

Payment date: 20140930

Start annual number: 5

End annual number: 5

LAPS Lapse due to unpaid annual fee
PC1903 Unpaid annual fee

Termination category: Default of registration fee

Termination date: 20160909