[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

KR101544019B1 - Fire detection system using composited video and method thereof - Google Patents

Fire detection system using composited video and method thereof Download PDF

Info

Publication number
KR101544019B1
KR101544019B1 KR1020130065171A KR20130065171A KR101544019B1 KR 101544019 B1 KR101544019 B1 KR 101544019B1 KR 1020130065171 A KR1020130065171 A KR 1020130065171A KR 20130065171 A KR20130065171 A KR 20130065171A KR 101544019 B1 KR101544019 B1 KR 101544019B1
Authority
KR
South Korea
Prior art keywords
image
fire
smoke
flame
synthesized
Prior art date
Application number
KR1020130065171A
Other languages
Korean (ko)
Other versions
KR20140143857A (en
Inventor
정성진
Original Assignee
박종호
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 박종호 filed Critical 박종호
Priority to KR1020130065171A priority Critical patent/KR101544019B1/en
Priority to PCT/KR2014/001508 priority patent/WO2014196721A1/en
Publication of KR20140143857A publication Critical patent/KR20140143857A/en
Application granted granted Critical
Publication of KR101544019B1 publication Critical patent/KR101544019B1/en

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B17/00Fire alarms; Alarms responsive to explosion
    • G08B17/06Electric actuation of the alarm, e.g. using a thermally-operated switch
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B17/00Fire alarms; Alarms responsive to explosion
    • G08B17/12Actuation by presence of radiation or particles, e.g. of infrared radiation or of ions
    • G08B17/125Actuation by presence of radiation or particles, e.g. of infrared radiation or of ions by using a video camera to detect fire or smoke
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J1/00Photometry, e.g. photographic exposure meter
    • G01J1/42Photometry, e.g. photographic exposure meter using electric radiation detectors
    • G01J1/429Photometry, e.g. photographic exposure meter using electric radiation detectors applied to measurement of ultraviolet light
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/48Thermography; Techniques using wholly visual means
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B17/00Fire alarms; Alarms responsive to explosion
    • G08B17/10Actuation by presence of smoke or gases, e.g. automatic alarm devices for analysing flowing fluid materials by the use of optical means
    • G08B17/117Actuation by presence of smoke or gases, e.g. automatic alarm devices for analysing flowing fluid materials by the use of optical means by using a detection device for specific gases, e.g. combustion products, produced by the fire
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Signal Processing (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Alarm Systems (AREA)
  • Fire-Detection Mechanisms (AREA)

Abstract

본 발명은 합성 영상을 이용한 화재감지시스템 및 방법에 관한 것으로서, 더욱 상세하게는 영상 카메라로 촬영된 실제영상과 온도변화에 따른 열영상을 합성하여 불꽃이 없는 상황에서도 열영상을 통한 객체의 온도변화를 감지하여 잠열을 확인할 수 있어 화재가능성 및 화재를 감지할 수 있는 합성 영상을 이용한 화재감지시스템 및 방법에 관한 것이다. More particularly, the present invention relates to a fire detection system and method using synthetic images, and more particularly, to a fire detection system and method using synthesized images, The present invention relates to a fire detection system and a fire detection method using a composite image capable of detecting a possibility of a fire and a fire.

Figure R1020130065171
Figure R1020130065171

Description

합성 영상을 이용한 화재감지시스템 및 방법{Fire detection system using composited video and method thereof}FIELD OF THE INVENTION [0001] The present invention relates to a fire detection system using composite images,

본 발명은 합성 영상을 이용한 화재감지시스템 및 방법에 관한 것으로서, 더욱 상세하게는 영상 카메라로 촬영된 실제영상과 온도변화에 따른 열영상을 합성하여 불꽃이 없는 상황에서도 열 영상을 통한 객체의 온도변화를 감지하여 잠열을 확인할 수 있어 화재가능성 및 화재를 감지할 수 있는 합성 영상을 이용한 화재감지시스템 및 방법에 관한 것이다. More particularly, the present invention relates to a fire detection system and method using synthetic images, and more particularly, to a fire detection system and method using synthesized images, The present invention relates to a fire detection system and a fire detection method using a composite image capable of detecting a possibility of a fire and a fire.

통상의 소방관리에 사용되는 화재감지기는 화재를 감지하여 화재신호를 직간접적으로 관리자 또는 소방관제센터로 화재경보를 한다. 이때, 화재신호에 따라 자동으로 옥내외의 소화설비인 스프링클러를 제어하여 화재를 진압한다.A fire detector used in normal fire control manages the fire and directs the fire signal directly or indirectly to the manager or the fire department center. At this time, according to the fire signal, the sprinkler, which is a fire extinguishing system inside and outside, is automatically controlled to suppress the fire.

이러한 일반적인 화재감지기는 소방시설이 설치된 건물의 내외에 다수의 수신기가 설치되어 있더라도, 이들 화재감지기간에 상호통신이 불가능하여 건물이용자에게 신속한 화재정보를 전달할 수 없고, 특히 화재의 최초 발생시간 및 발생장소가 전달되지 않는 문제점이 있다.Such a general fire detector is incapable of communicating the fire information to the building user in a short time even though a plurality of receivers are installed inside and outside the building where the fire fighting facility is installed. There is a problem that the place is not delivered.

또한, 일반적인 화재감지기는 화재감지 및 화재를 알리는 것에 국한되어 있고, 다른 시스템과 유기적으로 결합하여 상호적으로 작용하기 어려운 문제점도 있다.In addition, a general fire detector is limited to notifying fire detection and fire, and also has a problem that it is difficult to interact with other systems and to interact with each other.

또한, 각 지역의 소방관서에서는 119 지령실 및 관제센터를 운영하면서 화재신고 또는 화재 인식시 GPS, GIS 등을 이용하여 화재발생 위치 및 주변 정보는 인지할 수 있으나, 현재 화재 상황에 대해서는 실시간 감지할 수 있는 시스템이 없다.In addition, in the local firefighters' offices, 119 command and control centers are operated, and in case of fire notification or fire recognition, it is possible to recognize the location and surrounding information of fire by using GPS, GIS, etc. However, There is no system.

따라서 종래에는 특허등록 제1175202호(2012.08.13 등록)를 통하여 실시간으로 화재를 감지 및 모니터링 할 수 있는 시스템이 제안되었다. 하지만 상기 종래기술은 불꽃과 연기가 발생됨을 감지하여 화재를 감지하는 것으로서 불꽃과 연기가 발생되지 않더라도 온도가 높은 상태인 잠열 상태에 따른 화재가능성 여부를 감지할 수 없었다. Accordingly, a system capable of detecting and monitoring fire in real time through a patent registration No. 1175202 (registered on Aug. 13, 2012) has been proposed. However, the above-mentioned prior art detects a fire by sensing the occurrence of flame and smoke, and thus it is impossible to detect whether or not the fire can occur due to a latent heat state in which the temperature is high, even if flame and smoke are not generated.

즉, 종래의 화재감지기술은 온도의 상승과 연기 및 불꽃을 감지해야만 화재를 경보하는 것으로서 화재 가능성이 높은 잠열의 감지장치나 방법이 전무하여 화재를 미연에 방지할 수 없는 문제점이 있었다. That is, the conventional fire detection technology has a problem in that it can not prevent a fire because there is no sensing device or method for detecting a latent heat with a high possibility of fire, because it warns the fire only when the temperature rises and smoke and flame are detected.

또한 종래에는 센서나 영상을 통하여 화재를 감지 및 경보하는 기술이 주를 이루었었다. 하지만 이와 같은 종래의 화재감지 및 경보장지에서 영상을 통한 화재감지장치는 빨간색의 의상이나 벽지를 화재로 인식하거나, 또는 음식의 조리과정에서 발생되는 연기를 화재발생에 따른 연기로 인식하기 때문에 정확도가 매우 낮은 문제점이 있었다. Also, in the past, technologies for detecting and alarming fire through sensors and images have been mainly made up. However, in such a conventional fire detection and alarm system, the fire detection apparatus through the image recognizes the red clothes or wallpaper as a fire, or recognizes the smoke generated in the cooking process as smoke due to the occurrence of fire, There was a very low problem.

따라서 본 발명은 상기와 같은 종래의 문제점을 해결하기 위하여 안출된 것으로서, 본 발명의 목적은 실영상 카메라로 촬영한 실영상과, 열상카메라를 통하여 촬영된 열영상을 혼합하여 불꽃이나 온도 및 연기가 발생하지 않더라도 온도의 변화를 감지하여 화재 발생 가능성을 정확히 감지할 수 있는 합성 영상을 이용한 화재감지시스템 및 방법을 제공함에 있다. SUMMARY OF THE INVENTION Accordingly, the present invention has been made keeping in mind the above problems occurring in the prior art, and it is an object of the present invention to provide an image reading apparatus and a thermal image reading method, The present invention provides a fire detection system and method using a composite image that can detect a change in temperature even when a fire is not generated and accurately detect the possibility of a fire.

본 발명은 상기와 같은 목적을 달성하기 위하여 하기와 같은 실시예를 포함한다. The present invention includes the following embodiments in order to achieve the above object.

본 발명에 따른 합성 영상을 이용한 화재감지시스템의 바람직한 실시예는다 수개가 설정된 구역내에 각각 설치되어 해당 구역을 촬영하여 실영상 신호를 송신하는 실영상 카메라와, 온도에 따라서 서로 다른 색상으로 표시되는 열영상을 송신하는 열영상카메라를 구비하는 촬영부; 불꽃을 감지하는 불꽃센서와, 연기를 감지하는 연기센서를 구비하는 센서부; 및 상기 촬영부의 실영상과 열영상을 합성한 합성영상과 상기 센서부의 감지신호를 통하여 화재발생여부를 판단하는 영상감지부를 포함하고, 상기 영상감지부는 상기 촬영부에서 인가되는 열영상과 실영상을 혼합하는 영상믹싱수단; 상기 영상믹싱수단의 합성 영상에 포함된 다 수개의 객체중에서 불꽃 및 연기를 분리 및 인식하는 객체인식수단; 및 상기 객체인식수단에서 분리된 상기 합성 영상에서 불꽃 및 연기의 객체가 확인되면, 상기 센서부로부터 불꽃 및 연기의 감지여부를 확인하여 상기 합성 영상과 상기 센서부에서 불꽃과 연기가 모두 감지되면 화재를 경보하는 제어수단을 포함하고, 상기 제어수단은 상기 합성영상에서 불꽃과 연기 객체가 인식되지 않으면, 상기 합성 영상의 온도별 색상을 확인하여 설정온도와 비교하여 화재 발전 가능성이 있는 잠열여부를 판단하여 잠열 경보를 발령하고, 상기 영상믹싱수단은 실영상과 열영상에서 동일 프레임을 캡춰한 이미지를 합성하여 실영상에 열영상으로 촬영된 객체를 합성하는 것을 특징으로 한다. A preferred embodiment of the fire detection system using the composite image according to the present invention includes a real image camera which is installed within a predetermined number of zones and photographs the corresponding zone to transmit a real image signal, A photographing unit having a thermal image camera for transmitting an image; A sensor unit having a flame sensor for detecting flame and a smoke sensor for detecting smoke; And an image sensing unit for sensing whether or not a fire has occurred through a synthesized image obtained by combining a real image and a thermal image of the photographing unit and a sensing signal of the sensor unit. The image sensing unit senses a thermal image and a real image, A video mixing means for mixing; Object recognizing means for separating and recognizing sparks and smoke among a plurality of objects included in the composite image of the image mixing means; And a control unit for checking whether or not a flame and smoke are detected from the sensor unit when an object of flame and smoke is recognized in the composite image separated by the object recognition unit and, when both the flame and smoke are detected in the synthesized image and the sensor unit, Wherein the control unit checks the color of the synthesized image by the temperature and compares the color of the synthesized image with the set temperature to determine whether there is a latent heat with a possibility of generating fire if the flame and the smoke object are not recognized in the synthesized image And the image mixing means combines the real image and the captured image of the same frame in the thermal image to synthesize the object photographed in the thermal image in the real image.

삭제delete

본 발명의 또 다른 실시예에 있어서, 상기 화재감지시스템은 상기 영상믹싱수단에서 합성된 이미지를 디지탈 방식의 합성 영상으로 변환하여 상기 제어수단에 인가하는 영상변환수단을 더 포함한다. In another embodiment of the present invention, the fire detection system further includes image conversion means for converting the image synthesized by the image mixing means into a digital synthetic image and applying the synthesized image to the control means.

본 발명의 또 다른 실시예에 있어서, 상기 화재감지시스템은 상기 영상감지부에서 송신되는 합성 영상을 저장하는 영상저장부; 상기 영상저장부에 저장된 합성 영상을 온라인에 게시 및 송신하는 영상서버; 및 상기 영상서버에 등록되어 상기 합성 영상을 수신받는 휴대용 단말기를 더 포함한다. In another embodiment of the present invention, the fire detection system includes an image storage unit for storing a composite image transmitted from the image sensing unit; A video server for posting and transmitting the synthesized video stored in the video storage unit on-line; And a portable terminal registered with the image server and receiving the composite image.

본 발명의 또 다른 실시예에 있어서, 상기 휴대용 단말기는 상기 영상서버로부터 상기 제어수단에서 송신된 화재경보신호를 수신하여 출력하는 것을 특징으로 한다. In another embodiment of the present invention, the portable terminal receives and outputs a fire alarm signal transmitted from the control server from the video server.

삭제delete

본 발명의 또 다른 실시예에 있어서, 상기 화재감지시스템은 상기 영상감지부로부터 화재발생지역을 구분하는 위치신호가 포함된 화재경보신호를 수신하여 경보를 발령하고, 디스플레이에 위치와 함께 화재경보를 표시하는 관리자 단말기를 더 포함한다. In another embodiment of the present invention, the fire detection system receives a fire alarm signal including a position signal for identifying a fire occurrence area from the image sensing unit, issues an alarm, and displays a fire alarm And an administrator terminal for displaying the information.

본 발명에 따른 합성영상을 이용한 화재감지방법의 바람직한 실시예는 실영상 카메라와 열영상카메라에서 촬영된 실영상과 열영상에서 동일 프레임의 영상을 캡춰하여 이미지로 변환시켜 합성영상을 생성하여 영상서버에 전송하는 영상처리단계; 상기 영상처리단계에서 합성 영상에 포함된 각각의 객체를 분류하여 불꽃 및 연기를 인식하는 객체인식단계; 상기 객체인식단계에서 불꽃 및 연기가 감지되면 센서의 감지신호와 연동하여 화재발생 및 화재발생가능성을 판단하는 센서연동단계; 및 상기 센서연동단계에서 화재발생 및 잠열 발생중 어느 하나로 판단되면 화재발생 또는 잠열 경보를 발령 및 송신하는 통신단계를 포함하고, 상기 객체인식단계 이후 또는 센서연동단계에 이후에 합성 영상에서 연기나 불꽃의 객체가 인식되지 않아 화재가 발생 되지 않은 것으로 판단되면, 합성 영상에 포함된 객체의 온도가 설정온도 이상인지를 판단하는 설정온도 판단단계; 및 상기 설정온도 판단단계에서 상기 합성 영상에서 온도에 따라 서로 다른 색상으로 표현되는 객체의 온도가 설정온도보다 높거나 동일하다면 화재로 발전될 가능성이 있는 잠열 경보를 발령하는 잠열경보단계를 포함하는 것이 바람직하다. A preferred embodiment of a fire detection method using a composite image according to the present invention is a method for capturing an image of the same frame in a real image and a thermal image captured by a real image camera and a thermal image camera, To an image processing step; An object recognition step of classifying each object included in the composite image in the image processing step and recognizing flame and smoke; A sensor interlocking step of interlocking with a sensing signal of a sensor when flame and smoke are sensed in the object recognition step to determine a fire occurrence and a fire occurrence possibility; And a communication step of issuing and transmitting a fire occurrence or a latent heat alarm if it is determined that the occurrence of a fire or a latent heat is occurred in the sensor interlocking step, and after the object recognition step or the sensor interlocking step, Determining whether a temperature of the object included in the composite image is equal to or higher than a predetermined temperature when it is determined that the object of the composite image is not recognized because no fire has occurred; And a latent heat alarm step of issuing a latent heat alarm that is likely to develop into a fire if the temperature of the object represented by different colors according to temperature in the composite image is higher than or equal to the set temperature in the determination of the set temperature desirable.

본 발명의 다른 실시예에 있어서, 상기 영상처리단계는 상기 실영상 카메라에서 촬영된 실영상과 열영상카메라에서 촬영된 열영상에서 동일 프레임의 영상을 캡춰하여 이미지로 변환시키는 영상캡춰단계; 상기 영상캡춰단계에서 캡춰된 이미지를 혼합하여 두 개의 이미지를 하나의 이미지로 합성하는 영상믹싱단계; 상기 영상믹싱단계에서 합성된 이미지를 디지탈 영상신호로 변환시키는 영상변환단계; 상기 영상변환단계에서 디지탈 영상신호로 변환된 합성 영상을 케이블 및 네트워크를 통하여 전송하는 전송단계를 포함한다. In another embodiment of the present invention, the image processing step includes an image capturing step of capturing an image of the same frame in a real image captured by the real image camera and a thermal image captured by the thermal image camera, and converting the captured image into an image; An image mixing step of mixing the images captured in the image capturing step and synthesizing the two images into one image; An image converting step of converting the synthesized image into a digital image signal in the image mixing step; And a transmission step of transmitting the synthesized image converted into the digital image signal through the cable and the network in the image conversion step.

본 발명의 또 다른 실시예에 있어서, 상기 객체 인식단계는 상기 영상처리단계에서 합성된 합성 영상에서 이미지 필터를 이용하여 이전 이미지와 현재 이미지를 비교하여 현재 이미지에서 추가 또는 변경된 객체를 판단하는 전처리 단계; 상기 전처리 단계 이후에서 현재이미지에서 불꽃과 연기의 특성을 적용하여 불꽃와 연기의 객체를 분리 및 인식하는 객체분리단계; 상기 객체 분리단계에서 분리된 객체가 불꽃인지를 판단하는 불꽃판단단계; 및 상기 객체분리단계에서 분리된 객체가 연기인지를 판다하는 연기판단단계를 포함한다. In another embodiment of the present invention, the object recognition step may include a preprocessing step of comparing a previous image and a current image using an image filter in a synthesized image synthesized in the image processing step to determine an object added or changed in the current image ; An object separating step of separating and recognizing objects of flame and smoke by applying characteristics of flame and smoke in the current image after the preprocessing step; A flame determination step of determining whether the object separated in the object separation step is a flame; And a smoke judgment step of detecting whether the object separated in the object separation step is smoke.

삭제delete

본 발명은 상술한 바와 같이 실영상 카메라에서 촬영된 실영상과 열영상 카메라를 통하여 촬영된 열영상을 혼합하여 객체의 잠열을 확인할 수 있기에 화재의 발생 및 화재의 발생 가능성을 감지 및 경보할 수 있어 화재에 따른 인명 및 재산의 피해를 방지할 수 있는 효과가 있다. As described above, since latent heat of an object can be confirmed by mixing a real image captured by a real image camera and a thermal image captured through a thermal image camera, the present invention can detect and alert the occurrence of a fire and the possibility of a fire It is possible to prevent damage to human lives and property due to fire.

도 1은 본 발명에 따른 합성 영상을 이용한 화재감지시스템 및 방법의 개념을 설명하기 위한 개략도,
도 2는 본 발명에 따른 합성 영상을 이용한 화재감지시스템을 도시한 블럭도,
도 3은 본 발명에 따른 합성 영상을 이용한 화재감지방법을 도시한 순서도,
도 4는 본 발명에 따른 합성 영상을 이용한 화재감지방법에서 영상처리 단계를 도시한 순서도,
도 5는 본 발명에 따른 합성 영상을 이용한 화재감지방법에서 객체인식 단계 내지 통신단계를 도시한 순서도,
도 6은 본 발명에 따른 합성 영상을 이용한 화재감지방법에서 합성 영상의 일예를 도시한 사진이다.
1 is a schematic view for explaining a concept of a fire detection system and method using a composite image according to the present invention,
FIG. 2 is a block diagram showing a fire detection system using a composite image according to the present invention. FIG.
FIG. 3 is a flowchart illustrating a fire detection method using a composite image according to the present invention.
4 is a flowchart showing an image processing step in a fire detection method using a composite image according to the present invention.
FIG. 5 is a flowchart showing an object recognition step and a communication step in a fire detection method using a composite image according to the present invention.
6 is a photograph showing an example of a synthetic image in a fire detection method using a composite image according to the present invention.

이하에서는 본 발명에 따른 합성 영상을 이용한 화재감지시스템 및 방법의 바람직한 실시예를 첨부된 도면을 참조하여 상세히 설명한다. Hereinafter, preferred embodiments of a fire detection system and method using a composite image according to the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명에 따른 합성 영상을 이용한 화재감지시스템 및 방법의 개념을 설명하기 위한 개략도이다. 1 is a schematic view for explaining the concept of a fire detection system and method using a composite image according to the present invention.

도 1을 참조하면, 본 발명에 따른 합성 영상을 이용한 화재감지시스템 및 방법은 센서부(13)의 불꽃 및 연기감지와 촬영부(11)의 영상감지를 통하여 화재 발생 유무 및 화재 발생 가능성을 감지하는 영상감지부(12)를 포함하는 영상처리부재를 구비한다. 상기 영상처리부재는 화재발생유무 및 화재발생 가능성을 감지하여 관리자단말기(50) 및/또는 영상서버(30)로서 전송하여 웹 또는 휴대용 단말기(40)등에서 확인가능한 것을 특징으로 한다. Referring to FIG. 1, a fire detection system and method using a composite image according to an embodiment of the present invention detects a fire occurrence and a fire occurrence probability through flame and smoke detection of a sensor unit 13 and image sensing of a photographing unit 11 And an image processing unit including an image sensing unit 12. The image processing unit detects the presence or absence of a fire and the possibility of a fire and transmits the detected fire to the administrator terminal 50 and / or the image server 30 to be confirmed by the web or the portable terminal 40 or the like.

특히 본 발명은 상기 촬영부(10)에서 촬영된 실제 영상과 온도에 따른 색상의 변화를 촬영하는 열영상을 혼합하여 온도변화와 불꽃 및 연기발생유무를 감지하고, 상기 센서부(13)의 감지신호와 연동하여 화재발생 유무를 정확하게 감지할 수 있다. Particularly, in the present invention, the actual image photographed by the photographing unit 10 is mixed with a thermal image for photographing a change in color according to the temperature to detect the temperature change, the presence of flame and smoke, It is possible to accurately detect whether a fire has occurred or not in conjunction with a signal.

아울러 본 발명은 실제영상과 열영상의 혼합된 영상을 통하여 촬영된 영상에 포함된 객체의 온도변화를 확인할 수 있어 잠열의 유무를 인지할 수 있다. 따라서 본 발명은 상기 잠열에 의한 화재 발생 가능성을 판단하기 위하여 상기 잠열에 화재가 발생 될 수 있는 온도(이하 설정온도라 칭함)를 설정하여 화재 발생의 가능성을 판단한다. In addition, according to the present invention, a temperature change of an object included in an image captured through a mixed image of an actual image and a thermal image can be confirmed, and the presence or absence of latent heat can be recognized. Accordingly, the present invention determines the possibility of a fire by setting a temperature at which a fire may occur in the latent heat (hereinafter referred to as a set temperature) in order to determine the possibility of fire caused by the latent heat.

여기서 잠열은 객체에서 불꽃이나 연기가 발생 되지 않았지만 정상적인 주변온도보다 고온으로서 화재로 발전될 수 있는 온도를 가진 것을 의미한다. 상기 객체는 촬영된 영상에 포함된 모든 물건(화재가 발생 될 수 있는 물건)에 해당된다. Here, latent heat means that the object is not flame or smoke, but has a temperature higher than the normal ambient temperature and capable of being developed into a fire. The object corresponds to all objects included in the photographed image (a thing in which a fire can occur).

이를 위하여 본 발명은 아날로그 영상과 열영상을 촬영하는 촬영부(11)와 불꽃과 연기를 감지하는 센서부(13)에서 감지된 영상과 감지신호를 비교하여 화재 유무 및 화재가능성을 판단하는 영상감지부(12)를 구비하는 영상처리부재(10)와, 상기 영상처리부재(10)로부터 전송되는 영상 및 화재감지와 잠열경보를 수신하여 경보하는 관리자단말기(50)와, 상기 관리자단말기(50) 및/또는 상기 영상처리부재로부터 케이블 및 네트워크를 통하여 전송되는 영상을 저장하는 영상저장부(20, 20')와, 상기 영상저장부(20, 20')에 저장된 영상을 온라인상에 제공하는 영상서버(30)와,상기 영상서버(30)로부터 화재발생 또는 잠열발생신호를 수신하는 휴대용 단말기(40)를 포함한다. In order to achieve the above object, the present invention provides an image sensing apparatus for comparing an image sensed by a photographing unit 11 for photographing an analog image and a thermal image, a sensor unit 13 for sensing a flame and smoke, An administrator terminal 50 for receiving and alarming images and fire detection and latent heat alarms transmitted from the image processing member 10; (20, 20 ') for storing an image transmitted from the image processing member via a cable and a network, and an image storing unit (20, 20') for storing the image stored in the image storing unit A server 30 and a portable terminal 40 for receiving a fire or latent heat generation signal from the video server 30.

여기서 상기 센서부(13)와 촬영부(11) 및 영상감지부(12)를 포함하는 영상처리부재는 건물내에서 하나 이상으로 구획되는 각 구역별로 설치되어 유무선 통신으로 상기 관리자단말기(50) 및/또는 영상저장부(20. 20')에 감지신호 및 촬영영상을 송신한다. Here, the image processing member including the sensor unit 13, the photographing unit 11, and the image sensing unit 12 may be installed in each of the areas divided into one or more sections in the building, And / or transmits the sensing signal and the sensed image to the image storage unit 20.20 '.

상기 영상감지부(12)는 제어수단(121, 도 2참조) 내지 통신수단(125, 도 2참조)가 임베디드화되어 상기 촬영부(11)에서 송신되는 실제영상과 열영상을 혼합하여 연기나 불꽃과 같은 객체를 분리하여 인지하여 실제 연기와 불꽃을 감지하는 센서부(13)의 감지신호를 수신하여 화재발생유무를 판단하여 경보한다. The image sensing unit 12 may be configured to mix the actual image and the thermal image transmitted from the photographing unit 11 by mixing the control means 121 (see FIG. 2) and the communication means 125 (see FIG. 2) And recognizes an object such as a flame and recognizes the actual smoke and flame to receive a detection signal of the sensor unit 13 to determine whether a fire has occurred or not.

여기서 상기 영상감지부(12)는 혼합된 영상을 관리자단말기(50) 및/또는 케이블과 네트워크망을 통하여 영상저장부(20, 20')와 영상서버(30)로 전송하여 웹 또는 휴대용 단말기(40)와 같은 유무선 통신 단말기를 통하여 상기 합성 영상을 시청할 수 있도록 전송한다. The image sensing unit 12 transmits the mixed image to the image storing unit 20 or 20 'and the image server 30 through the administrator terminal 50 and / or the cable and the network, 40 so that the composite image can be viewed through the wired / wireless communication terminal.

상기 관리자단말기(50)는 각 구역별로 설치되는 상기 촬영부와 센서부 및 영상감지부(12)에 고유코드를 부여하여 다 수개의 구역별로 설치되는 영상감지부(12)중 어느 하나로부터 화재발생신호 또는 잠열경보가 수신되면, 해당 영상감지부(12)의 고유코드를 확인하여 설치된 구역을 확인하여 위치정보와 함께 화재발생 및 잠열을 경보한다. The manager terminal 50 may provide a unique code to the photographing unit, the sensor unit, and the image sensing unit 12, which are installed for each zone, to generate a fire from any one of the image sensing units 12 When a signal or a latent heat alarm is received, an inherent code of the image sensing unit 12 is checked to confirm the installed area, and alerting the fire occurrence and the latent heat together with the position information.

상기 영상서버(30)는 상기 영상저장부(20, 20')와 네트워크 영상저장부(20, 20')에 저장된 합성 영상을 유무선 통신망을 통하여 웹 또는 휴대용 단말기(40)에 제공한다. 특히 상기 영상서버(30)는 등록된 휴대용 단말기(40)(스마트폰, 전화기, 데스크탑, 노트북, PDA, PDP, 넷북)에 상기 합성 영상과, 화재발생 및 화재 발생 가능신호를 송신하는 것이 바람직하다. The image server 30 provides the composite image stored in the image storage units 20 and 20 'and the network image storage units 20 and 20' to the web or the portable terminal 40 through a wire / wireless communication network. Particularly, the image server 30 preferably transmits the composite image and a fire occurrence and fire possibility signal to the registered portable terminal 40 (smart phone, telephone, desktop, notebook, PDA, PDP, netbook) .

이하에서는 보다 구체적인 구성을 첨부된 도면을 참조하여 보다 상세히 설명한다. Hereinafter, a more specific configuration will be described in detail with reference to the accompanying drawings.

도 2는 본 발명에 따른 합성 영상을 이용한 화재감지시스템에서 영상처리부재를 도시한 블럭도이다. 2 is a block diagram illustrating an image processing member in a fire detection system using a composite image according to the present invention.

도 2를 참조하면, 본 발명에 따른 합성 영상을 이용한 화재감지시스템에서 영상처리부재(10)는 불꽃을 감지하는 불꽃센서(131)와 연기를 감지하는 연기센서(132)를 구비하는 센서부(13)와, 실제 영상을 촬영하는 실영상 카메라(111)와 열영상을 촬영하는 열영상카메라(112)를 구비한 촬영부(11)와, 상기 실영상 카메라(111)와 열영상카메라(112)에서 촬영된 영상을 합성하여 화재발생 및 잠열을 경보하는 영상감지부(12)를 포함한다. 2, in the fire detection system using the composite image according to the present invention, the image processing member 10 includes a sensor unit 131 including a flame sensor 131 for detecting flame and a smoke sensor 132 for detecting smoke, A photographing unit 11 having a real image camera 111 for photographing a real image and a thermal image camera 112 for photographing a thermal image; And an image sensing unit 12 for alarming occurrence of fire and latent heat.

상기 영상감지부(12)는 실영상과 열영상을 합성하는 영상믹싱수단(122)과, 혼합된 영상을 디지탈신호로서 변환시키는 영상변환수단(123)과, 상기 합성 영상에 포함된 객체를 분리하여 불꽃 및/또는 연기를 인식하는 객체인식수단(124)과, 합성 영상 및 경보신호를 관리자단말기(50) 및/또는 케이블과 네트워크를 통하여 송신하는 통신수단(125)과, 상술한 불꽃센서(131)와 연기센서(132)의 감지신호를 수신하고, 상기 객체인식수단(124)의 불꽃 및/또는 연기 객체의 인식신호를 수신하여 화재발생 및 화재발생가능성을 판단하는 제어수단(121)을 포함한다. The image sensing unit 12 includes an image mixing means 122 for synthesizing a real image and a column image, an image conversion means 123 for converting the mixed image into a digital signal, A communication means 125 for transmitting the composite image and the alarm signal through the manager terminal 50 and / or the cable and the network, the above-described flame sensor (not shown) 131) and a smoke sensor (132), receives a recognition signal of a flame and / or a smoke object of the object recognizing means (124), and judges the possibility of fire occurrence and fire occurrence .

상기 불꽃센서(131)는 상기 제어수단(121)과 원거리에 위치되어 주변의 불꽃을 감지한다. 상기 불꽃센서(131)는 주변온도에서 특정위치에서 고온을 감지하여 상기 제어수단(121)에 감지신호를 인가한다. The flame sensor 131 is located remotely from the control means 121 and detects a surrounding flame. The flame sensor 131 senses a high temperature at a specific position at an ambient temperature and applies a sensing signal to the control means 121.

상기 연기센서(132)는 상기 제어수단(121)과 원거리에 위치되어 주변의 연기를 감지한다. 상기 연기센서(132)는, 예를 들면, 광센서로서 발광소자와 수광소자를 구비하여 연기에 의하여 수광되는 광량이 줄어들면 연기발생신호를 상기 제어수단(121)에 인가한다. The smoke sensor 132 is located remotely from the control means 121 and senses the surrounding smoke. The smoke sensor 132 includes a light emitting element and a light receiving element as an optical sensor, for example, and applies a smoke generation signal to the control means 121 when the amount of light received by the smoke is reduced.

상기 실영상 카메라(111)는, 예를 들면, CCTV와 같이 주변의 영상을 실시간 촬영하여 상기 제어수단(121)에 인가한다. The real image camera 111 photographs a surrounding image in real time, for example, CCTV, and applies the captured image to the control means 121 in real time.

상기 열영상카메라(112)는 촬영되는 영역 내에서 온도변화를 감지하여 촬영하여 상기 제어수단(121)에 열영상을 송신한다. 여기서 상기 실영상 카메라(111)와 열영상카메라(112)는 동일 구역내에서 동일 방향을 지향하여 촬영함이 바람직하다. The thermal imaging camera 112 senses a temperature change in the area to be photographed and photographs the thermal image to transmit the thermal image to the control unit 121. [ Here, it is preferable that the real image camera 111 and the thermal image camera 112 photograph in the same direction in the same direction.

상기 열영상은 기준 온도값을 설정하여 해당 구역내의 온도정보를 수집하여 각 온도별로 서로 다른 색상을 갖도록 설정함에 따라서 영상 내에 포함되는 각 객체별로 온도에 따라서 서로 다른 농도 및 색상으로 표현된다. The thermal image sets a reference temperature value, collects temperature information within the corresponding area, and sets different colors for the respective temperatures. Accordingly, each of the objects included in the image is expressed with different densities and colors depending on the temperature.

상기 영상믹싱수단(122)은 상기 실영상 카메라(111)와 열영상카메라(112)에서 각각 촬영된 실제영상과 열영상을 합성하여 하나의 영상으로 합성한다. 이때 상기 영상믹싱수단(122)은 상기 실제영상과 열영상중 어느 하나의 프레임을 캡춰한 이미지를 합성한다. The image mixing means 122 combines the actual image and the thermal image photographed by the real image camera 111 and the thermal image camera 112, respectively, and combines them into one image. At this time, the image mixing unit 122 combines the captured image of one of the real image and the column image.

상기 영상변환수단(123)은 상기 영상믹싱수단(122)에서 합성된 이미지를 디지탈 방식의 영상으로서 변환시킨다. 예를 들면, 상기 영상변환수단(123)은 다 수개의 합성 이미지를 연속시켜서 하나의 영상프레임으로 통합함과 동시에 MPEG, AVI와 같은 디지탈 형식의 영상파일로 변환한다. The image converting means 123 converts the image synthesized by the image mixing means 122 into a digital image. For example, the image converting unit 123 integrates a plurality of composite images into one image frame, and simultaneously converts the image into a digital image file such as MPEG or AVI.

상기 객체인식수단(124)은 상기 합성 영상중에서 불꽃 및/또는 연기를 분류 및 인식하여 상기 제어수단(121)에 인가한다. The object recognizing means 124 classifies and recognizes flames and / or smoke among the synthesized images and applies them to the control means 121.

상기 통신수단(125)은 상기 영상저장부(20, 20') 및/또는 관리자단말기(50)에 상기 합성 영상을 송신한다. The communication unit 125 transmits the composite image to the image storage unit 20 or 20 'and / or the administrator terminal 50.

상기 제어수단(121)은 상기 열영상카메라(112)와 실영상 카메라(111)에서 촬영된 실제 영상과 열영상을 상기 영상믹싱수단(122)에 인가하여 영상을 혼합하도록 제어하고, 상기 영상믹싱수단(122)에서 혼합된 영상을 상기 영상변환수단(123)과 객체인식수단(124)에 순차적으로 인가하여 제어한다. 아울러 상기 제어수단(121)은 상기 통신수단(125)을 제어하여 상기 영상변환수단(123)에서 변환된 디지탈 형식의 합성 영상을 상기 영상저장부(20, 20') 및/또는 관리자단말기(50)에 인가한다. 여기서 상기 영상서버(30)는 상기 영상저장부(20, 20')에 저장된 합성 영상을 유무선 통신망을 통하여 웹상에 게시하거나 또는 휴대용 단말기(40)에 송신한다. The control means 121 controls the image mixing means 122 to mix the actual images and the thermal images taken by the thermal imaging camera 112 and the real imaging camera 111 to mix the images, (122) sequentially applies the mixed image to the image transforming means (123) and the object recognizing means (124). Further, the control means 121 controls the communication means 125 to transmit the composite image of the digital format converted by the image conversion means 123 to the image storage unit 20, 20 'and / or the administrator terminal 50 . Here, the video server 30 displays the composite image stored in the image storage units 20 and 20 'on the web or transmits the composite image to the portable terminal 40 via the wired / wireless communication network.

아울러 상기 제어수단(121)은 합성 영상에 포함된 객체중에서 불꽃이나 연기로 분류되는 객체가 감지되었다면, 상기 불꽃센서(131)와 연기센서(132)의 감지신호를 확인하여 불꽃과 연기가 감지되었다면 상기 관리자단말기(50)에 화재발생경보를 발령한다. If an object classified into flame or smoke is detected among the objects included in the composite image, the control unit 121 checks the detection signals of the flame sensor 131 and the smoke sensor 132, and if flame and smoke are detected And issues a fire alarm to the administrator terminal (50).

또한 상기 제어수단(121)은 상기 합성 영상에서 불꽃과 연기의 객체가 인식되지 않았고, 상기 불꽃센서(131)와 연기센서(132)에서 불꽃과 연기의 감지신호가 없었지만, 상기 합성 영상에서 주변 객체 및 주변 온도보다 높은 온도로서 발열되는 객체 유무를 확인한다. 그리고 상기 제어수단(121)은 상기 합성 영상에 포함된 객체중에서 주변 및 주변객체에 비하여 높은 온도로 발열되는 객체가 감지되면 설정온도와 비교하여 잠열여부를 판단하여 화재로 번질 수 있는 잠열여부를 판단하여 화재 발생 가능 경보를 발령한다. In addition, the control means 121 does not recognize objects of flame and smoke in the synthesized image, and there is no flame and smoke detection signals in the flame sensor 131 and the smoke sensor 132, And a temperature higher than the ambient temperature. When an object that generates heat at a higher temperature than the surrounding objects and surrounding objects is detected among the objects included in the composite image, the control unit 121 determines whether or not the object is latched by comparing with the set temperature, And a fire alarm is issued.

상기 관리자단말기(50)는 상기 영상감지부(12)의 화재경보신호 및 잠열경보신호를 수신하여 경보를 발령하도록 제어하는 단말기제어부(51)와, 상기 단말기제어부(51)의 제어에 의하여 경보를 발령하는 경보부(52)와, 상기 단말기제어부(51)의 제어에 의하여 화재경보 및 화재발생위치를 표시하는 디스플레이(53)와, 상기 영상서버(30) 및/또는 영상저장부(20, 20')와 통신하는 통신부(54)를 포함한다. The administrator terminal 50 includes a terminal control unit 51 for receiving a fire alarm signal and a latent heat alarm signal of the image sensing unit 12 and issuing an alarm and an alarm control unit 51, A display 53 for displaying a fire alarm and a fire occurrence position under the control of the terminal control unit 51 and a display 53 for displaying the fire alarm and the fire occurrence position under the control of the terminal control unit 51. The image server 30 and / (Not shown).

상기 단말기제어부(51)는 상기 영상감지부(12)로부터 고유코드가 포함된 화재경보 및 잠열경보가 수신되면, 각 영상감지부(12)에 부여된 고유코드를 확인하여 해당 영상감지부(12)가 설치된 구역을 확인하여 상기 디스플레이(53)에 화재발생 및 잠열경보가 발생된 지역을 표시하도록 제어한다. When the fire alarm and the latent heat alarm including the inherent code are received from the image sensing unit 12, the terminal control unit 51 confirms the unique code assigned to each image sensing unit 12, And displays the area where the fire occurrence and the latent heat alarm have occurred.

아울러 상기 단말기제어부(51)는 상기 경보수단을 제어하여 시각적 및/또는 청각적 경보를 발령한다. In addition, the terminal control unit 51 controls the alarm unit to issue a visual and / or audible alarm.

상기 경보부(52)는 경보음을 발생시키는 부저 또는 발광신호를 출력하는 발광표시수단을 포함한다. The alarm unit 52 includes a buzzer for generating an alarm sound or a light emission display means for outputting a light emission signal.

여기서 상기 관리자단말기(50)는 상기 영상감지부(12)의 화재경보 및 잠열경보를 수신하여 상기 통신부(54)를 제어하여 상기 영상서버(30)로 송신함도 가능하다. 더욱 바람직하게로는 상기 관리자단말기(50)는 상기 영상감지부(12)의 합성 영상을 수신하여 상기 통신부(54)를 제어하여 영상저장부(20, 20')로 중계함도 가능하다. The manager terminal 50 may receive the fire alarm and the latent heat alarm of the image sensing unit 12 and may control the communication unit 54 to transmit the fire alarm and the latent heat alarm to the image server 30. More preferably, the manager terminal 50 may receive the composite image of the image sensing unit 12 and control the communication unit 54 to relay the composite image to the image storage unit 20 or 20 '.

본 발명은 상기와 같이 설계자의 의도에 따라서 다양하게 변형될 수 있다. 즉, 본 발명은 상술한 설명에서 상기 영상감지부(12)의 합성영상이 직접 영상저장부로 송신되는 것으로 설명되었으나, 다른 실시예로서 상기 관리자단말기(50)에서 이를 일괄적으로 수신하여 상기 영상저장부(20, 20')로 중계함도 가능하다. The present invention can be variously modified according to the designer's intention as described above. That is, in the above description, the composite image of the image sensing unit 12 is directly transmitted to the image storage unit. However, in another embodiment, the administrator terminal 50 collectively receives the combined image, It may be relayed to the units 20 and 20 '.

상기 단말기제어부(51)는 디스플레이(53)를 제어하여 화재 또는 잠열이 발생된 구역의 위치를 표시하고, 상기 통신부(54)를 제어하여 화재발생신호를 영상서버(30)에 송신한다. The terminal control unit 51 controls the display 53 to display the location of a fire or a region where latent heat is generated and controls the communication unit 54 to transmit a fire occurrence signal to the video server 30. [

상기 영상서버(30)는 상기 영상감지부(12) 및/또는 관리자단말기(50)의 화재발생신호를 등록된 휴대용 단말기(40)에 송신한다. The image server 30 transmits a fire occurrence signal of the image sensing unit 12 and / or the administrator terminal 50 to the registered portable terminal 40.

본 발명은 상기와 같은 구성을 포함하며, 이하에서는 상기와 같은 구성을 통하여 달성되는 작용을 첨부된 도 3 내지 도 6을 참조하여 상세히 설명한다. The present invention includes the above-described configuration. Hereinafter, operations achieved through the above-described configuration will be described in detail with reference to FIGS. 3 to 6. FIG.

도 3은 본 발명에 따른 합성 영상을 이용한 화재감지방법을 도시한 순서도이다. 3 is a flowchart illustrating a fire detection method using a composite image according to the present invention.

도 3을 참조하면, 본 발명에 따른 합성 영상을 이용한 화재감지방법은 실영상 카메라(111)와 열영상카메라(112)에서 촬영된 영상을 혼합 및 변환하여 영상서버(30)에 전송하는 영상처리단계(S10)와, 상기 영상처리단계(S10)에서 혼합된 영상에 포함된 각각의 객체를 분류하여 불꽃 및 연기를 인식하는 객체인식단계(S20)와, 상기 객체인식단계(S20)에서 불꽃 및 연기가 감지되면 센서의 감지신호와 연동하여 화재발생 및 화재발생가능성을 판단하는 센서연동단계(S30)와, 상기 센서연동단계(S30)에서 화재발생 및 화재발생가능성중 어느 하나로 판단되면 화재발생 또는 화재발생가능 경보를 송신하는 경보 및 통신단계(S40)를 포함한다. Referring to FIG. 3, a fire detection method using a composite image according to an exemplary embodiment of the present invention includes an image processing for mixing and converting images captured by a real image camera 111 and a thermal image camera 112, (S20) of recognizing sparks and smoke by classifying each object included in the mixed image in the image processing step (S10); and recognizing the flame and smoke in the object recognition step (S20) A sensor interlocking step (S30) for judging a fire occurrence and a possibility of a fire in conjunction with a sensing signal of the sensor when smoke is detected; and a fire occurrence or fire occurrence if it is judged that the fire occurrence and the possibility of fire occur in the sensor interlocking step (S30) And an alarm and communication step (S40) for transmitting a fire incapable alarm.

상기 영상처리단계(S10)는 실영상 카메라(111)와 열영상카메라(112)에서 각각 촬영된 실영상과 열영상을 혼합하고, 혼합된 영상을 변환시켜 케이블 및 네트워크망을 통하여 연결되는 영상저장부(20, 20')에 저장하도록 전송하는 단계이다. 여기서 상기 영상저장부(20, 20')에 저장된 합성 영상은 상기 영상서버(30)에 등록된 휴대용 단말기(40)에 실시간 또는 일정시간별로 송신된다. In the image processing step S10, the real image and the thermal image captured by the real image camera 111 and the thermal image camera 112 are mixed, the mixed image is converted, To be stored in the units 20 and 20 '. The composite image stored in the image storage unit 20 or 20 'is transmitted to the portable terminal 40 registered in the image server 30 in real time or at predetermined time intervals.

상기 객체인식단계(S20)는 상기 영상처리단계(S10)의 합성 영상에 포함된 모든 객체를 분석하여 불꽃과 연기를 인식하는 단계이다. 여기서 상기 영상처리부재(10)는 실시간으로 촬영된 합성 영상과 이전에 촬영된 합성 영상을 비교하여 이전 영상에 포함되지 않은 객체 또는 열영상에 촬영된 온도변화에 따른 색상이 이전영상과 다른 객체를 인식하여 불꽃 및/또는 연기인지를 확인한다. The object recognizing step S20 recognizes flame and smoke by analyzing all the objects included in the synthesized image of the image processing step S10. Here, the image processing member 10 compares a composite image captured in real time with a previously captured composite image to determine whether a color corresponding to a temperature change photographed on an object or a column image that is not included in the previous image is different from the previous image And recognizes whether it is flame and / or smoke.

여기서 상기 열영상카메라(112)는 촬영되는 영역 내에 위치되는 모든 객체의 온도를 감지하여 온도별로 서로 다른 색상을 갖도록 촬영된 영상을 출력한다. 따라서 이전영상에 비하여 발열 또는 냉각된 객체가 상기 합성 영상에 존재하면 이전과 다른 색상으로 촬영된다. 따라서 상기 영상처리부재(10)는 이전영상(또는 정상상태를 촬영한 기준영상)과 현재영상을 비교하여 불꽃이나 연기를 인식한다. The thermal imaging camera 112 senses the temperatures of all the objects located within the area to be photographed, and outputs images photographed so as to have different colors for respective temperatures. Therefore, if a heated or cooled object is present in the composite image as compared with the previous image, it is photographed in a different color from the previous one. Therefore, the image processing member 10 recognizes flame or smoke by comparing the previous image (or the reference image obtained by photographing the normal state) with the current image.

상기 센서연동단계(S30)는 상기 객체인식단계(S20)에서 불꽃이나 연기가 인식되었다면, 해당 영역내에 설치되는 불꽃센서(131)와 연기센서(132)의 감지신호와 연동하여 화재발생유무를 판단하는 단계이다.  If the flame or smoke is recognized in the object recognizing step S20, the sensor interlocking step S30 may determine whether a fire has occurred by interlocking with the detection signals of the flame sensor 131 and the smoke sensor 132 installed in the corresponding area .

상기 경보 및 통신단계(S40)는 상기 센서연동단계(S30)에서 화재가 발생된 것으로 확인되면 화재발생신호를 상기 영상서버(30)를 통하여 등록된 휴대용 단말기(40)에 송신하는 단계이다. The alarm and communication step S40 is a step of transmitting a fire occurrence signal to the portable terminal 40 registered through the image server 30 when it is determined that a fire has occurred in the sensor interlocking step S30.

상기와 같은 본 발명에 따른 합성 영상을 이용한 화재감지방법에서 상기 영상처리단계는 도 4, 상기 객체인식 내지 통신단계(S40)는 도 5를 참조하여 설명한다. In the fire detection method using the composite image according to the present invention, the image processing step will be described with reference to FIG. 4, and the object recognition and communication step S40 will be described with reference to FIG.

도 4는 본 발명에 따른 합성 영상을 이용한 화재감지방법에서 영상처리단계를 도시한 순서도이다. 4 is a flowchart illustrating an image processing step in a fire detection method using a composite image according to the present invention.

도 4를 참조하면, 상기 영상처리단계는 실영상과 열영상에서 동일 프레임을 캡춰하여 이미지로 변환시키는 영상캡춰단계(S11)와, 상기 영상캡춰단계(S11)에서 캡춰된 이미지를 혼합하여 두 개의 이미지를 하나의 이미지로 합성하는 영상믹싱단계(S12)와, 상기 영상믹싱단계(S12)에서 합성 다 수개의 이미지를 디지탈 영상신호로 변환시키는 영상변환단계(S13)와, 상기 영상변환단계(S13)에서 디지탈 영상신호로 변환된 합성 영상을 전송하는 전송단계(S14)를 포함한다. Referring to FIG. 4, the image processing step includes an image capturing step S11 for capturing the same frame in the real image and the thermal image and converting the captured image into an image, and mixing the images captured in the image capturing step S11 An image converting step S13 of converting a plurality of synthesized images into a digital image signal in the image mixing step S12; (S14) for transmitting the synthesized image converted into the digital image signal.

상기 영상캡춰단계(S11)는 상기 제어수단(121)에서 상기 실영상 카메라(111)의 실영상과 열영상카메라(112)의 열영상을 상기 영상믹싱수단(122)에 인가하여 두 개의 영상에서 동일 시간대에 촬영된 영상프레임을 캡춰하도록 제어하는 단계이다. 이는 도 6에 첨부된 사진을 통하여 설명한다. The image capturing step S11 is a step in which the control unit 121 applies the real image of the real image camera 111 and the thermal image of the thermal image camera 112 to the image mixing unit 122, And capturing an image frame photographed in the same time zone. This is illustrated in the photograph attached to Fig.

도 6은 본 발명에 따른 합성 영상을 이용한 화재감지방법에서 합성 영상의 일예를 도시한 사진이다.6 is a photograph showing an example of a synthetic image in a fire detection method using a composite image according to the present invention.

도 6을 참조하면, 도 6의 (a)는 실제 영상을 캡춰한 이미지이고, 도 6의 (b)는 열영상의 캡춰 이미지이다. 여기서 상기 영상믹싱수단(122)은 상기 제어수단(121)에 인가된 실영상과 열영상에서 상호 동일한 시간 및 위치에서 촬영된 실영상 및 열영상을 각각 캡춰하여 도 6의 (a)와 (b)와 같은 이미지로 변환시킨다. Referring to FIG. 6, FIG. 6 (a) is an image capturing an actual image, and FIG. 6 (b) is a capture image of a thermal image. The image mixing means 122 captures the real image and the thermal image captured at the same time and position in the real image and the thermal image applied to the control means 121, ).

도 6의 (a)는 실영상 카메라(111)에서 촬영한 이미지를 출력한 것이며, 도 6의 (b)는 열영상 카메라에서 촬영한 열영상 이미지를 출력한 것이다. 여기서 도 6의 (b)를 확인하여 보면, 영상에 포함된 각 객체는 온도별로 서로 다른 색상으로 표시된다. 6 (a) shows an image taken by the real image camera 111, and FIG. 6 (b) shows a thermal image taken by a thermal image camera. Referring to FIG. 6 (b), each object included in the image is displayed in different colors for different temperatures.

상기 영상믹싱단계(S12)는 상기 제어수단(121)에서 상기 영상믹싱수단(122)을 제어하여 캡춰된 두 개의 이미지를 하나로 합성하도록 제어하는 단계이다. 여기서 상기 영상믹싱수단(122)은 상기 제어수단(121)의 제어에 의하여 상기 실영상 캡춰 이미지와 열영상 캡춰 이미지를 합성하여 하나의 이미지로서 합성하여 상기 제어수단(121)에 인가한다. 이는 도 6의 (c)에 도시된 바와 같다. 도 6의 (c)를 참조하면, 상기 합성 이미지는 상기 실영상 이미지와 열영상 이미지가 합성되어 실영상 이미지의 배경에 주변 객체와 다른 온도를 갖는 객체의 열영상 이미지가 합성되었다. The image mixing step S12 is a step of controlling the image mixing means 122 by the control means 121 to combine the two captured images. Here, the image mixing means 122 combines the real image capture image and the thermal image capture image under the control of the control means 121, and synthesizes the synthesized image as a single image to apply to the control means 121. This is as shown in Fig. 6 (c). Referring to FIG. 6C, in the composite image, the real image image and the thermal image image are synthesized, and a thermal image of an object having a temperature different from that of the surrounding object is synthesized in the background of the real image image.

상기 영상변환단계(S13)는 상기 제어수단(121)에서 상기 영상변환수단(123)을 제어하여 상기 영상믹싱단계(S12)에서 혼합된 이미지를 디지탈 방식의 영상파일로 변환시키는 단계이다. 상기 영상변환수단(123)은 상기 제어수단(121)으로부터 인가되는 합성 이미지를 디지탈 방식의 영상신호로 변환시킨다. 즉, 상기 영상변환수단(123)은 아날로그 방식의 실영상과 열영상의 캡춰 이미지를 디지탈 방식의 영상파일로 변환시킨다. The image conversion step S13 is a step in which the control means 121 controls the image conversion means 123 to convert the mixed image into a digital image file in the image mixing step S12. The image conversion means 123 converts the composite image applied from the control means 121 into a digital image signal. That is, the image converting unit 123 converts the capture image of the real image and the thermal image of the analog system into a digital image file.

상기 영상전송단계(S14)는 상기 제어수단(121)에서 상기 영상변환수단(123)에 의해 디지탈 방식으로 변환된 합성 영상을 상기 통신수단(125)을 통하여 상기 관리자단말기(50) 및/또는 영상저장부(20, 20')로 전송하는 단계이다. The image transmission step S14 is a step in which the control unit 121 transmits the synthesized image converted by the image conversion unit 123 to the administrator terminal 50 and / To the storage units 20 and 20 '.

상기 제어수단(121)은 상기 영상변환수단(123)에서 디지탈 방식으로 변환된 합성 영상을 상기 통신수단(125)를 통하여 상기 관리자단말기(50)에 송신한다. 상기 관리자단말기(50)는 상기 영상감지부(12)로부터 수신된 합성영상을 상기 영상저장부(20, 20')에 송신한다. The control means 121 transmits the synthesized image converted from the digital image format by the image conversion means 123 to the manager terminal 50 via the communication means 125. [ The manager terminal 50 transmits the composite image received from the image sensing unit 12 to the image storage unit 20 or 20 '.

여기서 상기 영상서버(30)는 상기 영상저장부(20, 20')에 저장된 합성 영상을 등록된 휴대용 단말기(40)에 송신한다. 따라서 사용자는 상기 영상서버(30)에서 제공되는 합성 영상을 통하여 특정위치의 화재 발생여부를 실시간으로 확인할 수 있다. Here, the image server 30 transmits the composite image stored in the image storage unit 20 or 20 'to the registered portable terminal 40. Accordingly, the user can confirm in real time whether or not a fire occurs at a specific location through the composite image provided by the image server 30. [

본 발명은 상기와 같은 영상처리 단계 이후에 상기 객체인식단계(S20)와 센서연동단계(S30) 및 통신단계(S40)를 순차적으로 진행한다. 이하에서는 상기 객체 인식단계 내지 통신단계(S40)까지의 전체 과정을 도 5를 참조하여 설명한다. In the present invention, the object recognition step (S20), the sensor interlocking step (S30), and the communication step (S40) are sequentially performed after the above-described image processing step. Hereinafter, the entire process from the object recognition step to the communication step S40 will be described with reference to FIG.

도 5는 본 발명에 따른 본 발명에 따른 합성 영상을 이용한 화재감지방법에서 객체인식단계(S20) 내지 통신단계(S40)를 상세히 도시한 순서도이다. FIG. 5 is a flowchart illustrating details of an object recognizing step (S20) to a communication step (S40) in a fire detection method using a composite image according to the present invention.

도 5를 참조하면, 상기 객체 인식단계(S20)는 이미지 필터를 이용하여 이전 이미지와 현재 이미지에서 추가 또는 변경된 객체를 판단하는 전처리 단계(S21)와, 상기 전처리 단계(S21) 이후에서 현재 이미지에서 추가 또는 변경된 객체를 분리하여 불꽃과 연기의 특성을 적용하여 불꽃와 연기의 객체를 분리 및 인식하는 객체분리단계(S22)와, 상기 객체 분리단계(S22)에서 분리된 객체가 불꽃인지를 판단하는 불꽃판단단계(S23)와, 상기 객체분리단계(S22)에서 분리된 객체가 연기인지를 판단하는 연기판단단계(S24)를 포함한다. Referring to FIG. 5, the object recognition step S20 includes a pre-processing step S21 for determining an object added or changed in a previous image and a current image using an image filter, An object separating step (S22) of separating and adding the added or changed object and separating and recognizing objects of flame and smoke by applying the characteristics of flame and smoke, a flame judging step of judging whether or not the separated object in the object separating step (S22) A judgment step S23 and a smoke judgment step S24 for judging whether or not the object separated in the object separation step S22 is smoke.

또한 상기 센서 연동단계(S30)는 상기 불꽃판단단계(S23)와 연기 판단단계(S24)에서 불꽃과 연기중 어느 하나가 판단되면 불꽃센서(131)와 연기센서(132)의 감지 데이타를 확인하는 단계이다. In addition, the sensor interlocking step S30 checks the detection data of the flame sensor 131 and the smoke sensor 132 when one of flame and smoke is judged in the flame judgment step S23 and the smoke judgment step S24 .

상기 경보 및 통신단계(S40)는 상기 센서연동단계(S30)에서 센서의 감지신호를 확인하여 화재발생 여부를 판단하는 화재발생 판단단계(S41)와, 상기 화재발생 판단단계(S41)에서 화재가 발생된 것으로 판단되면 관리자단말기(50)에 화재경보신호를 송신하는 화재경보단계(S42)를 포함한다. The alarm and communication step S40 may include a fire occurrence determination step S41 for determining whether a fire has occurred by checking a sensing signal of the sensor in the sensor interlocking step S30, And a fire alarm step (S42) for sending a fire alarm signal to the administrator terminal (50) if it is determined that the fire alarm has occurred.

또한 상기 통신단계(S40)는 상기 센서연동단계(S30) 이후 또는 상기 객체인식단계(S20) 이후에 불꽃과 연기로 판단되지 않았다면, 상기 합성 영상에 포함된 객체의 온도가 설정온도 이상인지를 판단하는 설정온도 판단단계(S43)와, 상기 설정온도 판단단계(S43)에서 설정온도 이상으로 판단되면 잠열을 경보하는 잠열경보단계(S44)를 포함한다. In addition, the communication step S40 may determine whether the temperature of the object included in the composite image is equal to or higher than the set temperature, if it has not been determined as flame and smoke after the sensor interlocking step S30 or after the object recognition step S20 And a latent heat alarm step S44 for warning the latent heat when it is determined that the set temperature is equal to or higher than the set temperature in the set temperature determination step S43.

상기 전처리 단계(S21)는 상기 제어수단(121)의 제어에 의하여 상기 객체인식수단(124)에서 상기 영상믹싱수단(122)에 합성된 합성 이미지를 이전시간에 촬영 및 합성된 기준 이미지에 포함되어 있지 않은 객체를 비교하는 단계이다. 여기서 상기 객체인식수단(124)은 제어수단(121)의 제어에 의하여 상기 영상믹싱수단(122)에서 합성된 합성이미지를 이미지 필터를 통하여 이전 이미지(정상환경에서 촬영된 기준이미지)에 포함되어 있지 않은 객체 또는 색상을 확인한다. The preprocessing step S21 may include a step of determining whether the composite image synthesized by the object recognizing unit 124 in the image mixing unit 122 is included in the reference image captured and synthesized at the previous time by the control unit 121 Is a step of comparing objects that do not exist. Here, the object recognizing means 124 recognizes that the synthesized image synthesized by the image mixing means 122 is included in the previous image (reference image taken in the normal environment) through the image filter under the control of the control means 121 Check for objects or colors.

상기 객체분리단계(S22)는 상기 제어수단(121)의 제어에 의하여 상기 객체인식수단(124)에서 합성이미지에 포함된 불꽃과 연기 객체를 분리하는 단계이다. 상기 제어수단(121)은 상기 전처리 단계(S21)에서 상기 합성이미지에 이전 이미지와 다른 객체가 포함되어 있다면, 상기 객체인식수단(124)을 제어하여 이전 이미지에 포함되어 있지 않은 객체를 분리하여 불꽃과 연기의 특성에 일치되는 객체인지를 판단한다. The object separating step S22 is a step of separating the flame and the smoke object included in the composite image by the object recognizing means 124 under the control of the control means 121. [ If the composite image includes an object different from the previous image in the preprocessing step S21, the control means 121 controls the object recognition means 124 to separate objects not included in the previous image, And whether the object matches the characteristic of the smoke.

상기 불꽃판단단계(S23)는 상기 제어수단(121)에서 상기 합성이미지로부터 분리된 객체 중에서 불꽃으로 설정된 객체가 포함되어 있는지를 판단한다.In the flame determination step S23, the control unit 121 determines whether an object set as a flame is included among the objects separated from the composite image.

상기 연기판단단계(S24)는 상기 제어수단(121)에서 상기 합성이미지에서 분리된 객체 중에서 연기로 설정되는 객체가 포함되어 있는지를 판단한다. In the smoke determination step S24, the control unit 121 determines whether an object set as smoke is included among the objects separated from the composite image.

여기서 상기 연기와 불꽃에 대한 객체의 특성은 자체 메모리에 저장되며, 상기 제어수단(121)은 저장된 연기특성과 불꽃특성을 상기 합성이미지에서 분리된 객체의 특성을 비교하여 연기 또는 불꽃인지를 판단한다. Here, the characteristics of the object for the smoke and flame are stored in its own memory, and the control means 121 compares the characteristics of the object separated from the composite image with the stored smoke characteristic and flame characteristic to determine whether it is smoke or flame .

상기 연기 및 불꽃의 특성은 열영상에서 객체별 특성으로 분류되어 다른 객체와 구분될 수 있는 특성데이타가 상기 제어수단(121)의 자체 메모리에 저장된다. 따라서 상기 제어수단(121)은 열영상에서의 불꽃과 연기에 대한 저장된 특성 데이타와 상기 객체인식수단(124)에서 분리된 객체와 비교하여 불꽃 및/또는 연기를 인식할 수 있다. The characteristics of the smoke and flame are classified into the characteristics of the object in the thermal image, and the characteristic data that can be distinguished from other objects are stored in the memory of the control means 121. Therefore, the control means 121 can recognize the flame and / or smoke by comparing the stored characteristic data on flame and smoke in the thermal image and the object separated by the object recognition means 124. [

그리고 상기 제어수단(121)은 상기 불꽃판단단계(S23)와 연기판단단계(S24)에서 불꽃 및/또는 연기가 감지되면, 상기 센서연동단계(S30)에서 불꽃센서(131)와 연기센서(132)의 감지신호를 통하여 상기 합성이미지를 통하여 인식된 불꽃과 연기를 확인하는 과정을 진행한다. 또는 상기 불꽃 판단단계(S23)와 연기판단단계(S24)에서 불꽃과 연기가 감지되지 않으면, 분리된 객체에서 온도와 설정온도를 비교하는 설정온도단계(S43)를 진행한다. When the flame and / or smoke are detected in the flame determination step (S23) and the smoke determination step (S24), the control means (121) controls the flame sensor (131) and the smoke sensor The process of confirming the recognized flame and smoke through the composite image is performed. Otherwise, if no flame and smoke are detected in the flame determination step S23 and the smoke determination step S24, a set temperature step S43 for comparing the temperature and the set temperature in the separated object is performed.

상기 센서연동단계(S30)는 상기 제어수단(121)가 상기 불꽃센서(131)와 연기센서(132)의 감지신호를 수신하여 불꽃이나 연기의 발생여부를 확인하는 단계이다. 상기 불꽃센서(131)는 실내의 불꽃 발생 여부를 감지하여 상기 제어수단(121)에 인가하고, 상기 연기센서(132)는 실내에서 연기의 발생여부를 감지하여 상기 제어수단(121)에 인가한다. 따라서 상기 제어수단(121)은 상기 불꽃센서(131)와 연기센서(132)의 감지신호를 수신하여 불꽃과 연기의 발생여부를 판단하여 상기 경보 및 통신단계(S40)를 진행한다. The sensor interlocking step S30 is a step in which the control means 121 receives the detection signals of the flame sensor 131 and the smoke sensor 132 and confirms whether flame or smoke is generated. The flame sensor 131 senses whether a flame is generated in the room and applies the flame sensor 131 to the control unit 121. The smoke sensor 132 senses whether smoke is generated in the room and applies the sensed result to the control unit 121 . Accordingly, the control unit 121 receives the detection signal of the flame sensor 131 and the smoke sensor 132, determines whether the flame and smoke are generated, and proceeds to the alarm and communication step S40.

상기 화재발생판단단계(S41)는 상기 제어수단(121)에서 상기 불꽃과 연기 인식판단단계(S23, S24)에서 불꽃 및/또는 연기가 발생된 것으로 판단되었고, 상기 센서연동단계(S30)에서 역시 동일한 판단결과 나온다면 화재가 발생된 것으로 판단하는 단계이다. In the fire occurrence determination step S41, it is determined that the flame and / or smoke are generated in the flame and smoke recognition determination steps S23 and S24 by the control means 121. In the sensor interlocking step S30, If the same judgment result is obtained, it is judged that a fire has occurred.

상기 화재경보단계(S42)는 상기 화재발생판단단계(S41)에서 화재가 발생된 것으로 판단되면, 상기 관리자단말기(50)에 고유코드가 포함된 경보신호를 송신하는 단계이다. 여기서 상기 관리자단말기(50)는 상기 경보부(52)를 제어하여 부저를 발령하고, 상기 화재경보신호에 포함된 영상감지부(12)의 고유코드를 통하여 해당 위치를 확인하여 상기 디스플레이(53)에 화재가 발생된 지역을 표시하도록 제어한다. 아울러 상기 관리자단말기(50)는 상기 영상서버에 화재발생신호를 송신한다. 그러면, 상기 영상서버(30)는 등록된 휴대용 단말기에 화재경보신호를 송신한다. 여기서 등록된 휴대용 단말기는 화재가 발생된 구역의 관리자 또는 입주자나 세대주가 해당될 수 있다. The fire alarm step S42 is a step of transmitting an alarm signal including a unique code to the manager terminal 50 when it is determined that a fire has occurred in the fire occurrence determination step S41. Here, the manager terminal 50 controls the alarm unit 52 to issue a buzzer, confirms the corresponding position through the unique code of the image sensing unit 12 included in the fire alarm signal, and displays it on the display 53 Control to display the area where the fire occurred. In addition, the manager terminal 50 transmits a fire occurrence signal to the video server. Then, the video server 30 transmits a fire alarm signal to the registered portable terminal. The registered portable terminal may be a manager or a tenant or a head of the household where the fire occurred.

여기서 상기 제어수단(121)은 상기 객체인식단계(S20) 이후 또는 화재발생판단단계(S41)에서 합성 이미지로부터 연기나 불꽃의 객체가 인식되지 않았고, 화재가 발생되지 않은 것으로 판단되면 상기 설정온도 판단단계를 진행한다. If it is determined that the smoke or flame object is not recognized from the composite image after the object recognizing step (S20) or the fire occurrence determining step (S41), and the fire is not generated, the control means (121) Proceed to step.

상기 설정온도 판단단계(S43)는 상기 제어수단(121)에서 상기 합성이미지에서 이전 이미지와 다른 색상으로 표시되는 객체를 확인하여 해당 객체의 온도와 설정온도를 비교하는 단계이다. 상기 제어수단(121)은 상기 객체를 표시하는 색상에서 설정온도의 색상과 유사 또는 그 이상의 온도로 설정되는 색상과 유사한지를 판단한다. In the setting temperature determination step S43, the control unit 121 checks an object displayed in a different color from the previous image in the composite image, and compares the temperature of the object with the set temperature. The control means 121 determines whether the color of the object is similar to the color set at a temperature similar to or higher than the color of the set temperature.

상기 잠열 경보단계(S44)는 상기 설정온도 판단단계(S43)에서 상기 제어수단(121)이 상기 객체의 온도가 설정온도보다 높거나 동일하다면 화재로 발전될 수 있는 가능성이 있는 것으로 판단하여 잠열 경보를 발령하는 단계이다. 여기서 상기 제어수단(121)은 상기 관리자단말기(50)에 잠열경보신호를 고유코드와 함께 송신한다. 따라서 상기 관리자단말기(50)는 잠열경보를 발령하고, 고유코드를 통하여 상기 잠열경보가 발령된 구역의 위치정보를 상기 디스플레이(53)를 통하여 출력한다. If it is determined that the temperature of the object is higher than or equal to the set temperature in step S44, the control unit 121 determines that there is a possibility that the object can be developed into a fire, . Here, the control unit 121 transmits a latency alarm signal to the administrator terminal 50 together with a unique code. Accordingly, the manager terminal 50 issues a latent heat alarm, and outputs the location information of the area where the latent heat alarm is issued through the display 53 through the unique code.

마찬가지로 상기 관리자단말기(50)는 상기 화재경보단계(S42)와 잠열 경보단계(S44)에서 화재경보 및 잠열 경보신호를 상기 영상서버(30)에 송신한다. 따라서 상기 영상서버(30)는 화재경보 및 잠열경보신호를 등록된 휴대용 단말기(40)에 송신하여 관리자 또는 입주자가 원거리에 있다 하더라도 상기 휴대용 단말기(40)를 통하여 화재발생 또는 잠열경보를 확인할 수 있도록 한다. Similarly, the manager terminal 50 transmits a fire alarm and a latent heat alarm signal to the video server 30 in the fire alarm step S42 and the latent heat alarm step S44. Therefore, the image server 30 transmits a fire alarm and a latent heat alarm signal to the registered portable terminal 40 so that a fire or latent heat alarm can be checked through the portable terminal 40 even if the administrator or the tenant is at a remote place do.

이와 같이 본 발명은 합성 영상과 센서를 연동하여 화재를 판단 및 경보하기 때문에 화재경보의 정확도가 향상되고, 열영상에 의한 온도별 색상변화를 통하여 잠열을 확인할 수 있어 잠열에 의한 화재가능성을 판단할 수 있어 화재 예방에 매우 효과적이다. As described above, the present invention improves the accuracy of the fire alarm by detecting fire alarm by interlocking the synthesized image and the sensor, and recognizing the latent heat by the color change by the temperature by the thermal image, It is very effective in preventing fire.

상기에서는 본 발명의 실시예를 참조하여 설명하였지만, 해당 기술 분야에서 통상의 지식을 가진 자라면 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention as defined in the following claims And changes may be made without departing from the spirit and scope of the invention.

10 : 영상처리부재 11 : 촬영부
12 : 경보수단 13 : 센서부
20, 20' : 영상저장부 30 : 영상서버
40 : 휴대용 단말기 50 : 관리자단말기
51 : 단말기제어부 52 : 경보수단
53 : 디스플레이 111 : 실영상 카메라
112 : 열영상 카메라 121 : 제어수단
122 : 영상믹싱수단 123 : 영상변환수단
124 : 객체인식수단 125 : 통신수단
131 : 불꽃센서 132 : 연기센서
10: image processing member 11:
12: alarm means 13:
20, 20 ': Image storage unit 30: Image server
40: portable terminal 50: administrator terminal
51: terminal control unit 52:
53: Display 111: Real image camera
112: thermal image camera 121: control means
122: image mixing means 123: image converting means
124: object recognition means 125: communication means
131: Flame sensor 132: Smoke sensor

Claims (11)

다 수개가 설정된 구역내에 각각 설치되어 해당 구역을 촬영하여 실영상 신호를 송신하는 실영상 카메라와, 온도에 따라서 서로 다른 색상으로 표시되는 열영상을 송신하는 열영상카메라를 구비하는 촬영부;
불꽃을 감지하는 불꽃센서와, 연기를 감지하는 연기센서를 구비하는 센서부; 및
상기 촬영부의 실영상과 열영상을 합성한 합성영상과 상기 센서부의 감지신호를 통하여 화재발생여부를 판단하는 영상감지부를 포함하고,
상기 영상감지부는
상기 촬영부에서 인가되는 열영상과 실영상을 혼합하는 영상믹싱수단;
상기 영상믹싱수단의 합성 영상에 포함된 다 수개의 객체중에서 불꽃 및 연기를 분리 및 인식하는 객체인식수단; 및
상기 객체인식수단에서 분리된 상기 합성 영상에서 불꽃 및 연기의 객체가 확인되면, 상기 센서부로부터 불꽃 및 연기의 감지여부를 확인하여 상기 합성 영상과 상기 센서부에서 불꽃과 연기가 모두 감지되면 화재를 경보하는 제어수단을 포함하고,
상기 제어수단은 상기 합성영상에서 불꽃과 연기 객체가 인식되지 않으면, 상기 합성 영상의 온도별 색상을 확인하여 설정온도와 비교하여 화재 발전 가능성이 있는 잠열여부를 판단하여 잠열 경보를 발령하고,
상기 영상믹싱수단은
실영상과 열영상에서 동일 프레임을 캡춰한 이미지를 합성하여 실영상에 열영상으로 촬영된 객체를 합성하는 것을 특징으로 하는 합성 영상을 이용한 화재감지시스템.
A photographing unit including a real image camera installed in each of a plurality of predetermined areas to photograph a corresponding area and transmitting a real image signal and a thermal image camera for transmitting a thermal image displayed in different colors according to temperature;
A sensor unit having a flame sensor for detecting flame and a smoke sensor for detecting smoke; And
A synthesized image obtained by synthesizing a real image and a thermal image of the photographing unit, and an image sensing unit for determining whether a fire has occurred through a sensing signal of the sensor unit,
The image sensing unit
An image mixing means for mixing a thermal image and a real image, which are applied by the photographing unit;
Object recognizing means for separating and recognizing sparks and smoke among a plurality of objects included in the composite image of the image mixing means; And
When an object of flame and smoke is recognized in the composite image separated by the object recognition means, whether or not the flame and smoke are sensed from the sensor unit and if fire and smoke are detected in the synthesized image and the sensor unit, And an alarming control means,
Wherein the control unit determines a latent heat having a possibility of fire generation by comparing the temperature of the synthesized image with the set temperature if the spark and the smoke object are not recognized in the synthesized image,
The image mixing means
Wherein a composite image of a real image and a thermal image is synthesized to synthesize an object photographed in a thermal image in a real image.
삭제delete 제1항에 있어서, 상기 화재감지시스템은
상기 영상믹싱수단에서 합성된 이미지를 디지탈 방식의 합성 영상으로 변환하여 상기 제어수단에 인가하는 영상변환수단을 더 포함하는 합성 영상을 이용한 화재감지시스템.
The system of claim 1, wherein the fire detection system
Further comprising image converting means for converting an image synthesized by the image mixing means into a digital synthesized image and applying the synthesized image to the control means.
제1항에 있어서, 상기 화재감지시스템은
상기 영상감지부에서 송신되는 합성 영상을 저장하는 영상저장부;
상기 영상저장부에 저장된 합성 영상을 온라인에 게시 및 송신하는 영상서버; 및
상기 영상서버에 등록되어 상기 합성 영상을 수신받는 휴대용 단말기를 더 포함하는 합성 영상을 이용한 화재감지시스템.
The system of claim 1, wherein the fire detection system
An image storage unit for storing a composite image transmitted from the image sensing unit;
A video server for posting and transmitting the synthesized video stored in the video storage unit on-line; And
And a portable terminal registered with the image server and receiving the composite image.
제4항에 있어서, 상기 휴대용 단말기는
상기 영상서버로부터 상기 제어수단에서 송신된 화재경보신호를 수신하여 출력하는 것을 특징으로 하는 합성 영상을 이용한 화재감지시스템.
5. The portable terminal as claimed in claim 4,
Wherein the fire alarm signal transmitted from the control server is received from the image server and is output.
삭제delete 제1항에 있어서, 상기 화재감지시스템에서
상기 영상감지부로부터 화재발생지역을 구분하는 위치신호가 포함된 화재경보신호를 수신하여 경보를 발령하고, 디스플레이에 위치와 함께 화재경보를 표시하는 관리자 단말기를 더 포함하는 합성영상을 이용한 화재감지시스템.
The method of claim 1, wherein the fire detection system
Further comprising an administrator terminal for receiving a fire alarm signal including a position signal for identifying a fire occurrence area from the image sensing unit to issue an alarm and displaying a fire alarm together with a position on a display, .
실영상 카메라와 열영상카메라에서 촬영된 실영상과 열영상에서 동일 프레임의 영상을 캡춰하여 이미지로 변환시켜 합성영상을 생성하여 영상서버에 전송하는 영상처리단계;
상기 영상처리단계에서 합성 영상에 포함된 각각의 객체를 분류하여 불꽃 및 연기를 인식하는 객체인식단계;
상기 객체인식단계에서 불꽃 및 연기가 감지되면 센서의 감지신호와 연동하여 화재발생 및 화재발생가능성을 판단하는 센서연동단계; 및
상기 센서연동단계에서 화재발생 및 잠열 발생중 어느 하나로 판단되면 화재발생 또는 잠열 경보를 발령 및 송신하는 통신단계를 포함하고,
상기 객체인식단계 이후 또는 센서연동단계에 이후에 합성 영상에서 연기나 불꽃의 객체가 인식되지 않아 화재가 발생 되지 않은 것으로 판단되면, 합성 영상에 포함된 객체의 온도가 설정온도 이상인지를 판단하는 설정온도 판단단계; 및
상기 설정온도 판단단계에서 상기 합성 영상에서 온도에 따라 서로 다른 색상으로 표현되는 객체의 온도가 설정온도보다 높거나 동일하다면 화재로 발전될 가능성이 있는 잠열 경보를 발령하는 잠열경보단계를 포함하는 합성 영상을 이용한 화재감지방법.
An image processing step of capturing an image of the same frame in a real image and a thermal image captured by a real image camera and a thermal image camera, converting the captured image into an image to generate a composite image, and transmitting the synthesized image to a video server;
An object recognition step of classifying each object included in the composite image in the image processing step and recognizing flame and smoke;
A sensor interlocking step of interlocking with a sensing signal of a sensor when flame and smoke are sensed in the object recognition step to determine a fire occurrence and a fire occurrence possibility; And
And a communication step of issuing and transmitting a fire occurrence or a latent heat alarm when it is determined that any one of a fire occurrence and a latent heat occurrence is detected in the sensor interlocking step,
If it is determined that the smoke or flame object is not recognized in the composite image after the object recognizing step or the sensor interlocking step and no fire occurs, it is determined whether the temperature of the object included in the composite image is equal to or higher than the set temperature Determining a temperature; And
And a latent-heat alarm step of generating a latent-heat alarm that is likely to develop into a fire if the temperature of the object represented by different colors according to temperature in the composite image is higher than or equal to the set temperature in the determination of the set temperature Fire detection method using.
제8항에 있어서, 상기 영상처리단계는
상기 실영상 카메라에서 촬영된 실영상과 열영상카메라에서 촬영된 열영상에서 동일 프레임의 영상을 캡춰하여 이미지로 변환시키는 영상캡춰단계;
상기 영상캡춰단계에서 캡춰된 이미지를 혼합하여 두 개의 이미지를 하나의 이미지로 합성하는 영상믹싱단계;
상기 영상믹싱단계에서 합성된 이미지를 디지탈 영상신호로 변환시키는 영상변환단계;
상기 영상변환단계에서 디지탈 영상신호로 변환된 합성 영상을 케이블 및 네트워크를 통하여 전송하는 전송단계를 포함하는 합성 영상을 이용한 화재감지방법.
9. The method according to claim 8,
An image capturing step of capturing an image of the same frame in the thermal image captured by the real image camera and the thermal image captured by the thermal image camera and converting the captured image into an image;
An image mixing step of mixing the images captured in the image capturing step and synthesizing the two images into one image;
An image converting step of converting the synthesized image into a digital image signal in the image mixing step;
And a transmitting step of transmitting the synthesized image converted into the digital image signal through the cable and the network in the image conversion step.
제8항에 있어서, 상기 객체 인식단계는
상기 영상처리단계에서 합성된 합성 영상에서 이미지 필터를 이용하여 이전 이미지와 현재 이미지를 비교하여 현재 이미지에서 추가 또는 변경된 객체를 판단하는 전처리 단계;
상기 전처리 단계 이후에서 현재이미지에서 불꽃과 연기의 특성을 적용하여 불꽃와 연기의 객체를 분리 및 인식하는 객체분리단계;
상기 객체 분리단계에서 분리된 객체가 불꽃인지를 판단하는 불꽃판단단계; 및
상기 객체분리단계에서 분리된 객체가 연기인지를 판다하는 연기판단단계를 포함하는 합성 영상을 이용한 화재감지방법.
9. The method according to claim 8, wherein the object recognition step
A preprocessing step of comparing a previous image and a current image using an image filter in the composite image synthesized in the image processing step to determine an object added or changed in the current image;
An object separating step of separating and recognizing objects of flame and smoke by applying characteristics of flame and smoke in the current image after the preprocessing step;
A flame determination step of determining whether the object separated in the object separation step is a flame; And
And determining whether the object separated in the object separation step is smoke.
삭제delete
KR1020130065171A 2013-06-07 2013-06-07 Fire detection system using composited video and method thereof KR101544019B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020130065171A KR101544019B1 (en) 2013-06-07 2013-06-07 Fire detection system using composited video and method thereof
PCT/KR2014/001508 WO2014196721A1 (en) 2013-06-07 2014-02-25 System and method for detecting fire using synthetic images

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130065171A KR101544019B1 (en) 2013-06-07 2013-06-07 Fire detection system using composited video and method thereof

Publications (2)

Publication Number Publication Date
KR20140143857A KR20140143857A (en) 2014-12-18
KR101544019B1 true KR101544019B1 (en) 2015-08-13

Family

ID=52008326

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130065171A KR101544019B1 (en) 2013-06-07 2013-06-07 Fire detection system using composited video and method thereof

Country Status (2)

Country Link
KR (1) KR101544019B1 (en)
WO (1) WO2014196721A1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230102532A (en) 2021-12-30 2023-07-07 주식회사 현대케피코 Fire detection system and method using time series data prediction thchnique and image classification

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106157520B (en) * 2015-04-21 2018-08-14 信泰光学(深圳)有限公司 Initiative Defence System
KR101635000B1 (en) * 2015-06-26 2016-07-08 (주) 비엑스 솔루션 Fire detector and system using plural cameras
CN106730556A (en) * 2016-12-16 2017-05-31 三汽车制造有限公司 Fire-fighting equipment and its control system and method
CN107180507A (en) * 2017-05-22 2017-09-19 肇庆市智高电机有限公司 Smokescope monitoring system for Internet bar
CN107154130A (en) * 2017-06-21 2017-09-12 西安科技大学 A kind of fire alarm system for intelligent building
CN111192430B (en) * 2018-06-30 2022-04-26 威海美达智能电子科技有限公司 Detection device for building fire
CN108961649A (en) * 2018-08-21 2018-12-07 延安大学 A kind of fire detection bullet
CN109716410A (en) * 2018-11-29 2019-05-03 深圳市泰和安科技有限公司 A kind of fire alarm confirmation method, device and the terminal device of smoke detector
KR102162735B1 (en) * 2018-12-17 2020-10-07 (주)스핀어웹 Fire mornitoring method and system using cctv image recognition based on deep learning
KR102003475B1 (en) * 2019-01-09 2019-07-24 주식회사 이오씨 Method and Apparatus for Composing Image by using Image and Thermal Image
CN110060444A (en) * 2019-03-11 2019-07-26 视联动力信息技术股份有限公司 A kind of fire early-warning system and method based on view networking
CN110136385A (en) * 2019-05-29 2019-08-16 广西科飞科技发展有限公司 A kind of safe protection engineering monitor system
KR102236939B1 (en) * 2019-08-20 2021-04-07 주식회사인텍 Fire pre-detection device
CN111167053A (en) * 2020-03-04 2020-05-19 浦江光特通讯技术有限公司 Fire alarm signal device for extinguishing fire and removing smoke
CN112735079A (en) * 2021-01-06 2021-04-30 国网辽宁省电力有限公司电力科学研究院 Cable channel fire disaster intelligent sensing and early warning device and using method thereof
KR102591607B1 (en) * 2021-05-28 2023-10-19 인하대학교 산학협력단 Image processing method and system using metadata extracted through reverse engineering of thermal image
KR102531238B1 (en) * 2023-01-11 2023-05-11 (주)인포스텍 Ai-based multi-purpose safety surveillance integrated camera system
KR102710071B1 (en) * 2024-02-15 2024-09-26 주식회사 에이티지 Fire detection monitoring systems for generators

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101148799B1 (en) 2011-09-21 2012-05-24 주식회사 창성에이스산업 Infrared thermal image fire detector and fire detection method using the same
KR101178927B1 (en) * 2012-01-13 2012-08-31 주식회사 가윤시스템 Remote fire protection system

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101066900B1 (en) * 2009-04-23 2011-09-27 유한대학산학협력단 An apparatus of dection for moving from cctv camera
KR20120081496A (en) * 2011-01-11 2012-07-19 주식회사 창성에이스산업 The method for fire warning using analysis of thermal image temperature

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101148799B1 (en) 2011-09-21 2012-05-24 주식회사 창성에이스산업 Infrared thermal image fire detector and fire detection method using the same
KR101178927B1 (en) * 2012-01-13 2012-08-31 주식회사 가윤시스템 Remote fire protection system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230102532A (en) 2021-12-30 2023-07-07 주식회사 현대케피코 Fire detection system and method using time series data prediction thchnique and image classification

Also Published As

Publication number Publication date
WO2014196721A1 (en) 2014-12-11
KR20140143857A (en) 2014-12-18

Similar Documents

Publication Publication Date Title
KR101544019B1 (en) Fire detection system using composited video and method thereof
US6937743B2 (en) Process and device for detecting fires based on image analysis
KR101993660B1 (en) A monitoring system for fire outbreak
KR101411624B1 (en) Method and system for detecting fire
KR20070029760A (en) Monitoring devices
KR102060045B1 (en) Fire detector and system capable of measuring heat distribution
KR102407327B1 (en) Apparatus for Monitoring Fire And System having the same
CN103493112A (en) Infrared sensor systems and methods
KR101863530B1 (en) System for fire predict and maintenance using visible light and infrared ray thermal image
KR101426331B1 (en) fire detection systems and method
WO2010024281A1 (en) Monitoring system
KR101521236B1 (en) Monitoring System using thermal imagery
KR101798372B1 (en) system and method for detecting a fire
KR102113527B1 (en) Thermal ip cctv system and method for detecting fire by using the same
KR102088198B1 (en) Integrated fire control system using triple detectors and method thereof
JP2009015536A (en) Suspicious person report device, suspicious person monitoring device and remote monitoring system using the same
KR102438433B1 (en) Control system capable of 3d visualization based on data and the method thereof
KR101524922B1 (en) Apparatus, method, and recording medium for emergency alert
KR101250956B1 (en) An automatic system for monitoring
KR102164802B1 (en) The surveillance camera with passive detectors and active detectors
JP2016072867A (en) Image confirmation system and center device
KR20100049365A (en) Portable thermal image device, the method of smoke fire and fire source use by its
KR101616973B1 (en) Building monitoring system and method using smart device
JP2008148138A (en) Monitoring system
JP2018142227A (en) Fire alarm system

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
N231 Notification of change of applicant
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee