[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

KR101678204B1 - Acoustic Camera - Google Patents

Acoustic Camera Download PDF

Info

Publication number
KR101678204B1
KR101678204B1 KR1020150177666A KR20150177666A KR101678204B1 KR 101678204 B1 KR101678204 B1 KR 101678204B1 KR 1020150177666 A KR1020150177666 A KR 1020150177666A KR 20150177666 A KR20150177666 A KR 20150177666A KR 101678204 B1 KR101678204 B1 KR 101678204B1
Authority
KR
South Korea
Prior art keywords
omnidirectional
image
acoustic
fixed
sphericity
Prior art date
Application number
KR1020150177666A
Other languages
Korean (ko)
Inventor
이광현
강준구
김영기
Original Assignee
(주)에스엠인스트루먼트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)에스엠인스트루먼트 filed Critical (주)에스엠인스트루먼트
Priority to KR1020150177666A priority Critical patent/KR101678204B1/en
Priority to PCT/KR2016/012778 priority patent/WO2017104972A1/en
Application granted granted Critical
Publication of KR101678204B1 publication Critical patent/KR101678204B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01H—MEASUREMENT OF MECHANICAL VIBRATIONS OR ULTRASONIC, SONIC OR INFRASONIC WAVES
    • G01H3/00—Measuring characteristics of vibrations by using a detector in a fluid
    • G01H3/10—Amplitude; Power
    • G01H3/12—Amplitude; Power by electric means
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/027—Spatial or constructional arrangements of microphones, e.g. in dummy heads
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01H—MEASUREMENT OF MECHANICAL VIBRATIONS OR ULTRASONIC, SONIC OR INFRASONIC WAVES
    • G01H3/00—Measuring characteristics of vibrations by using a detector in a fluid
    • G01H3/10—Amplitude; Power
    • G01H3/12—Amplitude; Power by electric means
    • G01H3/125—Amplitude; Power by electric means for representing acoustic field distribution
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B42/00—Obtaining records using waves other than optical waves; Visualisation of such records by using optical means
    • G03B42/06—Obtaining records using waves other than optical waves; Visualisation of such records by using optical means using ultrasonic, sonic or infrasonic waves
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B81—MICROSTRUCTURAL TECHNOLOGY
    • B81B—MICROSTRUCTURAL DEVICES OR SYSTEMS, e.g. MICROMECHANICAL DEVICES
    • B81B2201/00—Specific applications of microelectromechanical systems
    • B81B2201/02—Sensors
    • B81B2201/0292—Sensors not provided for in B81B2201/0207 - B81B2201/0285
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/003—Mems transducers or their use
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/40—Details of arrangements for obtaining desired directional characteristic by combining a number of identical transducers covered by H04R1/40 but not provided for in any of its subgroups
    • H04R2201/401—2D or 3D arrays of transducers

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)

Abstract

An omnidirectional acoustic camera using a MEMS acoustic sensor includes: a sphericity body (10) having a hollow portion in the inside; MEMS acoustic sensors (20) spaced apart from each other, such that the MEMS acoustic sensors are exposed on a surface of the sphericity body (10); an acoustic signal acquisition printed circuit board (30) electrically connected to the MEMS acoustic sensors (20) and embedded in the hollow portion of the sphericity body (10); an omnidirectional reflection mirror (40) spaced apart from one side of the sphericity body (10) to be fixed over the one side of the sphericity body (10); a photographing lens (50) upwardly exposed and fixed at the one side of the sphericity body (10) to photograph an optical image reflected by the reflection mirror (40).

Description

전방향 음장을 전방향 영상에 중첩하여 표현하는 MEMS 음향센서를 이용한 전방향 음향 시각화 장치 { Acoustic Camera } Technical Field [0001] The present invention relates to an omnidirectional acoustic visualization apparatus using a MEMS acoustic sensor which superposes an omnidirectional sound field on an omnidirectional image,

본 발명은 전방향 화상 영역에서 발생하는 음장을 측정 분석하여 실시간으로 화상 이미지에 시각화된 음장을 오버레이 하여 표출장치에 디스플레이 하는 MEMS 음향센서를 이용한 전방향 음향카메라 및 전방향 음향 시각화 장치에 관한 것이다.The present invention relates to an omnidirectional acoustic camera and an omnidirectional acoustic visualization apparatus using a MEMS acoustic sensor for measuring and analyzing a sound field generated in an omnidirectional image area to overlay a visualized sound field in an image image in real time and displaying the same on a display device.

음향카메라는 소리를 시각화하는 첨단계측장비로, 멀티미디어 정보 통신기기, 가전, 자동차, 건설 등 다양한 분야에서 필요로 하는 신기술 장비이다. 본 발명의 출원인인 (주)에스엠인트루먼트와 한국과학기술원은 마이크폰을 이용한 음향카메라 분야에 선도 기술을 확보하고 상용제품을 출시한 업체임을 밝힌다.
Acoustic camera is an advanced measuring instrument that visualizes sound and is a new technology equipment needed in various fields such as multimedia information communication equipment, home appliance, automobile, construction. The inventors of the present invention, SM Incorporation, and Korea Advanced Institute of Science and Technology (KAIST), have secured the leading technology in the field of acoustical camera using a microphone and announced that they have launched a commercial product.

종래 기술인 도 1에 도시된 바와 같이, 본 발명의 출원인 소유의 등록특허 제10-1213539호((주)에스엠인트루먼트)는, 복수개의 MEMS 마이크로폰을 인쇄회로기판(Print Circuit Board)에 탑재하여 구성되되, 상기 MEMS 마이크로폰은 반경방향으로 확장되는 2 ~ 10개의 날개부를 가지는 것을 특징으로 하는 멤스 마이크로폰 어레이를 이용한 음향감지장치를 게시한다.
As shown in FIG. 1 of the prior art, a registered trademark 10-1213539 (SM Ind Instrument Co., Ltd.) owned by the applicant of the present invention is constructed by mounting a plurality of MEMS microphones on a printed circuit board Wherein the MEMS microphone has 2 to 10 wings extending in a radial direction.

종래 기술인 도 2에 도시된 바와 같이, 본 발명의 출원인 소유의 등록특허 등록특허 제10-1471299호((주)에스엠인트루먼트)는, MEMS 마이크로폰들의 음향감지부가 전방을 향하게 배치되는 전방몸체와; 기판(substrate)에 고정된 상태에서 음향감지부가 상기 전방몸체에 노출되는 상기 MEMS 마이크로폰들과; 상기 MEMS 마이크로폰들이 장착되는 기판과; 상기 전방몸체의 렌즈홀을 통하여 촬영렌즈가 노출되는 영상촬영부와; 상기 전방몸체의 후면측에 상기 기판이 위치된 상태에서 상기 기판의 후측과 영상촬영부의 후측을 감싸는 후방몸체;을 포함하여 구성되고, 상기 MEMS 마이크로폰들은 반경방향으로 직선 또는 곡선 또는 나선 형상으로 확장되는 2 ~ 30개의 날개부를 형성하며, 하나의 상기 날개부(W)에2 ~ 50개의 MEMS 마이크로폰들이 이격되어 배열되고, 상기 전방몸체의 변두리 또는 후방몸체에 고정된 상태에서 후방으로 돌출되는 손잡이부;를 더 포함하여 구성되는 것을 특징으로 하는 이동식 음향 카메라를 게시한다.
As shown in FIG. 2 of the prior art, the registered patent No. 10-1471299 (SM Instrument Co., Ltd.) owned by the applicant of the present invention has a front body in which the sound sensing portions of the MEMS microphones are disposed facing forward; The MEMS microphones being exposed to the front body in a state where the MEMS microphones are fixed to a substrate; A substrate on which the MEMS microphones are mounted; An image capturing unit for exposing a photographing lens through a lens hole of the front body; And a rear body that surrounds the rear side of the substrate and the rear side of the image sensing unit in a state where the substrate is positioned on the rear side of the front body, and the MEMS microphones extend in a straight line, a curved line, or a spiral shape in the radial direction 2 to 30 wing portions, 2 to 50 MEMS microphones arranged on one wing portion (W) spaced apart and projecting backward while being fixed to a rim or a rear body of the front body; The mobile acoustic camera according to claim 1, further comprising:

전술한 바와 같이, 마이크로폰 어레이 빔포머 (Microphone Array Beamformer)는 소음원 위치규명 방법의 하나로, 다수의 마이크로폰 센서를 이용하여 소음원에서 발생하는 음파를 측정하고 이에 대한 신호처리를 통하여 소음원의 분포를 사진처럼 가시화 하는 방법이다. 각 마이크로폰에서 수신되는 신호의 특성에 따라 특정 발신위치에서 발생한 신호로 재구성하여 이의 음압크기를 측정하고, 측정된 음압레벨을 공간상의 분포로 도시하여 소음원의 위치를 추정하는 방식을 사용한다. 음향카메라의 측정 기법은 특수 분야의 연구목적으로 개발이 되어졌으나, 소음원의 분포를 직관적으로 확인할 수 있는 장점에 따라 산업 각 분야의 연구/개발단계에서의 활용으로 확대 적용되고 있다.
As described above, the microphone array beamformer is a method of identifying a noise source location. The microphone array beamformer measures a sound wave generated from a noise source using a plurality of microphone sensors, processes the signal for the noise source, . A method for estimating the position of a noise source by reconstructing a signal generated at a specific originating position according to a characteristic of a signal received from each microphone, measuring the magnitude of the sound pressure thereof, and displaying the measured sound pressure level as a spatial distribution. The measurement technique of the acoustic camera has been developed for the purpose of research in the special field, but it is being applied to the research / development stage of each industrial field in accordance with the advantage of intuitively confirming the distribution of the noise source.

<관련 선행 기술><Related Prior Art>

등록특허 10-0838239(특허권자 : (주)에스엠인스트루먼트)Patent No. 10-0838239 (patent owner: SM Instrument Co., Ltd.)

등록특허 10-2009-0047507 (출원인 : (주)에스엠인스트루먼트)[Patent Document 10-2009-0047507 (Applicant: SM Instrument Co., Ltd.)

등록특허 10-051120(출원인 : 한국과학기술원)Patent No. 10-051120 (Applicant: KAIST)

등록특허 : 10-0217872(출원인 : 한국과학기술원)
Registered patent: 10-0217872 (Applicant: KAIST)

본 발명은 전방향 화상 영역에서 발생하는 음장을 측정 분석하여 실시간으로 화상 이미지에 시각화된 음장을 오버레이 하여 표출장치에 디스플레이 하는 MEMS 음향센서를 이용한 전방향 음향카메라 및 전방향 음향 시각화 장치를 제공하기 위한 것이다.The present invention relates to an omnidirectional acoustic camera and an omnidirectional acoustic visualization apparatus using a MEMS acoustic sensor for measuring and analyzing a sound field generated in an omnidirectional image area and overlaying a visualized sound field in an image image in real time, will be.

본 발명의 전방향 음장을 전방향 영상에 중첩하여 표현하는 MEMS 음향센서를 이용한 전방향 음향 시각화 장치는,
내부에 중공부가 형성된 구(球)형체(10, sphericity body)와;
상기 구형체(10, sphericity body)의 표면에 노출되게 균일한 간격으로 이격됨으로써 하나의 평면이 아닌 입체(立體)인 구(球) 형상의 메시(Mesh)를 이루도록 배치된 MEMS 음향 감지 센서(20)들과;
상기 MEMS 음향 감지 센서(20)들과 전기적으로 각각 연결되며 상기 구형체(10)의 중공부에 내장되어 고정되는 음향신호 습득용 인쇄회로기판(Printed Circuit Board, 30)과;
상기 구(球)형체(10)의 일측 상부에 이격되게 고정된 전방향 반사 거울(40)과;
상기 구형체(10)의 일측 상부에 상향 노출되게 고정되어 상기 반사 거울(40)에 비친 광학 영상을 촬영하는 촬영 렌즈(50)와;
상기 음향신호 습득용 인쇄회로기판(Printed Circuit Board, 30)과 연결되어 수신된 음향에 관한 신호를 기초로 전방향(All around) 음장을 계산하는 음향처리부(60)와;
상기 촬영 렌즈(50)를 통하여 생성된 광학 신호를 처리하여 전방향 파노라마 영상을 생성하는 영상처리부(70)와;
상기 음향처리부(60)로부터 전송된 전방향 음장과 상기 영상처리부(80)로부터 전송된 전방향 영상을 위치상 및 시간상 동기화시켜 오버 레이(over lay)하는 표출장치부(80);를 포함하여 구성되는 것을 특징으로 한다.The omnidirectional acoustic visualization apparatus using the MEMS acoustic sensor, in which the omnidirectional sound field of the present invention is superimposed on the omni-directional image,
A sphericity body 10 having a hollow portion formed therein;
A MEMS acoustic sensor 20 (see FIG. 1) arranged so as to form a spherical meshes that are not one plane but spaced apart at a uniform interval so as to be exposed on the surface of the sphericity body 10, );
A printed circuit board 30 which is electrically connected to the MEMS acoustic sensors 20 and is built and fixed in the hollow portion of the spherical body 10;
An omnidirectional reflecting mirror 40 fixed to an upper portion of one side of the sphere-shaped body 10;
A photographing lens (50) fixed upwardly at an upper portion of one side of the spherical body (10) to photograph an optical image reflected by the reflecting mirror (40);
An acoustic processing unit 60 connected to the printed circuit board 30 for acquiring the acoustic signal and calculating an all around sound field based on a signal related to the received sound;
An image processor 70 for processing an optical signal generated through the photographing lens 50 to generate an omni-directional panoramic image;
And an exposing unit 80 for overlaying the omnidirectional sound field transmitted from the sound processing unit 60 and the omnidirectional image transmitted from the image processing unit 80 in synchronization with each other in terms of position and time, .

삭제delete

삭제delete

삭제delete

삭제delete

삭제delete

본 발명에 따르는 경우, 전방향 화상 영역에서 발생하는 음장을 측정 분석하여 실시간으로 화상 이미지에 시각화된 음장을 오버레이 하여 표출장치에 디스플레이 하는 MEMS 음향센서를 이용한 전방향 음향카메라 및 전방향 음향 시각화 장치가 제공된다.The omnidirectional acoustic camera and the omnidirectional acoustic visualization apparatus using the MEMS acoustic sensor for overlaying the visualized sound field in the image image in real time and measuring the sound field generated in the omnidirectional image area and displaying the same on the display device / RTI &gt;

도 1, 도 2는 종래 기술 음향카메라.
도 3은 본 발명의 MEMS 음향센서를 이용한 전방향 음향카메라 사시도.
도 4는 본 발명의 MEMS 음향센서를 이용한 전방향 음향카메라 정면도.
도 5은 본 발명의 MEMS 음향센서를 이용한 전방향 음향카메라 사시도(촬영수단 분해).
도 6은 본 발명의 촬영 수단 상세도.
도 7은 본 발명의 MEMS 음향센서를 이용한 전방향 음향 시각화 장치 구성도.
도 8은 본 발명의 MEMS 음향센서를 이용한 전방향 음향 시각화 장치 실시 상태도.1 and 2 show a prior art acoustic camera.
3 is a perspective view of an omni-directional acoustic camera using the MEMS acoustic sensor of the present invention.
4 is a front view of an omni-directional acoustic camera using the MEMS acoustic sensor of the present invention.
5 is a perspective view of an omnidirectional camera using the MEMS acoustic sensor of the present invention (photographing means disassembly).
6 is a detailed view of the photographing means of the present invention.
7 is a block diagram of an omnidirectional acoustic visualization apparatus using the MEMS acoustic sensor of the present invention.
FIG. 8 is a view showing an embodiment of an omnidirectional acoustic visualization apparatus using the MEMS acoustic sensor of the present invention.

이하에서 본 발명의 일실시예에 따른 MEMS 음향센서를 이용한 전방향 음향카메라 및 전방향 음향 시각화 장치에 대하여 첨부된 도면을 참조하여 상세하게 설명한다. 도 3은 본 발명의 MEMS 음향센서를 이용한 전방향 음향카메라 사시도, 도 4는 본 발명의 MEMS 음향센서를 이용한 전방향 음향카메라 정면도, 도 5은 본 발명의 MEMS 음향센서를 이용한 전방향 음향카메라 사시도(촬영수단 분해), 도 5은 본 발명의 촬영 수단 상세도, 도 6은 본 발명의 MEMS 음향센서를 이용한 전방향 음향 시각화 장치 구성도이고, 도 7은 본 발명의 MEMS 음향센서를 이용한 전방향 음향 시각화 장치 실시 상태도이다.
Hereinafter, an omnidirectional acoustic camera and an omni-directional acoustic visualization apparatus using a MEMS acoustic sensor according to an embodiment of the present invention will be described in detail with reference to the accompanying drawings. FIG. 3 is a perspective view of an omni-directional acoustic camera using the MEMS acoustic sensor of the present invention, FIG. 4 is a front view of the omni-directional acoustic camera using the MEMS acoustic sensor of the present invention, FIG. 5 is a detailed view of the photographing means of the present invention, FIG. 6 is a diagram showing a configuration of an omnidirectional acoustic visualization apparatus using the MEMS acoustic sensor of the present invention, and FIG. 7 is a front view Directional acoustic visualization apparatus.

도 3 내지 도 8에 도시된 바와 같이, 본 발명의 음향카메라는 반사경과 촬영렌즈를 이용한 전방향 촬상이 가능한 하나의 광학 촬영 수단과 전방향 음향 감지가 가능하도록 배치된 복수개의 MEMS 음향감지수단을 포함하여 구성된다.
3 to 8, the acoustic camera of the present invention includes one optical photographing means capable of taking an omnidirectional image using a reflecting mirror and a photographing lens, and a plurality of MEMS sound sensing means arranged to be capable of omnidirectional sound sensing .

도 3 내지 도 8에 도시된 바와 같이, 본 발명의 MEMS 음향센서를 이용한 전방향 음향카메라는, 내부에 중공부가 형성된 구형체(10, sphericity body)와, 구형체(10, sphericity body)의 표면에 노출되게 균일한 간격으로 이격됨으로써 하나의 평면이 아닌 입체(立體)인 구(球) 형상의 메시(Mesh)를 이루도록 배치된 MEMS 음향 감지 센서(20)들과, 상기 MEMS 음향 감지 센서(20)들과 전기적으로 각각 연결되며 상기 구형체(10)의 중공부에 내장되어 고정되는 음향신호 습득용 인쇄회로기판(Printed Circuit Board, 30)과, 구형체(10)의 일측 상부에 이격되게 고정된 전방향 반사 거울(40)과, 구형체(10)의 일측 상부에 상향 노출되게 고정되어 상기 반사 거울(40)에 비친 광학 영상을 촬영하는 촬영 렌즈(50)를 포함하여 구성된다.
3 to 8, the omnidirectional acoustic camera using the MEMS acoustic sensor according to the present invention includes a sphericity body 10 having a hollow portion formed therein, a sphericity body 10, MEMS acoustic sensors 20 arranged so as to form a spherical meshes that are spaced apart from one another by a uniform distance so as to be exposed to the MEMS acoustic sensor 20 A printed circuit board 30 for receiving acoustical signals, which is electrically connected to the spherical bodies 10 and fixed to the hollow portion of the spherical bodies 10; And a photographing lens 50 which is upwardly fixed to the upper side of the one side of the spherical body 10 and photographs an optical image reflected on the reflecting mirror 40. [

도 3 내지 도 8에 도시된 바와 같이, 본 발명의 MEMS 음향센서를 이용한 전방향 음향카메라에 있어서, 방향 반사 거울(40)은, 측방으로 360도 영상이 반영되고, 상하 90 ~ 150도, 더욱 바람직하게는 상하 110 ~ 130도 상항 영상을 반영하는 것이 바람직하다. 상하 영상 반영 각도의 중심선은 수평선이다.
3 to 8, in the omnidirectional acoustic camera using the MEMS acoustic sensor of the present invention, the directional reflection mirror 40 reflects a 360-degree image sideways, Preferably, it is preferable to reflect images of the upper and lower 110 to 130 degrees. The center line of the vertical reflection angle is a horizontal line.

도 3 내지 도 8에 도시된 바와 같이, 본 발명의 MEMS 음향센서를 이용한 전방향 음향카메라에 있어서, 전방향 반사 거울(40)은, 상광 하협의 형상으로 아래로 갈수로 좁아지는 원뿔 형상인 것이 바람직하다. 방향 반사 거울(40)은 상기 구형체(10) 상부에 하단이 장, 탈착 가능하게 고정되어 상향 연장된 거울 고정수단(50)를 통하여 구형체(10)에 이격되게 고정되는 것이 바람직하다.
3 to 8, in the omnidirectional acoustic camera using the MEMS acoustic sensor of the present invention, the omnidirectional reflection mirror 40 has a conical shape that narrows downwardly in the shape of a narrow- desirable. Preferably, the directional reflecting mirror 40 is fixed to the spherical body 10 so that the lower end thereof is detachably fixed on the spherical body 10 and is fixed to the spherical body 10 through the upwardly extending mirror fixing means 50.

도 6에 도시된 바와 같이, 거울 고정수단(50)은, 상기구형체(10) 상부에 고정되는 중심에 개구부를 갖는 하부고정부(51)와, 하부고정부(51)에 고정되어 상향 연장된 상태로 상기 전방향 반사 거울(40)을 지지하는 수직고정대(53)와, 하부고정부(51)를 상기 구형체(10) 상부에 고정하는 체결수단(55)으로 구성되는 것이 바람직하다.
6, the mirror fixing means 50 includes a lower fixing portion 51 having an opening at the center thereof fixed to the upper portion of the upper frame 10 and a lower fixing portion 51 fixed to the lower fixing portion 51, A vertical fixing table 53 for supporting the omnidirectional reflection mirror 40 in a state in which the lower fixing part 51 is fixed to the upper side of the spherical body 10 and a fastening means 55 for fixing the lower fixing part 51 to the upper side of the spherical body 10.

본 발명의 MEMS 음향센서를 이용한 전방향 음향 시각화 장치는, 내부에 중공부가 형성된 구(球)형체(10, sphericity body)와, 구형체(10, sphericity body)의 표면에 노출되게 균일한 간격으로 이격됨으로써 하나의 평면이 아닌 입체(立體)인 구(球) 형상의 메시(Mesh)를 이루도록 배치된 MEMS 음향 감지 센서(20)들을 포함한다. 또한, MEMS 음향 감지 센서(20)들과 전기적으로 각각 연결되며 상기 구형체(10)의 중공부에 내장되어 고정되는 음향신호 습득용 인쇄회로기판(Printed Circuit Board, 30)를 포함한다.

또한, 본 발명의 MEMS 음향센서를 이용한 전방향 음향 시각화 장치는 구형체(10)의 일측 상부에 이격되게 고정된 전방향 반사 거울(40)과, 구형체(10)의 일측 상부에 상향 노출되게 고정되어 상기 반사 거울(40)에 비친 광학 영상을 촬영하는 촬영 렌즈(50)와, 음향신호 습득용 인쇄회로기판(Printed Circuit Board, 30)과 연결되어 수신된 음향에 관한 신호를 기초로 전방향(All around) 음장을 계산하는 음향처리부(60)와, 촬영 렌즈(50)를 통하여 생성된 광학 신호를 처리하여 전방향 파노라마 영상을 생성하는 영상처리부(70)와, 음향처리부(60)로부터 전송된 전방향 음장과 상기 영상처리부(80)로부터 전송된 전방향 영상을 위치상 및 시간상 동기화 시켜 오버 레이(over lay)하는 표출장치부(80)를 포함하여 구성된다.
The omnidirectional acoustic visualization apparatus using the MEMS acoustic sensor of the present invention comprises a sphericity body 10 having a hollow portion formed therein and a plurality of sphericity bodies 10, And MEMS acoustic sensors 20 arranged so as to form a spherical meshes that are not one plane but spaced apart. And a printed circuit board 30 which is electrically connected to the MEMS acoustic sensors 20 and is built in and fixed to the hollow portion of the spherical body 10.

In addition, the omnidirectional acoustic visualization apparatus using the MEMS acoustic sensor of the present invention includes an omnidirectional reflection mirror 40 fixed to an upper portion of one side of a sphere 10, An image pickup lens 50 which is fixed and captures an optical image reflected by the reflection mirror 40 and a printed circuit board 30 for acquiring an acoustic signal, An image processing unit 70 for processing an optical signal generated through the photographing lens 50 to generate an omni-directional panoramic image, And an exposing unit 80 for overlaying the omnidirectional sound field and the omni-directional image transmitted from the image processing unit 80 in synchronization with each other in terms of position and time.

본 발명의 출원일 이전에 공지된 음향 센서를 통해 수집된 음향 신호의 처리 기술 및 촬영 렌즈를 통하여 얻어진 광신호 처리 기술은 본 발명의 명세서에 기재된 것으로 본다. 음향신호 습득용 인쇄회로기판(Printed Circuit Board, 30)은 MEMS 음향 감지 센서(20)로부터 생성된 음향전기 신호의 수집, 음향 전기 신호의 증폭, 음향 전기 신호 이산화(디지탈화) 기능을 포함할 수 있다. 도 5에 도시된 바와 같이 구(球)형체(10)의 표면에 전원 공급용 전원스위치가 구비된다. 도 5에 도시된 바와 같이, 구(球)형체(10)에 데이터 전송케이블 연결수단이 노출되고 음향신호 습득용 인쇄회로기판(Printed Circuit Board, 30)에 수집된 MEMS 음향 감지 센서(20)들의 음향신호는 데이터 전송케이블을 통하여 음향처리부(60)로 전송될 것이다.
The processing technology of the acoustic signal collected through the acoustic sensor known before the filing date of the present invention and the optical signal processing technique obtained through the photographing lens are deemed to be described in the specification of the present invention. The printed circuit board 30 for acquiring acoustic signals may include a function of collecting acoustic electrical signals generated from the MEMS acoustic sensor 20, amplifying acoustical electrical signals, and acoustical electrical signal digitizing . As shown in Fig. 5, a power supply power supply switch is provided on the surface of the sphere-shaped body 10. 5, the data transmission cable connecting means is exposed to the sphere-shaped body 10 and the MEMS acoustic sensors 20, which are collected on the printed circuit board 30 for acquiring acoustic signals, The acoustic signal will be transmitted to the sound processing unit 60 through the data transmission cable.

본 발명은 상기에서 언급한 바람직한 실시예와 관련하여 설명됐지만, 본 발명의 범위가 이러한 실시예에 한정되는 것은 아니며, 본 발명의 범위는 이하의 특허청구범위에 의하여 정하여지는 것으로 본 발명과 균등 범위에 속하는 다양한 수정 및 변형을 포함할 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, &Lt; RTI ID = 0.0 &gt; and / or &lt; / RTI &gt;

아래의 특허청구범위에 기재된 도면부호는 단순히 발명의 이해를 보조하기 위한 것으로 권리범위의 해석에 영향을 미치지 아니함을 밝히며 기재된 도면부호에 의해 권리범위가 좁게 해석되어서는 안될 것이다.It is to be understood that the appended claims are intended to supplement the understanding of the invention and should not be construed as limiting the scope of the appended claims.

10 : 구형체
20 : MEMS 음향 감지 센서
40 : 전방향 반사 거울
50 : 촬영 렌즈
60 : 음향신호 송신부
70 : 음향처리부
80 : 영상처리부
90 : 표출장치부10: spherical body
20: MEMS acoustic sensor
40: omnidirectional mirror
50: photographing lens
60: Sound signal transmitter
70: Acoustic processor
80:
90:

Claims (6)

삭제delete 내부에 중공부가 형성된 구(球)형체(10, sphericity body)와;
상기 구형체(10, sphericity body)의 표면에 노출되게 균일한 간격으로 이격됨으로써 하나의 평면이 아닌 입체(立體)인 구(球) 형상의 메시(Mesh)를 이루도록 배치된 MEMS 음향 감지 센서(20)들과;
상기 MEMS 음향 감지 센서(20)들과 전기적으로 각각 연결되며 상기 구형체(10)의 중공부에 내장되어 고정되는 음향신호 습득용 인쇄회로기판(Printed Circuit Board, 30)과;
상기 구(球)형체(10)의 일측 상부에 이격되게 고정된 전방향 반사 거울(40)과;
상기 구형체(10)의 일측 상부에 상향 노출되게 고정되어 상기 반사 거울(40)에 비친 광학 영상을 촬영하는 촬영 렌즈(50)와;
상기 음향신호 습득용 인쇄회로기판(Printed Circuit Board, 30)과 연결되어 수신된 음향에 관한 신호를 기초로 전방향(All around) 음장을 계산하는 음향처리부(70)와;
상기 촬영 렌즈(50)를 통하여 생성된 광학 신호를 처리하여 전방향 파노라마 영상을 생성하는 영상처리부(80)와;
상기 음향처리부(70)로부터 전송된 전방향 음장과 상기 영상처리부(80)로부터 전송된 전방향 영상을 위치상 및 시간상 동기화시켜 오버 레이(over lay)하는 표출장치부(90);를 포함하여 구성되는 것을 특징으로 하는 전방향 음장을 전방향 영상에 중첩하여 표현하는 MEMS 음향센서를 이용한 전방향 음향 시각화 장치.A sphericity body 10 having a hollow portion formed therein;
A MEMS acoustic sensor 20 (see FIG. 1) arranged so as to form a spherical meshes that are not one plane but spaced apart at a uniform interval so as to be exposed on the surface of the sphericity body 10, );
A printed circuit board 30 which is electrically connected to the MEMS acoustic sensors 20 and is built and fixed in the hollow portion of the spherical body 10;
An omnidirectional reflecting mirror 40 fixed to an upper portion of one side of the sphere-shaped body 10;
A photographing lens (50) fixed upwardly at an upper portion of one side of the spherical body (10) to photograph an optical image reflected by the reflecting mirror (40);
An acoustic processing unit 70 connected to the printed circuit board 30 for acquiring the acoustic signal and calculating an all around sound field based on a signal related to the received sound;
An image processor 80 for processing an optical signal generated through the photographing lens 50 to generate an omni-directional panoramic image;
And an exposing unit 90 for overlaying the omnidirectional sound field transmitted from the sound processing unit 70 and the omnidirectional image transmitted from the image processing unit 80 in synchronization with each other in terms of position and time, Wherein the omni-directional sound field is superimposed on the omni-directional image. 제2항에 있어서,
상기 전방향 반사 거울(40)은 상기 구형체(10) 상부에 하단이 장, 탈착 가능하게 고정되어 상향 연장된 거울 고정수단를 통하여 구형체(10)에 이격되게 고정되는 것을 특징으로 하는 전방향 음장을 전방향 영상에 중첩하여 표현하는 MEMS 음향센서를 이용한 전방향 음향 시각화 장치.3. The method of claim 2,
Characterized in that the omni-directional reflecting mirror (40) is fixed to the spherical body (10) so that the lower end of the omnidirectional reflecting mirror (40) is detachably fixed to the spherical body (10) Directional image and superimposing it on an omnidirectional image. 제3항에 있어서,
상기 전방향 반사 거울(40)은,
측방으로 360도 영상이 반영되고, 상하 90 ~ 150도 영상이 반영되는 것을 특징으로 하는 전방향 음장을 전방향 영상에 중첩하여 표현하는 MEMS 음향센서를 이용한 전방향 음향 시각화 장치.The method of claim 3,
The omnidirectional reflection mirror (40)
Wherein the 360 ° image is reflected sideways, and the 90 ° and 150 ° images are reflected. The omnidirectional acoustic visualization apparatus using the MEMS acoustic sensor, wherein the omnidirectional sound field is superimposed on the omnidirectional image. 삭제delete 삭제delete
KR1020150177666A 2015-12-13 2015-12-13 Acoustic Camera KR101678204B1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020150177666A KR101678204B1 (en) 2015-12-13 2015-12-13 Acoustic Camera
PCT/KR2016/012778 WO2017104972A1 (en) 2015-12-13 2016-11-08 Omnidirectional acoustic camera using mems acoustic sensor and omnidirectional sound visualization device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150177666A KR101678204B1 (en) 2015-12-13 2015-12-13 Acoustic Camera

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020150126791A Division KR101678203B1 (en) 2015-09-08 2015-09-08 Acoustic Camera

Publications (1)

Publication Number Publication Date
KR101678204B1 true KR101678204B1 (en) 2016-12-06

Family

ID=57576182

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150177666A KR101678204B1 (en) 2015-12-13 2015-12-13 Acoustic Camera

Country Status (2)

Country Link
KR (1) KR101678204B1 (en)
WO (1) WO2017104972A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR3072533B1 (en) 2017-10-17 2019-11-15 Observatoire Regional Du Bruit En Idf IMAGINING SYSTEM OF ENVIRONMENTAL ACOUSTIC SOURCES

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008268176A (en) * 2007-04-17 2008-11-06 Korea Inst Of Machinery & Materials Tone quality display device, tone quality display method, computer readable medium recorded with tone display program and acoustic camera
KR20110051962A (en) * 2009-11-11 2011-05-18 주식회사 금영 Camera apparatus for acquiring 360-degree photographing image

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100345149B1 (en) * 2000-07-28 2002-07-24 현대자동차주식회사 Acoustic mirror holography system
KR101213540B1 (en) * 2011-08-18 2012-12-18 (주)에스엠인스트루먼트 Acoustic senseing device and acoustic camera using mems microphone array
KR101282673B1 (en) * 2011-12-09 2013-07-05 현대자동차주식회사 Method for Sound Source Localization

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008268176A (en) * 2007-04-17 2008-11-06 Korea Inst Of Machinery & Materials Tone quality display device, tone quality display method, computer readable medium recorded with tone display program and acoustic camera
KR20110051962A (en) * 2009-11-11 2011-05-18 주식회사 금영 Camera apparatus for acquiring 360-degree photographing image

Also Published As

Publication number Publication date
WO2017104972A1 (en) 2017-06-22

Similar Documents

Publication Publication Date Title
KR101010099B1 (en) Sound source search system
EP2746737B1 (en) Acoustic sensor apparatus and acoustic camera using a mems microphone array
US20140347230A1 (en) Electromagnetic Wave Visualizing System
JP2011015050A (en) Array for beam forming, and sound source exploration/measurement system using the same
KR101678203B1 (en) Acoustic Camera
EP2320680A3 (en) Eyeglasses with a planar of microphones for assisting hearing
JP2010515335A (en) Sound source tracking microphone
CN106887236A (en) A kind of remote speech harvester of sound image combined positioning
JP2012133250A (en) Sound information display apparatus, method and program
KR20170130041A (en) Acoustic Camera Display Method
CN111936829B (en) Acoustic analysis device and acoustic analysis method
EP3627129A1 (en) Movable ultrasonic image facility diagnosis device
US20140290368A1 (en) Method and apparatus for remote position tracking of an industrial ultrasound imaging probe
KR101678204B1 (en) Acoustic Camera
EP3698554B1 (en) Imaging system for environmental acoustic sources
KR101471300B1 (en) Portable Acoustic Camera
KR101031113B1 (en) Ultra-small-size microphone based hearing aid apparatus
US20120094601A1 (en) Bluetooth headset with camera function and rear view monitor system employing the same
EP2111610A1 (en) Sound sensor array with optical outputs
KR101627429B1 (en) A multiple sensor based diagnostic system for the power distribution line
JP2010236939A (en) Method and apparatus for estimating sound source
JP2010236918A (en) Method and apparatus for visualizing area of generation of electrostatic discharge
JP4193041B2 (en) Three-dimensional intensity probe, three-dimensional sound source direction detection device and three-dimensional sound source direction facing control device using the probe
JP2015161659A (en) Sound source direction estimation device and display device of image for sound source estimation
JP5353316B2 (en) Sound field visualization device

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190826

Year of fee payment: 4