[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

KR101377135B1 - 오디오 신호의 저주파 및 중주파 성분 보강 방법 및 그장치 - Google Patents

오디오 신호의 저주파 및 중주파 성분 보강 방법 및 그장치 Download PDF

Info

Publication number
KR101377135B1
KR101377135B1 KR1020070000303A KR20070000303A KR101377135B1 KR 101377135 B1 KR101377135 B1 KR 101377135B1 KR 1020070000303 A KR1020070000303 A KR 1020070000303A KR 20070000303 A KR20070000303 A KR 20070000303A KR 101377135 B1 KR101377135 B1 KR 101377135B1
Authority
KR
South Korea
Prior art keywords
audio signal
signal
harmonic
energy
band
Prior art date
Application number
KR1020070000303A
Other languages
English (en)
Other versions
KR20080063647A (ko
Inventor
문한길
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020070000303A priority Critical patent/KR101377135B1/ko
Priority to US11/761,417 priority patent/US8582785B2/en
Priority to CN200710138219.8A priority patent/CN101217831B/zh
Publication of KR20080063647A publication Critical patent/KR20080063647A/ko
Application granted granted Critical
Publication of KR101377135B1 publication Critical patent/KR101377135B1/ko

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B01PHYSICAL OR CHEMICAL PROCESSES OR APPARATUS IN GENERAL
    • B01DSEPARATION
    • B01D46/00Filters or filtering processes specially modified for separating dispersed particles from gases or vapours
    • B01D46/0027Filters or filtering processes specially modified for separating dispersed particles from gases or vapours with additional separating or treating functions
    • B01D46/0028Filters or filtering processes specially modified for separating dispersed particles from gases or vapours with additional separating or treating functions provided with antibacterial or antifungal means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S7/00Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30Control circuits for electronic adaptation of the sound field
    • H04S7/307Frequency adjustment, e.g. tone control
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61LMETHODS OR APPARATUS FOR STERILISING MATERIALS OR OBJECTS IN GENERAL; DISINFECTION, STERILISATION OR DEODORISATION OF AIR; CHEMICAL ASPECTS OF BANDAGES, DRESSINGS, ABSORBENT PADS OR SURGICAL ARTICLES; MATERIALS FOR BANDAGES, DRESSINGS, ABSORBENT PADS OR SURGICAL ARTICLES
    • A61L9/00Disinfection, sterilisation or deodorisation of air
    • A61L9/16Disinfection, sterilisation or deodorisation of air using physical phenomena
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B01PHYSICAL OR CHEMICAL PROCESSES OR APPARATUS IN GENERAL
    • B01DSEPARATION
    • B01D53/00Separation of gases or vapours; Recovering vapours of volatile solvents from gases; Chemical or biological purification of waste gases, e.g. engine exhaust gases, smoke, fumes, flue gases, aerosols
    • B01D53/32Separation of gases or vapours; Recovering vapours of volatile solvents from gases; Chemical or biological purification of waste gases, e.g. engine exhaust gases, smoke, fumes, flue gases, aerosols by electrical effects other than those provided for in group B01D61/00
    • B01D53/323Separation of gases or vapours; Recovering vapours of volatile solvents from gases; Chemical or biological purification of waste gases, e.g. engine exhaust gases, smoke, fumes, flue gases, aerosols by electrical effects other than those provided for in group B01D61/00 by electrostatic effects or by high-voltage electric fields
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B01PHYSICAL OR CHEMICAL PROCESSES OR APPARATUS IN GENERAL
    • B01DSEPARATION
    • B01D53/00Separation of gases or vapours; Recovering vapours of volatile solvents from gases; Chemical or biological purification of waste gases, e.g. engine exhaust gases, smoke, fumes, flue gases, aerosols
    • B01D53/34Chemical or biological purification of waste gases
    • B01D53/74General processes for purification of waste gases; Apparatus or devices specially adapted therefor
    • B01D53/86Catalytic processes
    • B01D53/88Handling or mounting catalysts
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B01PHYSICAL OR CHEMICAL PROCESSES OR APPARATUS IN GENERAL
    • B01JCHEMICAL OR PHYSICAL PROCESSES, e.g. CATALYSIS OR COLLOID CHEMISTRY; THEIR RELEVANT APPARATUS
    • B01J21/00Catalysts comprising the elements, oxides, or hydroxides of magnesium, boron, aluminium, carbon, silicon, titanium, zirconium, or hafnium
    • B01J21/18Carbon
    • B01J21/185Carbon nanotubes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B01PHYSICAL OR CHEMICAL PROCESSES OR APPARATUS IN GENERAL
    • B01JCHEMICAL OR PHYSICAL PROCESSES, e.g. CATALYSIS OR COLLOID CHEMISTRY; THEIR RELEVANT APPARATUS
    • B01J23/00Catalysts comprising metals or metal oxides or hydroxides, not provided for in group B01J21/00
    • B01J23/70Catalysts comprising metals or metal oxides or hydroxides, not provided for in group B01J21/00 of the iron group metals or copper
    • B01J23/72Copper
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B82NANOTECHNOLOGY
    • B82YSPECIFIC USES OR APPLICATIONS OF NANOSTRUCTURES; MEASUREMENT OR ANALYSIS OF NANOSTRUCTURES; MANUFACTURE OR TREATMENT OF NANOSTRUCTURES
    • B82Y30/00Nanotechnology for materials or surface science, e.g. nanocomposites
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05HPLASMA TECHNIQUE; PRODUCTION OF ACCELERATED ELECTRICALLY-CHARGED PARTICLES OR OF NEUTRONS; PRODUCTION OR ACCELERATION OF NEUTRAL MOLECULAR OR ATOMIC BEAMS
    • H05H1/00Generating plasma; Handling plasma
    • H05H1/24Generating plasma
    • H05H1/47Generating plasma using corona discharges
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B01PHYSICAL OR CHEMICAL PROCESSES OR APPARATUS IN GENERAL
    • B01DSEPARATION
    • B01D2257/00Components to be removed
    • B01D2257/10Single element gases other than halogens
    • B01D2257/106Ozone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S1/00Two-channel systems
    • H04S1/002Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04SSTEREOPHONIC SYSTEMS 
    • H04S3/00Systems employing more than two channels, e.g. quadraphonic
    • H04S3/002Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Chemical Kinetics & Catalysis (AREA)
  • Materials Engineering (AREA)
  • Health & Medical Sciences (AREA)
  • Nanotechnology (AREA)
  • Plasma & Fusion (AREA)
  • Organic Chemistry (AREA)
  • Oil, Petroleum & Natural Gas (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • General Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Environmental & Geological Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biomedical Technology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Epidemiology (AREA)
  • Crystallography & Structural Chemistry (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Composite Materials (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Tone Control, Compression And Expansion, Limiting Amplitude (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

본 발명은 오디오 신호의 저주파 및 중주파 성분 보강 방법에 관한 것으로, 입력된 오디오 신호에 대하여 복수개의 밴드 패스 필터를 이용하여 소정의 주파수 대역의 오디오 신호에 대하여 필터링을 수행하고, 밴드 패스 필터링이 수행된 복수개의 오디오 신호를 이용하여 복수개의 고조파 신호를 생성한 후, 생성된 복수개의 고조파 신호를 입력된 오디오 신호와 결합함으로써, 저주파 및 중주파 성분의 에너지를 물리적으로 부스팅하지 않고, 인간의 지각 특성을 이용하여 저주파 및 중주파 성분을 보강할 수 있다.
저주파, 중주파, 보강, 강화, 고조파

Description

오디오 신호의 저주파 및 중주파 성분 보강 방법 및 그 장치{Method for enhancing Audio signal of low frequency and medium frequency and apparatus therefor}
도 1은 종래의 저주파 성분 보강 장치의 일 실시예를 도시한 도면이다.
도 2는 주파수 성분 보강을 위한 이상적인 고조파 신호를 설명하기 위하여 도시한 도면이다.
도 3은 본 발명에 따른 오디오 신호의 저주파 및 중주파 성분 보강 장치의 일 실시예를 도시한 도면이다.
도 4는 본 발명에 따른 고조파 신호 생성부에 의하여 생성된 고조파 신호의 일실시예를 도시한 도면이다.
도 5는 본 발명에 따라 신호의 크기가 조절된 고조파 신호의 일실시예를 설명하기 위하여 도시한 도면이다.
도 6은 본 발명에 따른 전처리 필터의 일실시예를 설명하기 위하여 도시한 도면이다.
도 7은 본 발명에 따른 후처리 필터의 일실시예를 설명하기 위하여 도시한 도면이다.
도 8은 본 발명에 따른 후처리 필터의 제2 실시예를 설명하기 위하여 도시한 도면이다.
도 9는 본 발명에 따른 오디오 신호의 저주파 및 중주파 성분 보강 방법을 설명하기 위하여 도시한 도면이다.
본 발명은 오디오 신호의 저주파 및 중주파 성분 보강 방법 및 그 장치에 관한 것이다.
노트북 PC나 MP3등 휴대용 기기에 탑재된 소형 스피커의 경우, 그 크기가 작다는 물리적인 한계로 인해 오디오 신호의 저주파 성분을 충실히 재생하기 힘들다. 저주파 성분의 충실한 재현이 힘들게 되면 결국 음질의 왜곡을 가져올 수 있다. 이러한 부작용을 해결하기 위해 다양한 방법들이 제안되었다.
도 1은 종래의 저주파 성분 보강 장치의 일 실시예를 도시한 도면이다.
도 1을 참조하면, 종래의 저주파 성분 보강 장치는 로우 패스 필터(100), SIN 함수 발생 모듈(122), COS 함수 발생 모듈(124), 밴드 패스 필터(130) 및 믹서(140)를 포함한다.
오디오 신호가 입력되면, 로우 패스 필터(100)는 채널별로 입력된 오디오 신호에 로우 패스 필터링을 수행하여 저주파 성분만(예컨대 120Hz 이하)을 추출하게 된다.
SIN 함수 발생 모듈(122) 및 COS 함수 발생 모듈(124)은 로우 패스 필터링 된 신호들을 변조하여 고조파 (harmonic frequency) 신호를 생성하게 된다.
밴드 패스 필터(130)는 각각 SIN 함수 및 COS 함수로 변조된 신호들에 대하여 밴드 패스 필터링을 수행하여 특정한 차수의 고조파 신호들만을 선별한다.
마지막으로, 믹서(140)는 밴드 패스 필터(130)에 의해 선별된 고조파 신호를 입력된 오디오 신호와 결합하여 각 채널별로 저주파 성분이 보강된 오디오 신호를 생성하게 된다.
이와 같이 고조파 신호를 이용하여 저주파 성분을 보강하는 방법은, 인간의 귀가 기본 주파수(fundamental frequency)의 배수가 되는 주파수의 음색을 듣게 되면 마치 그 기본 주파수에 해당되는 음색을 듣는 것과 같이 인지하게 된다는 음향학적 효과를 이용한다.
도 2는 주파수 성분 보강을 위한 이상적인 고조파 신호를 설명하기 위하여 도시한 도면이다.
도 2를 참조하면, 220Hz를 가지는 기본 주파수 성분과 고조파 신호들이 도시되어 있다. 도 2에서와 같이 기본 주파수 성분이 220Hz인 경우에는 220Hz의 배수가 되는 고조파 신호들, 즉 440Hz, 660Hz, 880Hz 등의 성분들이 주파수 성분 보강을 위한 이상적인 고조파 신호들이 된다. 이때, 이상적인 고조파 신호들은 도 2와 같이 그 주파수가 커질수록 크기가 작아진다.
이와 같이 생성된 이상적인 고조파 신호의 음색을 사람이 듣게 되면, 고조파 신호 각각의 음색이 마치 220Hz의 음색인 것처럼 느끼게 된다. 따라서, 이와 같은 고조파 신호를 이용하면 220Hz에 해당하는 음색을 가진 소리의 크기가 보강된 것처 럼 인지된다.
하지만, 종래의 저주파 성분 보강 장치는 도 2의 이상적인 고조파 신호와 같이 주파수가 커질수록 고조파 신호의 크기가 줄어드는 것이 아니라 모든 주파수에서 동일한 크기를 유지하여, 원래의 오디오 신호와 결합 되는 경우에 음색에 왜곡이 생겼다.
또한, 종래에는 중주파 성분을 보강하기 위하여 중주파수 대역의 오디오 신호의 에너지의 크기를 이퀄라이저를 이용하여 키우는 방법을 사용하였는데, 이와 같은 방법은 오디오 신호의 음색에 왜곡이 발생하는 문제점이 있었다.
이와 같이 종래의 저주파 성분 보강 방법 및 중주파 성분 보강 방법은 저주파 성분 및 중주파 성분의 보강을 위하여 음색의 심한 변화를 초래하게 되는 문제점이 있었다.
발명의 목적은 저주파 및 중주파 성분의 에너지를 물리적으로 부스팅하지 않고, 인간의 지각 특성을 이용하여 저주파 및 중주파 성분을 보강하는 오디오 신호의 저주파 및 중주파 성분 보강 방법 및 그 장치를 제공하는 것이다.
상기 목적을 달성하기 위한 본 발명에 따른 오디오 신호의 저주파 및 중주파 성분 보강 방법은 입력된 오디오 신호에 대하여 복수개의 밴드 패스 필터를 이용하여 소정의 주파수 대역의 오디오 신호에 대하여 필터링을 수행하는 단계; 상기 밴드 패스 필터링이 수행된 복수개의 오디오 신호를 이용하여 복수개의 고조파 신호 를 생성하는 단계; 및 상기 생성된 복수개의 고조파 신호를 상기 입력된 오디오 신호와 결합하는 단계를 포함한다.
바람직하게는 상기 필터링을 수행하는 단계는 60Hz부터 200Hz까지의 주파수 대역의 오디오 신호를 분리해내는 제1 밴드 패스 필터 및 200Hz부터 2KHz까지의 주파수 대역의 오디오 신호를 분리해내는 제2 밴드 패스 필터를 이용하여 필터링하는 것을 특징으로 한다.
바람직하게는 상기 고조파 신호를 생성하는 단계는 싱글 사이드 밴드(Single Side Band) 변조를 이용하여 상기 고조파를 생성하는 것을 특징으로 한다.
바람직하게는 상기 입력된 오디오 신호는 하이 패스 필터링이 수행된 오디오 신호인 것을 특징으로 한다.
바람직하게는 상기 입력된 오디오 신호는 소정의 주파수 대역의 오디오 신호의 에너지의 크기를 크게 한 신호인 것을 특징으로 한다.
바람직하게는 상기 입력된 오디오 신호는 2KHz부터 20KHz까지의 주파수 대역의 오디오 신호의 에너지의 크기를 크게 한 신호인 것을 특징으로 한다.
바람직하게는 본 발명에 따른 오디오 신호의 저주파 및 중주파 성분 보강 방법은 상기 생성된 고조파 신호의 크기를 조절하는 단계를 더 포함한다.
바람직하게는 본 발명에 따른 오디오 신호의 저주파 및 중주파 성분 보강 방법은 상기 생성된 복수개의 고조파 신호와 상기 입력된 오디오 신호가 결합 된 신호 중에 소정의 주파수 대역에 포함되는 신호의 에너지의 크기를 크게 하거나 작게 하는 단계를 더 포함한다.
바람직하게는 상기 에너지의 크기를 크게 하거나 작게 하는 단계는 2KHz부터 20KHz까지의 주파수 대역의 오디오 신호의 에너지의 크기를 작게 하는 것을 특징으로 한다.
바람직하게는 상기 에너지의 크기를 크게 하거나 작게 하는 단계는 0Hz부터 200Hz까지의 주파수 대역의 오디오 신호의 에너지의 크기를 크게 하는 것을 특징으로 한다.
또한, 상기 목적을 달성하기 위한 본 발명에 따른 오디오 신호의 저주파 및 중주파 성분 보강 장치는 입력된 오디오 신호에 대하여 소정의 주파수 대역의 오디오 신호에 대하여 필터링을 수행하는 복수개의 밴드 패스 필터를 포함하는 필터부;상기 밴드 패스 필터링이 수행된 복수개의 오디오 신호를 이용하여 복수개의 고조파 신호를 생성하는 고조파 신호 생성부; 및 상기 생성된 복수개의 고조파 신호를 상기 입력된 오디오 신호와 결합하는 신호 결합부를 포함한다.
바람직하게는 상기 필터부는 60Hz부터 200Hz까지의 주파수 대역의 오디오 신호를 분리해내는 제1 밴드 패스 필터 및 200Hz부터 2KHz까지의 주파수 대역의 오디오 신호를 분리해내는 제2 밴드 패스 필터를 포함한다.
바람직하게는 상기 고조파 신호 생성부는 싱글 사이드 밴드(Single Side Band) 변조를 이용하여 상기 고조파를 생성하는 것을 특징으로 한다.
바람직하게는 상기 필터부는 상기 입력된 오디오 신호에 대하여 하이 패스 필터링을 수행하는 하이 패스 필터를 더 포함한다.
바람직하게는 상기 필터부는 상기 입력된 오디오 신호 중에 소정의 주파수 대역의 오디오 신호의 에너지의 크기를 크게 하는 전처리 필터를 더 포함한다.
바람직하게는 본 발명에 따른 오디오 신호의 저주파 및 중주파 성분 보강 장치는 상기 생성된 고조파 신호의 크기를 조절하는 고조파 신호 조절부를 더 포함한다.
바람직하게는 본 발명에 따른 오디오 신호의 저주파 및 중주파 성분 보강 장치는 상기 생성된 복수개의 고조파 신호와 상기 입력된 오디오 신호가 결합 된 신호 중에 소정의 주파수 대역에 포함되는 신호의 에너지의 크기를 크게 하거나 작게 하는 후처리 필터를 더 포함한다.
또한, 상기 목적을 달성하기 위하여 본 발명은 입력된 오디오 신호에 대하여 복수개의 밴드 패스 필터를 이용하여 소정의 주파수 대역의 오디오 신호에 대하여 필터링을 수행하는 단계; 상기 밴드 패스 필터링이 수행된 복수개의 오디오 신호를 이용하여 복수개의 고조파 신호를 생성하는 단계; 및 상기 생성된 복수개의 고조파 신호를 상기 입력된 오디오 신호와 결합하는 단계를 포함하는 오디오 신호의 저주파 및 중주파 성분 보강 방법을 실행시키기 위한 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체를 제공한다.
이하에서는 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명한다.
도 3은 본 발명에 따른 오디오 신호의 저주파 및 중주파 성분 보강 장치의 일 실시예를 도시한 도면이다.
도 3을 참조하면, 본 발명에 따른 오디오 신호의 저주파 및 중주파 성분 보강 장치는 필터부(310), 고조파 신호 생성부(320), 고조파 신호 조절부(330) 및 신호 결합부(340)를 포함한다.
필터부(310)는 제1 밴드 패스 필터(312) 및 제2 밴드 패스 필터(314)를 포함한다.
제1 밴드 패스 필터(312)는 오디오 신호 중에서 저주파수 대역의 신호를 분리해 내는 역할을 한다.
이와 같이 저주파수 대역의 신호를 분리해내는데 로우 패스 필터가 아니라 밴드 패스 필터를 사용하는 이유는, 실제의 오디오 신호 재생 장치의 특성을 고려하여 재생되지 않는 대역에 포함되는 오디오 신호에 대해서는 별도의 처리를 수행하지 않게 하기 위해서이다.
즉, 일반적으로 저주파수 대역은 20Hz부터 200Hz 사이를 말하는데, 소형 스피커 등의 경우에는 60~70Hz이상의 주파수 대역에 속하는 오디오 신호만을 재생할 수 있는 경우가 있다. 따라서, 이 경우에는 200Hz 이하의 모든 오디오 신호에 대하여 처리를 수행할 필요 없이, 60Hz부터 200Hz까지의 주파수 대역에 포함되는 오디오 신호만을 분리하여 보강을 위한 처리를 수행하게 되는 것이다.
다만, 제1 밴드 패스 필터의 대역폭은 60Hz 내지 200Hz로 한정되지 않고, 재생 장치의 성능 및 구현예에 따라 더 넓은 대역폭으로 설정될 수 있다.
제2 밴드 패스 필터(314)는 오디오 신호 중에서 중주파수 대역의 신호를 분리해 내는 역할을 한다.
이때, 중주파수는 일반적으로 200Hz부터 2KHz까지의 대역을 말하는 것으로, 제2 밴드 패스 필터(314)의 대역폭도 200Hz 내지 2KHz로 결정될 수 있다.
다만, 제2 밴드 패스 필터의 대역폭은 200Hz부터 2KHz까지로 한정되지 않고, 구현예에 따라 더 넓은 대역폭으로 설정될 수 있다. 또한, 밴드 패스 필터는 2개로 한정되지 않고, 보다 대역을 세분화하여 복수개의 필터를 이용하여 필터링을 수행하는 것도 가능하다.
한편, 필터부(310)는 전처리 필터(미도시)와 하이 패스 필터(미도시)를 더 포함할 수 있다.
전처리 필터는 입력되는 오디오 신호의 고주파 성분의 에너지의 크기를 크게 하는 역할을 한다. 전처리 필터에 대해서는 도 6을 참조하여 후술한다.
하이 패스 필터는 오디오 신호를 재생할 때에 실제로 재생이 되지 않는 대역의 신호를 제거하여 저주파수 대역에 불필요하게 과도한 에너지가 집중되는 것을 막기 위하여 입력된 오디오 신호에 대하여 하이 패스 필터링을 수행하는 기능을 수행한다. 예컨대, 하이 패스 필터는 50Hz 이하의 오디오 신호를 제거하는 필터링을 수행할 수 있다.
이와 같이, 전처리 필터와 하이 패스 필터가 포함되는 경우에는 입력된 오디오 신호가 전처리 필터와 하이 패스 필터에 의하여 필터링을 거쳐 제1 밴드 패스 필터(312) 및 제2 밴드 패스 필터(314)로 전송된다. 또한, 후술할 신호 결합부(340)에서 고조파 신호와 결합 될 오디오 신호도 전처리 필터와 하이 패스 필터에 의하여 필터링을 거친 신호가 된다.
고조파 신호 생성부(320)는 밴드 패스 필터링이 수행된 복수개의 오디오 신호를 이용하여 복수개의 고조파 신호를 생성한다. 도 3에서는 제1 밴드 패스 필터(312)와 제2 밴드 패스 필터에 의하여 필터링이 수행된 2개의 오디오 신호를 이용하여 2개의 고조파 신호를 생성하게 된다.
이때, 고조파 신호는 싱글 사이드 밴드(Single Side Band) 변조를 이용하여 생성될 수 있다. 여기서 싱글 사이드 밴드 변조는 AM(Amplitude Modulation) 변조에 의하여 생성된 상측파대 또는 하측파대의 신호 중에서 어느 한쪽만을 사용하는 것을 말하며, 이와 같은 싱글 사이드밴드 변조 방식은 다른 방식에 비해 점유 주파수 대역폭이 반으로 줄고 송신전력이 크지 않아도 되어 소비전력도 적다는 장점이 있다. 다만, 변조 방법은 싱글 사이드 밴드 변조 방법에 한정되지 않고, 고조파를 생성할 수 있는 다양한 변조 방법들을 사용할 수 있다.
도 4는 본 발명에 따른 고조파 신호 생성부에 의하여 생성된 고조파 신호의 일실시예를 도시한 도면이다.
도 4는 변조 주파수가 50Hz인 경우의 고조파 신호들을 도시한 것으로, 100Hz의 주파수 성분에 대하여 200Hz, 300Hz 및 400Hz를 가지는 고조파 신호들이 도시되어 있다.
도 4에서 보는 것과 같이, 100Hz는 저주파 성분인데, 이와 같은 저주파 성분에 대한 고조파 신호들은 200Hz부터 400Hz까지의 중주파수 대역의 신호가 된다. 마찬가지로, 중주파수 대역의 신호에 대하여 고조파 신호를 생성하게 되면, 그 생성된 고조파 신호는 고주파수 대역의 신호가 된다. 이때, 고주파수 대역은 청각에 가 장 예민한 대역이어서 입력된 오디오 신호의 고주파수 대역에 고조파 신호들이 결합되면 음색의 왜곡을 심하게 느끼게 된다.
따라서 고주파수 대역에 위치하는 고조파 신호들에 의한 왜곡을 최소화할 필요가 있고, 이를 위하여 전술한 전처리 필터 또는 신호 결합부의 말단에 후처리 필터를 더 포함할 수 있다. 다만, 전처리 필터 및 후처리 필터에 대해서는 도 6 및 도 7을 참조하여 후술한다.
한편, 고조파 신호 생성부(330)는 제1 밴드 패스 필터(312) 및 제2 밴드 패스 필터(314)에 의하여 분리된 대역에 포함되는 모든 오디오 신호에 대하여 도 4와 같이 고조파 신호를 생성하게 된다.
고조파 신호 조절부(330)는 고조파 신호 생성부(320)에서 생성된 고조파 신호의 에너지의 크기를 조절한다.
도 5는 본 발명에 따라 신호의 크기가 조절된 고조파 신호의 일실시예를 설명하기 위하여 도시한 도면이다.
제1 신호의 그래프(510)는 저주파수 대역의 오디오 신호를 나타내고, 제2 신호의 그래프(520)는 본 발명에 따라 생성된 저주파 성분의 보강을 위한 고조파 신호들을 도시한 것이다. 제2 신호의 그래프(520)에서는 저주파수 대역의 오디오 신호는 작게 나타나는데, 고조파 신호들과 비교하여 볼 때, 사실상 무시해도 될 정도로 작은 크기를 가진다. 이것은 오디오 신호가 소형 스피커 등과 같이 작은 크기의 장치에서 출력되는 경우에 저주파 성분의 소리가 작게 나오는 것, 즉 에너지가 작게 되는 것을 의미한다.
도 3과 비교하여 볼 때, 도 5의 제2 신호의 그래프(520)는 주파수가 증가할 수록 그 에너지의 크기가 작게 되도록 조절되어 있다는 사실을 알 수 있다. 이와 같이 고조파 신호의 크기를 조절하는 이유는, 고조파 신호가 과도한 에너지를 가지는 경우에는 고조파 신호와 원래의 오디오 신호와 결합하게 되면 음색의 변화가 발생할 수 있기 때문에 이와 같은 음색의 변화를 최소화하기 위함이다.
신호 결합부(340)는 고조파 신호 조절부(330)에 의하여 크기가 조절된 고조파 신호와 입력된 오디오 신호를 결합하여 저주파 성분 및 중주파 성분을 보강한다.
도 6은 본 발명에 따른 전처리 필터의 일실시예를 설명하기 위하여 도시한 도면이다.
도 6을 참조하면, 2KHz부터 주파수가 증가할수록 이득 값이 증가하는 형태의 그래프가 도시되어 있다. 전처리 필터를 이용하여 필터링을 수행하면 도 6과 같이주파수가 증가할수록 고주파수 대역의 오디오 신호의 에너지의 크기가 점점 큰 값을 가지게 된다. 다만, 상기 주파수는 2KHz에 한정되지 않고, 구현예에 따라서 다른 주파수 값으로 변경될 수 있다.
이와 같이 입력된 오디오 신호에 대하여 전처리 필터링을 수행하는 이유는 입력된 오디오 신호의 고주파 성분의 에너지의 크기를 크게 하면, 고주파수 대역에 위치하는 고조파 신호와 결합되더라도 음색의 왜곡을 최소화할 수 있기 때문이다.
한편, 입력된 오디오 신호에 대하여 전처리 필터에 의한 필터링이 수행된 경우에는, 신호 결합부(340)는 전처리 필터링이 수행된 오디오 신호와 고조파 신호를 결합하게 된다.
도 7은 본 발명에 따른 후처리 필터의 일실시예를 설명하기 위하여 도시한 도면이다.
도 7을 참조하면, 2KHz부터 주파수가 증가할수록 이득 값이 감소하는 형태의 그래프가 도시되어 있다. 후처리 필터는 도3의 신호 결합부(340)의 말단에 연결되어 고조파 신호와 결합된 오디오 신호에 대하여 도 7의 형태를 갖는 필터를 이용하여 필터링을 수행한다.
이와 같이 저주파 및 중주파 성분이 보강된 오디오 신호 중에 고주파 성분의 에너지를 작게 하는 처리를 수행하는 이유는, 오디오 신호의 고주파 성분이 청각에 민감하기 때문에, 고주파 성분의 에너지를 작게 하여 고주파수 대역의 오디오 신호에 결합 된 고조파 신호에 의한 영향을 줄여, 음색의 왜곡을 최소화하기 위함이다
도 8은 본 발명에 따른 후처리 필터의 제2 실시예를 설명하기 위하여 도시한 도면이다.
도 8을 참조하면, 200Hz부터 주파수가 감소할수록 이득 값이 증가하는 형태의 그래프가 도시되어 있다.
전술한 바와 같이, 후처리 필터는 도3의 신호 결합부(340)의 말단에 연결되어 고조파 신호와 결합된 오디오 신호에 대하여 도 7의 형태를 갖는 필터를 이용하여 필터링을 수행한다.
이와 같이 저주파수 대역의 오디오 신호의 에너지의 크기를 크게 하는 이유는, 본 발명의 저주파수 대역의 오디오 신호의 에너지 보강을 충분히 시켜주기 위 함이다.
즉, 본 발명은 기본 주파수를 검출하여 그에 따른 고조파 신호를 생성하는 것이 아니라, 제1 밴드 패스 필터(312)에 의하여 분리된 대역의 모든 오디오 신호에 대하여 고조파 신호를 생성하기 때문에, 충분히 저주파수 대역의 오디오 신호가 보강되지 못할 수 있으므로, 이와 같은 필터를 이용하여 저주파수 대역의 오디오 신호의 에너지의 크기를 키워주는 보상 과정을 수행하는 것이다.
다만, 전술한 전처리 필터 및 후처리 필터에 의한 필터링 과정은 구현예에 따라서는 생략될 수 있다. 또한, 본 발명에서의 주파수 대역은 가청 주파수인 20Hz및 20KHz를 각각 하한 및 상한값으로 결정한다.
도 9는 본 발명에 따른 오디오 신호의 저주파 및 중주파 성분 보강 방법을 설명하기 위하여 도시한 도면이다.
910 단계에서는, 입력된 오디오 신호에 대하여 복수개의 밴드 패스 필터를 이용하여 필터링을 수행한다.
예컨대, 상기 복수개의 밴드 패스 필터는 제1 밴드 패스 필터는 저주파수 대역 즉 20Hz부터 200Hz까지의 주파수 대역의 오디오 신호를 분리해 내고, 제2 밴드 패스 필터는 중주파수 대역 즉, 200Hz부터 2KHz까지의 주파수 대역의 오디오 신호를 분리해 내도록 구성할 수 있다.
이때, 입력된 오디오 신호에 대하여 고주파 성분의 에너지 크기를 크게 하는 전처리 필터 및 저주파 성분을 제거하는 하이 패스 필터를 이용하여 필터링을 수행할 수 있다. 이때, 전처리 필터링을 수행하는 이유는 입력된 오디오 신호의 고주파 성분의 에너지의 크기를 크게 하면 고주파수 대역에 위치하는 고조파 신호에 의한 왜곡을 최소화할 수 있기 때문이고, 하이 패스 필터링을 수행하는 이유는 실제로 재생이 되지 않는 대역의 신호를 제거하여 저주파수 대역에 불필요하게 과도한 에너지가 집중되는 것을 막기 위함이다.
다만, 전처리 필터 및 하이 패스 필터를 이용한 필터링 과정은 구현예에 따라서 생략될 수 있다.
920 단계에서는, 밴드 패스 필터링이 수행된 복수개의 오디오 신호를 이용하여 복수개의 고조파 신호를 생성한다.
이때, 고조파 신호 생성을 위하여 싱글 사이드 밴드 변조 방법을 이용할 수 있다.
930 단계에서는, 생성된 복수개의 고조파 신호를 입력된 오디오 신호와 결합한다.
이때, 입력된 오디오 신호는 전처리 필터 및 하이 패스 필터를 이용하여 필터링이 수행된 오디오 신호일 수 있다.
또한, 고조파 신호와 결합된 오디오 신호에 대하여 고주파 성분의 에너지의 크기를 작게 하는 후처리 필터를 이용하여 필터링을 수행할 수 있는데, 이는 음색의 왜곡을 최소화하기 위함이다. 다만, 후처리 필터에 의한 필터링 과정은 구현예에 따라서는 생략될 수 있다.
한편, 상술한 본 발명의 실시예들은 컴퓨터에서 실행될 수 있는 프로그램으로 작성가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동 작시키는 범용 디지털 컴퓨터에서 구현될 수 있다.
상기 컴퓨터로 읽을 수 있는 기록매체는 마그네틱 저장매체(예를 들면, 롬, 플로피 디스크, 하드디스크 등), 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등) 및 캐리어 웨이브(예를 들면, 인터넷을 통한 전송)와 같은 저장매체를 포함한다.
이제까지 본 발명에 대하여 그 바람직한 실시예들을 중심으로 살펴보았다. 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자는 본 발명이 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 변형된 형태로 구현될 수 있음을 이해할 수 있을 것이다. 그러므로 개시된 실시예들은 한정적인 관점이 아니라 설명적인 관점에서 고려되어야 한다. 본 발명의 범위는 전술한 설명이 아니라 특허청구범위에 나타나 있으며, 그와 동등한 범위 내에 있는 모든 차이점은 본 발명에 포함된 것으로 해석되어야 할 것이다.
본 발명은 입력된 오디오 신호에 대하여 복수개의 밴드 패스 필터를 이용하여 밴드 패스 필터링을 수행하고, 밴드 패스 필터링이 수행된 복수개의 오디오 신호를 이용하여 복수개의 고조파 신호를 생성한 후, 그 생성된 복수개의 고조파 신호를 입력된 오디오 신호와 결합함으로써 저주파 및 중저파 성분의 에너지를 물리적으로 부스팅하지 않고, 인간의 지각 특성을 이용하여 저주파 및 중저파 성분을 보강할 수 있다.

Claims (21)

  1. 오디오 신호의 저주파 및 중주파 성분 보강 방법에 있어서,
    입력된 오디오 신호에 대하여 복수개의 밴드 패스 필터를 이용하여 필터링을 수행하는 단계;
    상기 밴드 패스 필터링이 수행된 복수개의 오디오 신호를 이용하여 복수개의 고조파 신호를 생성하는 단계; 및
    상기 생성된 복수개의 고조파 신호를 상기 입력된 오디오 신호와 결합하는 단계;
    상기 생성된 복수개의 고조파 신호와 상기 입력된 오디오 신호가 결합 된 신호 중에 소정의 주파수 대역에 포함되는 신호의 에너지의 크기를 크게 하거나 작게 하는 단계를 포함하는 것을 특징으로 하는 보강 방법.
  2. 제1항에 있어서,
    상기 필터링을 수행하는 단계는
    60Hz부터 200Hz까지의 주파수 대역의 오디오 신호를 분리해내는 제1 밴드 패스 필터 및 200Hz부터 2KHz까지의 주파수 대역의 오디오 신호를 분리해내는 제2 밴드 패스 필터를 이용하여 필터링하는 것을 특징으로 하는 보강 방법.
  3. 제1항에
    상기 고조파 신호를 생성하는 단계는
    싱글 사이드 밴드(Single Side Band) 변조를 이용하여 상기 고조파를 생성하는 것을 특징으로 하는 보강 방법.
  4. 제1항에 있어서,
    상기 입력된 오디오 신호는 하이 패스 필터링이 수행된 오디오 신호인 것을 특징으로 하는 보강 방법.
  5. 제1항에 있어서,
    상기 입력된 오디오 신호는 소정의 주파수 대역의 오디오 신호의 에너지의 크기를 크게 한 신호인 것을 특징으로 하는 보강 방법.
  6. 제5항에 있어서,
    상기 입력된 오디오 신호는 2KHz부터 20KHz까지의 주파수 대역의 오디오 신호의 에너지의 크기를 크게 한 신호인 것을 특징으로 하는 보강 방법.
  7. 제1항에 있어서,
    상기 생성된 고조파 신호의 크기를 조절하는 단계를 더 포함하는 것을 특징으로 하는 보강 방법.
  8. 삭제
  9. 제1항에 있어서,
    상기 에너지의 크기를 크게 하거나 작게 하는 단계는
    2KHz부터 20KHz까지의 주파수 대역의 오디오 신호의 에너지의 크기를 작게 하는 것을 특징으로 하는 보강 방법.
  10. 제1항에 있어서,
    상기 에너지의 크기를 크게 하거나 작게 하는 단계는
    0Hz부터 200Hz까지의 주파수 대역의 오디오 신호의 에너지의 크기를 크게 하는 것을 특징으로 하는 보강 방법.
  11. 오디오 신호의 저주파 및 중주파 성분 보강 장치에 있어서,
    입력된 오디오 신호에 대하여 필터링을 수행하는 복수개의 밴드 패스 필터를 포함하는 필터부;
    상기 밴드 패스 필터링이 수행된 복수개의 오디오 신호를 이용하여 복수개의 고조파 신호를 생성하는 고조파 신호 생성부; 및
    상기 생성된 복수개의 고조파 신호를 상기 입력된 오디오 신호와 결합하는 신호 결합부;
    상기 생성된 복수개의 고조파 신호와 상기 입력된 오디오 신호가 결합 된 신호 중에 소정의 주파수 대역에 포함되는 신호의 에너지의 크기를 크게 하거나 작게 하는 후처리 필터를 포함하는 것을 특징으로 하는 보강 장치.
  12. 제11항에 있어서,
    상기 필터부는
    60Hz부터 200Hz까지의 주파수 대역의 오디오 신호를 분리해내는 제1 밴드 패스 필터 및 200Hz부터 2KHz까지의 주파수 대역의 오디오 신호를 분리해내는 제2 밴드 패스 필터를 포함하는 것을 특징으로 하는 보강 장치.
  13. 제11항에
    상기 고조파 신호 생성부는
    싱글 사이드 밴드(Single Side Band) 변조를 이용하여 상기 고조파를 생성하는 것을 특징으로 하는 보강 장치.
  14. 제11항에 있어서,
    상기 필터부는
    상기 입력된 오디오 신호에 대하여 하이 패스 필터링을 수행하는 하이 패스 필터를 더 포함하는 것을 특징으로 하는 보강 장치.
  15. 제11항에 있어서,
    상기 필터부는
    상기 입력된 오디오 신호 중에 소정의 주파수 대역의 오디오 신호의 에너지의 크기를 크게 하는 전처리 필터를 더 포함하는 것을 특징으로 하는 보강 장치.
  16. 제15항에 있어서,
    상기 전처리 필터는
    상기 입력된 오디오 신호 중에 2KHz부터 20KHz까지의 주파수 대역의 오디오 신호의 에너지의 크기를 크게 하는 것을 특징으로 하는 보강 장치.
  17. 제11항에 있어서,
    상기 생성된 고조파 신호의 크기를 조절하는 고조파 신호 조절부를 더 포함하는 것을 특징으로 하는 보강 장치.
  18. 삭제
  19. 제11항에 있어서,
    상기 후처리 필터는
    2KHz부터 20KHz까지의 주파수 대역의 오디오 신호의 에너지의 크기를 작게 하는 것을 특징으로 하는 보강 장치.
  20. 제11항에 있어서,
    상기 후처리 필터는
    0Hz부터 200Hz까지의 주파수 대역의 오디오 신호의 에너지의 크기를 크게 하는 것을 특징으로 하는 보강 장치.
  21. 제1항 내지 제7항, 제9항 및 10항 중 어느 한 항의 방법을 실행시키기 위한 프로그램이 기록된 컴퓨터로 읽을 수 있는 기록 매체.
KR1020070000303A 2007-01-02 2007-01-02 오디오 신호의 저주파 및 중주파 성분 보강 방법 및 그장치 KR101377135B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020070000303A KR101377135B1 (ko) 2007-01-02 2007-01-02 오디오 신호의 저주파 및 중주파 성분 보강 방법 및 그장치
US11/761,417 US8582785B2 (en) 2007-01-02 2007-06-12 Method and apparatus to enhance low frequency components and medium frequency components of audio signal
CN200710138219.8A CN101217831B (zh) 2007-01-02 2007-07-31 增强音频信号的低频分量与中频分量的方法与装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070000303A KR101377135B1 (ko) 2007-01-02 2007-01-02 오디오 신호의 저주파 및 중주파 성분 보강 방법 및 그장치

Publications (2)

Publication Number Publication Date
KR20080063647A KR20080063647A (ko) 2008-07-07
KR101377135B1 true KR101377135B1 (ko) 2014-03-21

Family

ID=39584065

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070000303A KR101377135B1 (ko) 2007-01-02 2007-01-02 오디오 신호의 저주파 및 중주파 성분 보강 방법 및 그장치

Country Status (3)

Country Link
US (1) US8582785B2 (ko)
KR (1) KR101377135B1 (ko)
CN (1) CN101217831B (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11282535B2 (en) 2017-10-25 2022-03-22 Samsung Electronics Co., Ltd. Electronic device and a controlling method thereof

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
ES2906085T3 (es) 2009-10-21 2022-04-13 Dolby Int Ab Sobremuestreo en un banco de filtros de reemisor combinado
KR101920029B1 (ko) 2012-08-03 2018-11-19 삼성전자주식회사 모바일 장치 및 제어방법
CN105635908B (zh) * 2015-12-21 2019-04-02 深圳Tcl数字技术有限公司 低频信号重现方法及系统
CN110021304A (zh) * 2019-05-10 2019-07-16 腾讯音乐娱乐科技(深圳)有限公司 一种音频处理方法、装置、终端及存储介质
CN112532208B (zh) * 2019-09-18 2024-04-05 惠州迪芬尼声学科技股份有限公司 谐波发生器及用于生成谐波的方法
CN110690903A (zh) * 2019-09-18 2020-01-14 南京中感微电子有限公司 一种电子设备及音频模数转换方法
US11576005B1 (en) * 2021-07-30 2023-02-07 Meta Platforms Technologies, Llc Time-varying always-on compensation for tonally balanced 3D-audio rendering

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004101797A (ja) * 2002-09-09 2004-04-02 Matsushita Electric Ind Co Ltd 音響信号処理装置及びその方法
KR100619066B1 (ko) 2005-01-14 2006-08-31 삼성전자주식회사 오디오 신호의 저음역 강화 방법 및 장치

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3620631A (en) * 1969-08-26 1971-11-16 Collins Radio Co Gain-controlled amplifier
US4608903A (en) * 1984-09-19 1986-09-02 Kawai Musical Instrument Mfg. Co., Ltd. Single side-band harmonic extension in a polyphonic tone synthesizer
US6335973B1 (en) * 1996-01-11 2002-01-01 Qwest Communications International Inc. System and method for improving clarity of audio systems
US5930373A (en) 1997-04-04 1999-07-27 K.S. Waves Ltd. Method and system for enhancing quality of sound signal
US6606388B1 (en) * 2000-02-17 2003-08-12 Arboretum Systems, Inc. Method and system for enhancing audio signals
SG123638A1 (en) * 2004-12-31 2006-07-26 St Microelectronics Asia Method and system for enhancing bass effect in audio signals
CN100561576C (zh) 2005-10-25 2009-11-18 芯晟(北京)科技有限公司 一种基于量化信号域的立体声及多声道编解码方法与系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004101797A (ja) * 2002-09-09 2004-04-02 Matsushita Electric Ind Co Ltd 音響信号処理装置及びその方法
KR100619066B1 (ko) 2005-01-14 2006-08-31 삼성전자주식회사 오디오 신호의 저음역 강화 방법 및 장치

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11282535B2 (en) 2017-10-25 2022-03-22 Samsung Electronics Co., Ltd. Electronic device and a controlling method thereof

Also Published As

Publication number Publication date
KR20080063647A (ko) 2008-07-07
US20080159563A1 (en) 2008-07-03
CN101217831B (zh) 2014-06-25
CN101217831A (zh) 2008-07-09
US8582785B2 (en) 2013-11-12

Similar Documents

Publication Publication Date Title
KR101377135B1 (ko) 오디오 신호의 저주파 및 중주파 성분 보강 방법 및 그장치
EP1044583B1 (en) Means for bass enhancement in an audio system
KR100619066B1 (ko) 오디오 신호의 저음역 강화 방법 및 장치
JP4869352B2 (ja) 音声データストリームを処理する装置および方法
JP4666229B2 (ja) オーディオ再生装置
JP5074115B2 (ja) 音響信号処理装置及び音響信号処理方法
CN111970627B (zh) 音频信号的增强方法、装置、存储介质和处理器
KR101329308B1 (ko) 오디오 신호의 저주파 성분 보강 방법 및 그 장치, 오디오신호의 기본 주파수 계산 방법 및 그 장치
CN108989950A (zh) 自适应低音处理系统
KR101489035B1 (ko) 오디오 신호 프로세싱을 위한 방법 및 장치
US20010036278A1 (en) Ultra bass II
JP6155132B2 (ja) 低域補完装置および低域補完方法
CN115346544A (zh) 音频信号处理方法、装置、存储介质和程序产品
KR100835637B1 (ko) 음성 신호 처리 장치 및 그 동작방법
WO2013024508A1 (ja) 音声処理装置、再生装置、音声処理方法およびプログラム
JP2024152722A (ja) ソース分離に基づく仮想低音強化
JP2008219844A (ja) 高効率低音強調技術
JP2006270698A (ja) 低音増強装置
JP2014175715A (ja) 音響再生装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E90F Notification of reason for final refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee