JP5282523B2 - 基本周波数抽出方法、基本周波数抽出装置、およびプログラム - Google Patents
基本周波数抽出方法、基本周波数抽出装置、およびプログラム Download PDFInfo
- Publication number
- JP5282523B2 JP5282523B2 JP2008273605A JP2008273605A JP5282523B2 JP 5282523 B2 JP5282523 B2 JP 5282523B2 JP 2008273605 A JP2008273605 A JP 2008273605A JP 2008273605 A JP2008273605 A JP 2008273605A JP 5282523 B2 JP5282523 B2 JP 5282523B2
- Authority
- JP
- Japan
- Prior art keywords
- information
- fundamental frequency
- value
- cepstrum
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Measurement Of Mechanical Vibrations Or Ultrasonic Waves (AREA)
Description
まず、本発明の基本周波数抽出方法について、図1〜図4を用いて説明する。
従来の手法で求めた基本周波数をひし形「◇」で示し(図3の30に示すデータ群参照)、本発明を適用して求めた基本周波数を丸でプロットした(図3の31に示すデータ群参照)。本データは典型的なオフィス環境で男性が発話したものを用い、パワースペクトルの移動平均処理(S4の平滑化処理)を、連続する15データずつで行い、本発明では、その中央値判定には、連続する9データずつ昇順(または降順)にソートした際の5番目のデータ値を、前記9データの中間データである5番目のデータ値として入れ替えることにより算出した。100Hz付近のデータが本被験者の基本周波数である。音素(発話の最小単位“あ”、“い”などの一単語(一音節))単位での、立ち上がり、立下りにおける基本周波数の検出精度は欠落する(=本手法では検出されず欠落する)が、発話中の主要な基本周波数成分は十分に抽出されている。たとえば環境ノイズに起因する誤検出を効果的に抑制できる(この環境ノイズはオフィス等の実環境におけるノイズ成分中の大部分を占めるものであり、調和構造を有しないものである)。よって本発明の方法により、全体的に良好な基本周波数の抽出を安定して行うことが可能になる。なお環境ノイズとして、たとえば機械の動作音やキーボード操作音、歩行時のノイズや空調などが挙げられる。
次に図6を用いて、本発明の基本周波数抽出装置について説明する。
21 パワースペクトルデータ
22 平滑処理データ
23 差分データ
24 ケプストラムデータ
25 帯域制限による高周波のノイズ成分を抑制した部分
26 ローカルピーク
26a ピーク値
30 音声以外のノイズ等による誤検出が多数検出された例(従来の手法で求めた基本周波数のデータ群)
31 本発明を適用して求めた基本周波数のデータ群
60 前処理部
61 パワースペクトル処理部
62 平滑化(帯域制限)処理部
63 差分処理部
64 ケプストラム処理部
65 ピーク値検出部
66 中央値判定部
67 後処理部
68 演算処理部
69−1 分散値算出部
69−2 平滑化処理部
Claims (9)
- 音声データから基本周波数情報を抽出する基本周波数抽出方法であって、少なくともフーリエ変換と対数演算処理によるパワースペクトル情報の算出処理工程と、フーリエ変換もしくは逆フーリエ変換によるケプストラム情報抽出処理を含む基本周波数候補抽出工程と、前記基本周波数候補抽出工程後に、複数の連続するケプストラム情報を、連続する所定数ごとに比較処理を行い、前記比較結果により得られる中央値またはその近傍の代表値のケフレンシー情報から、基本周波数を決定し、音素単位の立ち上がり又は立ち下がりと判断された場合に前記中央値からシフトされた値に基づいて前記基本周波数を決定する基本周波数情報抽出工程を有することを特徴とする基本周波数抽出方法。
- 前記比較処理は、前記ケプストラム情報を平滑化処理により演算処理したデータ群を用いて行うことを特徴とする請求項1に記載の基本周波数抽出方法。
- 前記パワースペクトル情報の算出処理工程で切り出された所定数の音声データごとの分散値を算出し、前記閾値未満の所定数の音声データに対して、前記パワースペクトル情報の算出処理工程と、基本周波数候補抽出工程とを省略する判定処理を行うことを特徴とする請求項1又は2に記載の基本周波数抽出方法。
- 音声データから基本周波数情報を抽出する装置であって、
少なくともフーリエ変換と対数演算処理によるパワースペクトル情報の変換処理手段と、フーリエ変換もしくは逆フーリエ変換処理によるケプストラム情報抽出過程から基本周波数情報を算出する基本周波数情報抽出手段とを前段に有し、
所定数のケプストラム情報を入力し、前記所定数のケプストラム情報ごとに比較を行い、前記比較結果により得られる中央値またはその近傍の代表値のケフレンシー情報から基本周波数を決定し、音素単位の立ち上がり又は立ち下がりと判断された場合に前記中央値からシフトされた値に基づいて前記基本周波数を決定する中央値判定手段を有し、
前記複数の所定数のケプストラム情報が当該前段から前記中央値判定手段に入力されることを特徴とする基本周波数抽出装置。 - 前記中央値判定手段は、所定数のケプストラム情報ごとにケプストラム値の比較を行う際に、前記ケプストラム情報を平滑化処理部により平滑化処理されたデータ群を用いて前記中央値比較処理を行うことを特徴とする請求項4に記載の基本周波数抽出装置。
- 前記基本周波数抽出装置において、前記パワースペクトル情報の変換処理手段により切り出された所定数のデータごとの分散値を算出し、前記分散値が閾値未満の前記所定数のデータに対して、前記パワースペクトル情報の変換処理手段と、基本周波数情報抽出手段における処理を省略する判定手段を有することを特徴とする請求項第4又は5に記載の基本周波数抽出装置。
- 音声データから基本周波数情報を抽出させるプログラムであって、
コンピュータに、
少なくともフーリエ変換と対数演算によるパワースペクトル情報の変換処理と、フーリエ変換もしくは逆フーリエ変換処理によるケプストラム情報抽出過程からピッチ情報を算出するピッチ情報抽出処理により基本周波数情報を抽出する処理とを有し、前記ピッチ情報抽出処理において所定数のケプストラム情報ごとの比較を行い、前記比較結果により得られる中央値およびその近傍を含む代表値のケフレンシー情報から基本周波数を決定し、前記基本周波数候補抽出工程中に音素単位の立ち上がり又は立ち下がりと判断された場合に前記中央値からシフトされた値に基づいて前記基本周波数を決定する処理を実行させるためのプログラム。 - 前記コンピュータに、所定数のケプストラム情報ごとのケプストラム値の比較を行う際に、前記ケプストラム情報を平滑化処理したデータ群を用いて前記中央値比較処理を行わせることを特徴とする請求項7に記載のプログラム。
- 前記コンピュータが、前記パワースペクトル情報算出処理により切り出された所定数のデータごとの分散値を算出し、前記分散値が閾値未満のデータの場合には前記パワースペクトル情報の算出処理と、前記基本周波数候補抽出処理とを省略し、
前記コンピュータに、前記分散値が閾値以上のデータの場合には続行する判定処理を行わせることを特徴とする請求項7又は8に記載のプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008273605A JP5282523B2 (ja) | 2008-10-23 | 2008-10-23 | 基本周波数抽出方法、基本周波数抽出装置、およびプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008273605A JP5282523B2 (ja) | 2008-10-23 | 2008-10-23 | 基本周波数抽出方法、基本周波数抽出装置、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2010102129A JP2010102129A (ja) | 2010-05-06 |
JP5282523B2 true JP5282523B2 (ja) | 2013-09-04 |
Family
ID=42292827
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008273605A Expired - Fee Related JP5282523B2 (ja) | 2008-10-23 | 2008-10-23 | 基本周波数抽出方法、基本周波数抽出装置、およびプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5282523B2 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110379438A (zh) * | 2019-07-24 | 2019-10-25 | 山东省计算中心(国家超级计算济南中心) | 一种语音信号基频检测与提取方法及系统 |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5017441B2 (ja) * | 2010-10-28 | 2012-09-05 | 株式会社東芝 | 携帯型電子機器 |
CN106776664A (zh) * | 2015-11-25 | 2017-05-31 | 北京搜狗科技发展有限公司 | 一种基频序列处理方法及装置 |
KR102164306B1 (ko) * | 2019-12-31 | 2020-10-12 | 브레인소프트주식회사 | 디제이변환에 기초한 기본주파수 추출 방법 |
KR102382208B1 (ko) * | 2020-07-21 | 2022-04-04 | 브레인소프트주식회사 | 복합음을 구성하는 순음의 추출 방법 |
CN112597331A (zh) * | 2020-12-25 | 2021-04-02 | 腾讯音乐娱乐科技(深圳)有限公司 | 显示音域匹配信息的方法、装置、设备和存储介质 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2558658B2 (ja) * | 1986-11-13 | 1996-11-27 | 博也 藤崎 | 基本周波数分析装置 |
JPH04176244A (ja) * | 1990-11-09 | 1992-06-23 | Hitachi Ltd | 音声情報処理装置 |
JP2932996B2 (ja) * | 1996-02-07 | 1999-08-09 | 日本電気株式会社 | 高調波ピッチ検出装置 |
JP3700890B2 (ja) * | 1997-07-09 | 2005-09-28 | ソニー株式会社 | 信号識別装置及び信号識別方法 |
-
2008
- 2008-10-23 JP JP2008273605A patent/JP5282523B2/ja not_active Expired - Fee Related
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110379438A (zh) * | 2019-07-24 | 2019-10-25 | 山东省计算中心(国家超级计算济南中心) | 一种语音信号基频检测与提取方法及系统 |
CN110379438B (zh) * | 2019-07-24 | 2020-05-12 | 山东省计算中心(国家超级计算济南中心) | 一种语音信号基频检测与提取方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
JP2010102129A (ja) | 2010-05-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108198547B (zh) | 语音端点检测方法、装置、计算机设备和存储介质 | |
Moattar et al. | A simple but efficient real-time voice activity detection algorithm | |
JP5505896B2 (ja) | 発話区間検出システム、方法及びプログラム | |
EP2083417B1 (en) | Sound processing device and program | |
WO2014153800A1 (zh) | 语音识别系统 | |
CN108305639B (zh) | 语音情感识别方法、计算机可读存储介质、终端 | |
JP3006677B2 (ja) | 音声認識装置 | |
CN112951259B (zh) | 音频降噪方法、装置、电子设备及计算机可读存储介质 | |
JP5282523B2 (ja) | 基本周波数抽出方法、基本周波数抽出装置、およびプログラム | |
US20050143997A1 (en) | Method and apparatus using spectral addition for speaker recognition | |
CN108682432B (zh) | 语音情感识别装置 | |
Labied et al. | An overview of automatic speech recognition preprocessing techniques | |
Pao et al. | Combining acoustic features for improved emotion recognition in mandarin speech | |
JP5803125B2 (ja) | 音声による抑圧状態検出装置およびプログラム | |
Revathy et al. | Performance comparison of speaker and emotion recognition | |
JP4736632B2 (ja) | ボーカル・フライ検出装置及びコンピュータプログラム | |
Sadjadi et al. | Robust front-end processing for speaker identification over extremely degraded communication channels | |
KR100744288B1 (ko) | 음성 신호에서 음소를 분절하는 방법 및 그 시스템 | |
JP3046029B2 (ja) | 音声認識システムに使用されるテンプレートに雑音を選択的に付加するための装置及び方法 | |
Shome et al. | Non-negative frequency-weighted energy-based speech quality estimation for different modes and quality of speech | |
JP4677548B2 (ja) | パラ言語情報検出装置及びコンピュータプログラム | |
Sudhakar et al. | Automatic speech segmentation to improve speech synthesis performance | |
Tomchuk | Spectral masking in MFCC calculation for noisy speech | |
JP5157474B2 (ja) | 音処理装置およびプログラム | |
JP2012220607A (ja) | 音認識方法及び装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20110811 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20110818 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120619 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120626 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120820 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130219 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130408 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130430 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130513 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 5282523 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
LAPS | Cancellation because of no payment of annual fees |