[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

CN113645531A - 一种耳机虚拟空间声回放方法、装置、存储介质及耳机 - Google Patents

一种耳机虚拟空间声回放方法、装置、存储介质及耳机 Download PDF

Info

Publication number
CN113645531A
CN113645531A CN202110896744.6A CN202110896744A CN113645531A CN 113645531 A CN113645531 A CN 113645531A CN 202110896744 A CN202110896744 A CN 202110896744A CN 113645531 A CN113645531 A CN 113645531A
Authority
CN
China
Prior art keywords
sound signal
function
hrtf
sub
sound
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110896744.6A
Other languages
English (en)
Other versions
CN113645531B (zh
Inventor
高敬源
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Xinlijia Information Technology Co ltd
Original Assignee
Guangzhou Xinlijia Information Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Xinlijia Information Technology Co ltd filed Critical Guangzhou Xinlijia Information Technology Co ltd
Priority to CN202110896744.6A priority Critical patent/CN113645531B/zh
Priority to US18/685,843 priority patent/US20240236613A1/en
Priority to PCT/CN2021/125220 priority patent/WO2023010691A1/zh
Publication of CN113645531A publication Critical patent/CN113645531A/zh
Application granted granted Critical
Publication of CN113645531B publication Critical patent/CN113645531B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/10—Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1083—Reduction of ambient noise
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/033—Headphones for stereophonic communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/002—Non-adaptive circuits, e.g. manually adjustable or static, for enhancing the sound image or the spatial distribution
    • H04S3/004—For headphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S3/00—Systems employing more than two channels, e.g. quadraphonic
    • H04S3/008—Systems employing more than two channels, e.g. quadraphonic in which the audio signals are in digital form, i.e. employing more than two discrete digital channels
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • H04S7/303—Tracking of listener position or orientation
    • H04S7/304—For headphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/307—Frequency adjustment, e.g. tone control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/308—Electronic adaptation dependent on speaker or headphone connection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2201/00—Details of transducers, loudspeakers or microphones covered by H04R1/00 but not provided for in any of its subgroups
    • H04R2201/10—Details of earpieces, attachments therefor, earphones or monophonic headphones covered by H04R1/10 but not provided for in any of its subgroups
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/01—Multi-channel, i.e. more than two input channels, sound reproduction with two speakers wherein the multi-channel information is substantially preserved
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/11—Positioning of individual sound objects, e.g. moving airplane, within a sound field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/13—Aspects of volume control, not necessarily automatic, in stereophonic sound systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2420/00—Techniques used stereophonic systems covered by H04S but not provided for in its groups
    • H04S2420/01—Enhancing the perception of the sound image or of the spatial distribution using head related transfer functions [HRTF's] or equivalents thereof, e.g. interaural time difference [ITD] or interaural level difference [ILD]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Stereophonic System (AREA)

Abstract

一种耳机虚拟空间声回放方法，根据待虚拟声源的空间方位信息，对输入的原始声音信号A0通过音色均衡函数C进行滤波处理，获得均衡声音信号AC；再对均衡声音信号AC进行HRTF函数滤波处理，输出左耳声音信号AL和右耳声音信号AR。其中，所述空间方位信息为待虚拟声源的水平面方位角θ、垂直面方位角
Figure DDA0003198166380000011
所述均衡声音信号AC与所述原始声音信号A0的关系表达式为：AC＝A0C。本发明使无空间听觉效果的原始声音信号通过HRTF函数滤波产生空间听觉效果的同时，对原始声音信号进行音色均衡减少了虚拟空间声回放时的音色改变且该方法不会影响和改变原始HRTF的空间定位性能。

Description

一种耳机虚拟空间声回放方法、装置、存储介质及耳机
技术领域
本发明涉及虚拟听觉技术领域，尤其是涉及一种音色均衡后的耳机虚拟空间声回放方法、装置及存储介质，以及一种具有虚拟空间回放效果的耳机。
背景技术
虚拟空间声回放技术是通过模拟声源到双耳的声学传输过程的方式，对无空间听觉效果的原始声音信号通过模拟后输出的声音在耳机回放时产生相应的空间听觉，即模拟声源从特定或不同的空间方位发出的空间听觉效果。如图1所示，现有虚拟空间声回放技术主要利用头相关传递函数(以下简称为HRTF函数)对无空间听觉效果的原始声音信号A0进行滤波处理，控制和产生等效的双耳声压，得到具有空间听觉效果的双耳声音信号，分别通过耳机输出左耳声音信号AL'和右耳声音信号AR'，听者通过耳机中的左耳声音信号AL'和右耳声音信号AR'便可感觉到声音是来自于的某一个特定的空间方位。该HRTF函数是自由场情况下从模拟声源到双耳的声学传递函数，其包括HRTF左耳函数和HRTF右耳函数。利用HRTF函数可实现在便携式移动设备中体验影院般的沉浸式音效。
由于HRTF函数是必须改变输入的原始声音信号A0的频率响应曲线来传递3D空间的定位线索，因此通过HRTF函数产生3D空间回放效果时必然会导致声音信号的频谱畸变，尤其是声音中高频段部分的频谱畸变，而声音的频谱畸变表现出来就是声音在回放时音色的改变。目前，通过HRTF函数处理后产生3D空间回放效果和保持音色不变是一对相互矛盾的技术问题。
发明内容
本发明的目的在于克服现有技术的缺点与不足，提供一种耳机虚拟空间声回放的音色均衡方法，其可进一步改善空间声回放的音色，同时可灵活适应多种音效需求。
本发明是通过以下技术方案实现的：一种耳机虚拟空间声回放方法，包括：
根据待虚拟声源的空间方位信息，对输入的原始声音信号A0通过音色均衡函数C进行滤波处理，获得均衡声音信号AC；再对均衡声音信号AC进行HRTF函数滤波处理，输出左耳声音信号AL和右耳声音信号AR。
其中，所述待虚拟声源的空间方位信息为水平面方位角θ、垂直面方位角
Figure BDA0003198166360000021
所述均衡声音信号AC与所述原始声音信号A0的关系表达式为：AC＝A0C，所述音色均衡函数C为
Figure BDA0003198166360000022
其中f为所述原始声音信号A0的频率，f0为分频点，H为HRTF函数的幅度谱，K0为均衡增益因子，G0为整体增益因子。
相对于现有技术，本发明使无空间听觉效果的原始声音信号通过HRTF函数滤波产生空间听觉效果的同时，对原始声音信号进行音色均衡减少了虚拟空间声回放时的音色改变且该方法不会影响和改变原始HRTF的空间定位性能。
进一步地，所述原始声音信号包括至少两个并行的子原始声音信号，每一子原始声音信号对应一子待虚拟声源的空间方位信息，每一子原始声音信号通过音色均衡函数C滤波处理得到对应子均衡声音信号；再对每一子均衡声音信号进行HRTF函数滤波处理得到对应子左耳声音信号和子右耳声音信号。
进一步地，所述分频点f0的取值为400Hz≤f0≤1.5kHz范围中的任意一频率值，该范围的分频点能使音色均衡获得更好的效果。
进一步地，所述均衡增益因子K0的表达式为
Figure BDA0003198166360000023
其中，Hf0为所述HRTF函数的幅度谱H在分频点f0的取值
Figure BDA0003198166360000024
Figure BDA0003198166360000025
为HRTF左耳函数HL在分频点f0的取值
Figure BDA0003198166360000026
Figure BDA0003198166360000027
为HRTF右耳函数HR在分频点f0的取值
Figure BDA0003198166360000028
进一步地，所述均衡增益因子K0的表达式为
Figure BDA0003198166360000029
此时均衡增益因子K0可设置为由听者根据自身需求调节的值。
基于同一发明构思，本发明还提供一种耳机虚拟空间声回放装置，包括：音色均衡滤波模块、HRTF滤波模块，其中音色均衡滤波模块获取原始声音信号A0及待虚拟声源的空间方位信息，然后依据待虚拟声源的空间方位信息对原始声音信号A0通过音色均衡函数C进行滤波处理，输出均衡声音信号AC；HRTF滤波模块获取均衡声音信号AC对并对其通过HRTF函数进行滤波处理，输出左耳声音信号AL和右耳声音信号AR。
其中，所述待虚拟声源的空间方位信息为水平面方位角θ、垂直面方位角
Figure BDA0003198166360000031
所述均衡声音信号AC与所述原始声音信号A0的关系表达式为：AC＝A0C，所述音色均衡函数C为
Figure BDA0003198166360000032
其中f为所述原始声音信号A0的频率，f0为分频点，H为HRTF函数的幅度谱，K0为均衡增益因子，G0为整体增益因子。
进一步地，所述原始声音信号包括至少两个并行的子原始声音信号，每一子原始声音信号对应一子待虚拟声源的空间方位信息，每一子原始声音信号通过音色均衡函数C滤波处理得到对应子均衡声音信号；再对每一子均衡声音信号进行HRTF函数滤波处理得到对应子左耳声音信号和子右耳声音信号。
进一步地，所述分频点f0的取值为400Hz≤f0≤1.5kHz范围中的任意一频率值。
进一步地，所述均衡增益因子K0的表达式为
Figure BDA0003198166360000033
其中，Hf0为所述HRTF函数的幅度谱H在分频点f0的取值
Figure BDA0003198166360000034
Figure BDA0003198166360000035
为HRTF左耳函数HL在分频点f0的取值
Figure BDA0003198166360000036
Figure BDA0003198166360000037
为HRTF右耳函数HR在分频点f0的取值
Figure BDA0003198166360000038
进一步地，所述均衡增益因子K0的表达式为
Figure BDA0003198166360000041
此时均衡增益因子K0可设置为由听者根据自身需求调节的值。
基于同一发明构思，本发明还提供一种耳机虚拟空间声回放的存储介质，该存储介质作为计算机可读存储介质，主要用于存储程序，该程序包括根据待虚拟声源的空间方位信息，对输入的原始声音信号A0通过音色均衡函数C进行滤波处理，获得均衡声音信号AC；再对均衡声音信号AC进行HRTF函数滤波处理，输出左耳声音信号AL和右耳声音信号AR；
其中，所述待虚拟声源的空间方位信息为水平面方位角θ、垂直面方位角
Figure BDA0003198166360000042
所述均衡声音信号AC与所述原始声音信号A0的关系表达式为：AC＝A0C，所述音色均衡函数C为
Figure BDA0003198166360000043
其中f为所述原始声音信号A0的频率，f0为分频点，H为HRTF函数的幅度谱，K0为均衡增益因子，G0为整体增益因子。
进一步地，所述原始声音信号包括至少两个并行的子原始声音信号，每一子原始声音信号对应一子待虚拟声源的空间方位信息，每一子原始声音信号通过音色均衡函数C滤波处理得到对应子均衡声音信号；再对每一子均衡声音信号进行HRTF函数滤波处理得到对应子左耳声音信号和子右耳声音信号。
进一步地，所述分频点f0的取值为400Hz≤f0≤1.5kHz范围中的任意一频率值。
进一步地，所述均衡增益因子K0的表达式为
Figure BDA0003198166360000044
其中，
Figure BDA0003198166360000045
为所述HRTF函数的幅度谱H在分频点f0的取值
Figure BDA0003198166360000046
Figure BDA0003198166360000047
为HRTF左耳函数HL在分频点f0的取值
Figure BDA0003198166360000048
Figure BDA0003198166360000049
为HRTF右耳函数HR在分频点f0的取值
Figure BDA00031981663600000410
进一步地，所述均衡增益因子K0的表达式为
Figure BDA0003198166360000051
基于同一发明构思，本发明还提供一种具有虚拟空间声回放效果的耳机，该耳机包括虚拟空间声回放装置、左耳扬声器和右耳扬声器，其中虚拟空间声回放装置包括音色均衡滤波模块和HRTF滤波模块，其中音色均衡滤波模块获取原始声音信号A0及待虚拟声源的空间方位信息，然后依据待虚拟声源的空间方位信息对原始声音信号A0通过音色均衡函数C进行滤波处理，输出均衡声音信号AC；HRTF滤波模块获取均衡声音信号AC对并对其通过HRTF函数进行滤波处理，通过左耳扬声器输出左耳声音信号AL，通过右耳扬声器右耳声音信号AR；
其中，所述待虚拟声源空间方位信息为水平面方位角θ、垂直面方位角
Figure BDA0003198166360000052
所述均衡声音信号AC与所述原始声音信号A0的关系表达式为：AC＝A0C，所述音色均衡函数C为
Figure BDA0003198166360000053
其中f为所述原始声音信号A0的频率，f0为分频点，H为HRTF函数的幅度谱，K0为均衡增益因子，G0为整体增益因子。
进一步地，所述原始声音信号包括至少两个并行的子原始声音信号，每一子原始声音信号对应一子待虚拟声源的空间方位信息，每一子原始声音信号通过音色均衡函数C滤波处理得到对应子均衡声音信号；再对每一子均衡声音信号进行HRTF函数滤波处理得到对应子左耳声音信号和子右耳声音信号。
进一步地，所述分频点f0的取值为400Hz≤f0≤1.5kHz范围中的任意一频率值。
进一步地，所述均衡增益因子K0的表达式为
Figure BDA0003198166360000054
其中，Hf0为所述HRTF函数的幅度谱H在分频点f0的取值
Figure BDA0003198166360000055
Figure BDA0003198166360000056
为HRTF左耳函数HL在分频点f0的取值
Figure BDA0003198166360000057
Figure BDA0003198166360000058
为HRTF右耳函数HR在分频点f0的取值
Figure BDA0003198166360000059
进一步地，所述均衡增益因子K0的表达式为
Figure BDA0003198166360000061
基于同一发明构思，本发明还提供一种虚拟空间声回放的音色均衡方法，其技术方案包括：在对原始声音信号A0进行HRTF函数滤波前，根据待虚拟声源的空间方位信息，对原始声音信号A0通过音色均衡函数C进行音色均衡滤波处理，获得均衡声音信号AC。
其中，所述待虚拟声源的空间方位信息为水平面方位角θ、垂直面方位角
Figure BDA0003198166360000062
所述均衡声音信号AC与所述原始声音信号A0的关系表达式为：AC＝A0C，所述音色均衡函数C为
Figure BDA0003198166360000063
其中f为所述原始声音信号A0的频率，f0为分频点，H为HRTF函数的幅度谱，K0为均衡增益因子，G0为整体增益因子。
进一步地，所述原始声音信号包括至少两个并行的子原始声音信号，每一子原始声音信号对应一子待虚拟声源的空间方位信息，每一子原始声音信号通过音色均衡函数C滤波处理得到对应子均衡声音信号；再对每一子均衡声音信号进行HRTF函数滤波处理得到对应子左耳声音信号和子右耳声音信号。
进一步地，所述分频点f0的取值为400Hz≤f0≤1.5kHz范围中的任意一频率值。
进一步地，所述均衡增益因子K0的表达式为
Figure BDA0003198166360000064
其中，
Figure BDA0003198166360000065
为所述HRTF函数的幅度谱H在分频点f0的取值
Figure BDA0003198166360000066
Figure BDA0003198166360000067
为HRTF左耳函数HL在分频点f0的取值
Figure BDA0003198166360000068
Figure BDA0003198166360000069
为HRTF右耳函数HR在分频点f0的取值
Figure BDA00031981663600000610
进一步地，所述均衡增益因子K0的表达式为
Figure BDA00031981663600000611
附图说明
图1为现有技术耳机虚拟空间声回放方法的流程图。
图2为本发明实施例1的耳机虚拟空间声回放方法的流程图。
图3为定义空间方位信息的空间坐标系的示意图。
图4为待虚拟声源的空间方位信息的水平面方位角为θ＝30°、垂直面方位角为
Figure BDA0003198166360000071
的HRTF函数的频响曲线和原始声音信号A0频响曲线图。
图5为空间坐标的水平方位角θ分区示意图。
图6为虚拟声源的空间方位信息的水平面方位角为θ＝30°、垂直面方位角为
Figure BDA0003198166360000072
的声源声音信号的频响曲线图。
图7为本发明实施例2的耳机虚拟空间声回放方法的流程框图。
下面结合附图，对本发明的技术方案进行详细的描述。
具体实施方式
本发明的构思是基于头相关传递函数(以下简称为HRTF函数)对输入的原始声音信号进行处理的同时，对原始声音信号进行音色均衡，以调整其音色失真的效果。HRTF函数是一类可以通过精密实验测量得到的数据库，该数据库中包含了HRTF函数相关的所有数据，如待虚拟声源的角度、距离、频率等；通过待虚拟声源的空间方位信息可在HRTF数据库中查找到对应的HRTF左耳函数和HRTF右耳函数。在HRTF函数对原始声音信号进行处理的研究中发现，HRTF函数对原始声音信号的低频段和中高频段的影响特性是不同的，并且HRTF函数主要是会导致原始声音信号中的中高频段部分的频谱发生畸变。因此本发明首先对声音信号进行分频，按低频段及中高频段两种频段级别进行不同的音色调整处理。其中，对于低频段声音信号采用整体增益因子进行音色调整，对于中高频段声音信号则以整体增益因子和均衡增益因子补偿经过HRTF函数滤波处理的原始声音信号的音色损失，以减少原始声音信号音色的改变。
基于此，本发明提供一种耳机虚拟空间声回放方法、装置及存储介质，以及具有虚拟空间声回放效果的耳机，具体通过以下多个实施例进行说明。
实施例1
请参阅图2，其为本发明实施例1的耳机虚拟空间声回放方法的流程框图。本发明实施例1的耳机虚拟空间声回放方法包括以下步骤：
S1：获取原始声音信号A0及待虚拟声源的空间方位信息；
在步骤S1中，获取的原始声音信号A0是一段来自播放器或系统输入的音频信号。
所述待虚拟声源的空间方位信息是听者期望原始声音信号A0经虚拟空间声回放处理后得到的虚拟声源的空间方位信息。例如，听者期望经虚拟空间声回放处理后听到的声音效果是如同声源来自于自己的正前方位置，则此时该正前方位置的空间方位信息就定义为待虚拟声源的空间方位信息。
在本发明中，待虚拟声源的空间方位信息以听者头部作为参照中心，以所述待虚拟声源相对于头部的水平面方位角θ和垂直面方位角
Figure BDA0003198166360000082
来表征。本实施例通过一空间坐标系定义待虚拟声源的空间方位信息，请参阅图3，其为所述空间坐标系的示意图。所述空间坐标系以头部中心为参考原点，以听者期望的待虚拟声源在水平面上与头正前方的夹角为水平面方位角θ，当听者期望的待虚拟声源位于头部左侧时，所述水平面方位角θ的取值范围为0°≤θ≤180°；当听者期望的待虚拟声源位于头部右侧时，所述水平面方位角θ的取值范围为-180°≤θ≤0°。以听者期望的待虚拟声源与水平面的夹角为垂直面方位角
Figure BDA0003198166360000083
当听者期望的待虚拟声源位于水平面上方时，所述垂直面方位角
Figure BDA0003198166360000087
的取值范围为
Figure BDA0003198166360000084
当听者期望的待虚拟声源位于水平面下方时，所述垂直面方位角
Figure BDA0003198166360000086
的取值范围为
Figure BDA0003198166360000085
在本实施例中，待虚拟声源的空间方位信息的水平面方位角θ和垂直面方位角
Figure BDA0003198166360000088
可由听者根据自身对待虚拟声源的空间方位效果的需求进行设置调节。
S2：对所述原始声音信号A0进行音色均衡滤波处理，得到均衡声音信号AC；
在步骤S2中，通过音色均衡函数C在所述原始声音信号A0的频域上对所述原始声音信号A0进行均衡滤波处理，得到均衡声音信号AC。所述均衡声音信号AC与所述原始声音信号A0的关系表达式为：AC＝A0C。
所述音色均衡函数C的表达式定义为
Figure BDA0003198166360000081
其中f为所述原始声音信号A0的频率，f0为分频点，H为HRTF函数的幅度谱，K0为均衡增益因子，G0为整体增益因子。原始声音信号A0为包含不同频率的一段信号，该音色均衡函数C首先对原始声音信号A0进行分频，以分频点f0为分界点分为低频段及中高频段两组类型的信号。其中，对原始声音信号A0的低频段声音信号采用整体增益因子G0进行调整；对于原始声音信号A0的中高频段声音信号则以整体增益因子G0、均衡增益因子K0和HRTF函数的幅度谱H进行调整。
实际上，本发明设定的上述分频点f0、HRTF函数的幅度谱H、均衡增益因子K0、整体增益因子G0均与所述待虚拟声源的空间方位信息的水平面方位角θ、垂直面方位角
Figure BDA0003198166360000091
有关，因此，所述音色均衡函数C会根据所述待虚拟声源的空间方位信息的水平面方位角θ、所述垂直面方位角
Figure BDA0003198166360000092
变化而变化。下面将对上述变量逐一说明。
由于所述分频点f0与所述HRTF函数的频响曲线有关，在说明所述分频点f0之前请参阅图4，其为待虚拟声源的空间方位信息的水平面方位角为θ＝30°、垂直面方位角为
Figure BDA0003198166360000093
的原始声音信号A0频响曲线和处于待虚拟声源同侧耳的HRTF函数的频响曲线图，其中虚线为原始声音信号A0频响曲线，实线为处于待虚拟声源同侧耳的HRTF函数，即HRTF左耳函数的频响曲线。当声音频率小于200Hz时，此时处于待虚拟声源同侧耳的HRTF函数频响曲线为与原始声音信号A0频响曲线相似的平坦曲线，这是由于当声音频率小于200Hz时，声音波长大于头部尺寸，头部对声波的散射作用可以被忽略；当声音频率大于200Hz且小于1.5kHz时，此时处于待虚拟声源同侧耳的HRTF函数频响曲线在经过一段快速单调的增加之后增幅会趋于平稳，另外，处于待虚拟声源异侧耳的HRTF函数频响曲线由于头部的阴影作用而被衰减，这是由于当声音频率大于200Hz且小于1.5kHz时，头部对于同侧耳的声源的声音起到一种近似镜像反射面的作用，但此时声音波长仍然大于头部尺寸；当声音频率大于1.5kHz时，此时处于待虚拟声源异侧耳的HRTF函数频响曲线变化具有一定不规则性，这是由于当声音频率大于1.5kHz时声音波长开始小于头部的尺寸，头部对于声波的阻挡作用会进一步扩大，各种由于耳道、耳廓等对于声波产生的影响将更加明显的体现频率的幅度谱上。可见，经过HRTF函数的声音信号的频响曲线在中高频段开始发生变形，中高频段的声音信号发生了频谱畸变。因此本发明以所述分频点f0为分界，将所述原始声音信号A0的频域分为低频段和中高频段，并对中高频段做不同于低频段的音色均衡处理。
所述分频点f0应选择为HRTF函数对声源低频和中高频影响特性不同的分界点，根据上述分析，其通常在200Hz与1.5kHz之间。此外，由于HRTF函数对声源低频和中高频影响特性不同的分界点还受到待虚拟声源的空间方位信息的影响，通过实际分析HRTF特性，该分频点f0优选取值范围为400Hz≤f0≤1.5kHz。由于HRTF函数是一个非常个性化的参数模型且听觉滤波器的设计是一个多维度衡量的工作，并且由于满足数学和物理最佳设计的值实际未必满足听感上的需求，因此，为了满足个性化的听感需求下音色均衡的要求，在本实施例中分频点f0还可由听者根据自身需求来调节设置。此外，为达到听者需求的特殊声音效果，如当只需要对高频段进行均衡增益时，听者对分频点f0还可以选取为1.5kHz<f0<20kHz。
此外，为了保持音色均衡函数C以分频点f0为分界的两段函数的连续性，还需要在分频点f0附近插值做常规平滑处理。
在确定分频点f0后，对于原始声音信号A0的频率f小于分频点f0的低频段，将其乘以整体增益因子G0以对原始声音信号A0的声压级进行调节，所述整体增益因子G0为可根据需要设定的任意常数。
对于原始声音信号A0的频率f大于分频点f0的频段，即中高频段，将其乘以整体增益因子G0、均衡增益因子K0以及HRTF函数的幅度谱H的倒数。其中HRTF函数的幅度谱H为与待虚拟声源同侧耳的HRTF函数的幅度谱，其表达式为
Figure BDA0003198166360000101
其中
Figure BDA0003198166360000102
为HRTF左耳函数，
Figure BDA0003198166360000103
为HRTF右耳函数。当待虚拟声源位于头部左侧，即0°<θ<180°时，所述HRTF函数的幅度谱H取HRTF左耳函数的幅度谱即
Figure BDA0003198166360000104
当待虚拟声源位于头部右侧，即-180°<θ<0°时，所述HRTF函数H取HRTF右耳函数的幅度谱即
Figure BDA0003198166360000105
当待虚拟声源位于头部中垂面上，即θ＝0°或θ＝±180°时，所述HRTF函数H可取HRTF左耳函数的幅度谱即
Figure BDA0003198166360000106
或者HRTF右耳函数的幅度谱即
Figure BDA0003198166360000107
由于如果HRTF函数对称，则HRTF左耳函数与HRTF右耳函数相等，如果HRTF函数不对称，则HRTF左耳函数与HRTF右耳函数近似，因此在θ＝0°或θ＝±180°时，所述HRTF函数H可按实际需求选取，其不会影响本方法的实施。
所述均衡增益因子K0的选取与待虚拟声源的空间方位相关，其表达式定义为
Figure BDA0003198166360000111
其中
Figure BDA0003198166360000112
为所述HRTF函数的幅度谱H在分频点f0的取值
Figure BDA0003198166360000113
Figure BDA0003198166360000114
为HRTF左耳函数HL在分频点f0的取值
Figure BDA0003198166360000115
Figure BDA0003198166360000116
为HRTF右耳函数HR在分频点f0的取值
Figure BDA0003198166360000117
为便于说明所述均衡增益因子K0与所述待虚拟声源的水平方位角θ的关系，本实施例对空间坐标进行分区。请参阅图5，其为空间坐标的水平方位角θ分区示意图，其中区域a为靠近头部左耳区域，该区域的水平方位角θ取值为30°≤θ≤150°；区域b为靠近头部右耳区域，该区域的水平方位角θ取值为-150°≤θ≤-30°；区域c为头部左侧靠近中垂面的区域，该区域的水平方位角θ取值为0°≤θ<30°和150°<θ≤180°；区域d为头部右侧靠近中垂面的区域，该区域的水平方位角θ取值为-180°≤θ<-150°和-30°<θ≤0°。
当待虚拟声源的空间方位设定在区域a或区域b时，由于头部的作用使得声音的中高频部分到达同侧耳的声压级远大于到达异侧耳的声压级，即待虚拟声源中的高频部分到达同侧耳的声压级同样远大于到达异侧耳的声压级，可以近似地将待虚拟声源到达同侧耳的中高频声压级等于原始声音信号A0的声压级，因此，此时所述均衡增益因子K0的表达式为K0＝1。
当声源的空间方位设定在区域c或区域d时，由于声音的中高频部分到达异侧耳的声压级逐渐逼近到达同侧耳的声压级，即待虚拟声源的中高频部分到达异侧耳的声压级同样逐渐逼近到达同侧耳的声压级，此时待虚拟声源到达异侧耳的声压级将不可再被忽略，为了保证待虚拟声源低频与中高频的能量平衡，需要使待虚拟声源到达左右耳的声功率和与原始声音信号A0的功率相等，即声功率守恒原则，因此，据该原则可得出所述均衡增益因子K0的表达式为
Figure BDA0003198166360000118
进一步，为适应不同的音色均衡需求，当待虚拟声源的空间方位选择在区域c或区域d时，均衡增益因子K0可设置为由听者根据自身听感需求对进行一定范围的调节，根据
Figure BDA0003198166360000119
可推导出所述均衡增益因子K0的取值范围为
Figure BDA00031981663600001110
在此范围内均衡增益因子K0均可以实现音色均衡的目的。则当均衡增益因子K0设置为可由听者根据自身听感进行调节时，所述均衡增益因子K0的取值表达式简化为：当选择的待虚拟声源的空间方位在区域a或区域b时，所述均衡增益因子K0的表达式为K0＝1；当选择的待虚拟声源的空间方位在区域c或区域d时，所述均衡增益因子K0为
Figure BDA0003198166360000121
中的任意数，即所述均衡增益因子K0的自由取值表达式为：
Figure BDA0003198166360000122
S3：分别通过HRTF左耳函数和HRTF右耳函数对所述均衡声音信号AC进行滤波处 理，分别输出左耳声音信号AL和右耳声音信号AR。
在步骤S3中，经过音色均衡后获得的均衡声音信号AC分别通过HRTF左耳函数和HRTF右耳函数进行滤波处理，最终输出的声音信号包括左耳声音信号AL和右耳声音信号AR。其中，所述左耳声音信号AL为所述均衡声音信号AC经HRTF左耳函数滤波处理的声音信号，其与所述均衡声音信号AC的关系表达式为
Figure BDA0003198166360000123
所述左耳声音信号AL通过耳机左耳输出；所述右耳声音信号AR为所述均衡声音信号AC经HRTF右耳函数滤波处理的声音信号，其与所述均衡声音信号AC的关系表达式为
Figure BDA0003198166360000124
所述右耳声音信号AR通过耳机右耳输出。
请参阅图6，其为本实施例1以待虚拟声源的空间方位信息的水平面方位角为θ＝30°、垂直面方位角为
Figure BDA0003198166360000125
为例的原始声音信号A0和左耳声音信号AL的频响曲线图，其中虚线为原始声音信号A0的频响曲线，实线为左耳声音信号AL的频响曲线。由于待虚拟声源的空间方位信息的水平面方位角为θ＝30°，即待虚拟声源位于头部左侧，所以仅对比原始声音信号A0和左耳声音信号AL的频响曲线，可见，经过均衡后的左耳声音信号AL的频响曲线的中高频段与原始声音信号A0的频响曲线的中高频段相近，实现了音色改善的效果。
综上，在应用本实施例1的具有音色均衡效果的耳机虚拟空间声回放的方法过程中，使用者首先可对待虚拟声源的空间方位(水平面方位角θ、垂直面方位角
Figure BDA0003198166360000126
)进行选择，同时，还可根据其听感需求调节分频点f0、均衡增益因子K0和整体增益因子G0的取值。
此外，除了进行音色均衡的调节，为了满足使用者的调节音调的需求，所述均衡增益因子K0还可为其它取值，如：当需要升高原始声音信号A0音调时，增强中高频段声功率，使声音听感明亮，此时K0的取值范围为K0>1；当需要降低原始声音信号A0音调时，衰减中高频段声功率，使声音听感沉闷，此时K0的取值范围为
Figure BDA0003198166360000131
另外，当需要截断中高频部分以达到一些特殊效果时，使K0＝0。
在使用者选择确定了各参数值后，所述音色均衡函数C即可确定，原始声音信号A0经过音色均衡函数C滤波后，其低频段的声音信号的响度将得到增益，其中高频段的声音信号将得到音色均衡增益，最后经过HRTF函数滤波后将得到音色均衡的虚拟空间声。
基于本发明实施例1的耳机虚拟空间声回放方法，本实施例还提供一种耳机虚拟空间声回放装置。该装置包括音色均衡滤波模块和HRTF滤波模块，其中音色均衡滤波模块获取原始声音信号A0及待虚拟声源的空间方位信息，然后依据待虚拟声源的空间方位信息对原始声音信号A0通过音色均衡函数C进行滤波处理，输出均衡声音信号AC；HRTF滤波模块获取均衡声音信号AC对并对其通过HRTF函数进行滤波处理，输出左耳声音信号AL和右耳声音信号AR。
相对于现有技术，本发明对输入的原始声音信号A0以分频点f0为界分频调节，对全频段使用整体增益因子G0调节整体声压级，对中高频段使用均衡增益因子K0调节中高频段整体声功率，使经过HRTF函数滤波处理后的左耳声音信号AL和右耳声音信号AR的整体声功率与输入原始声音信号A0声功率保持近似，从而改善音色。另外，对分频点f0、整体增益因子G0和均衡增益因子K0的还可以根据特殊需求进行特殊取值，以调节音频整体响度、音调和截取音频频段，从而实现不同声音效果，满足不同的听众需求。
实施例2
请参阅图7，其为本发明实施例2的耳机虚拟空间声回放方法的流程框图。本发明实施例2的应用为模拟多通路环绕声的场景，即定义多个固定的待虚拟声源的空间位置，同时通过播放器或系统输入多个与定义的待虚拟声源数量相等的原始声音信号，分别对每个原始声音信号根据其特定的待虚拟声源的空间位置进行音色均衡和HRTF函数空间声回放处理，在左右耳机中分别同时输出多个左耳声音信号和右耳声音信号，实现立体环绕声的声效。具体步骤如下：
S1：获取原始声音信号，所述原始声音信号包括子原始声音信号A01、A02……A0n及对应的n个子待虚拟声源的空间方位信息；
在步骤S1中，子原始声音信号A0n为第n个输入音频，n≥2。同时子待虚拟声源的空间方位信息包括n个子水平面方位角θ1、θ2……θn和子垂直面方位角
Figure BDA0003198166360000132
分别与子原始声音信号A01、A02……A0n一一对应。
子水平面方位角θ1、θ2……θn和子垂直面方位角
Figure BDA0003198166360000141
根据实际场景分别设置为不同的固定值，如模拟5.1声道环绕声时，有6个输入音频包括中央声道、前置左声道、前置右声道、后置左环绕声道、后置右环绕声道和重低音声道，对应有6个子原始声音信号A01、A02、A03、A04、A05、A06，对应的子水平方位角θ1、θ2、θ3、θ4、θ5、θ6分别设置为0°、30°、-30°、120°、-120°、0°，子垂直面方位角
Figure BDA0003198166360000142
均设置为0°。
S2：对所述子原始声音信号A01、A02……A0n分别进行音色均衡滤波处理，得到对应的n个子均衡声音信号AC1、AC2……ACn；
在步骤S2中，通过音色均衡函数Cn分别对子原始声音信号A01、A02……A0n逐一进行均衡滤波处理，所述子均衡声音信号ACn与所述子原始声音信号A0n的关系表达式为：ACn＝A0nCn，其中音色均衡函数Cn的表达式为
Figure BDA0003198166360000143
其中分频点f0n、整体增益因子G0n和均衡增益因子K0n的取值方法与实施例1中音色均衡函数C的分频点f0、整体增益因子G0和均衡增益因子K0相同，在此不再赘述。分频点f0n、整体增益因子G0n和均衡增益因子K0n可对应子原始声音信号A01、A02……A0n进行不同的设置，从而调试整体声功率，使声音回放达到期望的声音效果。
S3：通过n个与子待虚拟声源的空间方位信息对应的HRTF左耳函数和HRTF右耳函数对所述子均衡声音信号AC1、AC2……ACn分别进行滤波处理，得到n个子左耳声音信号AL1、AL2……ALn和n个子右耳声音信号AR1、AR2……ARn。
在步骤S3中，每个子均衡声音信号AC1、AC2……ACn分别通过其对应的HRTF左耳函数和HRTF右耳函数进行滤波处理，对应输出的子左耳声音信号ALn与子均衡声音信号ACn的表达式为
Figure BDA0003198166360000144
对应输出的子右耳声音信号ARn与子均衡声音信号ACn的表达式为
Figure BDA0003198166360000145
在该方法具体的实施中，将n个子左耳声音信号AL1、AL2……ALn合成为一个左耳声音信号并通过左耳机输出，将n个子右耳声音信号AR1、AR2……ARn合成为一个右耳声音信号并通过右耳机输出。
基于实施例2的耳机虚拟空间声回放方法，以下对应用该方法的一种耳机虚拟空间声回放装置进行说明。该耳机虚拟空间声回放装置包括n个音色均衡滤波模块和n个HRTF滤波模块，其中音色均衡滤波模块分别获取子原始声音信号A01、A02……A0n及对应的n个子待虚拟声源的空间方位信息，然后分别依据待虚拟声源的空间方位信息对对应的子原始声音信号A01、A02……A0n通过音色均衡函数C进行滤波处理，分别输出子均衡声音信号AC1、AC2……ACn；HRTF滤波模块分别获取对应的子均衡声音信号AC1、AC2……ACn对并对其分别通过HRTF函数进行滤波处理，将获得的子左耳声音信号AL1、AL2……ALn合成为一个左耳信号并输出，同时将获得的子右耳声音信号AR1、AR2……ARn合成为一个右耳信号并输出。
在实施例2中，本发明实现了同时对多个原始声音信号处理，每个原始声音信号对应不同的待虚拟声源的空间方位信息，产生音色均衡后的空间回放效果的双耳声音信号，听者通过该双耳声音信号可以听到多个声音并能感到声音来自多个特定空间位置。基于此，本发明可应用于模拟多通路环绕声的场景，仅通过耳机就可以实现由多个扬声器才能实现的立体环绕效果，特别是原始声音信号为高品质音频时，可以实现如同置身于影院的沉浸效果。
基于实施例1、实施例2的耳机虚拟空间声回放方法，本发明还提供应用该方法的一种耳机虚拟空间声回放的存储介质，该存储介质作为计算机可读存储介质，主要用于存储程序，该程序可以是实施例1、实施例2中耳机虚拟空间声回放方法对应的程序代码。
基于实施例1、实施例2的耳机虚拟空间声回放方法，本发明还提供应用该方法的一种具有耳机虚拟空间声回放效果的耳机，该耳机包括虚拟空间声回放装置、左耳扬声器和右耳扬声器，其中虚拟空间声回放装置为实施例1、实施例2中的耳机虚拟空间声回放装置，左耳扬声器和右耳扬声器用于输出所述虚拟空间声回放装置的左耳声音信号和右耳声音信号到耳机外部。
基于同一发明构思，本发明还提供一种虚拟空间声回放的音色均衡方法，其技术方案包括：在对原始声音信号A0进行HRTF函数滤波前，根据待虚拟声源的空间方位信息，对原始声音信号A0通过音色均衡函数C进行音色均衡滤波处理，获得均衡声音信号AC。所述音色均衡函数C与实施例1、实施例2中的方法相同，在此不再赘述。
本发明可采用通用DSP硬件电路或软件代码的形式实现，也可以在HRTF/HRIR的数据文件中作为头相关传递函数数据库的一部分实现。本发明的方法可以运用于耳机和自由场条件下的HRTF/HRIR。本发明并不局限于上述实施方式，如果对本发明的各种改动或变形不脱离本发明的精神和范围，倘若这些改动和变形属于本发明的权利要求和等同技术范围之内，则本发明也意图包含这些改动和变形。

Claims (25)

1.一种耳机虚拟空间声回放方法，包括：
根据待虚拟声源的空间方位信息，对输入的原始声音信号A0通过音色均衡函数C进行滤波处理，获得均衡声音信号AC；再对均衡声音信号AC进行HRTF函数滤波处理，输出左耳声音信号AL和右耳声音信号AR；
其中，所述待虚拟声源的空间方位信息为水平面方位角θ、垂直面方位角
Figure FDA0003198166350000019
所述均衡声音信号AC与所述原始声音信号A0的关系表达式为：AC＝A0C，
所述音色均衡函数C为
Figure FDA0003198166350000011
其中f为所述原始声音信号A0的频率，f0为分频点，H为HRTF函数的幅度谱，K0为均衡增益因子，G0为整体增益因子。
2.根据权利要求1所述的耳机虚拟空间声回放方法，其特征在于：
所述原始声音信号包括至少两个并行的子原始声音信号，每一子原始声音信号对应一子待虚拟声源的空间方位信息，每一子原始声音信号通过音色均衡函数C滤波处理得到对应子均衡声音信号；再对每一子均衡声音信号进行HRTF函数滤波处理得到对应子左耳声音信号和子右耳声音信号。
3.根据权利要求1-2任一项所述的耳机虚拟空间声回放方法，其特征在于：
所述分频点f0的取值为400Hz≤f0≤1.5kHz范围中的任意一频率值。
4.根据权利要求1-2任一项所述的耳机虚拟空间声回放方法，其特征在于：
所述均衡增益因子K0的表达式为
Figure FDA0003198166350000012
其中，
Figure FDA0003198166350000013
为所述HRTF函数的幅度谱H在分频点f0的取值
Figure FDA0003198166350000014
Figure FDA0003198166350000015
为HRTF左耳函数HL在分频点f0的取值
Figure FDA0003198166350000016
Figure FDA0003198166350000017
为HRTF右耳函数HR在分频点f0的取值
Figure FDA0003198166350000018
5.根据权利要求4所述的耳机虚拟空间声回放方法，其特征在于：
所述均衡增益因子K0的表达式为
Figure FDA0003198166350000021
6.一种耳机虚拟空间声回放装置，包括：
音色均衡滤波模块和HRTF滤波模块，其中音色均衡滤波模块获取原始声音信号A0及待虚拟声源的空间方位信息，然后依据待虚拟声源的空间方位信息对原始声音信号A0通过音色均衡函数C进行滤波处理，输出均衡声音信号AC；HRTF滤波模块获取均衡声音信号AC对并对其通过HRTF函数进行滤波处理，输出左耳声音信号AL和右耳声音信号AR；
其中，所述待虚拟声源的空间方位信息为水平面方位角θ、垂直面方位角
Figure FDA0003198166350000022
所述均衡声音信号AC与所述原始声音信号A0的关系表达式为：AC＝A0C，
所述音色均衡函数C为
Figure FDA0003198166350000023
其中f为所述原始声音信号A0的频率，f0为分频点，H为HRTF函数的幅度谱，K0为均衡增益因子，G0为整体增益因子。
7.根据权利要求6所述的耳机虚拟空间声回放装置，其特征在于：
所述原始声音信号包括至少两个并行的子原始声音信号，每一子原始声音信号对应一子待虚拟声源的空间方位信息，每一子原始声音信号通过音色均衡函数C滤波处理得到对应子均衡声音信号；再对每一子均衡声音信号进行HRTF函数滤波处理得到对应子左耳声音信号和子右耳声音信号。
8.根据权利要求6-7任一项所述的耳机虚拟空间声回放装置，其特征在于：
所述分频点f0的取值为400Hz≤f0≤1.5kHz范围中的任意一频率值。
9.根据权利要求6-7任一项所述的耳机虚拟空间声回放装置，其特征在于：
所述均衡增益因子K0的表达式为
Figure FDA0003198166350000024
其中，
Figure FDA0003198166350000025
为所述HRTF函数的幅度谱H在分频点f0的取值
Figure FDA0003198166350000026
Figure FDA0003198166350000027
为HRTF左耳函数HL在分频点f0的取值
Figure FDA0003198166350000031
Figure FDA0003198166350000032
为HRTF右耳函数HR在分频点f0的取值
Figure FDA0003198166350000033
10.根据权利要求9所述的耳机虚拟空间声回放装置，其特征在于：
所述均衡增益因子K0的表达式为
Figure FDA0003198166350000034
11.一种耳机虚拟空间声回放的存储介质，该存储介质作为计算机可读存储介质，主要用于存储程序，该程序包括：
根据待虚拟声源的空间方位信息，对输入的原始声音信号A0通过音色均衡函数C进行滤波处理，获得均衡声音信号AC；再对均衡声音信号AC进行HRTF函数滤波处理，输出左耳声音信号AL和右耳声音信号AR；
其中，所述待虚拟声源的空间方位信息为水平面方位角θ、垂直面方位角
Figure FDA0003198166350000035
所述均衡声音信号AC与所述原始声音信号A0的关系表达式为：AC＝A0C，
所述音色均衡函数C为
Figure FDA0003198166350000036
其中f为所述原始声音信号A0的频率，f0为分频点，H为HRTF函数的幅度谱，K0为均衡增益因子，G0为整体增益因子。
12.根据权利要求11所述的耳机虚拟空间声回放的存储介质，其特征在于：
所述原始声音信号包括至少两个并行的子原始声音信号，每一子原始声音信号对应一子待虚拟声源的空间方位信息，每一子原始声音信号通过音色均衡函数C滤波处理得到对应子均衡声音信号；再对每一子均衡声音信号进行HRTF函数滤波处理得到对应子左耳声音信号和子右耳声音信号。
13.根据权利要求11-12任一项所述的耳机虚拟空间声回放的存储介质，其特征在于：
所述分频点f0的取值为400Hz≤f0≤1.5kHz范围中的任意一频率值。
14.根据权利要求11-12任一项所述的耳机虚拟空间声回放的存储介质，其特征在于：
所述均衡增益因子K0的表达式为
Figure FDA0003198166350000041
其中，
Figure FDA0003198166350000042
为所述HRTF函数的幅度谱H在分频点f0的取值
Figure FDA0003198166350000043
Figure FDA0003198166350000044
为HRTF左耳函数HL在分频点f0的取值
Figure FDA0003198166350000045
Figure FDA0003198166350000046
为HRTF右耳函数HR在分频点f0的取值
Figure FDA0003198166350000047
15.根据权利要求14所述的耳机虚拟空间声回放的存储介质，其特征在于：
所述均衡增益因子K0的表达式为
Figure FDA0003198166350000048
16.一种具有虚拟空间声回放效果的耳机，包括：
虚拟空间声回放装置、左耳扬声器和右耳扬声器，其中虚拟空间声回放装置包括音色均衡滤波模块和HRTF滤波模块，其中音色均衡滤波模块获取原始声音信号A0及待虚拟声源的空间方位信息，然后依据待虚拟声源的空间方位信息对原始声音信号A0通过音色均衡函数C进行滤波处理，输出均衡声音信号AC；HRTF滤波模块获取均衡声音信号AC对并对其通过HRTF函数进行滤波处理，通过左耳扬声器输出左耳声音信号AL，通过右耳扬声器右耳声音信号AR；
其中，所述待虚拟声源空间方位信息为水平面方位角θ、垂直面方位角
Figure FDA0003198166350000049
所述均衡声音信号AC与所述原始声音信号A0的关系表达式为：AC＝A0C，
所述音色均衡函数C为
Figure FDA00031981663500000410
其中f为所述原始声音信号A0的频率，f0为分频点，H为HRTF函数的幅度谱，K0为均衡增益因子，G0为整体增益因子。
17.根据权利要求16所述的具有虚拟空间声回放效果的耳机，其特征在于：
所述原始声音信号包括至少两个并行的子原始声音信号，每一子原始声音信号对应一子待虚拟声源的空间方位信息，每一子原始声音信号通过音色均衡函数C滤波处理得到对应子均衡声音信号；再对每一子均衡声音信号进行HRTF函数滤波处理得到对应子左耳声音信号和子右耳声音信号。
18.根据权利要求16-17任一项所述的具有虚拟空间声回放效果的耳机，其特征在于：
所述分频点f0的取值为400Hz≤f0≤1.5kHz范围中的任意一频率值。
19.根据权利要求16-17任一项所述的具有虚拟空间声回放效果的耳机，其特征在于：
所述均衡增益因子K0的表达式为
Figure FDA0003198166350000051
其中，
Figure FDA0003198166350000052
为所述HRTF函数的幅度谱H在分频点f0的取值
Figure FDA0003198166350000053
Figure FDA0003198166350000054
为HRTF左耳函数HL在分频点f0的取值
Figure FDA0003198166350000055
Figure FDA0003198166350000056
为HRTF右耳函数HR在分频点f0的取值
Figure FDA0003198166350000057
20.根据权利要求19所述的具有虚拟空间声回放效果的耳机，其特征在于：
所述均衡增益因子K0的表达式为
Figure FDA0003198166350000058
21.一种虚拟空间声回放的音色均衡方法，其特征在于：
在对原始声音信号A0进行HRTF函数滤波前，根据待虚拟声源的空间方位信息，对原始声音信号A0通过音色均衡函数C进行音色均衡滤波处理，获得均衡声音信号AC；
其中，所述待虚拟声源的空间方位信息为水平面方位角θ、垂直面方位角
Figure FDA0003198166350000059
所述均衡声音信号AC与所述原始声音信号A0的关系表达式为：AC＝A0C，
所述音色均衡函数C为
Figure FDA00031981663500000510
其中f为所述原始声音信号A0的频率，f0为分频点，H为HRTF函数的幅度谱，K0为均衡增益因子，G0为整体增益因子。
22.根据权利要求21所述的虚拟空间声回放的音色均衡方法，其特征在于：
所述原始声音信号包括至少两个并行的子原始声音信号，每一子原始声音信号对应一子待虚拟声源的空间方位信息，每一子原始声音信号通过音色均衡函数C滤波处理得到对应子均衡声音信号；再对每一子均衡声音信号进行HRTF函数滤波处理得到对应子左耳声音信号和子右耳声音信号。
23.根据权利要求21-22任一项所述的虚拟空间声回放的音色均衡方法，其特征在于：
所述分频点f0的取值为400Hz≤f0≤1.5kHz范围中的任意一频率值。
24.根据权利要求21-22任一项所述的虚拟空间声回放的音色均衡方法，其特征在于：
所述均衡增益因子K0的表达式为
Figure FDA0003198166350000061
其中，
Figure FDA0003198166350000062
为所述HRTF函数的幅度谱H在分频点f0的取值
Figure FDA0003198166350000063
Figure FDA0003198166350000064
为HRTF左耳函数HL在分频点f0的取值
Figure FDA0003198166350000065
Figure FDA0003198166350000066
为HRTF右耳函数HR在分频点f0的取值
Figure FDA0003198166350000067
25.根据权利要求24所述的虚拟空间声回放的音色均衡方法，其特征在于：
所述均衡增益因子K0的表达式为
Figure FDA0003198166350000068
CN202110896744.6A 2021-08-05 2021-08-05 一种耳机虚拟空间声回放方法、装置、存储介质及耳机 Active CN113645531B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202110896744.6A CN113645531B (zh) 2021-08-05 2021-08-05 一种耳机虚拟空间声回放方法、装置、存储介质及耳机
US18/685,843 US20240236613A1 (en) 2021-08-05 2021-10-21 A method, device, storage medium, and headphones of headphone virtual spatial sound playback
PCT/CN2021/125220 WO2023010691A1 (zh) 2021-08-05 2021-10-21 一种耳机虚拟空间声回放方法、装置、存储介质及耳机

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110896744.6A CN113645531B (zh) 2021-08-05 2021-08-05 一种耳机虚拟空间声回放方法、装置、存储介质及耳机

Publications (2)

Publication Number Publication Date
CN113645531A true CN113645531A (zh) 2021-11-12
CN113645531B CN113645531B (zh) 2024-04-16

Family

ID=78419716

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110896744.6A Active CN113645531B (zh) 2021-08-05 2021-08-05 一种耳机虚拟空间声回放方法、装置、存储介质及耳机

Country Status (3)

Country Link
US (1) US20240236613A1 (zh)
CN (1) CN113645531B (zh)
WO (1) WO2023010691A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115604646A (zh) * 2022-11-25 2023-01-13 杭州兆华电子股份有限公司（Cn） 一种全景深空间音频处理方法

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101040565A (zh) * 2004-10-14 2007-09-19 杜比实验室特许公司 用于移动立体声内容的改善的头相关传递函数
CN101835072A (zh) * 2010-04-06 2010-09-15 瑞声声学科技(深圳)有限公司 虚拟环绕声处理方法
CN102572676A (zh) * 2012-01-16 2012-07-11 华南理工大学 一种虚拟听觉环境实时绘制方法
US8428269B1 (en) * 2009-05-20 2013-04-23 The United States Of America As Represented By The Secretary Of The Air Force Head related transfer function (HRTF) enhancement for improved vertical-polar localization in spatial audio systems
CN104581610A (zh) * 2013-10-24 2015-04-29 华为技术有限公司 一种虚拟立体声合成方法及装置
CN106454686A (zh) * 2016-08-18 2017-02-22 华南理工大学 一种基于体感摄像头的多通路环绕声动态双耳重放方法
CN107205207A (zh) * 2017-05-17 2017-09-26 华南理工大学 一种基于中垂面特性的虚拟声像近似获取方法
CN107450819A (zh) * 2016-06-01 2017-12-08 中兴通讯股份有限公司 声音处理方法和装置
CN108616789A (zh) * 2018-04-11 2018-10-02 北京理工大学 基于双耳实时测量的个性化虚拟音频回放方法
CN111556425A (zh) * 2020-04-20 2020-08-18 华南理工大学 一种扬声器虚拟声重放的音色均衡方法
CN113038355A (zh) * 2014-03-24 2021-06-25 三星电子株式会社 用于渲染声信号的方法和设备，以及计算机可读记录介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW391148B (en) * 1997-12-01 2000-05-21 Central Research Lab Ltd Stereo sound expander
DE602006018703D1 (de) * 2006-04-05 2011-01-20 Harman Becker Automotive Sys Verfahren zum automatischen Entzerren eines Beschallungssystems
US8619998B2 (en) * 2006-08-07 2013-12-31 Creative Technology Ltd Spatial audio enhancement processing method and apparatus
CN101511047B (zh) * 2009-03-16 2010-10-27 东南大学 双声道立体声分别基于音箱与耳机的三维音效处理方法
WO2015187715A1 (en) * 2014-06-03 2015-12-10 Dolby Laboratories Licensing Corporation Passive and active virtual height filter systems for upward firing drivers
JP7345460B2 (ja) * 2017-10-18 2023-09-15 ディーティーエス・インコーポレイテッド ３ｄオーディオバーチャライゼーションのためのオーディオ信号のプレコンディショニング
EP3895451B1 (en) * 2019-01-25 2024-03-13 Huawei Technologies Co., Ltd. Method and apparatus for processing a stereo signal

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101040565A (zh) * 2004-10-14 2007-09-19 杜比实验室特许公司 用于移动立体声内容的改善的头相关传递函数
US7634092B2 (en) * 2004-10-14 2009-12-15 Dolby Laboratories Licensing Corporation Head related transfer functions for panned stereo audio content
US8428269B1 (en) * 2009-05-20 2013-04-23 The United States Of America As Represented By The Secretary Of The Air Force Head related transfer function (HRTF) enhancement for improved vertical-polar localization in spatial audio systems
CN101835072A (zh) * 2010-04-06 2010-09-15 瑞声声学科技(深圳)有限公司 虚拟环绕声处理方法
CN102572676A (zh) * 2012-01-16 2012-07-11 华南理工大学 一种虚拟听觉环境实时绘制方法
CN104581610A (zh) * 2013-10-24 2015-04-29 华为技术有限公司 一种虚拟立体声合成方法及装置
CN113038355A (zh) * 2014-03-24 2021-06-25 三星电子株式会社 用于渲染声信号的方法和设备，以及计算机可读记录介质
CN107450819A (zh) * 2016-06-01 2017-12-08 中兴通讯股份有限公司 声音处理方法和装置
CN106454686A (zh) * 2016-08-18 2017-02-22 华南理工大学 一种基于体感摄像头的多通路环绕声动态双耳重放方法
CN107205207A (zh) * 2017-05-17 2017-09-26 华南理工大学 一种基于中垂面特性的虚拟声像近似获取方法
CN108616789A (zh) * 2018-04-11 2018-10-02 北京理工大学 基于双耳实时测量的个性化虚拟音频回放方法
CN111556425A (zh) * 2020-04-20 2020-08-18 华南理工大学 一种扬声器虚拟声重放的音色均衡方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115604646A (zh) * 2022-11-25 2023-01-13 杭州兆华电子股份有限公司（Cn） 一种全景深空间音频处理方法

Also Published As

Publication number Publication date
CN113645531B (zh) 2024-04-16
US20240236613A1 (en) 2024-07-11
WO2023010691A1 (zh) 2023-02-09

Similar Documents

Publication Publication Date Title
KR102529122B1 (ko) 음향 신호의 렌더링 방법, 장치 및 컴퓨터 판독 가능한 기록 매체
US10104485B2 (en) Headphone response measurement and equalization
JP5499513B2 (ja) 音響処理装置、音像定位処理方法および音像定位処理プログラム
US10715917B2 (en) Sound wave field generation
WO2012042905A1 (ja) 音響再生装置および音響再生方法
JP6968376B2 (ja) ステレオ仮想バス拡張
US20120099733A1 (en) Audio adjustment system
CN108632714B (zh) 扬声器的声音处理方法、装置及移动终端
CN109565633B (zh) 有源监听耳机及其双声道方法
KR20020043617A (ko) 음향 보정 장치
JP7110113B2 (ja) アクティブモニタリングヘッドホンとその較正方法
CN109155895B (zh) 有源监听耳机及用于正则化其反演的方法
US9226091B2 (en) Acoustic surround immersion control system and method
US20230209300A1 (en) Method and device for processing spatialized audio signals
US20080175396A1 (en) Apparatus and method of out-of-head localization of sound image output from headpones
CN113645531B (zh) 一种耳机虚拟空间声回放方法、装置、存储介质及耳机
CN109923877B (zh) 对立体声音频信号进行加权的装置和方法
CN110312198B (zh) 用于数字影院的虚拟音源重定位方法及装置
JP2024507535A (ja) バイノーラル・オーディオのための仮想化器
CN115002649A (zh) 声场均衡调整方法、装置、设备和计算机可读存储介质
US20140376726A1 (en) Stereo headphone audio process
JP7332745B2 (ja) 音声処理方法及び音声処理装置
US20240056735A1 (en) Stereo headphone psychoacoustic sound localization system and method for reconstructing stereo psychoacoustic sound signals using same
US12041433B2 (en) Audio crosstalk cancellation and stereo widening
WO2023156274A1 (en) Apparatus and method for reducing spectral distortion in a system for reproducing virtual acoustics via loudspeakers

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant