CN111246339B - 一种调节拾音方向的方法、系统、存储介质及智能机器人 - Google Patents
一种调节拾音方向的方法、系统、存储介质及智能机器人 Download PDFInfo
- Publication number
- CN111246339B CN111246339B CN201911417001.5A CN201911417001A CN111246339B CN 111246339 B CN111246339 B CN 111246339B CN 201911417001 A CN201911417001 A CN 201911417001A CN 111246339 B CN111246339 B CN 111246339B
- Authority
- CN
- China
- Prior art keywords
- pickup area
- sound pickup
- target object
- sound
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 238000013507 mapping Methods 0.000 claims abstract description 34
- 230000002708 enhancing effect Effects 0.000 claims abstract description 23
- 238000004590 computer program Methods 0.000 claims description 21
- 238000004364 calculation method Methods 0.000 claims description 8
- 230000000694 effects Effects 0.000 abstract description 14
- 230000003287 optical effect Effects 0.000 description 9
- 230000006870 function Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 4
- 230000003014 reinforcing effect Effects 0.000 description 3
- 230000009286 beneficial effect Effects 0.000 description 2
- 230000000739 chaotic effect Effects 0.000 description 2
- 238000005034 decoration Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000002604 ultrasonography Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/22—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired frequency characteristic only
- H04R1/222—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired frequency characteristic only for microphones
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R1/00—Details of transducers, loudspeakers or microphones
- H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
- H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
- H04R1/326—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only for microphones
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Otolaryngology (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- Electromagnetism (AREA)
- General Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
- Manipulator (AREA)
Abstract
本发明提供了一种调节拾音方向的方法、系统、存储介质及智能机器人,涉及智能机器人技术领域,包括步骤:当激光雷达在一三维空间检测到目标物时,计算所述目标物当前所在的位置,确定所述目标物当前所在的拾音区域;根据检测到所述目标物的时间先后、所述目标物当前所在的所述拾音区域和位置映射表,控制麦克风阵列中相应的麦克风发射拾音波束,增强拾取所述目标物当前所在的所述拾音区域的音频。本发明通过控制麦克风阵列中与目标物所在拾音区域相应的麦克风发射拾音波束,增强拾取目标物当前所在的拾音区域的音频,当目标物不在机器人正前方,也能有针对性的增强拾取该目标物的音频,避免了目标物不在机器人的正前方,拾音效果弱的问题。
Description
技术领域
本发明涉及智能机器人技术领域,尤指一种调节拾音方向的方法、系统、存储介质及智能机器人。
背景技术
目前市场上的语音板一旦固定好后,拾音方向往往设在人的正前方方向,如果人站在正前方偏左或是偏右的位置跟机器人说话,会减弱麦克风的拾音效果。
发明内容
本发明的目的是提供一种调节拾音方向的方法、系统、存储介质及智能机器人,在机器人前方270°激光可视范围内,人站在其中一个位置时,软件自动设置机器人增强拾音的波束,大大增强了麦克风拾音效果,提高了人机交互体验。
本发明提供的技术方案如下:
本发明提供一种调节拾音方向的方法,包括步骤:
当激光雷达在一三维空间检测到目标物时,计算所述目标物当前所在的位置,确定所述目标物当前所在的拾音区域。
根据检测到所述目标物的时间先后、所述目标物当前所在的所述拾音区域和位置映射表,控制麦克风阵列中相应的麦克风发射拾音波束,增强拾取所述目标物当前所在的所述拾音区域的音频。
进一步,在所述的当激光雷达在一三维空间检测到目标物时,计算所述目标物当前所在的所述拾音区域之前包括步骤:
所述激光雷达发射激光束扫描一所述三维空间,并将所述三维空间划分成若干个所述拾音区域。
预设所述麦克风阵列中的若干个所述麦克风与若干个所述拾音区域之间的所述位置映射表。
进一步,所述的根据检测到至少一目标物的时间、所述至少一目标物当前所在的所述拾音区域和位置映射表,控制麦克风阵列中相应的麦克风发射拾音波束,增强拾取所述目标物当前所在的所述拾音区域的音频具体包括步骤:
当所述目标物处于第一拾音区域时,根据所述位置映射表,控制所述麦克风阵列中与所述第一拾音区域相应的所述麦克风发射所述拾音波束,增强拾取所述第一拾音区域的所述音频。
当所述第一拾音区域不存在所述目标物且所述目标物仅处于第二拾音区域时,根据所述位置映射表,控制所述麦克风阵列中与所述第二拾音区域相应的所述麦克风发射所述拾音波束,增强拾取所述第二拾音区域的所述音频。
进一步,所述的根据检测到至少一目标物的时间、所述至少一目标物当前所在的所述拾音区域和位置映射表,控制麦克风阵列中相应的麦克风发射拾音波束,增强拾取所述目标物当前所在的所述拾音区域的音频具体还包括步骤:
当所述第一拾音区域不存在所述目标物且所述第二拾音区域和所述第三拾音区域均存在所述目标物时,判断检测到所述目标物处于所述第二拾音区域的时间是否早于检测到所述目标物处于所述第三拾音区域的时间。
当检测到所述目标物处于所述第二拾音区域的时间早于检测到所述目标物处于所述第三拾音区域的时间时,则控制所述麦克风阵列中与所述第二拾音区域相应的所述麦克风发射所述拾音波束,增强拾取所述第二拾音区域的所述音频。
进一步,在所述的当所述第一拾音区域不存在所述目标物且第二拾音区域和第三拾音区域均存在所述目标物时,判断检测到目标物处于第二拾音区域的时间是否早于检测到所述目标物处于第三拾音区域的时间之后包括步骤:
当检测到所述目标物处于所述第二拾音区域的时间不早于检测到所述目标物处于所述第三拾音区域的时间时,则控制所述麦克风阵列中与所述第三拾音区域相应的所述麦克风发射所述拾音波束,增强拾取所述第三拾音区域的所述音频。
进一步,所述麦克风阵列包括四个所述麦克风,相邻两个所述麦克风的夹角为60°,所述拾音区域的范围为180°。
进一步,所述麦克风阵列包括五个所述麦克风,相邻两个所述麦克风的夹角为90°,所述拾音区域的范围为360°。
进一步,所述麦克风阵列包括六个所述麦克风,相邻两个所述麦克风的夹角为60°,所述拾音区域的范围为360°。
本发明提供一种调节拾音方向的系统,包括:
计算模块,用于当激光雷达在一三维空间检测到目标物时,计算所述目标物当前所在的位置,确定所述目标物当前所在的拾音区域。
控制模块,与所述计算模块连接,用于根据检测到所述目标物的时间先后、所述目标物当前所在的所述拾音区域和位置映射表,控制麦克风阵列中相应的麦克风发射拾音波束。
麦克风阵列,与所述控制模块连接,用于增强拾取所述目标物当前所在的所述拾音区域的音频。
麦克风,分别与所述控制模块和所述控制麦克风阵列连接,用于发射拾音波束。
进一步,还包括:
激光雷达,与所述计算模块连接,用于发射激光束扫描一所述三维空间,并将所述三维空间划分成若干个所述拾音区域。
预设模块,预设所述麦克风阵列中的若干个所述麦克风与若干个所述拾音区域之间的所述位置映射表。
判断模块,与所述计算模块连接,用于当所述第一拾音区域不存在所述目标物且所述第二拾音区域和所述第三拾音区域均存在所述目标物时,判断检测到所述目标物处于所述第二拾音区域的时间是否早于检测到所述目标物处于所述第三拾音区域的时间。
本发明提供一种存储介质,该存储介质上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现上述任一项所述的调节拾音方向的方法。
本发明提供一种智能机器人,包括存储器和处理器,存储器上储存有在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现上述任一项所述的调节拾音方向的方法。
通过本发明提供的一种调节拾音方向的方法、系统、存储介质及智能机器人,具有以下有益效果:
1)控制麦克风阵列中与目标物所在拾音区域相应的麦克风发射拾音波束,增强拾取目标物当前所在的拾音区域的音频,当目标物不在机器人正前方,也能有针对性的增强拾取该目标物的音频,避免了目标物不在机器人的正前方,拾音效果弱的问题。
2)通过将机器人前方的区域划分为若干拾音区域,并建立拾音区域与麦克风阵列中的麦克风的映射关系,从而实现根据目标物所在的位置,启动相应的麦克风进行拾音,以达到增强拾音效果的目的。
3)将机器人正前方设置为优先级最高的第一拾音区域,当检测到目标物位于第一拾音区域时,增强拾取该区域的音频,其他拾音区域优先级相同,通过判断目标物出现在其他各拾音区域的时间先后,控制相应的麦克风进行拾音,避免目标物同时出现在两个以上拾音区域,出现拾音混乱的问题。
附图说明
下面将以明确易懂的方式,结合附图说明优选实施方式,对一种调节拾音方向的方法、系统、存储介质及智能机器人的方法的上述特性、技术特征、优点及其实现方式予以进一步说明。
图1是本发明一种调节拾音方向的方法的一个实施例的流程图;
图2是本发明一种调节拾音方向的方法的又一个实施例的流程图;
图3是本发明一种调节拾音方向的方法的再一个实施例的流程图;
图4是本发明一种调节拾音方向的方法的一个实施例的结构示意图;
图5是本发明一种调节拾音方向的方法的另一个实施例的结构示意图;
图6是本发明一种调节拾音方向的系统的一个实施例的结构示意图;
图7是本发明一种智能机器人的一个实施例的结构示意图。
附图标号说明:10、存储器;11、计算机程序;12、处理器;20、计算模块;21、控制模块;22、麦克风阵列;23、预设模块;24、判断模块;25、麦克风。
具体实施方式
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对照附图说明本发明的具体实施方式。显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图,并获得其他的实施方式。
为使图面简洁,各图中只示意性地表示出了与本发明相关的部分,它们并不代表其作为产品的实际结构。另外,以使图面简洁便于理解,在有些图中具有相同结构或功能的部件,仅示意性地绘示了其中的一个,或仅标出了其中的一个。在本文中,“一个”不仅表示“仅此一个”,也可以表示“多于一个”的情形。
本发明的一个实施例,如图1、图4和图5所示,一种调节拾音方向的方法,包括步骤:
S100当激光雷达在一三维空间检测到目标物时,计算所述目标物当前所在的位置,确定所述目标物当前所在的拾音区域。
具体的,激光雷达安装在智能机器人上,通过激光雷达发射激光束扫描机器人前方一三维空间,当目标物出现在机器人前方任意位置时,激光雷达发射的激光束被目标物折射,被折射的激光束被光学接收机接收,根据发射激光至接收的时间等计算出目标物的位置信息,根据目标物的位置信息,进一步确定该目标物当前所对应的拾音区域。
目标物包括人。
激光雷达是以发射激光束探测目标的位置、速度等特征量的雷达系统。其由激光发射机、光学接收机、转台和信息处理系统等组成,激光器将电脉冲变成光脉冲发射出去,光接收机再把从目标反射回来的光脉冲还原成电脉冲,送到显示器。通过向目标发射探测信号(激光束),然后将接收到的从目标反射回来的信号(目标回波)与发射信号进行比较,以获得目标的有关信息,如目标距离、方位、高度、速度、姿态以及形状等参数。
优选的,通过超声波装置发射超声波信号,对机器人前方的三维空间进行扫描,计算目标物当前所在的位置,确定该目标物当前所在的拾音区域。
S200根据检测到所述目标物的时间先后、所述目标物当前所在的所述拾音区域和位置映射表,控制麦克风阵列22中相应的麦克风25发射拾音波束,增强拾取所述目标物当前所在的所述拾音区域的音频。
具体的,目标物可能会有若干个,若干个目标物可能出现在智能机器人前方的某个或某几个拾音区域内,当目标物仅出现在某个或在某几个拾音区域内均存在目标物时,根据目标物在的拾音区域、检测到目标物的时间和位置映射表,控制麦克风阵列22中与目标物所在拾音区域相应的麦克风25发射拾音波束,增强拾取目标物当前所在的拾音区域的音频,以避免目标物不在机器人的正前方,拾音效果弱的问题。
本实施例中,控制麦克风阵列22中与目标物所在拾音区域相应的麦克风25发射拾音波束,增强拾取目标物当前所在的拾音区域的音频,当目标物不在机器人正前方,也能有针对性的增强拾取该目标物的音频,避免了目标物不在机器人的正前方,拾音效果弱的问题。
本发明的又一个实施例,如图2、图4和图5所示,一种调节拾音方向的方法,包括步骤:
S001所述激光雷达发射激光束扫描一所述三维空间,并将所述三维空间划分成若干个所述拾音区域。
具体的,通过激光雷达发射激光束扫描机器人前方区域,根据使用需求将该区域划分成若干个拾音区域,例如,划分为6个拾音区域。
S002预设麦克风阵列22中的若干个麦克风25与若干个所述拾音区域之间的所述位置映射表。
优选的,麦克风阵列22中设置6个麦克风25,将机器人前方区域划分为6个拾音区域,将6个拾音区域与6个麦克风25一一对应,建立位置映射表。
S100当激光雷达在一三维空间检测到目标物时,计算所述目标物当前所在的位置,确定所述目标物当前所在的拾音区域。
具体的,激光雷达安装在智能机器人上,通过激光雷达发射激光束扫描机器人前方一三维空间,当目标物出现在机器人前方任意位置时,激光雷达发射的激光束被目标物折射,被折射的激光束被光学接收机接收,根据发射激光至接收的时间等计算出目标物的位置信息,根据目标物的位置信息,进一步确定该目标物当前所对应的拾音区域。
目标物包括人。
激光雷达是以发射激光束探测目标的位置、速度等特征量的雷达系统。其由激光发射机、光学接收机、转台和信息处理系统等组成,激光器将电脉冲变成光脉冲发射出去,光接收机再把从目标反射回来的光脉冲还原成电脉冲,送到显示器。通过向目标发射探测信号(激光束),然后将接收到的从目标反射回来的信号(目标回波)与发射信号进行比较,以获得目标的有关信息,如目标距离、方位、高度、速度、姿态以及形状等参数。
优选的,通过超声波装置发射超声波信号,对机器人前方的三维空间进行扫描,计算目标物当前所在的位置,确定该目标物当前所在的拾音区域。
S200根据检测到所述目标物的时间先后、所述目标物当前所在的所述拾音区域和位置映射表,控制麦克风阵列22中相应的麦克风25发射拾音波束,增强拾取所述目标物当前所在的所述拾音区域的音频。
具体的,目标物可能会有若干个,若干个目标物可能出现在智能机器人前方的某个或某几个拾音区域内,当目标物仅出现在某个或在某几个拾音区域内均存在目标物时,根据目标物在的拾音区域、检测到目标物的时间和位置映射表,控制麦克风阵列22中与目标物所在拾音区域相应的麦克风25发射拾音波束,增强拾取目标物当前所在的拾音区域的音频,以避免目标物不在机器人的正前方,拾音效果弱的问题。
本实施例中,通过将机器人前方的区域划分为若干拾音区域,并建立拾音区域与麦克风阵列22中的麦克风25的映射关系,从而实现根据目标物所在的位置,启动相应的麦克风25进行拾音,以达到增强拾音效果的目的。
本发明的再一个实施例,如图2-5所示,一种调节拾音方向的方法,包括步骤:
S200根据检测到所述目标物的时间先后、所述目标物当前所在的所述拾音区域和位置映射表,控制麦克风阵列22中相应的麦克风25发射拾音波束,增强拾取所述目标物当前所在的所述拾音区域的音频。
具体的,目标物可能会有若干个,若干个目标物可能出现在智能机器人前方的某个或某几个拾音区域内,当目标物仅出现在某个或在某几个拾音区域内均存在目标物时,根据目标物在的拾音区域、检测到目标物的时间和位置映射表,控制麦克风阵列22中与目标物所在拾音区域相应的麦克风25发射拾音波束,增强拾取目标物当前所在的拾音区域的音频,以避免目标物不在机器人的正前方,拾音效果弱的问题。
S210当所述目标物处于第一拾音区域时,根据所述位置映射表,控制麦克风阵列22中与所述第一拾音区域相应的麦克风25发射所述拾音波束,增强拾取所述第一拾音区域的所述音频。
优选的,第一拾音区域划分为机器人正前方的位置,其优先级最高,当检测到目标物处于第一拾音区域,即目标物处于机器人正前方的位置时,即使其他的拾音区域也存在目标物,也仅控制麦克风阵列22中与该第一拾音区域相应的麦克风25发射拾音波束,增强拾取该第一拾音区域的音频,以达到增强增强拾取机器人正前方位置处目标物的音频的效果。
S220当所述第一拾音区域不存在所述目标物且所述目标物仅处于第二拾音区域时,根据所述位置映射表,控制麦克风阵列22中与所述第二拾音区域相应的麦克风25发射所述拾音波束,增强拾取所述第二拾音区域的所述音频。
具体的,其他音频区域的优先级相同,当检测到第一拾音区域不存在目标物时,且检测到目标物仅位于其他拾音区域的其中一个区域,例如位于第二区域时,则根据位置映射表,控制麦克风阵列22中与第二拾音区域相应的麦克风25发射拾音波束,增强拾取该第二拾音区域的音频。避免了目标物不在机器人正前方位置,拾音效果不佳的问题。
S230当所述第一拾音区域不存在所述目标物且所述第二拾音区域和所述第三拾音区域均存在所述目标物时,判断检测到所述目标物处于所述第二拾音区域的时间是否早于检测到所述目标物处于所述第三拾音区域的时间;
具体的,其他音频区域的优先级相同,当检测到第一拾音区域不存在目标物,且检测到第二拾音区域和第三拾音区域均存在目标物时,第二拾音区域与第三拾音区域的优先级相同,此时对目标物出出现在拾音区域的时间,判断检测到目标物处于第二拾音区域的时间是否早于检测到目标物处于第三拾音区域的时间,若在除第一区域外的其他区域也检测到目标物,同样进行时间的先后的判断。
S231当检测到所述目标物处于所述第二拾音区域的时间早于检测到所述目标物处于所述第三拾音区域的时间时,则控制麦克风阵列22中与所述第二拾音区域相应的麦克风25发射所述拾音波束,增强拾取所述第二拾音区域的所述音频。
S232当检测到所述目标物处于所述第二拾音区域的时间不早于检测到所述目标物处于所述第三拾音区域的时间时,则控制麦克风阵列22中与所述第三拾音区域相应的麦克风25发射所述拾音波束,增强拾取所述第三拾音区域的所述音频。
具体的,除目标物在第一拾音区域外,目标物出现在在其他任一区域,均判断其出现的时间先后,选择目标物最先出现的拾音区域相对应的麦克风25进行拾音,即当检测到目标物处于第二拾音区域的时间早于检测到目标物处于第三拾音区域的时间时,则控制麦克风阵列22中与第二拾音区域相应的麦克风25发射拾音波束,增强拾取第二拾音区域的音频。当检测到目标物处于第二拾音区域的时间不早于检测到目标物处于所述第三拾音区域的时间时,则控制麦克风阵列22中与第三拾音区域相应的麦克风25发射拾音波束,增强拾取第三拾音区域的音频。
优选的,麦克风阵列22包括四个麦克风25,相邻两个麦克风25的夹角为60°,所述拾音区域的范围为180°。
优选的,麦克风阵列22包括五个麦克风25,相邻两个麦克风25的夹角为90°,所述拾音区域的范围为360°。
优选的,麦克风阵列22包括六个麦克风25,相邻两个麦克风25的夹角为60°,所述拾音区域的范围为360°。
本实施例中,将机器人正前方设置为优先级最高的第一拾音区域,当检测到目标物位于第一拾音区域时,增强拾取该区域的音频,其他拾音区域优先级相同,通过判断目标物出现在其他各拾音区域的时间先后,控制相应的麦克风25进行拾音,避免目标物同时出现在两个以上拾音区域,出现拾音混乱的问题。
本发明的另一个实施例,如图4-5所示,一种调节拾音方向的方法,包括步骤:
S1当人出现在机器人前方任意位置时,激光雷达或是超声波会给出人的位置信息。
S2语音控制板会根据当前人所站在机器人前方位置,自动重置增强拾音方向。
S21激光雷达(前方270°发射线性信号)、超声波(机器人前端有一排超声波信号)可以把机器人前端划分成N个区域(比如人在机器人左侧、中间、右侧等)。
S22优先增强机器人正前方的拾音信号,即左侧优先检测到人,又在中间检测到人,增强中间信号。
S23如果左侧优先于右侧先检测到人,默认增强左侧拾音方向。
S24如果右侧优先于左侧先检测到人,默认增强右侧拾音方向。
S25人离开后,默认增强中间拾音方向。
如图4所示,麦克风阵列22模块(6麦)可以分别设置波束0、1、2、3、4、5方位增强拾音效果(相邻的波束间隔为60°),比如,输入命令BEAM0,则麦克风阵列22会从波束0方向增强拾取音频,同理,其它方位亦可设置。
人一旦出现在机器人的面前,对应区域的增强拾音BEAM则被软件自动设置,人一旦离开到其它位置,对应的增强拾音方向随之改变。
S6语音板包括:四麦(180°方向拾音,60°一个拾音方位)、五麦(360°方向拾音,90°一个拾音方位)、六麦(360°方向拾音,60°一个拾音方位),且四麦、五麦同样适用于此方法。
S61控制MCU(微控单元)和语音板之间通过串口(usart)通讯。usart是由ALIENTEK开发的一个灵巧的串口调试互交组件,通过它可以通过串口助手调用程序里面的任何函数,并执行。
本发明的一个实施例,如图6所示,一种调节拾音方向的系统,包括:
计算模块20,用于当激光雷达在一三维空间检测到目标物时,计算所述目标物当前所在的位置,确定所述目标物当前所在的拾音区域。
控制模块21,与计算模块20连接,用于根据检测到所述目标物的时间先后、所述目标物当前所在的所述拾音区域和位置映射表,控制麦克风阵列22中相应的麦克风25发射拾音波束。
麦克风阵列22,与控制模块21连接,用于增强拾取所述目标物当前所在的所述拾音区域的音频。
麦克风25,分别与控制模块21和所述控制麦克风阵列22连接,用于发射拾音波束。
具体的,还包括:
激光雷达,与计算模块20连接,用于发射激光束扫描一所述三维空间,并将所述三维空间划分成若干个所述拾音区域。
预设模块23,预设麦克风阵列22中的若干个麦克风25与若干个所述拾音区域之间的所述位置映射表。
判断模块24,与计算模块20连接,用于当所述第一拾音区域不存在所述目标物且所述第二拾音区域和所述第三拾音区域均存在所述目标物时,判断检测到所述目标物处于所述第二拾音区域的时间是否早于检测到所述目标物处于所述第三拾音区域的时间。
控制模块21,与判断模块24连接,还用于当所述目标物处于第一拾音区域时,根据所述位置映射表,控制麦克风阵列22中与所述第一拾音区域相应的麦克风25发射所述拾音波束,增强拾取所述第一拾音区域的所述音频。
控制模块21,与判断模块24连接,还用于当所述第一拾音区域不存在所述目标物且所述目标物仅处于第二拾音区域时,根据所述位置映射表,控制麦克风阵列22中与所述第二拾音区域相应的麦克风25发射所述拾音波束,增强拾取所述第二拾音区域的所述音频。
控制模块21,与判断模块24连接,还用于当检测到所述目标物处于所述第二拾音区域的时间早于检测到所述目标物处于所述第三拾音区域的时间时,则控制麦克风阵列22中与所述第二拾音区域相应的麦克风25发射所述拾音波束,增强拾取所述第二拾音区域的所述音频。
控制模块21,与判断模块24连接,还用于当检测到所述目标物处于所述第二拾音区域的时间不早于检测到所述目标物处于所述第三拾音区域的时间时,则控制麦克风阵列22中与所述第三拾音区域相应的麦克风25发射所述拾音波束,增强拾取所述第三拾音区域的所述音频。
本发明的一个实施例提供了一种计算机可读存储介质,其上存储有计算机程序11,计算机程序11被处理器12执行时实现上述实施例中的所有方法步骤或部分方法步骤。
本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序11来指令相关的硬件来完成,所述的计算机程序11可存储于一计算机可读存储介质中,该计算机程序11在被处理器12执行时,可实现上述各个方法实施例的步骤。其中,计算机程序11包括计算机程序代码,计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
本发明的一个实施例还提供一种终端设备,如图7所述示,包括存储器10和处理器12,存储器10上储存有在处理器12上运行的计算机程序11,处理器12执行计算机程序11时实现第一实施例中的所有方法步骤或部分方法步骤。
所称处理器12可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器12也可以是任何常规的处理器等,处理器12是所述计算机装置的控制中心,利用各种接口和线路连接整个计算机装置的各个部分。
存储器10可以用于存储计算机程序和/或模块,处理器12通过运行或执行存储在存储器10内的计算机程序和/或模块,以及调用存储在存储器10内的数据,实现所述计算机装置的各种功能。存储器10可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、视频数据等)等。此外,存储器10可以包括高速随机存取存储器,还可以包括非易失性存储器,例如硬盘、内存、插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(FlashCard)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
本发明有益效果是:在机器人前方270°激光可视范围内,人站在其中一个位置时,软件自动设置机器人增强拾音的波束,大大增强了麦克风拾音效果,提高了人机交互体验。
应当说明的是,上述实施例均可根据需要自由组合。以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (12)
1.一种调节拾音方向的方法,其特征在于,包括步骤:
当激光雷达在一三维空间检测到目标物时,计算所述目标物当前所在的位置,确定所述目标物当前所在的拾音区域;
根据检测到所述目标物的时间先后、所述目标物当前所在的所述拾音区域和位置映射表,控制麦克风阵列中相应的麦克风发射拾音波束,增强拾取所述目标物当前所在的所述拾音区域的音频,具体包括:
当所述目标物处于第一级拾音区时进行第一优先级的拾音增强;
当所述目标物处于第二级拾音区时,通过判断所述目标物处于所述第二级拾音区中拾音区的时间先后,控制时间最先的拾音区的麦克风进行拾音;
其中,所述第一级拾音区包括第一拾音区。
2.根据权利要求1所述的一种调节拾音方向的方法,其特征在于,在所述的当激光雷达在一三维空间检测到目标物时,计算所述目标物当前所在的所述拾音区域之前包括步骤:
所述激光雷达发射激光束扫描一所述三维空间,并将所述三维空间划分成若干个所述拾音区域;
预设所述麦克风阵列中的若干个所述麦克风与若干个所述拾音区域之间的所述位置映射表。
3.根据权利要求1所述的一种调节拾音方向的方法,其特征在于,所述的根据检测到至少一目标物的时间、所述至少一目标物当前所在的所述拾音区域和位置映射表,控制麦克风阵列中相应的麦克风发射拾音波束,增强拾取所述目标物当前所在的所述拾音区域的音频具体包括步骤:
当所述目标物处于第一拾音区域时,根据所述位置映射表,控制所述麦克风阵列中与所述第一拾音区域相应的所述麦克风发射所述拾音波束,增强拾取所述第一拾音区域的所述音频;
当所述第一拾音区域不存在所述目标物且所述目标物仅处于第二拾音区域时,根据所述位置映射表,控制所述麦克风阵列中与所述第二拾音区域相应的所述麦克风发射所述拾音波束,增强拾取所述第二拾音区域的所述音频。
4.根据权利要求1所述的一种调节拾音方向的方法,其特征在于,所述的根据检测到至少一目标物的时间、所述至少一目标物当前所在的所述拾音区域和位置映射表,控制麦克风阵列中相应的麦克风发射拾音波束,增强拾取所述目标物当前所在的所述拾音区域的音频具体还包括步骤:
当所述第一拾音区域不存在所述目标物且第二拾音区域和第三拾音区域均存在所述目标物时,判断检测到所述目标物处于所述第二拾音区域的时间是否早于检测到所述目标物处于所述第三拾音区域的时间;
当检测到所述目标物处于所述第二拾音区域的时间早于检测到所述目标物处于所述第三拾音区域的时间时,则控制所述麦克风阵列中与所述第二拾音区域相应的所述麦克风发射所述拾音波束,增强拾取所述第二拾音区域的所述音频。
5.根据权利要求4所述的一种调节拾音方向的方法,其特征在于,在所述的当所述第一拾音区域不存在所述目标物且第二拾音区域和第三拾音区域均存在所述目标物时,判断检测到目标物处于第二拾音区域的时间是否早于检测到所述目标物处于第三拾音区域的时间之后包括步骤:
当检测到所述目标物处于所述第二拾音区域的时间不早于检测到所述目标物处于所述第三拾音区域的时间时,则控制所述麦克风阵列中与所述第三拾音区域相应的所述麦克风发射所述拾音波束,增强拾取所述第三拾音区域的所述音频。
6.根据权利要求1-5任一项所述的一种调节拾音方向的方法,其特征在于,所述麦克风阵列包括四个所述麦克风,相邻两个所述麦克风的夹角为60°,所述拾音区域的范围为180°。
7.根据权利要求1-5任一项所述的一种调节拾音方向的方法,其特征在于,所述麦克风阵列包括五个所述麦克风,相邻两个所述麦克风的夹角为90°,所述拾音区域的范围为360°。
8.根据权利要求1-5任一项所述的一种调节拾音方向的方法,其特征在于,所述麦克风阵列包括六个所述麦克风,相邻两个所述麦克风的夹角为60°,所述拾音区域的范围为360°。
9.一种调节拾音方向的系统,其特征在于,包括:
计算模块,用于当激光雷达在一三维空间检测到目标物时,计算所述目标物当前所在的位置,确定所述目标物当前所在的拾音区域;
控制模块,与所述计算模块连接,用于根据检测到所述目标物的时间先后、所述目标物当前所在的所述拾音区域和位置映射表,控制麦克风阵列中相应的麦克风发射拾音波束;
麦克风阵列,与所述控制模块连接,用于增强拾取所述目标物当前所在的所述拾音区域的音频;
麦克风,分别与所述控制模块和所述控制麦克风阵列连接,用于发射拾音波束;
其中,当所述目标物处于第一级拾音区时进行第一优先级的拾音增强;
当所述目标物处于第二级拾音区时,通过判断所述目标物处于所述第二级拾音区中拾音区的时间先后,控制时间最先的拾音区的麦克风进行拾音;
其中,所述第一级拾音区包括第一拾音区。
10.根据权利要求9所述的一种调节拾音方向的系统,其特征在于,还包括:
激光雷达,与所述计算模块连接,用于发射激光束扫描一所述三维空间,并将所述三维空间划分成若干个所述拾音区域;
预设模块,预设所述麦克风阵列中的若干个所述麦克风与若干个所述拾音区域之间的所述位置映射表;
判断模块,与所述计算模块连接,用于当第一拾音区域不存在所述目标物且第二拾音区域和第三拾音区域均存在所述目标物时,判断检测到所述目标物处于所述第二拾音区域的时间是否早于检测到所述目标物处于所述第三拾音区域的时间。
11.一种存储介质,该存储介质上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现权利要求1至8任一项所述的方法。
12.一种智能机器人,包括存储器和处理器,存储器上储存有在处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至8任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911417001.5A CN111246339B (zh) | 2019-12-31 | 2019-12-31 | 一种调节拾音方向的方法、系统、存储介质及智能机器人 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911417001.5A CN111246339B (zh) | 2019-12-31 | 2019-12-31 | 一种调节拾音方向的方法、系统、存储介质及智能机器人 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111246339A CN111246339A (zh) | 2020-06-05 |
CN111246339B true CN111246339B (zh) | 2021-12-07 |
Family
ID=70872417
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911417001.5A Active CN111246339B (zh) | 2019-12-31 | 2019-12-31 | 一种调节拾音方向的方法、系统、存储介质及智能机器人 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111246339B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113301476B (zh) * | 2021-03-31 | 2023-11-14 | 阿里巴巴(中国)有限公司 | 拾音设备及麦克风阵列结构 |
CN114885254A (zh) * | 2022-04-30 | 2022-08-09 | 上海浩宜信息科技有限公司 | 一种带有人体感应的拾音装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102137318A (zh) * | 2010-01-22 | 2011-07-27 | 华为终端有限公司 | 拾音控制方法和装置 |
CN106782585A (zh) * | 2017-01-26 | 2017-05-31 | 芋头科技(杭州)有限公司 | 一种基于麦克风阵列的拾音方法及系统 |
CN108831474A (zh) * | 2018-05-04 | 2018-11-16 | 广东美的制冷设备有限公司 | 语音识别设备及其语音信号捕获方法、装置和存储介质 |
CN110491060A (zh) * | 2019-08-19 | 2019-11-22 | 深圳市优必选科技股份有限公司 | 一种机器人及其安全监控方法、装置及存储介质 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2743603B2 (ja) * | 1991-02-14 | 1998-04-22 | 日産自動車株式会社 | 情報伝達装置 |
CN106335071B (zh) * | 2016-11-14 | 2019-03-15 | 上海木木聚枞机器人科技有限公司 | 机器人和机器人控制方法 |
CN206442485U (zh) * | 2016-12-29 | 2017-08-25 | Tcl通力电子(惠州)有限公司 | 麦克风设备 |
CN106851469A (zh) * | 2017-02-16 | 2017-06-13 | 深圳创维-Rgb电子有限公司 | 一种调整音箱输出音频的方法和装置 |
US10524046B2 (en) * | 2017-12-06 | 2019-12-31 | Ademco Inc. | Systems and methods for automatic speech recognition |
CN209551787U (zh) * | 2018-12-28 | 2019-10-29 | 深圳市优必选科技有限公司 | 一种机器人 |
CN110211600B (zh) * | 2019-05-17 | 2021-08-03 | 北京华控创为南京信息技术有限公司 | 用于定向监听通信的智能麦克风阵列模块 |
-
2019
- 2019-12-31 CN CN201911417001.5A patent/CN111246339B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102137318A (zh) * | 2010-01-22 | 2011-07-27 | 华为终端有限公司 | 拾音控制方法和装置 |
CN106782585A (zh) * | 2017-01-26 | 2017-05-31 | 芋头科技(杭州)有限公司 | 一种基于麦克风阵列的拾音方法及系统 |
CN108831474A (zh) * | 2018-05-04 | 2018-11-16 | 广东美的制冷设备有限公司 | 语音识别设备及其语音信号捕获方法、装置和存储介质 |
CN110491060A (zh) * | 2019-08-19 | 2019-11-22 | 深圳市优必选科技股份有限公司 | 一种机器人及其安全监控方法、装置及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN111246339A (zh) | 2020-06-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104898844B (zh) | 基于超声波定位的手势识别与控制装置及识别与控制方法 | |
US11554810B2 (en) | Apparatus and method for controlling lane change using vehicle-to-vehicle communication information and apparatus for calculating tendency information for same | |
CN110085258B (zh) | 一种提高远场语音识别率的方法、系统及可读存储介质 | |
EP3926624A1 (en) | Voice awakening method and apparatus, and device and medium | |
US7766835B2 (en) | Ultrasound system and method for forming ultrasound images | |
CN108831474B (zh) | 语音识别设备及其语音信号捕获方法、装置和存储介质 | |
CN111246339B (zh) | 一种调节拾音方向的方法、系统、存储介质及智能机器人 | |
CN101441401B (zh) | 快速确定超声成像系统中成像区域的方法和装置 | |
CN111060874B (zh) | 一种声源定位方法、装置、存储介质及终端设备 | |
US20230333205A1 (en) | Sound source positioning method and apparatus | |
CN108399813B (zh) | 基于机器人的学习辅导方法与系统、机器人及手写设备 | |
KR20220117282A (ko) | 오디오 디바이스 자동-로케이션 | |
JP6977448B2 (ja) | 機器制御装置、機器制御プログラム、機器制御方法、対話装置、及びコミュニケーションシステム | |
CN104007441B (zh) | 一种车载全景雷达监测方法 | |
CN109688512B (zh) | 一种拾音方法及装置 | |
CN110164443B (zh) | 用于电子设备的语音处理方法、装置以及电子设备 | |
Laurijssen et al. | A flexible low-cost biologically inspired sonar sensor platform for robotic applications | |
CN112327859A (zh) | 一种车辆的自动跟随方法、装置和车辆 | |
CN111103807A (zh) | 一种家用终端设备的控制方法及装置 | |
KR101946434B1 (ko) | 화상 채팅의 녹화 방법 및 단말 | |
CN117523907A (zh) | 车位更新方法、装置、车辆及存储介质 | |
CN109188394A (zh) | 激光雷达电路系统及激光雷达 | |
JP6879144B2 (ja) | 機器制御装置、機器制御プログラム、機器制御方法、対話装置、及びコミュニケーションシステム | |
CN210572724U (zh) | 激光雷达电路系统及激光雷达 | |
CN112098930A (zh) | 一种寻找车辆的方法和智能设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |