CN113435433B - 一种基于作业现场的音视频数据提取处理系统 - Google Patents

Abstract

本发明中公开了一种基于作业现场的音视频数据提取处理系统，涉及作业现场管理技术领域；具体包括音频采集设备、视频采集设备、音视频编码模块、通讯模块、音视频数据提取模块和存储模块，多个所述音频采集设备和多个视频采集设备安装于作业现场，用于采集作业现场的音、视频信息；音频采集设备、视频采集设备采集作业现场的实时原音、原视频信号传输至音视频编码模块。本发明中可以根据预设特征对数据进行分析，判断出异常音视频数据，并将这些数据进行提取，快速识别作业现场的异常情况种类和等级，且及时通过显示终端进行显示，工作人员通过显示终端显示的推送信息和相应标签，即可快速了解作业现象信息，作出快速的反应。

Description

一种基于作业现场的音视频数据提取处理系统

技术领域

本发明涉及作业现场管理技术领域，尤其涉及一种基于作业现场的音视频数据提取处理系统。

背景技术

在工厂、工地、特殊场所等作业现场，是事件或行动发生的地点，也是在需要行动的地点，也是人、机、料、法、环等重点管理区域，许多的作业现场环境复杂，人、机交替作业，现场的环境检测至关重要，通常是采用由安全人员拿着巡检仪等设备到作业现场进行现场检测或采集，采集现场的设备和/或环境参数，并由安全人员个人判断现场安全形势，并作后续处理，或者将参数存储在检测设备内，由安全人员将设备带回后，输入到专门的设备中进行分析，然后才能确定被采集参数的设备是否存在故障或安全隐患，或者在现场建设监控系统，对作业现场进行实时监控。

目前，对于作业现场的监控以视频监控为主，部分摄像机带有采声设备，但是，许多的摄像机安装于高空中，对于音频的采集距离远，无法在现场吵杂的声音中得到有效的信息，且许多的实时监控显示较简单，无法及时准确地进行预警，主要依靠人工观看识别，无形中增大了管理人员的工作负担。

有鉴于此，本发明提供一种基于作业现场的音视频数据提取处理系统，以解决上述现有技术中存在的技术问题。

发明内容

基于背景技术存在的技术问题，本发明提出了一种基于作业现场的音视频数据提取处理系统。

本发明提出的一种基于作业现场的音视频数据提取处理系统，包括音频采集设备、视频采集设备、音视频编码模块、通讯模块、音视频数据提取模块和存储模块，多个所述音频采集设备和多个视频采集设备安装于作业现场，用于采集作业现场的音、视频信息；

所述音频采集设备、视频采集设备采集作业现场的实时原音、原视频信号传输至音视频编码模块，音视频编码模块将采集的音视频数字化后传输至音视频数据提取模块；

所述音视频数据提取模块对采集的音视频信息进行分解，提取声音特征和视频特征后对于同一区域的音视频信息进行合并，在合并的音视频中添加时间和区域标签，并通过储存模块进行信息存储；

所述存储模块中根据作业现场的采集区域划分，设定多个储存扇区，在每个扇区设置文件夹，用于存储提取的音、视频文件信息；

所述音视频编码模块、音视频数据提取模块和存储模块为服务器中的应用程序，其中，服务器通过通讯模块连接有显示终端；

所述音视频数据提取模块对音、视频中的异常数据进行提取，并根据预设特征对数据进行标记，且在提取的异常数据中写入预设的标签，及时通过显示终端进行显示，工作人员通过显示终端显示的推送信息和相应标签，即可快速了解作业现象信息，作出快速的反应。

本发明中优选地，所述音视频编码模块处理音频采集设备、视频采集设备采集的原始信息时，对音频信息和视频信息进行同步，且对音频信息和视频信息进行时间和区域标记，以获取作业现场的声音和影像实时监控信息。

本发明中优选地，所述音频采集设备、视频采集设备安装时，根据作业现场情况和监测重点，增设相应的音频采集设备、视频采集设备，重点监测设备运行声音时，增设音频采集设备，利用多台音频采集设备和一台视频采集设备对作业现场的噪音进行监控，重点监测设备运行影像时，增设视频采集设备利用一台音频采集设备和多台视频采集设备对作业现场的视频进行监控。

本发明中优选地，所述音频采集设备、视频采集设备数量不同时，根据预先设定，选取其中一组音频采集设备、视频采集设备作为主采集点，其他的音频采集设备、视频采集设备作为副采集点，将主采集点采集的音、视频信号进行同步构成该作业现场采集区域主监控信息储存在主文件夹中，其他的音、视频数据作为附属信息储存在子文件夹中。

本发明中优选地，所述音频采集设备、视频采集设备均设置有旋转平台，每个采集区域的音频采集设备、视频采集设备通过旋转平台可以实现联动，旋转平台与服务器之间信号连接，在音、视频信号提取的过程中，根据服务器的反馈信号，音频采集设备、视频采集设备实现联动，捕捉异常音、视频信号源。

本发明中优选地，所述音频采集设备设置有降噪处理模块，在采集作业现场区域音频信号时，过滤杂音实现指向性音源采集作业，增强音频信号的强度。

本发明中优选地，所述视频采集设备设置有影像捕捉模块，设定视频特征参数，作业现场采集视频信息时，出现符合特征的影像时，视频采集设备进行定位和指向性采集，捕捉异常影像。

本发明中优选地，所述音视频数据提取模块还包括提前录入的声音特征参数，音频信息分解时，对采集的音频特征与录入的声音特征参数进行比对，对于相匹配的声音特征参数进行重点标记，重点标记内容包括声源的起始时间、起始区域，且对相邻采集区域的音频信息进行辅助标记，且将标记信息进行复制、存档和设定标签，方便后续对声音特征进行核查和调用。

本发明中优选地，所述音视频数据提取模块还包括提前录入的视频特征参数，视频信息分解时，对采集的视频特征与录入的视频特征参数进行比对，对于相匹配的视频特征参数进行重点标记，重点标记内容包括视频的起始时间、起始区域，且将标记信息进行复制、存档和设定标签，方便后续对视频特征进行核查和调用。

本发明中优选地，所述音视频数据提取模块获取匹配的音、视频特征时，调用相同时间段和相同采集区域的音、视频信息进行复制、存档和设定标签。

与现有技术相比，本发明提供了一种基于作业现场的音视频数据提取处理系统，具备以下有益效果：

根据作业现场情况和监测重点，增设相应的音频采集设备、视频采集设备，对采集的音视频信息进行分解，提取声音特征和视频特征后对于同一区域的音视频信息进行合并，在合并的音视频中添加时间和区域标签，并通过储存模块进行信息存储，根据预设特征对数据进行分析，判断出异常音视频数据，并将这些数据进行提取，快速识别作业现场的异常情况种类和等级，且在提取的异常数据中写入预设的标签，及时通过显示终端进行显示，工作人员通过显示终端显示的推送信息和相应标签，即可快速了解作业现象信息，作出快速的反应，且对于相匹配的音频特征参数进行重点标记，重点标记内容包括异常声源、视频的起始时间、起始区域，且将标记信息进行复制、存档和设定标签，方便后续对声音特征进行核查和调用。

附图说明

图1为本发明提出的一种基于作业现场的音视频数据提取处理系统的逻辑示意图；

图2为本发明提出的一种基于作业现场的音视频数据提取处理系统的信息推送示意图；

图3为本发明提出的一种基于作业现场的音视频数据提取处理系统的重点监测示意图；

图4为本发明提出的一种基于作业现场的音视频数据提取处理系统的异常提取示意图；

图5为本发明提出的一种基于作业现场的音视频数据提取处理系统的分区监测示意图。

具体实施方式

下面详细描述本专利的实施例，所述实施例的示例在附图中示出，其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的，仅用于解释本专利，而不能理解为对本专利的限制。

在本专利的描述中，需要理解的是，术语“中心”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本专利和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本专利的限制。

在本专利的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”、“设置”应做广义理解，例如，可以是固定相连、设置，也可以是可拆卸连接、设置，或一体地连接、设置。对于本领域的普通技术人员而言，可以根据具体情况理解上述术语在本专利中的具体含义。

参照图1-5，一种基于作业现场的音视频数据提取处理系统，包括音频采集设备、视频采集设备、音视频编码模块、通讯模块、音视频数据提取模块和存储模块，多个音频采集设备、视频采集设备安装于作业现场，用于采集作业现场的音、视频信息；

音频采集设备、视频采集设备采集作业现场的实时原音、原视频信号传输至音视频编码模块，音视频编码模块将采集的音视频数字化后传输至音视频数据提取模块；

音视频数据提取模块对采集的音视频信息进行分解，提取声音特征和视频特征后对于同一区域的音视频信息进行合并，在合并的音视频中添加时间和区域标签，并通过储存模块进行信息存储；

存储模块中根据作业现场的采集区域划分，设定多个储存扇区，在每个扇区设置文件夹，用于存储提取的音、视频文件信息；

音视频编码模块、音视频数据提取模块和存储模块为服务器中的应用程序，其中，服务器通过通讯模块连接有显示终端，显示终端包括但不限于计算机、笔记本电脑、智能电话、平板电脑等，且通讯模块包括但不限于无线通信网络、因特网、局域网等；

音视频数据提取模块对音、视频中的异常数据进行提取，并根据预设特征对数据进行标记，且在提取的异常数据中写入预设的标签，及时通过显示终端进行显示，工作人员通过显示终端显示的推送信息和相应标签，即可快速了解作业现象信息，作出快速的反应。

为了实现作业现场的实时监控，音视频编码模块处理音频采集设备、视频采集设备采集的原始信息时，对音频信息和视频信息进行同步，且对音频信息和视频信息进行时间和区域标记，以获取作业现场的声音和影像实时监控信息。

对于每个采集点关注重点不同时，音频采集设备、视频采集设备安装时，根据作业现场情况和监测重点，增设相应的音频采集设备、视频采集设备，重点监测设备运行声音时，增设音频采集设备，利用多台音频采集设备和一台视频采集设备对作业现场的噪音进行监控，重点监测设备运行影像时，增设视频采集设备利用一台音频采集设备和多台视频采集设备对作业现场的视频进行监控，例如，对于机电等设备的运行主要以声音为主要判断信号，可以围绕增设音频采集设备，采集设备的运行声噪，判断设备运行是否有杂音；对于人车流、货物运输等，以视频监控为主，增设视频采集设备对现场作业进行监控，避免出现危险。

为了实现同一采集区域音、视频的便捷调用和查找，对采集的音、视频信息进行管理，音频采集设备、视频采集设备数量不同时，根据预先设定，选取其中一组音频采集设备、视频采集设备作为主采集点，其他的音频采集设备、视频采集设备作为副采集点，将主采集点采集的音、视频信号进行同步构成该作业现场采集区域主监控信息储存在主文件夹中，其他的音、视频数据作为附属信息储存在子文件夹中，主次有序，便于对原始信息文件、提取信息文件的调用和查找。

音频采集设备、视频采集设备均设置有旋转平台，每个采集区域的音频采集设备、视频采集设备通过旋转平台可以实现联动，旋转平台与服务器之间信号连接，在音、视频信号提取的过程中，根据服务器的反馈信号，音频采集设备、视频采集设备实现联动，捕捉异常音、视频信号源，在采集区域出现异常状态，影响作业现场生产或秩序时，音频采集设备、视频采集设备通过旋转平台可以实现联动，对于异常区域重点监控。

音频采集设备设置有降噪处理模块，在采集作业现场区域音频信号时，过滤杂音实现指向性音源采集作业，增强音频信号的强度。

视频采集设备设置有影像捕捉模块，设定视频特征参数，作业现场采集视频信息时，出现符合特征的影像时，视频采集设备进行定位和指向性采集，捕捉异常影像。

音视频数据提取模块还包括提前录入的声音特征参数，音频信息分解时，对采集的音频特征与录入的声音特征参数进行比对，对于相匹配的声音特征参数进行重点标记，重点标记内容包括声源的起始时间、起始区域，且对相邻采集区域的音频信息进行辅助标记，且将标记信息进行复制、存档和设定标签，方便后续对声音特征进行核查和调用。

音视频数据提取模块还包括提前录入的视频特征参数，视频信息分解时，对采集的视频特征与录入的视频特征参数进行比对，对于相匹配的视频特征参数进行重点标记，重点标记内容包括视频的起始时间、起始区域，且将标记信息进行复制、存档和设定标签，方便后续对视频特征进行核查和调用。

音视频数据提取模块获取匹配的音、视频特征时，调用相同时间段和相同采集区域的音、视频信息进行复制、存档和设定标签。

以上，仅为本发明较佳的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，根据本发明的技术方案及其发明构思加以等同替换或改变，都应涵盖在本发明的保护范围之内。

Claims (10)

1.一种基于作业现场的音视频数据提取处理系统，包括音频采集设备、视频采集设备、音视频编码模块、通讯模块、音视频数据提取模块和存储模块，其特征在于，多个所述音频采集设备和多个视频采集设备安装于作业现场，用于采集作业现场的音、视频信息；

所述音频采集设备、视频采集设备采集作业现场的实时原音、原视频信号传输至音视频编码模块，音视频编码模块将采集的音视频数字化后传输至音视频数据提取模块；

所述音视频数据提取模块对采集的音视频信息进行分解，提取声音特征和视频特征后对于同一区域的音视频信息进行合并，在合并的音视频中添加时间和区域标签，并通过储存模块进行信息存储；

所述存储模块中根据作业现场的采集区域划分，设定多个储存扇区，在每个扇区设置文件夹，用于存储提取的音、视频文件信息；

所述音视频编码模块、音视频数据提取模块和存储模块为服务器中的应用程序，其中，服务器通过通讯模块连接有显示终端；

所述音视频数据提取模块对音、视频中的异常数据进行提取，并根据预设特征对数据进行标记，且在提取的异常数据中写入预设的标签，及时通过显示终端进行显示，工作人员通过显示终端显示的推送信息和相应标签，即可快速了解作业现象信息，作出快速的反应。

2.根据权利要求1所述的一种基于作业现场的音视频数据提取处理系统，其特征在于，所述音视频编码模块处理音频采集设备、视频采集设备采集的原始信息时，对音频信息和视频信息进行同步，且对音频信息和视频信息进行时间和区域标记，以获取作业现场的声音和影像实时监控信息。

3.根据权利要求1所述的一种基于作业现场的音视频数据提取处理系统，其特征在于，所述音频采集设备、视频采集设备安装时，根据作业现场情况和监测重点，增设相应的音频采集设备、视频采集设备，重点监测设备运行声音时，增设音频采集设备，利用多台音频采集设备和一台视频采集设备对作业现场的噪音进行监控，重点监测设备运行影像时，增设视频采集设备利用一台音频采集设备和多台视频采集设备对作业现场的视频进行监控。

4.根据权利要求3所述的一种基于作业现场的音视频数据提取处理系统，其特征在于，所述音频采集设备、视频采集设备数量不同时，根据预先设定，选取其中一组音频采集设备、视频采集设备作为主采集点，其他的音频采集设备、视频采集设备作为副采集点，将主采集点采集的音、视频信号进行同步构成该作业现场采集区域主监控信息储存在主文件夹中，其他的音、视频数据作为附属信息储存在子文件夹中。

5.根据权利要求4所述的一种基于作业现场的音视频数据提取处理系统，其特征在于，所述音频采集设备、视频采集设备均设置有旋转平台，每个采集区域的音频采集设备、视频采集设备通过旋转平台可以实现联动，旋转平台与服务器之间信号连接，在音、视频信号提取的过程中，根据服务器的反馈信号，音频采集设备、视频采集设备实现联动，捕捉异常音、视频信号源。

6.根据权利要求1所述的一种基于作业现场的音视频数据提取处理系统，其特征在于，所述音频采集设备设置有降噪处理模块，在采集作业现场区域音频信号时，过滤杂音实现指向性音源采集作业，增强音频信号的强度。

7.根据权利要求5所述的一种基于作业现场的音视频数据提取处理系统，其特征在于，所述视频采集设备设置有影像捕捉模块，设定视频特征参数，作业现场采集视频信息时，出现符合特征的影像时，视频采集设备进行定位和指向性采集，捕捉异常影像。

8.根据权利要求1所述的一种基于作业现场的音视频数据提取处理系统，其特征在于，所述音视频数据提取模块还包括提前录入的声音特征参数，音频信息分解时，对采集的音频特征与录入的声音特征参数进行比对，对于相匹配的声音特征参数进行重点标记，重点标记内容包括声源的起始时间、起始区域，且对相邻采集区域的音频信息进行辅助标记，且将标记信息进行复制、存档和设定标签，方便后续对声音特征进行核查和调用。

9.根据权利要求1所述的一种基于作业现场的音视频数据提取处理系统，其特征在于，所述音视频数据提取模块还包括提前录入的视频特征参数，视频信息分解时，对采集的视频特征与录入的视频特征参数进行比对，对于相匹配的视频特征参数进行重点标记，重点标记内容包括视频的起始时间、起始区域，且将标记信息进行复制、存档和设定标签，方便后续对视频特征进行核查和调用。

10.根据权利要求8或9任意一项所述的一种基于作业现场的音视频数据提取处理系统，其特征在于，所述音视频数据提取模块获取匹配的音、视频特征时，调用相同时间段和相同采集区域的音、视频信息进行复制、存档和设定标签。

Images