[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

CN114359828A - 目标行为的记录方法、装置、存储介质及电子装置 - Google Patents

目标行为的记录方法、装置、存储介质及电子装置 Download PDF

Info

Publication number
CN114359828A
CN114359828A CN202111633620.5A CN202111633620A CN114359828A CN 114359828 A CN114359828 A CN 114359828A CN 202111633620 A CN202111633620 A CN 202111633620A CN 114359828 A CN114359828 A CN 114359828A
Authority
CN
China
Prior art keywords
target
image
preset point
similarity
behavior
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202111633620.5A
Other languages
English (en)
Inventor
李庆奇
马东星
李伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN202111633620.5A priority Critical patent/CN114359828A/zh
Publication of CN114359828A publication Critical patent/CN114359828A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Image Analysis (AREA)

Abstract

本发明实施例提供了一种目标行为的记录方法、装置、存储介质及电子装置,其中,该方法包括:获取目标拍摄设备在目标时刻的实际预置点信息;在确定实际预置点信息与预设预置点信息一致的情况下,分析目标拍摄设备所拍摄的目标多媒体信息中所包括的行为,以确定分析结果,预设预置点信息为预先配置的目标拍摄设备在目标时刻所需达到的预置点信息;在基于分析结果确定目标多媒体信息中包括目标行为的情况下,缓存目标多媒体信息中包括的目标图像,目标图像中记录有目标行为。通过本发明,解决了相关技术中存在的目标行为的记录方法的准确性差的问题,达到了提高目标行为的记录的准确率的效果。

Description

目标行为的记录方法、装置、存储介质及电子装置
技术领域
本发明实施例涉及监控技术领域,具体而言,涉及一种目标行为的记 录方法、装置、存储介质及电子装置。
背景技术
目前,摄像头广泛应用于各种安全监控领域,例如道路交通,安全生 产,电力系统等,在生产生活、安全管理中均发挥了重要作用,可预防安 全事故的发生,为安全管理提供了极大的便利。下面以摄像头在管理部门 处理事件监控系统中的应用为例,近些年在管理部门处理事件过程中引起 矛盾事件频频发生,或者双方对于是否存在违规行为发生争执等等,这时 证据就显得尤为重要,由于管理部门处理事件中,违规行为需要存在一段 时间才能够判断为违规行为,以车辆违停为例,车辆需要停留一段时间之 后才能够判定为违停,而且由于实时性要求不是特别高,通常会使用一个 摄像头进行多个预置点分析,同样由于管理部门人员处理事件的需要,需 要对违规的行为进行多次抓拍融合,而在相关技术中,可能因为摄像头被 人为操作,导致识别的抓图可能不是预设的预置点位,导致抓图中所记录 的目标行为不一定准确,容易产生很多误报,因此,提供一种准确记录目 标行为的方法已成为亟需解决的问题。
针对相关技术中存在的目标行为的记录方法的准确性差的问题,目前 尚未提出有效的解决方案。
发明内容
本发明实施例提供了一种目标行为的记录方法、装置、存储介质及电 子装置,以至少解决相关技术中存在的目标行为的记录方法的准确性差的 问题。
根据本发明的一个实施例,提供了一种目标行为的记录方法,包括: 获取目标拍摄设备在目标时刻的实际预置点信息;在确定所述实际预置点 信息与预设预置点信息一致的情况下,分析所述目标拍摄设备所拍摄的目 标多媒体信息中所包括的行为,以确定分析结果,其中,所述预设预置点 信息为预先配置的所述目标拍摄设备在所述目标时刻所需达到的预置点 信息;在基于所述分析结果确定所述目标多媒体信息中包括目标行为的情况下,缓存所述目标多媒体信息中包括的目标图像,其中,所述目标图像 中记录有所述目标行为。
在一个示例性实施例中,在缓存所述目标多媒体信息中包括的目标图 像之后,所述方法还包括:获取预先缓存的所述目标拍摄设备在第一时刻 所拍摄的第一图像,其中,所述第一时刻为所述目标时刻之前的时刻,且 所述目标拍摄设备在所述第一时刻时的预置点信息为所述预设预置点信 息;在确定所述目标图像与所述第一图像的相似度超过相似度阈值的情况 下,继续缓存所述目标图像;在确定所述目标图像与所述第一图像的相似度未超过相似度阈值的情况下,删除所述目标图像和所述第一图像。
在一个示例性实施例中,所述方法还包括:比对所述目标图像中包括 的目标背景图与所述第一图像中包括的第一背景图之间的背景相似度;基 于所述背景相似度确定所述目标图像与所述第一图像的相似度。
在一个示例性实施例中,比对所述目标图像中包括的目标背景图与所 述第一图像中包括的第一背景图之间的背景相似度包括:确定所述目标图 像的目标直方图,以及,所述第一图像的第一直方图;计算所述目标直方 图与所述第一直方图之间的距离,得到距离计算结果;基于所述距离计算 结果确定所述背景相似度。
在一个示例性实施例中,基于所述背景相似度确定所述目标图像与所 述第一图像的相似度包括:确定所述目标图像以及所述第一图像中所分别 记录的目标行为的行为信息,其中,所述行为信息包括行为类型信息以及 行为位置信息;比对所述目标图像中记录的行为信息与所述第一图像中记 录的行为信息的行为相似度;基于所述背景相似度和所述行为相似度确定 所述目标图像和所述第一图像的相似度。
在一个示例性实施例中,在确定所述目标图像与所述第一图像的相似 度超过相似度阈值的情况下,所述方法还包括:确定已缓存的所述目标拍 摄设备在目标时间段内连续拍摄的图像的数量,其中,所述目标时间段包 括所述目标时刻和所述第一时刻,且所述目标拍摄设备在所述目标时间段 内的预置点信息一直为所述预设预置点信息;在确定所述数量达到数量阈 值的情况下,将已缓存的所述目标拍摄设备在目标时间段内所拍摄的图像 进行拼接,得到拼接图像;上报所述拼接图像。
在一个示例性实施例中,在得到所述分析结果之后,所述方法还包括: 在基于所述分析结果确定所述目标多媒体信息中不存在所述目标行为的 情况下,丢弃所述目标多媒体信息。
根据本发明的另一个实施例,还提供了一种目标行为的记录装置,包 括:第一获取模块,用于获取目标拍摄设备在目标时刻的实际预置点信息; 分析模块,用于在确定所述实际预置点信息与预设预置点信息一致的情况 下,分析所述目标拍摄设备所拍摄的目标多媒体信息中所包括的行为,以 确定分析结果,其中,所述预设预置点信息为预先配置的所述目标拍摄设 备在所述目标时刻所需达到的预置点信息;第一缓存模块,用于在基于所 述分析结果确定所述目标多媒体信息中包括目标行为的情况下,缓存所述 目标多媒体信息中包括的目标图像,其中,所述目标图像中记录有所述目 标行为。
根据本发明的又一个实施例,还提供了一种计算机可读存储介质,所 述计算机可读存储介质中存储有计算机程序,其中,所述计算机程序被设 置为运行时执行上述任一项方法实施例中的步骤。
根据本发明的又一个实施例,还提供了一种电子装置,包括存储器和 处理器,所述存储器中存储有计算机程序,所述处理器被设置为运行所述 计算机程序以执行上述任一项方法实施例中的步骤。
通过本发明,通过获取目标拍摄设备在目标时刻的实际预置点信息, 并确定实际预置点信息与目标拍摄设备在目标时刻所需达到的预设预置 点信息一致的情况下,再分析目标拍摄设备所拍摄的目标多媒体信息中所 包括的行为,当确定目标多媒体信息中包括目标行为的情况下,缓存记录 有目标行为的目标图像。避免了相关技术中存在的因目标拍摄设备可能被 人为操作而导致所拍摄的多媒体信息与预设的预置点位不一致以及造成所记录的目标行为不够准确的问题,因此,解决了相关技术中存在的目标 行为的记录方法的准确性差的问题,达到了提高目标行为的记录的准确率 的效果。
附图说明
图1是本发明实施例的目标行为的记录方法的移动终端硬件结构框图;
图2是根据本发明实施例的目标行为的记录方法的流程图;
图3是根据本发明具体实施例的目标行为的记录方法的流程图;
图4是根据本发明具体实施例的直方图示例图;
图5是根据本发明具体实施例的检测框交并比示例图;
图6是根据本发明具体实施例的图像拼接示例图;
图7是根据本发明实施例的目标行为的记录装置的结构框图。
具体实施方式
下文中将参考附图并结合实施例来详细说明本发明的实施例。
需要说明的是,本发明的说明书和权利要求书及上述附图中的术语 “第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或 先后次序。
本申请实施例中所提供的方法实施例可以在移动终端、计算机终端或 者类似的运算装置中执行。以运行在移动终端上为例,图1是本发明实施 例的目标行为的记录方法的移动终端硬件结构框图。如图1所示,移动终 端可以包括一个或多个(图1中仅示出一个)处理器102(处理器102可 以包括但不限于微处理器MCU或可编程逻辑器件FPGA等的处理装置) 和用于存储数据的存储器104,其中,上述移动终端还可以包括用于通信 功能的传输设备106以及输入输出设备108。本领域普通技术人员可以理 解,图1所示的结构仅为示意,其并不对上述移动终端的结构造成限定。 例如,移动终端还可包括比图1中所示更多或者更少的组件,或者具有与 图1所示不同的配置。
存储器104可用于存储计算机程序,例如,应用软件的软件程序以及 模块,如本发明实施例中的目标行为的记录方法对应的计算机程序,处理 器102通过运行存储在存储器104内的计算机程序,从而执行各种功能应 用以及数据处理,即实现上述的方法。存储器104可包括高速随机存储器, 还可包括非易失性存储器,如一个或者多个磁性存储装置、闪存、或者其 他非易失性固态存储器。在一些实例中,存储器104可进一步包括相对于 处理器102远程设置的存储器,这些远程存储器可以通过网络连接至移动 终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动 通信网及其组合。
传输装置106用于经由一个网络接收或者发送数据。上述的网络具体 实例可包括移动终端的通信供应商提供的无线网络。在一个实例中,传输 装置106包括一个网络适配器(Network Interface Controller,简称为NIC), 其可通过基站与其他网络设备相连从而可与互联网进行通讯。在一个实例 中,传输装置106可以为射频(Radio Frequency,简称为RF)模块,其 用于通过无线方式与互联网进行通讯。
在本实施例中提供了一种目标行为的记录方法,图2是根据本发明实 施例的目标行为的记录方法的流程图,如图2所示,该流程包括如下步骤:
步骤S202,获取目标拍摄设备在目标时刻的实际预置点信息;
步骤S204,在确定所述实际预置点信息与预设预置点信息一致的情 况下,分析所述目标拍摄设备所拍摄的目标多媒体信息中所包括的行为, 以确定分析结果,其中,所述预设预置点信息为预先配置的所述目标拍摄 设备在所述目标时刻所需达到的预置点信息;
步骤S206,在基于所述分析结果确定所述目标多媒体信息中包括目 标行为的情况下,缓存所述目标多媒体信息中包括的目标图像,其中,所 述目标图像中记录有所述目标行为。
通过上述步骤,通过获取目标拍摄设备在目标时刻的实际预置点信息, 并确定实际预置点信息与目标拍摄设备在目标时刻所需达到的预设预置 点信息一致的情况下,再分析目标拍摄设备所拍摄的目标多媒体信息中所 包括的行为,当确定目标多媒体信息中包括目标行为的情况下,缓存记录 有目标行为的目标图像。避免了相关技术中存在的因目标拍摄设备可能被 人为操作而导致所拍摄的多媒体信息与预设的预置点位不一致以及造成 所记录的目标行为不够准确的问题,因此,解决了相关技术中存在的目标 行为的记录方法的准确性差的问题,达到了提高目标行为的记录的准确率 的效果。
其中,上述步骤的执行主体可以为监控系统,如管理部门处理事件监 控系统,或多媒体信息处理设备,或云台控制设备,或者为配置在存储设 备上的具备人机交互能力的处理器,或者为具备类似处理能力的处理设备 或处理单元等,但不限于此。下面以监控系统执行上述操作为例(仅是一 种示例性说明,在实际操作中还可以是其他的设备或模块来执行上述操作) 进行说明:
在上述实施例中,监控系统获取目标拍摄设备(如摄像头,或球机, 或枪机)在目标时刻的实际预置点信息,再比对实际预置点信息和预设预 置点信息,以管理部门处理事件监控系统轮训中需要球机对多个预置点采 用轮训方式进行抓图取证为例,在实际应用中,球机按照预设规则周期性 转动至每个预置点进行抓拍,还需要获取球机在一段时间内对某个预置点 (如预置点A)进行多次(如2次,或3次,或4次,或更多次)抓拍, 以获取记录目标行为的证据,例如,目标行为为车辆违停,或垃圾桶满溢, 或物料乱堆等;在确定实际预置点信息与预设预置点信息一致的情况下, 分析目标拍摄设备所拍摄的目标多媒体信息中所包括的行为,以确定分析 结果,在实际应用中,当需要获取球机在一段时间内对某个预设预置点(如 预置点A)进行多次抓拍时,在此期间可能因为人为原因或其它原因导致目标拍摄设备转动至其它位置,即目标拍摄设备所拍摄的可能不一定是预 设预置点(如预置点A)的多媒体信息,这样就会造成根据目标多媒体信 息所分析的目标行为不一定准确,因此,需要获取在目标时刻的实际预置 点信息以及确定实际预置点信息与预设预置点信息是否一致,只有在实际 预置点信息与预设预置点信息一致的情况下,根据目标拍摄设备所拍摄的 目标多媒体信息分析得出的目标行为才能作为证据;在基于分析结果确定 目标多媒体信息中包括目标行为的情况下,缓存目标多媒体信息中包括的 目标图像,该目标图像中记录有目标行为,在实际应用中,目标多媒体信 息可以包括视频和/或目标图像,而目标图像可以是视频中包括的一帧图像, 例如车辆违停行为,而在实际应用中,为了提高所记录的目标行为的准确 率,可能需要在一段时间内对某个预置点进行连续多次抓拍取证,在确定 每次的实际预置点信息均与预设阈值点信息一致的情况下,才能将从每次 获取的目标多媒体信息中分析得出的目标行为作为管理部门人员处理事 件的证据,并保存目标图像以记录目标行为。避免了相关技术中存在的因 目标拍摄设备可能被人为操作而导致所拍摄的多媒体信息与预设的预置 点位不一致以及造成所记录的目标行为不够准确的问题,因此,解决了相 关技术中存在的目标行为的记录方法的准确性差的问题,达到了提高目标 行为的记录的准确率的效果。
在一个可选的实施例中,在缓存所述目标多媒体信息中包括的目标图 像之后,所述方法还包括:获取预先缓存的所述目标拍摄设备在第一时刻 所拍摄的第一图像,其中,所述第一时刻为所述目标时刻之前的时刻,且 所述目标拍摄设备在所述第一时刻时的预置点信息为所述预设预置点信 息;在确定所述目标图像与所述第一图像的相似度超过相似度阈值的情况 下,继续缓存所述目标图像;在确定所述目标图像与所述第一图像的相似度未超过相似度阈值的情况下,删除所述目标图像和所述第一图像。在本 实施例中,在缓存目标时刻所对应的目标图像之后,获取预先缓存的第一 时刻的第一图像,目标拍摄设备在第一时刻和目标时刻所对应的预置点信 息相同,第一时刻可以是与上述目标时刻的时差小于时差阈值的时刻,例 如,第一时刻与目标时刻的时间间隔为5分钟,或10分钟,或其它时间 阈值,再将目标图像与第一图像进行比对以确定两者的相似度,当确定目 标图像与第一图像的相似度大于或等于相似度阈值(如95%,或90%,或 其它值)的情况下,继续缓存该目标图像,相反,当相似度小于上述相似 度阈值的情况下,可删除目标图像和第一图像,因为可能发生目标拍摄设 备被人为操作的事件,例如,人为转动球机,而在实际应用中,也可按照 本实施例类似的方法,经过更多次(如3次,或4次,或其它次数)的当 前时刻的目标图像与前一时刻的目标图像的对比,例如,将第3次缓存的 目标图像与第2次缓存的目标图像进行对比,及将第4次缓存的目标图像 与第3次缓存的目标图像进行对比,以此类推,需要说明的是,上述第2 次、第3次、第4次均指对与预设预置点信息相同的实际预置点进行拍摄 的时刻,在经过多次(即多个不同时刻)的目标图像对比并确定图像之间 的相似度均达到上述相似度阈值的情况下,再确定多个目标图像中所记录 的目标行为是准确的,提高了目标行为的记录的准确率,即提高了证据链 的可靠性。
在一个可选的实施例中,所述方法还包括:比对所述目标图像中包括 的目标背景图与所述第一图像中包括的第一背景图之间的背景相似度;基 于所述背景相似度确定所述目标图像与所述第一图像的相似度。在本实施 例中,通过比较目标图像中的目标背景图和第一图像中的背景图之间的相 似度,进而确定目标图像和第一图像之间的相似度,在实际应用中,当需 要获取球机在一段时间内对某个预设预置点(如预置点A)进行多次(如 4次,或其它次数)抓拍时,即需要缓存多个(如4个,或其它数量)目 标图像,此时需要对4个目标图像进行相似度对比,同样可以对4个目标 图像中所分别包括的背景图进行两两对比,例如,可以计算每两个背景图 之间的相似性。通过本实施例,可以排除在分析过程中预置点存在被转走 又被转回到原来的位置的情况,以实现进一步提高目标行为的记录的准确 率的目的及实现进一步提高证据链的可靠性的目的。
在一个可选的实施例中,比对所述目标图像中包括的目标背景图与所 述第一图像中包括的第一背景图之间的背景相似度包括:确定所述目标图 像的目标直方图,以及,所述第一图像的第一直方图;计算所述目标直方 图与所述第一直方图之间的距离,得到距离计算结果;基于所述距离计算 结果确定所述背景相似度。在本实施例中,在比对目标背景图和第一背景 图之间相似度时,可以先分别确定目标图像的目标直方图和第一图像的第 一直方图,再计算目标直方图与第一直方图之间的距离,进而确定目标背 景图和第一背景图之间相似度,例如,在实际应用中,可使用correlation相 关性计算公式或其它相关性计算公式以计算两个直方图之间的距离,同样, 当在某些应用场合,需要对同一个预置点进行连续多次抓拍以获得多个目 标图像的情况下,可以先确定多个目标图像的直方图,再对每两个直方图 进行举例计算。通过本实施例,实现了通过直方图的距离计算方法以确定 目标背景图与第一背景图之间的相似度的目的。
在一个可选的实施例中,基于所述背景相似度确定所述目标图像与所 述第一图像的相似度包括:确定所述目标图像以及所述第一图像中所分别 记录的目标行为的行为信息,其中,所述行为信息包括行为类型信息以及 行为位置信息;比对所述目标图像中记录的行为信息与所述第一图像中 记录的行为信息的行为相似度;基于所述背景相似度和所述行为相似度确 定所述目标图像和所述第一图像的相似度。在本实施例中,还可通过确定 目标图像与第一图像所记录的目标行为的行为信息,再对两张图像中所分 别包含的行为信息之间的行为相似度进行比对,行为信息可包括行为类型 信息,例如机动车违停、非机动车违停、暴露垃圾、乱堆物料等,行为信 息还可包括行为位置信息,如目标图像和第一图像中目标行为发生的位置, 然后结合背景相似度和行为相似度以进一步确定目标图像和第一图像之 间的相似度,通过本实施例,可实现进一步提高目标行为的记录的准确率的目的及实现进一步提高证据链的可靠性的目的。
在一个可选的实施例中,在确定所述目标图像与所述第一图像的相似 度超过相似度阈值的情况下,所述方法还包括:确定已缓存的所述目标拍 摄设备在目标时间段内连续拍摄的图像的数量,其中,所述目标时间段包 括所述目标时刻和所述第一时刻,且所述目标拍摄设备在所述目标时间段 内的预置点信息一直为所述预设预置点信息;在确定所述数量达到数量阈 值的情况下,将已缓存的所述目标拍摄设备在目标时间段内所拍摄的图像 进行拼接,得到拼接图像;上报所述拼接图像。在本实施例中,在确定目 标图像与第一图像的相似度超过相似度阈值(如95%,或90%,或其它值) 的情况下,确定已缓存的图像的数量,其中,缓存的图像为从目标拍摄设 备在目标时间段内(如10分钟,或30分钟,或其它时间段)的不同时刻 (包括上述目标时刻、第一时刻)所拍摄的多媒体信息中所分析获得的, 并在确定每个时刻的实际预置点信息与预设预置点信息相同的情况下缓 存的,当确定图像的数量达到数量阈值(如3张,或4张,或其它数量) 的情况下,将所缓存的图像进行拼接,以组成证据链图片,再上报所拼接 图像,例如,在实际应用中,管理部门处理事件监控系统中在经过前述分 析、比对、拼接等之后,即可将证据链图片(即拼接图像)上报相关部门 或其它系统或其它设备,同时可将证据链图片(即拼接图像)进行存储。 通过本实施例,实现了对记录目标行为的图像进行拼接的目的,有效解决 了相关技术中存在的目标行为的记录的准确率低以及证据链不完整的问 题。
在一个可选的实施例中,在得到所述分析结果之后,所述方法还包括: 在基于所述分析结果确定所述目标多媒体信息中不存在所述目标行为的 情况下,丢弃所述目标多媒体信息。在本实施例中,当分析目标拍摄设备 所拍摄的目标多媒体信息中不存在目标行为的情况下,可丢弃目标多媒体 信息,以实现节约存储资源的目的。
显然,上述所描述的实施例仅仅是本发明一部分的实施例,而不是全 部的实施例。下面结合实施例对本发明进行具体说明,以管理部门处理事 件监控系统智能检测中球机轮训为例进行说明。
图3是根据本发明具体实施例的目标行为的记录方法的流程图,如图 3所示,该流程包括以下步骤:
S302,球机(对应于前述目标拍摄设备)轮训到某个点位,缓存当前 预置点信息(对应于前述预设预置点信息);
S304,同时使用预置点配置的管理部门管理规则将码流送入算法进行 对应的管理部门处理事件监控系统智能分析(对应于前述分析目标拍摄设 备所拍摄的目标多媒体信息);
S306,得到分析抓拍图片和结果(对应于前述分析结果,目标图像), 通过智能算法分析的结果,再次获取当前球机所述的预置点信息(对应于 前述实际预置点信息);
S308,判断分析前和分析后预置点是否一致,即对应于前述比对实际 预置点信息和预设预置点信息;
S310,在上述步骤308的判断结果为否的情况下,丢弃当前分析结果 和该预置点之前的分析结果,即,如果不一致,说明球机在分析过程中存 在转动会导致误识别,则丢弃该预置点当前的分析结果及这个预置点之前 缓存的结果,继续进行轮训检测;
S312,在上述步骤308的判断结果为是的情况下,进一步判断同一个 预置点多次连续分析是否完成,即,如果前后预置点一致,则判断同一个 预置点多次连续分析是否完成,即在同一个预置点的分析时每次分析前后 预置点都一致,以机动车违停的识别为例,需要经过连续4次的抓拍结果 的组成对应的证据链;
S314,在上述步骤312的判断结果为否的情况下,缓存该预置点分析 结果,并回到步骤S302继续轮训;即,如果前后预置点不一致,则缓存 当前的预置点分析结果,继续进行轮训检测;
S316,在上述步骤312的判断结果为是的情况下,对多次结果的抓拍 背景一致性进行分析;例如,如果同一个预置点连续多次抓拍已经完成, 通过对多次的结果进行直方图的两两计算,计算背景的相似性(对应于前 述背景相似度),直方图的距离计算使用correlation相关性计算公式如下:
Figure RE-GDA0003547503200000121
其中
Figure RE-GDA0003547503200000122
当多张抓拍图 像的直方图的距离接近0时,则说明背景大概率相似;通过该过程可以排 除分析过程中预置点存在被转走又被转回到原来的位置的情况,初步排除 场景不一致的情况;图4是根据本发明具体实施例的直方图示例图,图4 中对应为不同场景的直方图示例;
S318,判断背景是否一致;
S320,在上述步骤318的判断结果为是的情况下,如上述步骤S316 中直方图的距离接近0时,对多次结果的目标一致性(对应于前述目标行 为的行为信息)进行分析,例如,对目标分析的结果进行类型(对应于前 述行为类型信息)是否相同的判断,在管理部门处理事件检测中,目标类 型有机动车违停、非机动车违停、暴露垃圾、垃圾桶满溢、乱堆物料等; 如果检测目标类型一致,还可进一步进行目标检测框交并比计算,判断目 标在同一个位置(对应于前述行为位置信息),同一个预置点连续多次抓 拍类型和位置一致,则说明当前检测为正常结果,否则丢弃当前检测结果 和该预置点之前的检测结果,继续进行轮训检测;
上述检测框交并比可按公式
Figure RE-GDA0003547503200000123
计算,其中A∩B为两个检测 区域的交集,A∪B为两个检测区域的所有区域的合集,图5是根据本发 明具体实施例的检测框交并比示例图,当IOU越大,说明两个检测框重叠 的部分越多;在上述步骤318的判断结果为否的情况下,回到步骤S310, 丢弃当前分析结果和该预置点之前的分析结果;
需要说明的是,在实际应用中,通过上述步骤S302-S318以及判断出 背景一致后,仍然不能排除场景相近的背景的情况,为了提高证据链的完 整性及可信度,还需要对多次结果的目标一致性进行分析;
S322,判断目标是否一致;
S324,在上述步骤322的判断结果为是的情况下,即当目标一致时, 对同个预置点连续多个时刻的图像进行拼接,组成证据链图片,并进行结 果的上报、存储和展示,同时继续进行检测,以管理部门对机动车违停检 测为例,图6是根据本发明具体实施例的图像拼接示例图;需要说明的是, 在上述步骤322的判断结果为否的情况下,回到步骤S310,丢弃当前分 析结果和该预置点之前的分析结果。
在相关技术中,需要使用一个球机进行多个预置点采用轮训的方式进 行分析,由于管理部门的证据链的要求是违规行为持续一段事件多张抓拍 的结果,球机在轮训分析的过程中由于人为原因需要转到某个预置点去查 看信息,会有这种情况的发生:球机转到某个预置点分析过程中,被人为 操作到其他点位,这时候分析的结果会产生很多误报,而且识别的抓图可 能不是预设的预置点位,由于预置点会被多次抓拍,这样拼接的结果中背景不一样导致违停的取证不可行;
而在上述实施例中,当球机轮训中某个预置点时,首先缓存下当前的 预置点信息,同时将码流送入算法进行检测,在检测结束时,获取当前的 预置点信息,如果预置点不一致,则存在球机被人为操作的可能,该预置 点当前的检测和之前多次检测的缓存丢弃,如果一致且该预置点多次连续 的检测预置点一致,则进一步进行背景一致性和目标一致性检查,如果多 次背景是一致的且目标一致,进行图像拼接,组成证据链,并进行结果的存储和显示。即在对同一个预置点多次抓拍组成证据链的过程中,排除掉 由于人为操作产生的错误图片或结果,使连续间隔的多次抓拍图片一致, 保证证据链的完成。
通过本发明实施例,通过分析前和分析后的预置点比对,实现了排查 分析前后球机位置不一致而导致的误识别的问题的目的;通过对同一个预 置点位多次抓拍后图像使用直方图相似性比较,判断抓拍背景的一致,解 决了分析过程中由于球机移动分析背景导致的误识别的问题;通过同一个 预置点位多次抓拍后图像及分析结果的违规类型和违规检测框的交并比 计算,最终确认是同一个预置点多个时刻的抓图,实现了提高证据链检测的准确性的目的;通过本发明实施例提供的证据链检测方法,可有效解决 多时刻抓拍证据不完整或错误的情况。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到根 据上述实施例的方法可借助软件加必需的通用硬件平台的方式来实现,当 然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理 解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软 件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如 ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可 以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所 述的方法。
在本实施例中还提供了一种目标行为的记录装置,图7是根据本发明 实施例的目标行为的记录装置的结构框图,如图7所示,该装置包括:
第一获取模块702,用于获取目标拍摄设备在目标时刻的实际预置点 信息;
分析模块704,用于在确定所述实际预置点信息与预设预置点信息一 致的情况下,分析所述目标拍摄设备所拍摄的目标多媒体信息中所包括的 行为,以确定分析结果,其中,所述预设预置点信息为预先配置的所述目 标拍摄设备在所述目标时刻所需达到的预置点信息;
第一缓存模块706,用于在基于所述分析结果确定所述目标多媒体信 息中包括目标行为的情况下,缓存所述目标多媒体信息中包括的目标图像, 其中,所述目标图像中记录有所述目标行为。
在一个可选的实施例中,上述装置还包括:第二获取模块,用于在缓 存所述目标多媒体信息中包括的目标图像之后,获取预先缓存的所述目标 拍摄设备在第一时刻所拍摄的第一图像,其中,所述第一时刻为所述目标 时刻之前的时刻,且所述目标拍摄设备在所述第一时刻时的预置点信息为 所述预设预置点信息;第二缓存模块,用于在确定所述目标图像与所述第 一图像的相似度超过相似度阈值的情况下,继续缓存所述目标图像;删除模块,用于在确定所述目标图像与所述第一图像的相似度未超过相似度阈 值的情况下,删除所述目标图像和所述第一图像。
在一个可选的实施例中,上述装置还包括:比对模块,用于比对所述 目标图像中包括的目标背景图与所述第一图像中包括的第一背景图之间 的背景相似度;第一确定模块,用于基于所述背景相似度确定所述目标图 像与所述第一图像的相似度。
在一个可选的实施例中,上述比对模块包括:第一确定单元,用于确 定所述目标图像的目标直方图,以及,所述第一图像的第一直方图;计算 单元,用于计算所述目标直方图与所述第一直方图之间的距离,得到距离 计算结果;第二确定单元,用于基于所述距离计算结果确定所述背景相似 度。
在一个可选的实施例中,上述第一确定模块包括:第三确定单元,用 于确定所述目标图像以及所述第一图像中所分别记录的目标行为的行为 信息,其中,所述行为信息包括行为类型信息以及行为位置信息;比对单 元,用于比对所述目标图像中记录的行为信息与所述第一图像中记录的行 为信息的行为相似度;第四确定单元,用于基于所述背景相似度和所述行 为相似度确定所述目标图像和所述第一图像的相似度。
在一个可选的实施例中,上述装置还包括:第二确定模块,用于在确 定所述目标图像与所述第一图像的相似度超过相似度阈值的情况下,确定 已缓存的所述目标拍摄设备在目标时间段内连续拍摄的图像的数量,其中, 所述目标时间段包括所述目标时刻和所述第一时刻,且所述目标拍摄设备 在所述目标时间段内的预置点信息一直为所述预设预置点信息;拼接模块, 用于在确定所述数量达到数量阈值的情况下,将已缓存的所述目标拍摄设 备在目标时间段内所拍摄的图像进行拼接,得到拼接图像;上报模块,用 于上报所述拼接图像。
在一个可选的实施例中,上述装置还包括:丢弃模块,用于在得到所 述分析结果之后,且在基于所述分析结果确定所述目标多媒体信息中不存 在所述目标行为的情况下,丢弃所述目标多媒体信息。
需要说明的是,上述各个模块是可以通过软件或硬件来实现的,对于 后者,可以通过以下方式实现,但不限于此:上述模块均位于同一处理器 中;或者,上述各个模块以任意组合的形式分别位于不同的处理器中。
本发明的实施例还提供了一种计算机可读存储介质,该计算机可读存 储介质中存储有计算机程序,其中,该计算机程序被设置为运行时执行上 述任一项方法实施例中的步骤。
在一个示例性实施例中,上述计算机可读存储介质可以包括但不限于: U盘、只读存储器(Read-Only Memory,简称为ROM)、随机存取存储器 (RandomAccess Memory,简称为RAM)、移动硬盘、磁碟或者光盘等各 种可以存储计算机程序的介质。
本发明的实施例还提供了一种电子装置,包括存储器和处理器,该存 储器中存储有计算机程序,该处理器被设置为运行计算机程序以执行上述 任一项方法实施例中的步骤。
在一个示例性实施例中,上述电子装置还可以包括传输设备以及输入 输出设备,其中,该传输设备和上述处理器连接,该输入输出设备和上述 处理器连接。
本实施例中的具体示例可以参考上述实施例及示例性实施方式中所 描述的示例,本实施例在此不再赘述。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤 可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者 分布在多个计算装置所组成的网络上,它们可以用计算装置可执行的程序 代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并 且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或 者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件 和软件结合。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于 本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的原 则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护 范围之内。

Claims (10)

1.一种目标行为的记录方法,其特征在于,包括:
获取目标拍摄设备在目标时刻的实际预置点信息;
在确定所述实际预置点信息与预设预置点信息一致的情况下,分析所述目标拍摄设备所拍摄的目标多媒体信息中所包括的行为,以确定分析结果,其中,所述预设预置点信息为预先配置的所述目标拍摄设备在所述目标时刻所需达到的预置点信息;
在基于所述分析结果确定所述目标多媒体信息中包括目标行为的情况下,缓存所述目标多媒体信息中包括的目标图像,其中,所述目标图像中记录有所述目标行为。
2.根据权利要求1所述的方法,其特征在于,在缓存所述目标多媒体信息中包括的目标图像之后,所述方法还包括:
获取预先缓存的所述目标拍摄设备在第一时刻所拍摄的第一图像,其中,所述第一时刻为所述目标时刻之前的时刻,且所述目标拍摄设备在所述第一时刻时的预置点信息为所述预设预置点信息;
在确定所述目标图像与所述第一图像的相似度超过相似度阈值的情况下,继续缓存所述目标图像;
在确定所述目标图像与所述第一图像的相似度未超过相似度阈值的情况下,删除所述目标图像和所述第一图像。
3.根据权利要求2所述的方法,其特征在于,所述方法还包括:
比对所述目标图像中包括的目标背景图与所述第一图像中包括的第一背景图之间的背景相似度;
基于所述背景相似度确定所述目标图像与所述第一图像的相似度。
4.根据权利要求3所述的方法,其特征在于,比对所述目标图像中包括的目标背景图与所述第一图像中包括的第一背景图之间的背景相似度包括:
确定所述目标图像的目标直方图,以及,所述第一图像的第一直方图;
计算所述目标直方图与所述第一直方图之间的距离,得到距离计算结果;
基于所述距离计算结果确定所述背景相似度。
5.根据权利要求3所述的方法,其特征在于,基于所述背景相似度确定所述目标图像与所述第一图像的相似度包括:
确定所述目标图像以及所述第一图像中所分别记录的目标行为的行为信息,其中,所述行为信息包括行为类型信息以及行为位置信息;
比对所述目标图像中记录的行为信息与所述第一图像中记录的行为信息的行为相似度;
基于所述背景相似度和所述行为相似度确定所述目标图像和所述第一图像的相似度。
6.根据权利要求2所述的方法,其特征在于,在确定所述目标图像与所述第一图像的相似度超过相似度阈值的情况下,所述方法还包括:
确定已缓存的所述目标拍摄设备在目标时间段内连续拍摄的图像的数量,其中,所述目标时间段包括所述目标时刻和所述第一时刻,且所述目标拍摄设备在所述目标时间段内的预置点信息一直为所述预设预置点信息;
在确定所述数量达到数量阈值的情况下,将已缓存的所述目标拍摄设备在目标时间段内所拍摄的图像进行拼接,得到拼接图像;
上报所述拼接图像。
7.根据权利要求1所述的方法,其特征在于,在得到所述分析结果之后,所述方法还包括:
在基于所述分析结果确定所述目标多媒体信息中不存在所述目标行为的情况下,丢弃所述目标多媒体信息。
8.一种目标行为的记录装置,其特征在于,包括:
第一获取模块,用于获取目标拍摄设备在目标时刻的实际预置点信息;
分析模块,用于在确定所述实际预置点信息与预设预置点信息一致的情况下,分析所述目标拍摄设备所拍摄的目标多媒体信息中所包括的行为,以确定分析结果,其中,所述预设预置点信息为预先配置的所述目标拍摄设备在所述目标时刻所需达到的预置点信息;
第一缓存模块,用于在基于所述分析结果确定所述目标多媒体信息中包括目标行为的情况下,缓存所述目标多媒体信息中包括的目标图像,其中,所述目标图像中记录有所述目标行为。
9.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质中存储有计算机程序,其中,所述计算机程序被处理器执行时实现所述权利要求1至7任一项中所述的方法的步骤。
10.一种电子装置,包括存储器、处理器以及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现所述权利要求1至7任一项中所述的方法的步骤。
CN202111633620.5A 2021-12-28 2021-12-28 目标行为的记录方法、装置、存储介质及电子装置 Pending CN114359828A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111633620.5A CN114359828A (zh) 2021-12-28 2021-12-28 目标行为的记录方法、装置、存储介质及电子装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111633620.5A CN114359828A (zh) 2021-12-28 2021-12-28 目标行为的记录方法、装置、存储介质及电子装置

Publications (1)

Publication Number Publication Date
CN114359828A true CN114359828A (zh) 2022-04-15

Family

ID=81102947

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111633620.5A Pending CN114359828A (zh) 2021-12-28 2021-12-28 目标行为的记录方法、装置、存储介质及电子装置

Country Status (1)

Country Link
CN (1) CN114359828A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116958707A (zh) * 2023-08-18 2023-10-27 武汉市万睿数字运营有限公司 一种基于球机监控设备的图像分类方法、装置及相关介质

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116958707A (zh) * 2023-08-18 2023-10-27 武汉市万睿数字运营有限公司 一种基于球机监控设备的图像分类方法、装置及相关介质
CN116958707B (zh) * 2023-08-18 2024-04-23 武汉市万睿数字运营有限公司 一种基于球机监控设备的图像分类方法、装置及相关介质

Similar Documents

Publication Publication Date Title
CN109166261B (zh) 基于图像识别的图像处理方法、装置、设备及存储介质
CN112291520B (zh) 异常事件识别方法、装置、存储介质及电子装置
WO2020094091A1 (zh) 一种图像抓拍方法、监控相机及监控系统
CN109299703B (zh) 对鼠情进行统计的方法、装置以及图像采集设备
WO2020094088A1 (zh) 一种图像抓拍方法、监控相机及监控系统
CN112818173A (zh) 关联对象的识别方法、装置及计算机可读存储介质
CN110659391A (zh) 一种视频侦查方法及装置
CN111010547A (zh) 目标对象的追踪方法及装置、存储介质、电子装置
CN111553231B (zh) 基于信息融合的人脸抓拍与去重系统、方法、终端及介质
CN113992893A (zh) 园区巡检方法、装置、存储介质及电子装置
CN112651398A (zh) 车辆的抓拍控制方法、装置及计算机可读存储介质
CN112836683B (zh) 用于便携式摄像设备的车牌识别方法、装置、设备和介质
CN113869137A (zh) 事件检测方法、装置、终端设备及存储介质
CN112422909B (zh) 一种基于人工智能的视频行为分析管理系统
CN108174198B (zh) 一种视频图像质量诊断分析检测设备及应用系统
CN114359828A (zh) 目标行为的记录方法、装置、存储介质及电子装置
CN113190700B (zh) 用于房产交易的人脸抓拍、筛选和存储的方法及系统
CN112201047B (zh) 一种基于Flink框架的嫌疑车辆落脚点分析方法及装置
CN113592427A (zh) 工时统计方法、工时统计装置及计算机可读存储介质
CN112949390A (zh) 一种基于视频质量的事件检测方法、装置
CN114422776B (zh) 摄像设备的检测方法及装置、存储介质、电子装置
CN110855947A (zh) 一种图像抓拍处理方法及装置
CN113438286B (zh) 信息推送方法及装置、电子设备和存储介质
CN111243289A (zh) 目标车辆的跟踪方法及装置、存储介质、电子装置
CN112738387A (zh) 目标抓拍方法、装置及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination