CN111818300B - 一种数据存储、查询方法、装置、计算机设备及存储介质 - Google Patents
一种数据存储、查询方法、装置、计算机设备及存储介质 Download PDFInfo
- Publication number
- CN111818300B CN111818300B CN202010547197.6A CN202010547197A CN111818300B CN 111818300 B CN111818300 B CN 111818300B CN 202010547197 A CN202010547197 A CN 202010547197A CN 111818300 B CN111818300 B CN 111818300B
- Authority
- CN
- China
- Prior art keywords
- image
- data
- type
- description data
- video stream
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 90
- 238000013500 data storage Methods 0.000 title claims abstract description 36
- 238000012545 processing Methods 0.000 claims description 28
- 238000001514 detection method Methods 0.000 claims description 23
- 230000008569 process Effects 0.000 description 25
- 238000012544 monitoring process Methods 0.000 description 21
- 238000010586 diagram Methods 0.000 description 18
- 230000006870 function Effects 0.000 description 9
- 230000003993 interaction Effects 0.000 description 9
- 238000010191 image analysis Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 6
- 238000004590 computer program Methods 0.000 description 6
- 238000012549 training Methods 0.000 description 6
- 238000012806 monitoring device Methods 0.000 description 5
- 230000002457 bidirectional effect Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 108010024433 H 256 Proteins 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/71—Indexing; Data structures therefor; Storage structures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/73—Querying
- G06F16/735—Filtering based on additional data, e.g. user or group profiles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- General Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Physics & Mathematics (AREA)
- Library & Information Science (AREA)
- Software Systems (AREA)
- Computational Linguistics (AREA)
- Signal Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本申请涉及计算机技术领域,提供一种数据存储、查询方法、装置、计算机设备及存储介质,用于减少存储设备的存储空间占用。该方法包括:获取待存储数据;其中,所述待存储数据包括视频流、图像集和图像描述数据,所述图像集包括与所述视频流关联的至少一个图像,所述图像描述数据用于描述所述图像集中部分或全部图像在所述视频流中的位置;以及,丢弃所述图像集中与所述图像描述数据关联的图像,并存储所述视频流、以及所述图像描述数据。
Description
技术领域
本申请涉及计算机技术领域,尤其涉及一种数据存储、查询方法、装置、计算机设备及存储介质。
背景技术
在监控场景下,随着监控设备越来越广泛的使用,监控设备例如网络摄像机(IP-camera,IPC)等,监控设备获得的数据也越来越多,比如图像和视频等。监控设备获得数据之后,会发送至存储设备进行存储,存储设备例如网络视频录像机(network videorecorder,NVR)。在存储设备对监控设备获得的数据进行存储时,目前存储设备一般是将监控设备发送的全部数据进行存储,导致存储设备的存储量较大,占用存储设备的存储空间较多。
发明内容
本申请实施例提供一种数据存储、查询方法、装置、计算机设备及存储介质,用于减少存储设备的存储空间占用。
第一方面,提供一种数据存储方法,该方法包括:
获取待存储数据;其中,所述待存储数据包括视频流、图像集和图像描述数据,所述图像集包括与所述视频流关联的至少一个图像,所述图像描述数据用于描述所述图像集中部分或全部图像在所述视频流中的位置;
丢弃所述图像集中与所述图像描述数据关联的图像,并存储所述视频流、以及所述图像描述数据。
本申请实施例中,将待存储数据中与图像描述数据关联的图像丢弃,存储视频流以及图像描述数据,由于后续可以根据图像描述数据去恢复对应的图像,即删除的是在数据存储过程中产生的冗余数据,不会影响后期获得各种数据,还可以减少待存储数据的数据量,减少待存储数据的对存储空间的占用;且,由于需要存储的待存储数据的数据量减小,因此存储过程需要处理的待存储数据的数据量减小,提高了存储效率。
可选的,所述图像集包括第一类图像,和/或第二类图像;其中,第一类图像是指所述视频流中至少一个视频帧,所述第二类图像是指所述视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域;
当所述图像集包括第一类图像时,所述图像描述数据包括用于描述所述至少一个视频帧在所述视频流中的位置的数据;
当所述图像集包括第二类图像时,所述图像描述数据包括用于描述所述各目标对应的目标区域在所述至少一个视频帧中的位置的数据。
本申请实施例中,当图像描述数据包括用于描述至少一个视频帧在所述视频流中的位置的数据时,可以根据该图像描述数据,从视频流中确定出至少一个视频帧对应的图像,或者图像描述数据包括用于描述各目标对应的目标区域在至少一个视频帧中的位置的数据时,可以根据该图像描述数据,从至少一个视频帧中确定出至少一个视频帧中每个视频帧中各目标对应的目标区域,也就是说,即使丢弃第一类图像或第二类图像,后续也可以根据视频流和图像描述数据进行合成对应的图像,减少了存储的冗余数据,即减少了对存储空间的占用。
可选的,在丢弃所述图像集中与所述图像描述数据关联的图像,并存储所述视频流、以及所述图像描述数据之后,包括:
在接收查询设备发送的用于请求数据的查询请求时,向所述查询设备反馈所述图像描述数据和所述视频流,以使查询设备根据所述图像描述数据以及视频流,生成所述冗余标识对应的图像;或者,
在接收查询设备发送的查询请求时,根据所述图像描述数据,以及所述视频流,生成与所述图像描述数据关联的图像,并向所述查询设备反馈与所述图像描述数据关联的图像。
本申请实施例中,在接收来自查询设备查询数据的查询请求时,可以将视频流和图像描述数据发送至查询设备,以使查询设备根据视频流和图像描述数据合成第一类图像和/或第二类图像,这样可以减轻存储设备的处理量。或者可以在根据视频流和图像描述数据合成第一类图像和/或第二类图像之后,向查询设备发送第一类图像和/或第二类图像,这样可以减少查询设备的处理量。另外,设备可以按照任一方式处理数据,提高数据查询的灵活性,另外设备可以根据自身的资源使用情况,选择发送视频流和图像描述数据,或者是合成后的图像,避免设备负载过大。
可选的,在丢弃所述图像集中与所述图像描述数据关联的图像,并存储所述视频流、以及所述图像描述数据之后,包括:
在所述图像描述数据增加冗余标识;其中,所述冗余标识用于指示已丢弃所述图像描述数据关联的图像的图像类型,所述图像类型包括第一类图像和/或第二类图像;
在接收查询设备发送的查询请求时,生成与所述图像描述数据关联的图像,包括:
根据所述冗余标识,若确定在所述图像描述数据中与已丢弃所述图像描述数据关联的图像对应的图像类型包括第一类图像,则对所述至少一个视频帧进行解码,获得与所述至少一个视频帧对应的图像;
根据所述冗余标识,若确定在所述图像描述数据中与已丢弃所述图像描述数据关联的图像对应的图像类型包括第二类图像,则对所述至少一个视频帧进行解码,并对解码后的视频帧进行目标检测,获得所述视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域。
本申请实施例中,可以通过冗余标识确定图像描述数据中与已丢弃图像的图像类型,从而在查询某一图像类型的图像时,可以合成与丢弃图像对应的图像即可,不需要对图像描述数据对应的图像进行合成,避免了重复去合成某些已存在的图像,由于需要合成的图像量相对减少,因此提高了合成图像的效率。
第二方面,提供一种数据查询方法,该方法包括:
向存储设备发送用于请求数据的查询请求;其中,所述存储设备按照第一方面任一所述的方法存储视频流和图像描述数据,所述图像描述数据用于描述图像集中部分或全部图像在所述视频流中的位置,所述图像集包括与所述视频流关联的至少一个图像;
接收所述存储设备发送的图像描述数据和视频流,并根据所述图像描述数据和所述视频流,生成与所述图像描述数据关联的图像;或者,
接收所述存储设备发送的与图像描述数据关联的图像;其中,所述图像描述数据关联的图像是存储设备根据所述图像描述数据和视频流生成的。
可选的,所述图像描述数据还包括冗余标识,所述冗余标识用于指示在所述图像描述数据中与已丢弃所述图像描述数据关联的图像的图像类型,所述图像类型包括第一类图像,和/或第二类图像;其中,第一类图像是指所述视频流中至少一个视频帧对应的图像,所述第二类图像是指所述视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域;
根据所述图像描述数据和所述视频流,生成所述图像描述数据关联的图像,包括:
根据所述冗余标识,若确定在所述图像描述数据中与已丢弃所述图像描述数据关联的图像对应的图像类型包括第一类图像,则对所述至少一个视频帧进行解码,获得与所述至少一个视频帧对应的图像;
根据所述冗余标识,若确定在所述图像描述数据中与已丢弃所述图像描述数据关联的图像对应的图像类型包括第二类图像,则对所述至少一个视频帧进行解码,并对解码后的图像进行目标检测,获得所述视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域。
第三方面,提供一种数据存储装置,该装置包括:
收发模块:用于获取待存储数据;其中,所述待存储数据包括视频流、图像集和图像描述数据,所述图像集包括与所述视频流关联的至少一个图像,所述图像描述数据用于描述所述图像集中部分或全部图像在所述视频流中的位置;
处理模块:用于丢弃所述图像集中与所述图像描述数据关联的图像,并存储所述视频流、以及所述图像描述数据。
可选的,所述图像集包括第一类图像,和/或第二类图像;其中,第一类图像是指所述视频流中至少一个视频帧,所述第二类图像是指所述视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域;
当所述图像集包括第一类图像时,所述图像描述数据包括用于描述所述至少一个视频帧在所述视频流中的位置的数据;
当所述图像集包括第二类图像时,所述图像描述数据包括用于描述所述各目标对应的目标区域在所述至少一个视频帧中的位置的数据。
可选的,所述收发模块还用于:在丢弃所述图像集中与所述图像描述数据关联的图像,并存储所述视频流、以及所述图像描述数据之后,在接收查询设备发送的用于请求数据的查询请求时,向所述查询设备反馈所述图像描述数据和所述视频流,以使查询设备根据所述图像描述数据以及视频流,生成所述冗余标识对应的图像;或者,
在接收查询设备发送的查询请求时,根据所述图像描述数据,以及所述视频流,生成与所述图像描述数据关联的图像,并向所述查询设备反馈与所述图像描述数据关联的图像。
可选的,所述处理模块还用于:在丢弃所述图像集中与所述图像描述数据关联的图像,并存储所述视频流、以及所述图像描述数据之后,在所述图像描述数据增加冗余标识,所述冗余标识用于指示已丢弃所述图像描述数据关联的图像的图像类型,所述图像类型包括第一类图像和/或第二类图像;
所述处理模块具体用于:根据所述冗余标识,若确定在所述图像描述数据中与已丢弃所述图像描述数据关联的图像对应的图像类型包括第一类图像,则对所述至少一个视频帧进行解码,获得与所述至少一个视频帧对应的图像;以及,
根据所述冗余标识,若确定在所述图像描述数据中与已丢弃所述图像描述数据关联的图像对应的图像类型包括第二类图像,则对所述至少一个视频帧进行解码,并对解码后的视频帧进行目标检测,获得所述视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域。
第四方面,提供一种数据查询装置,该装置包括:
收发模块:用于向存储设备发送用于请求数据的查询请求;其中,所述存储设备按照第一方面所述的方法存储视频流和图像描述数据,所述图像描述数据用于描述图像集中部分或全部图像在所述视频流中的位置,所述图像集包括与所述视频流关联的至少一个图像;以及,接收所述存储设备发送的图像描述数据和视频流;
处理模块:用于根据所述图像描述数据和所述视频流,生成与所述图像描述数据关联的图像;
所述收发模块还用于:接收所述存储设备发送的与图像描述数据关联的图像;其中,所述图像描述数据关联的图像是存储设备根据所述图像描述数据和视频流生成的。
可选的,所述图像描述数据还包括冗余标识,所述冗余标识用于指示在所述图像描述数据中与已丢弃所述图像描述数据关联的图像的图像类型,所述图像类型包括第一类图像,和/或第二类图像;其中,第一类图像是指所述视频流中至少一个视频帧,所述第二类图像是指所述视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域;
所述处理模块具体用于:根据所述冗余标识,若确定在所述图像描述数据中与已丢弃所述图像描述数据关联的图像对应的图像类型包括第一类图像,则对所述至少一个视频帧进行解码,获得与所述至少一个视频帧对应的图像;以及,
根据所述冗余标识,若确定在所述图像描述数据中与已丢弃所述图像描述数据关联的图像对应的图像类型包括第二类图像,则对所述至少一个视频帧进行解码,并对解码后的图像进行目标检测,获得所述视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域。
第五方面,提供一种计算机设备,包括:
存储器,用于存储程序指令;
处理器,用于调用所述存储器中存储的程序指令,按照获得的程序指令执行第一方面或第二方面中任一所述的方法。
第六方面,提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机可执行指令,所述计算机可执行指令用于使计算机执行第一方面或第二方面中任一所述的方法。
附图说明
图1为本申请实施例提供的数据存储方法的应用场景;
图2为本申请实施例提供的数据存储方法的交互示意图一;
图3为本申请实施例提供的数据存储方法的流程示意图;
图4为本申请实施例提供的数据存储方法的交互示意图二;
图5为本申请实施例提供的数据查询方法的交互示意图一;
图6为本申请实施例提供的数据查询方法的交互示意图二;
图7为本申请实施例提供的数据存储装置的结构示意图;
图8为本申请实施例提供的数据查询装置的结构示意图;
图9为本申请实施例提供的计算机设备的结构示意图。
具体实施方式
为了使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
另外,本申请实施例中,“至少一个”是指一个或者多个,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B的情况,其中A,B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达,是指的这些项中的任意组合,包括单项(个)或复数项(个)的任意组合。例如,a,b,或c中的至少一项(个),可以表示:a,b,c,a-b,a-c,b-c,或a-b-c,其中a,b,c可以是单个,也可以是多个。
为了减少存储设备的存储空间占用,本申请提供一种数据存储方法,下面对该方法涉及的应用场景进行说明。
请参考图1,为数据存储方法的一种应用场景。该应用场景中包括查询设备101、存储设备102和采集设备103。查询设备101和存储设备102之间可以通信,存储设备102和采集设备103之间可以通信。各设备之间的通信方式可以是有线通信或无线通信,有线通信例如连接网线、或数据线等;无线通信例如通过蓝牙、或者无线局域网进行通信等。
采集设备103泛指可以用于采集数据的设备,例如摄像头等。存储设备102泛指可以用于存储数据的设备,例如服务器或终端设备等。查询设备101泛指可以用于查询数据的设备,例如查询设备101可以是终端设备,或者,可以是终端设备中的客户端等,具体不作限制。终端设备例如手机、台式计算机或平板电脑等。终端设备中的客户端例如是安装在终端设备中预安装的客户端、网页客户端,或嵌入在第三方平台的轻量级的客户端等。
作为一种实施例,查询设备101和存储设备102可以是同一个设备;或者,存储设备102和采集设备103可以是同一个设备。或者,查询设备101和采集设备103可以是同一个设备。或者,查询设备101、存储设备102和采集设备103可以是同一个设备。本申请实施例中以查询设备101、存储设备102和采集设备103为不同的设备为例进行介绍。
下面对各设备之间的交互进行示例说明:
第一种示例场景:
比如在监控安防领域,采集设备103可以对监控场景进行视频监控,采集监控场景的视频,还可以采集一些图像等。另外,采集设备103还可以对所采集的视频进行压缩等处理,采集设备103还可以对所采集的图像进行目标检测等处理,以获得图像中各目标对应的目标区域等,这些采集设备103经过采集及处理后的数据会被存储设备102存储,因此这些采集设备103得到的数据又可以称为待存储数据,具体待存储数据包括视频流、图像集和图像描述数据等。视频流可以理解为监控过程中所拍摄的视频对应的数据。图像集是与该视频流关联的图像,图像集可以包括第一类图像或第二类图像中的一种或两种。第一类图像可以指视频流中至少一个视频帧对应的图像。第二类图像可以指视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域。图像描述数据用于描述图像集中部分或全部图像在视频流中的位置,具体包括第一类图像在视频流中的位置数据,和/或第二类图像在第一类图像中的位置数据等。
在采集设备103获得这些待存储数据之后,采集设备103可以向存储设备102发送待存储数据,存储设备102在接收来自采集设备103的待存储数据之后,存储设备102确定待存储数据的图像集中是否存在与图像描述数据关联的图像。如果存在与图像描述数据关联的图像,存储设备102可以丢弃图像集中与图像描述数据关联的图像,获得存储数据。存储设备102存储待存储数据中除了丢弃的图像之外的数据,即存储设备102对存储数据进行存储。如果不存在与图像描述数据关联的图像,存储设备102获得存储数据,并对存储数据进行存储。其中,丢弃可以理解为将待存储数据中与图像描述数据关联的图像从待存储数据中移除。如果待存储数据中存在与图像描述数据关联的图像,那么存储数据可以理解为丢弃与图像描述数据关联的图像之后的待存储数据,或者,如果待存储数据中不存在与图像描述数据关联的图像,那么存储数据可以理解为待存储数据。
第二种示例场景:
比如交通管理领域,采集设备103可以采集监控场景的视频,或者,还可以采集一些监控场景的图像,采集设备103获得待存储数据,进而可以确定待存储数据的图像集中是否存在与图像描述数据关联的图像。如果存在与图像描述数据关联的图像,采集设备103丢弃图像集中与图像描述数据关联的图像,获得存储数据。如果不存在与图像描述数据关联的图像,采集设备103获得存储数据。
采集设备103获得存储数据之后,可以向存储设备102发送存储数据,存储设备102在接收来自采集设备103的存储数据之后,存储设备102对存储数据进行存储。
应当说明的是,采集设备103可能会实时、不定时或周期性地向存储设备102发送待存储数据。
无论上述哪种情况,查询设备101可以向存储设备102发送用于请求数据的查询请求,存储设备102在接收来自查询设备101的查询请求之后,可以根据查询请求,通过图像描述数据和视频流,生成与图像描述数据关联的图像,并向查询设备101发送与图像描述数据关联的图像。或者存储设备102根据查询请求,向查询设备101发送图像描述数据和视频流,查询设备101在接收图像描述数据和视频流之后,根据图像描述数据和视频流,生成与图像描述数据关联的图像。
本申请实施例中,存储设备102将待存储数据中与图像描述数据关联的图像丢弃,可以减少待存储数据的数据量,减少待存储数据的对存储设备102存储空间的占用,提高存储设备102存储待存储数据的效率。
基于图1论述的第一种示例场景,下面对本申请实施例中的数据存储方法进行介绍。
请参考图2,为本申请实施例涉及的存储设备102和采集设备103之间的交互过程示意图。
S201,采集设备103采集数据。
采集设备103可以是固定的,那么该采集设备103在不同时间采集的监控画面都是相同的。或者采集设备103是可以旋转的,那么该采集设备103在不同时间采集的监控画面可能是不同的。采集设备103在采集过程中,可以获得视频流、图像集以及图像描述数据等,下面对采集设备103获得三种数据的方式进行示例说明。
一,获得视频流:
采集设备103可以是实时对监控场景进行拍摄,获得所拍摄的视频。或者采集设备103也可以是在满足预设条件时,对监控场景进行拍摄,获得所拍摄的视频。预设条件比如可以是预设时间段,或者,可以是监控画面中的目标发生运动,或者,可以是检测到监控画面中出现目标。目标可以是人和/或物。
在一个可能的实施例中,采集设备103获得所拍摄的视频之后,可以对所拍摄的视频进行压缩,获得对应的视频流。
具体的,采集设备103利用H256压缩方法对将所拍摄的视频进行压缩,获得视频流。具体比如按帧分组,每组包括多个视频帧。采集设备103可以将每组内各视频帧确定为关键帧I、前向差别帧P或双向差别帧B。采集设备103根据各关键帧I、前向差别帧P和双向差别帧B,获得所拍摄的视频压缩后的视频流。
其中,关键帧I表示视频帧对应的完整的图像,前向差别帧P表示视频帧与前一个关键帧I或前一个前向差别帧P之间的差异信息,双向差别帧B表示视频帧与前一个关键帧I或前一个前向差别帧P,以及后一个关键帧I或后一个前向差别帧P之间的差异信息。
二,获得图像集:
采集设备103可以拍摄的监控画面进行随机保存,或者采集设备103可以保存满足预设条件的监控画面,获得图像,预设条件例如可以是监控画面中的目标数量大于预设值,或者在监控画面中出现特定目标,或者达到预设周期进行拍摄等,本申请实施例中对预设规则的内容不作具体限制。拍摄图像可以理解为视频流中至少一个视频帧关联的图像中的一种示例。
为了便于区别其他图像,采集设备可以将视频流中至少一个视频帧关联的图像划分为多个类别,比如第一类图像、第二类图像等,采集设备103可以根据获得图像的方式不同进行分类,比如将直接拍摄得到的拍摄图像作为第一类图像、对拍摄图像进行进一步处理后得到的图像作为第二类图像,比如获得的第一类图像中的目标区域。
作为一种实施例,图像集可以是一个或多个第一类图像,或者,图像集可以是一个或多个第二类型图像,或者,图像集可以是一个第一类图像和一个第二类型图像,或者,图像集可以是一个第一类图像和多个第二类型图像,或者,图像集可以是多个第一类图像和一个第二类型图像,或者,图像集可以是多个第一类图像和多个第二类型图像。
其中,涉及到采集设备103具体如何获得第二类图像,下面对采集设备103获得第二类图像的方式进行示例介绍。
方法一:
采集设备103通过位置探测设备获得第一类图像中各目标的目标区域。
位置探测设备例如雷达装置,采集设备103可以通过雷达装置,发射固定频率的第一电磁波信号,并接收返回的第二电磁波信号,确定监控画面中各目标的目标信息,目标信息包括位置、形状、大小、或目标的数量中的一种或多种的组合等。采集设备103依据目标信息,获得各目标区域。
方法二:
采集设备103通过目标检测模型,获得第一类图像中各目标的目标区域。
采集设备103可以将第一类图像输入目标检测模型,目标检测模型输出第一类图像中各目标的类别,以及各目标在第一类图像中的位置,采集设备103根据目标检测模型的输出结果,获得第二类图像。
其中,目标检测模型可以是从其他设备或者网络资源上获得已训练的目标检测模型,或者可以是通过获得的训练数据训练得到的目标检测模型,训练数据包括标注了目标的类别和位置的样本图像。
作为一种实施例,当一个第一类图像包括多个目标时,从该第一类图像中获得的目标区域可能包含多个。或者,某些情况下,某些第一类图像可能并不包含任何目标,则从该第一类图像中,无法获得目标区域。
应当说明的是,采集设备103可以对所有第一类图像均进行处理,获得每个第一类图像对应的目标区域,将所有的目标区域作为第二类图像,或者采集设备103可以从多个目标区域中选择质量最好的一个目标区域作为第二类图像。
三,获得图像描述数据:
图像描述数据具体包括第一类图像在视频流中的位置,和/或第二类图像在视频流中的位置,下面对获得图像描述数据的方式进行示例说明。
采集设备103在保存监控图像时,就可以获得该监控图像在视频流中的位置,也就是第一类图像在视频流中的位置,该位置例如可以是图像在视频流的所有视频帧中的排列位置,如视频流中第i个视频帧,或者,可以是图像在视频流中的时刻,如视频拍摄时长的第i秒等,本申请实施例中不对位置数据的内容作具体限制。
采集设备103在获得第二类图像时,可以将第二类图像在第一类图像中的位置确定为第二类图像在视频流中的位置。
第二类图像的位置可以是第一类图像的像素点位置,例如第i个像素点到第j个像素点;或者,可以是目标区域的边界相对于第一类图像的边界的距离,例如相对于第一类图像的上边界2厘米,下边界3厘米,左边界2厘米和右边界2厘米的位置;或者可以是目标区域在第一类图像所对应的坐标中的坐标位置,例如第二类图像的位置为坐标点(2,2)、(2,5)、(4,2)和(4,5)所包围的区域等。
作为一种实施例,图像描述数据还可以包括目标的属性信息,目标的属性信息可以是与第一类图像对应的目标的属性信息,或者可以是与第二类图像对应的目标的属性信息。目标的属性信息用于描述目标的属性,例如,目标包括行人时,属性信息可以是行人的穿着或性别等;目标包括人脸时,属性信息可以是年龄、性别或皮肤状况等;目标包括车辆时,属性信息可以是车牌信息、车辆型号或车辆颜色等。
具体的,采集设备103可以将图像输入图像分析模型,输出所拍摄的图像中各目标的属性信息,获得所拍摄的图像中至少一个目标的属性信息。
其中,图像分析模型可以是从其他设备或者网络资源上获得已训练的图像分析模型,或者,可以是通过获得的训练数据训练得到的图像分析模型,训练数据包括标注了目标的属性信息的样本图像。
作为一种实施例,该图像分析模型和前文论述目标检测模型可以是不同的模型,图像分析模型用于获得图像中各目标的属性信息,目标检测模型用于获得图像中各目标的类别以及目标对应的目标区域。或者,图像分析模型和目标检测模型可以是同一个模型,该模型用于获得图像中各目标的类别、目标的属性信息以及目标对应的目标区域。
作为一种实施例,分析该目标后获得的属性信息可能包含一个或多个属性信息。
应当说明的是,某些情况下,图像分析模型可能无法获得这些目标的属性信息。某些情况比如图像不清晰等。
应当说明的是,图像描述数据可以包含前文论述的第一类图像在视频流中的位置、第二类图像在第一类图像中的位置、第一类图像中至少一个目标的属性信息、第二类图像中至少一个目标的属性信息中的一种或多种。
S202,采集设备103获得待存储数据。
采集设备103通过S201的步骤获得视频流、图像集和图像描述数据,也就获得了待存储数据。待存储数据包括前文中的视频流、图像集和图像描述数据。采集设备103可以将待存储数据发送给存储设备102,或者采集设备103可以通过向存储设备102发送指示信息,指示存储设备102存储该待存储数据等。
S203,存储设备102获得待存储数据。
采集设备103获得待存储数据之后,可以向存储设备102发送待存储数据,存储设备102接收来自采集设备103的待存储数据。
作为一种实施例,存储设备102在接收待存储数据之后,可以记录获得待存储数据的时间,以便查询设备101对数据进行筛选查询等。获得待存储数据的时间可以是采集设备103获得待存储数据的时间,或者,可以是采集设备103采集待存储数据中的图像的时间,或者,可以是存储设备102接收待存储数据的时间等。
S204,存储设备102丢弃图像集中与图像描述数据关联的图像,获得存储数据。
与图像描述数据关联的图像可以理解为图像描述数据所描述的图像。如果图像描述数据包括描述第一类图像在视频流中的位置的数据,那么图像集中的第一类图像为与图像描述数据关联的图像。或者如果图像描述数据包括描述第二类图像在第一类图像中的位置的数据,图像集中的第二类图像为与图像描述数据关联的图像。或者如果图像描述数据包括描述第一类图像在视频流中的位置的数据,和描述第二类图像在第一类图像中的位置的数据,那么图像集中的第一类图像和第二类图像均为与图像描述数据关联的图像等。
其中涉及到存储设备102具体如何去丢弃,下面进行示例说明。请参考图3,为存储设备102丢弃待存储数据中与图像描述数据关联的图像的一种流程示意图。
S301,存储设备102接收待存储数据。
S302,存储设备102确定待存储数据中是否包括与图像描述数据关联的图像。若待存储数据中包括与图像描述数据关联的图像,则执行S303,即若存储设备102确定待存储数据中包括与图像描述数据关联的图像,则存储设备102丢弃待存储数据中与图像描述数据关联的图像,获得存储数据。若待存储数据中不包括与图像描述数据关联的图像,则执行S304,即若存储设备102确定待存储数据中不包括与图像描述数据关联的图像,则存储设备102不对待存储数据的图像集中的图像进行丢弃,获得存储数据。
下面对S303的情况进行示例介绍。
情况一:
存储设备102若确定待存储数据的图像描述数据中包括描述第一类图像在视频流中的位置的数据,则丢弃待存储数据的图像集中的第一类图像。
具体的,存储设备102确定待存储数据中的图像描述数据,如果图像描述数据中包括描述第一类图像在视频流中的位置的数据,那么存储设备102确定图像集中包括与图像描述数据关联的图像,存储设备102丢弃待存储数据的图像集中与图像描述数据关联的第一类图像;如果图像描述数据中不包括描述第一类图像在视频流中的位置的数据,那么存储设备102确定待存储数据中不包括与图像描述数据关联的图像。
作为一种实施例,如果存储设备102根据配置信息确定接收的待存储数据需要存储,那么存储设备102确定待存储数据的图像描述数据中包括描述第一类图像在视频流中的位置的数据。如果存储设备102根据配置信息确定接收的待存储数据不需要存储,那么存储设备102确定待存储数据的图像描述数据中不包括描述第一类图像在视频流中的位置的数据。其中,配置信息可以是操作人员预先为存储设备102设置的,或者,可以是存储设备102根据采集场景自动配置的等,或者若确定没有配置信息,则存储设备102确定待存储数据需要存储。
情况二:
存储设备102若确定待存储数据的图像描述数据中包括描述第二类图像在第一类图像中的位置的数据,则丢弃待存储数据的图像集中的第二类图像。
具体的,存储设备102确定待存储数据中的图像描述数据,如果图像描述数据中包括描述第二类图像在第一类图像中的位置的数据,那么存储设备102确定图像集中包括与图像描述数据关联图像,存储设备102丢弃待存储数据的图像集中与图像描述数据关联的第二类图像;如果图像描述数据中不包括描述第二类图像在第一类图像中的位置的数据,那么存储设备102确定待存储数据中不包括与图像描述数据关联的图像。
结合上述论述的内容,在执行S303中的过程中,可能上述两种情况中的一种情况出现,也可能上述两种情况都出现,下面分别列举可能的情况:
如果待存储数据包括满足情况一的与图像描述数据关联的图像,那么存储设备102可以丢弃待存储数据的图像集中的第一类图像。
如果待存储数据包括满足情况二的与图像描述数据关联的图像,那么存储设备102可以丢弃待存储数据的图像集中的第二类图像。
如果待存储数据包括满足情况一和满足情况二的与图像描述数据关联的图像,那么存储设备102可以丢弃待存储数据中的第一类图像和第二类图像。
在丢弃与图像描述数据关联的图像之后,就能获得存储数据,存储数据为待存储数据中除了丢弃的数据之外的数据。
作为一种实施例,存储设备102丢弃待存储数据中与图像描述数据关联的图像之后,可以在图像描述数据中增加冗余标识,冗余标识用于指示已丢弃的图像的类型。
如果丢弃了第一类图像,那么冗余标识指示第一类图像已丢弃。如果丢弃了第二类图像,那么冗余标识指示第二类图像已丢弃。如果丢弃了第一类图像和第二类图像,那么冗余标识指示第一类图像和第二类图像已丢弃。
例如,待存储数据包括第一类图像和第二类图像时,冗余标识为0。存储设备102丢弃待存储数据中的第一类图像时,冗余标识为1。存储设备102丢弃待存储数据中的第二类图像时,冗余标识为2。存储设备102丢弃待存储数据中的第一类图像和第二类图像时,冗余标识为3。
S304,若存储设备102确定待存储数据中不包括与图像描述数据关联的图像,则存储设备102不对待存储数据的图像集中的图像进行丢弃,获得存储数据。
具体的,如果存储设备102确定待存储数据中不包括与图像描述数据关联的图像,那么存储设备102不对待存储数据的图像集中的图像进行丢弃,即存储设备102确定待存储数据中不存在可以丢弃的数据,存储设备102获得存储数据,这时,该存储数据和待存储数据包括的数据是相同的。
S205,存储设备102对存储数据进行存储。
存储设备102在获得存储数据之后,对存储数据进行存储。存储数据可以以表结构、树结构或知识图谱结构的形式进行存储,具体存储形式不作限制。
下面以表结构的存储数据为例进行介绍,请参考表1,为存储数据的一种存储形式。
表1
其中,待存储数据1包括视频流a、图像描述数据C1、第一类图像A1和第二类图像B1,图像描述数据C1包括第一类图像A1和第二类图像B1中各目标的属性信息,冗余标识为0;待存储数据2包括视频流b、图像描述数据C2和第二类图像B2,图像描述数据C2包括第一类图像A2在视频流b中的位置数据,以及第一类图像A2和第二类图像B2中各目标的属性信息,冗余标识为1;待存储数据3包括视频流c、图像描述数据C3和第一类图像A3,图像描述数据C3包括第二类图像B3在第一类图像A3中的位置数据,以及第一类图像A3和第二类图像B3中各目标的属性信息,冗余标识为2;待存储数据4包括视频流d和图像描述数据C4,图像描述数据C4包括第一类图像A4在视频流d中的位置数据,以及第二类图像B4在第一类图像A4中的位置数据,以及第一类图像A4和第二类图像B4中各目标的属性信息,冗余标识为3。
作为一种实施例,S201~S202是可选的。
下面基于图1论述的第二种示例场景,对本申请实施例涉及的数据存储方法进行介绍。请参考图4,为本申请实施例涉及的存储设备102和采集设备103之间的另一种交互过程示意图。
S401,采集设备103采集数据。
采集设备103采集数据的过程可以参照步骤S201中介绍的采集设备103采集数据的过程,在此不再赘述。
S402,采集设备103获得待存储数据。
采集设备103获得待存储数据的过程可以参照步骤S202中介绍的采集设备103获得待存储数据的过程,在此不再赘述。
S403,采集设备103丢弃图像集中与图像描述数据关联的图像,获得存储数据。
采集设备103丢弃图像集中与图像描述数据关联的图像的过程可以参照步骤S204中介绍的存储设备102丢弃图像集中与图像描述数据关联的图像的过程,在此不再赘述。
S404,存储设备102获得存储数据,并对存储数据进行存储。
存储设备102获得存储数据的过程可以参照步骤S203中介绍的存储设备102获得存储数据的过程,在此不再赘述。存储设备102对存储数据进行存储的过程可以参照步骤S205中介绍的存储设备102对存储数据进行存储的过程,在此不再赘述。
作为一种实施例,S401是可选的。
应当说明的是,在第一种示例场景中,是由存储设备102丢弃待存储数据中与图像描述数据关联的图像。在第二种示例场景中,是由采集设备103丢弃待存储数据中与图像描述数据关联的图像。
基于同一发明构思,本申请实施例还提供数据查询方法,下面对数据查询方法进行介绍。
请参考图5,为本申请实施例涉及的查询设备101和存储设备102之间的交互过程示意图。
S501,查询设备101向存储设备102发送查询请求。
查询设备101可以根据用户的操作,生成查询请求,或者,查询设备101可以根据其他设备发送的指令信息,生成查询请求等。在查询设备101生成查询请求之后,可以向存储设备102发送查询请求,存储设备102接收来自查询设备101的查询请求。
作为一种实施例,查询请求可以具体用于查询某个时间段的监控视频中的监控图像。或者,具体用于查询包含指定目标的监控视频中的监控图像。或者,具体用于查询包括某一个或多个目标在监控图像中的目标区域。
S502,存储设备102根据查询请求,确定查询请求对应的图像描述数据。
存储设备102接收来自查询设备101的查询请求之后,可以在所有存储数据中查询符合查询请求的存储数据。存储设备102获得符合查询请求的存储数据之后,如果图像集中包括符合查询请求的图像,那么存储设备102可以获得图像集中符合查询请求的图像。
存储设备102获得符合查询请求的存储数据之后,如果图像集中不包括符合查询请求的图像,那么存储设备102可以确定存储数据中是否包括可以生成符合查询请求的图像的图像描述数据,确定的方法有多种,下面以其中的两种为例进行介绍。
方法A:
存储设备102可以确定每个存储数据的图像描述数据中是否包括符合查询请求的图像对应的图像描述数据。
如果每个存储数据的图像描述数据中包括符合查询请求的图像对应的图像描述数据,那么存储设备102获得符合查询请求的图像对应的图像描述数据。如果每个存储数据的图像描述数据中不包括符合查询请求的图像对应的图像描述数据,那么存储设备102可以向查询设备101发送提示信息,指示存储设备102的存储数据中没有符合查询请求的存储数据。
方法B:
存储设备102可以确定存储数据中的每个存储数据的冗余标识是否包括表示符合查询请求的图像已丢弃的冗余标识。
如果冗余标识表示图像集中符合查询请求的图像已丢弃,那么存储设备102可以确定图像描述数据包括符合查询请求的图像对应的图像描述数据,存储设备102获得符合查询请求的图像对应的图像描述数据。如果每个存储数据的图像描述数据中不包括表示图像集中符合查询请求的图像已丢弃的冗余标识,那么存储设备102可以向查询设备101发送提示信息,指示存储设备102的存储数据中没有符合查询请求的存储数据。
S503,存储设备102向查询设备101发送图像描述数据和视频流。
存储设备102获得查询请求对应的图像描述数据之后,可以向查询设备101发送图像描述数据,以及存储数据中图像描述数据对应的视频流。查询设备101接收来自存储设备102的图像描述数据和视频流。
作为一种实施例,如果存储设备102获得的是查询请求对应的图像,那么存储设备102向查询设备101发送查询请求对应的图像。查询设备101接收来自存储设备102的查询请求对应的图像,此时查询设备101不需要执行步骤S504。
S504,查询设备101根据图像描述数据和视频流,生成与图像描述数据关联的图像。
查询设备101接收来自存储设备102的图像描述数据和视频流之后,查询设备101可以根据图像描述数据和视频流,生成与图像描述数据关联的图像。
若与图像描述数据关联的图像为第一类图像,则图像描述数据中包括第一类图像在视频流中的位置数据。查询设备101根据图像描述数据,在视频流中确定与图像描述数据关联的至少一个视频帧,至少一个视频帧可以包括关键帧I,或者,可以包括关键帧I和前向差别帧P,或者,可以包括关键帧I、前向差别帧P和双向差别帧B。查询设备101对至少一个视频帧进行解码,获得至少一个视频帧中每个视频帧对应的图像,查询设备101生成与图像描述数据关联的图像。
若与图像描述数据关联的图像为第二类图像,则图像描述数据中包括第二类图像在第一类图像中的位置数据。查询设备101根据图像描述数据,在第一类图像中确定与图像描述数据关联的图像对应的目标区域,查询设备101生成与图像描述数据关联的图像。其中,第一类图像可以是根据图像描述数据和视频流生成的,或者,可以是存储设备102向查询设备101发送的存储数据的图像集中存储的等。
基于同一发明构思,本申请实施例还提供另一种数据查询方法,下面对数据查询方法进行介绍。
请参考图6,为本申请实施例涉及的查询设备101和存储设备102之间的另一种交互过程示意图。
S601,查询设备101向存储设备102发送查询请求。
查询设备101向存储设备102发送查询请求的过程可以参考步骤S501,在此不再赘述。
S602,存储设备102根据查询请求,确定查询请求对应的图像描述数据。
存储设备102根据查询请求,确定查询请求对应的图像描述数据的过程可以参考步骤S502,在此不再赘述。
作为一种实施例,如果存储设备102获得的是图像集中的查询请求对应的图像,那么存储设备102不执行步骤S603,直接执行步骤S604。
S603,存储设备102根据图像描述数据和视频流,生成与图像描述数据关联的图像。
存储设备102根据图像描述数据和视频流,生成与图像描述数据关联的图像的过程可以参考步骤S503,查询设备101根据图像描述数据和视频流,生成与图像描述数据关联的图像的过程,在此不再赘述。
S604,存储设备102向查询设备101发送与图像描述数据关联的图像。
存储设备102在生成与图像描述数据关联的图像之后,可以向查询设备101发送与图像描述数据关联的图像,查询设备101接收来自存储设备102的与图像描述数据关联的图像。
应当说明的是,图5介绍的数据查询方法,是存储设备102向查询设备101发送图像描述数据和视频流,由查询设备101根据图像描述数据和视频流,生成与图像描述数据关联的图像,相对可以减少存储设备102的处理量。图6介绍的数据查询方法,存储设备102在确定查询请求对应的图像描述数据之后,可以根据图像描述数据和视频流,生成与图像描述数据关联的图像,并向查询设备101发送与图像描述数据关联的图像。相对可以减少查询设备101的处理量。
基于同一发明构思,本申请实施例提供一种数据存储装置,该装置相当于设置在前文论述的存储设备102中,能够实现前述数据存储方法对应的功能。请参考图7,该装置包括获取模块701和处理模块702,其中:
获取模块701:用于获取待存储数据;其中,待存储数据包括视频流、图像集和图像描述数据,图像集包括与视频流关联的至少一个图像,图像描述数据用于描述图像集中部分或全部图像在视频流中的位置;
处理模块702:用于丢弃图像集中与图像描述数据关联的图像,并存储视频流、以及图像描述数据。
在一种可能的实施例中,图像集包括第一类图像,和/或第二类图像;其中,第一类图像是指视频流中至少一个视频帧,第二类图像是指视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域;
当图像集包括第一类图像时,图像描述数据包括用于描述至少一个视频帧在视频流中的位置的数据;
当图像集包括第二类图像时,图像描述数据包括用于描述各目标对应的目标区域在至少一个视频帧中的位置的数据。
在一种可能的实施例中,收发模块还用于:在丢弃图像集中与图像描述数据关联的图像,并存储视频流、以及图像描述数据之后,在接收查询设备发送的用于请求数据的查询请求时,向查询设备反馈图像描述数据和视频流,以使查询设备根据图像描述数据以及视频流,生成冗余标识对应的图像;或者,
在接收查询设备发送的查询请求时,根据图像描述数据,以及视频流,生成与图像描述数据关联的图像,并向查询设备反馈与图像描述数据关联的图像。
在一种可能的实施例中,处理模块702还用于:在丢弃图像集中与图像描述数据关联的图像,并存储视频流、以及图像描述数据之后,在图像描述数据增加冗余标识,冗余标识用于指示已丢弃图像描述数据关联的图像的图像类型,图像类型包括第一类图像和/或第二类图像;
处理模块702具体用于:根据冗余标识,若确定在图像描述数据中与已丢弃图像描述数据关联的图像对应的图像类型包括第一类图像,则对至少一个视频帧进行解码,获得与至少一个视频帧对应的图像;以及,
根据冗余标识,若确定在图像描述数据中与已丢弃图像描述数据关联的图像对应的图像类型包括第二类图像,则对至少一个视频帧进行解码,并对解码后的视频帧进行目标检测,获得视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域。
基于同一发明构思,本申请实施例提供一种数据查询装置,该装置能够实现前述数据查询方法对应的功能。该装置相当于设置在前文论述的查询设备101中。请参考图8,该装置包括收发模块801和处理模块802,其中:
收发模块801:用于向存储设备发送用于请求数据的查询请求;其中,存储设备按照数据存储方法中任一方法存储视频流和图像描述数据,图像描述数据用于描述图像集中部分或全部图像在视频流中的位置,图像集包括与视频流关联的至少一个图像;以及,接收存储设备发送的图像描述数据和视频流;
处理模块802:用于根据图像描述数据和视频流,生成与图像描述数据关联的图像;
收发模块801还用于:接收存储设备发送的与图像描述数据关联的图像;其中,图像描述数据关联的图像是存储设备根据图像描述数据和视频流生成的。
在一种可能的实施例中,图像描述数据还包括冗余标识;其中,冗余标识用于指示在图像描述数据中与已丢弃图像描述数据关联的图像的图像类型,图像类型包括第一类图像,和/或第二类图像;其中,第一类图像是指视频流中至少一个视频帧对应的图像,第二类图像是指视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域;处理模块802具体用于:
根据冗余标识,若确定在图像描述数据中与已丢弃图像描述数据关联的图像对应的图像类型包括第一类图像,则对至少一个视频帧进行解码,获得与至少一个视频帧对应的图像;以及,
根据冗余标识,若确定在图像描述数据中与已丢弃图像描述数据关联的图像对应的图像类型包括第二类图像,则对至少一个视频帧进行解码,并对解码后的图像进行目标检测,获得视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域。
基于同一发明构思,本申请实施例提供一种计算机设备,该设备能够实现前述数据存储方法或数据查询方法,请参考图9,该设备包括:
至少一个处理器901,以及与至少一个处理器901连接的存储器902,至少一个处理器901能够实现前述数据存储装置或数据查询装置的功能。本申请实施例中不限定处理器901与存储器902之间的具体连接介质,图9中是以处理器901和存储器902之间通过总线900连接为例。总线900在图9中以粗线表示,其它部件之间的连接方式,仅是进行示意性说明,并不引以为限。总线900可以分为地址总线、数据总线、控制总线等,为便于表示,图9中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。或者,处理器901也可以称为控制器,对于名称不做限制。
在本申请实施例中,存储器902存储有可被至少一个处理器901执行的指令,至少一个处理器901通过执行存储器902存储的指令,可以执行前文论述的数据存储方法或数据查询方法。处理器901可以实现图7或图8所示的存储、数据查询装置中各个模块的功能。
其中,处理器901是该设备的控制中心,可以利用各种接口和线路连接整个该设备的各个部分,通过运行或执行存储在存储器902内的指令以及调用存储在存储器902内的数据,该设备的各种功能和处理数据。
其中,处理器901可以是通用处理器,例如中央处理器(CPU)、数字信号处理器、专用集成电路、现场可编程门阵列或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件,可以实现或者执行本申请实施例中公开的各方法、步骤及逻辑框图。
基于同一发明构思,本申请实施例还提供一种存储介质,该存储介质存储有计算机指令,当该计算机指令在计算机上运行时,使得计算机执行前文论述的数据存储方法或数据查询方法。
本领域内的技术人员应明白,本申请的实施例可提供为方法、系统、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本申请是参照根据本申请的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能或指定的功能的步骤。
显然,本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样,倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内,则本申请也意图包含这些改动和变型在内。
Claims (10)
1.一种数据存储方法,其特征在于,包括:
获取待存储数据;其中,所述待存储数据包括视频流、图像集和图像描述数据,所述图像集包括与所述视频流关联的至少一个图像,所述图像集包括第一类图像,和/或,第二类图像,所述第一类图像是指所述视频流中至少一个视频帧,所述第二类图像是指所述视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域,所述图像描述数据用于描述所述图像集中部分或全部图像在所述视频流中的位置;
丢弃所述图像集中与所述图像描述数据关联的图像,并存储所述视频流、以及所述图像描述数据;
在所述图像描述数据增加冗余标识;其中,所述冗余标识用于指示已丢弃所述图像描述数据关联的图像的图像类型,所述图像类型包括所述第一类图像,和/或,所述第二类图像;
在接收查询设备发送的查询请求时,根据所述冗余标识,若确定在所述图像描述数据中与已丢弃所述图像描述数据关联的图像包括所述第二类图像,则对所述第二类图像对应的至少一个视频帧进行解码,并对解码后的视频帧进行目标检测,获得每个视频帧中各目标对应的目标区域。
2.根据权利要求1所述的方法,其特征在于,当所述图像集包括所述第一类图像时,所述图像描述数据包括用于描述所述至少一个视频帧在所述视频流中的位置的数据;
当所述图像集包括所述第二类图像时,所述图像描述数据包括用于描述所述各目标对应的目标区域在所述至少一个视频帧中的位置的数据。
3.根据权利要求2所述的方法,其特征在于,在丢弃所述图像集中与所述图像描述数据关联的图像,并存储所述视频流、以及所述图像描述数据之后,包括:
在接收查询设备发送的用于请求数据的查询请求时,向所述查询设备反馈所述图像描述数据和所述视频流,以使查询设备根据所述图像描述数据以及视频流,生成所述冗余标识对应的图像。
4.根据权利要求2所述的方法,其特征在于,在丢弃所述图像集中与所述图像描述数据关联的图像,并存储所述视频流、以及所述图像描述数据之后,包括:
接收查询设备发送的查询请求时,根据所述冗余标识,若确定在所述图像描述数据中与已丢弃所述图像描述数据关联的图像包括所述第一类图像,则对所述第一类图像对应的至少一个视频帧进行解码,获得与所述至少一个视频帧对应的图像。
5.一种数据查询方法,其特征在于,包括:
向存储设备发送用于请求数据的查询请求;其中,所述存储设备按照权利要求1~4任一所述的方法存储视频流和图像描述数据,所述图像描述数据用于描述图像集中部分或全部图像在所述视频流中的位置,所述图像集包括与所述视频流关联的至少一个图像,所述图像集包括第一类图像,和/或,第二类图像,所述第一类图像是指所述视频流中至少一个视频帧,所述第二类图像是指所述视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域;
在所述图像描述数据增加冗余标识;其中,所述冗余标识用于指示已丢弃所述图像描述数据关联的图像的图像类型,所述图像类型包括所述第一类图像,和/或,所述第二类图像;
接收所述存储设备发送的图像描述数据和视频流,根据所述冗余标识,若确定在所述图像描述数据中与已丢弃所述图像描述数据关联的图像包括所述第二类图像,则对所述至少一个视频帧进行解码,并对解码后的图像进行目标检测,获得所述视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域。
6.根据权利要求5所述的方法,其特征在于,在接收所述存储设备发送的图像描述数据和视频流之后,还包括:
根据所述冗余标识,若确定在所述图像描述数据中与已丢弃所述图像描述数据关联的图像包括所述第一类图像,则对所述第一类图像对应的至少一个视频帧进行解码,获得与所述至少一个视频帧对应的图像。
7.一种数据存储装置,其特征在于,包括:
获取模块:用于获取待存储数据;其中,所述待存储数据包括视频流、图像集和图像描述数据,所述图像集包括与所述视频流关联的至少一个图像,所述图像集包括第一类图像,和/或,第二类图像,所述第一类图像是指所述视频流中至少一个视频帧,所述第二类图像是指所述视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域,所述图像描述数据用于描述所述图像集中部分或全部图像在所述视频流中的位置;
处理模块:用于丢弃所述图像集中与所述图像描述数据关联的图像,并存储所述视频流、以及所述图像描述数据;
所述处理模块还用于:在所述图像描述数据增加冗余标识;其中,所述冗余标识用于指示已丢弃所述图像描述数据关联的图像的图像类型,所述图像类型包括所述第一类图像,和/或,所述第二类图像;
所述处理模块还用于:在接收查询设备发送的查询请求时,根据所述冗余标识,若确定在所述图像描述数据中与已丢弃所述图像描述数据关联的图像包括所述第二类图像,则对所述第二类图像对应的至少一个视频帧进行解码,并对解码后的视频帧进行目标检测,获得每个视频帧中各目标对应的目标区域。
8.一种数据查询装置,其特征在于,包括:
收发模块:用于向存储设备发送用于请求数据的查询请求;其中,所述存储设备按照权利要求1~4任一所述的方法存储视频流和图像描述数据,所述图像描述数据用于描述图像集中部分或全部图像在所述视频流中的位置,所述图像集包括与所述视频流关联的至少一个图像,所述图像集包括第一类图像,和/或,第二类图像,所述第一类图像是指所述视频流中至少一个视频帧,所述第二类图像是指所述视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域;以及,接收所述存储设备发送的图像描述数据和视频流;
处理模块:用于在所述图像描述数据增加冗余标识;其中,所述冗余标识用于指示已丢弃所述图像描述数据关联的图像的图像类型,所述图像类型包括所述第一类图像,和/或,所述第二类图像;
所述处理模块还用于:根据所述冗余标识,若确定在所述图像描述数据中与已丢弃所述图像描述数据关联的图像包括所述第二类图像,则对所述至少一个视频帧进行解码,并对解码后的图像进行目标检测,获得所述视频流中至少一个视频帧中每个视频帧中各目标对应的目标区域。
9.一种计算机设备,其特征在于,包括:
存储器,用于存储程序指令;
处理器,用于调用所述存储器中存储的程序指令,按照获得的程序指令执行如权利要求1~4或权利要求5~6中任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有计算机可执行指令,所述计算机可执行指令用于使计算机执行如权利要求1~4或权利要求5~6中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010547197.6A CN111818300B (zh) | 2020-06-16 | 2020-06-16 | 一种数据存储、查询方法、装置、计算机设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010547197.6A CN111818300B (zh) | 2020-06-16 | 2020-06-16 | 一种数据存储、查询方法、装置、计算机设备及存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111818300A CN111818300A (zh) | 2020-10-23 |
CN111818300B true CN111818300B (zh) | 2022-05-27 |
Family
ID=72845076
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010547197.6A Active CN111818300B (zh) | 2020-06-16 | 2020-06-16 | 一种数据存储、查询方法、装置、计算机设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111818300B (zh) |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101228477A (zh) * | 2005-07-28 | 2008-07-23 | 微软公司 | 全景图像的实时预览 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6573907B1 (en) * | 1997-07-03 | 2003-06-03 | Obvious Technology | Network distribution and management of interactive video and multi-media containers |
US8934552B2 (en) * | 2011-03-31 | 2015-01-13 | Qualcomm Incorporated | Combined reference picture list construction and mapping |
CN107633023B (zh) * | 2017-08-25 | 2020-04-21 | 北京奇艺世纪科技有限公司 | 一种图像去重方法和装置 |
CN111263097B (zh) * | 2019-09-19 | 2024-01-02 | 华为技术有限公司 | 媒体数据传输方法及相关设备 |
-
2020
- 2020-06-16 CN CN202010547197.6A patent/CN111818300B/zh active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101228477A (zh) * | 2005-07-28 | 2008-07-23 | 微软公司 | 全景图像的实时预览 |
Also Published As
Publication number | Publication date |
---|---|
CN111818300A (zh) | 2020-10-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101798011B1 (ko) | 동영상 재생 방법 및 장치 | |
EP2724343B1 (en) | Video remixing system | |
CN111866468B (zh) | 对象跟踪分配方法、装置、存储介质及电子装置 | |
CN111314646B (zh) | 图像获取方法、图像获取装置、终端设备及可读存储介质 | |
CN111212264B (zh) | 基于边缘计算的图像处理方法、装置、及存储介质 | |
CN104301769A (zh) | 呈现图像的方法、终端设备和服务器 | |
CN113728653A (zh) | 图像同步方法及装置、设备、计算机存储介质 | |
KR20200077176A (ko) | 영상과 관련된 키워드를 추천하는 장치 및 방법 | |
JPWO2018037665A1 (ja) | 情報処理装置、情報処理システム、制御方法、及びプログラム | |
CN111263113B (zh) | 数据包的发送方法及装置、数据包的处理方法及装置 | |
CN111818300B (zh) | 一种数据存储、查询方法、装置、计算机设备及存储介质 | |
CN203894772U (zh) | 一种海量人脸发现与识别系统 | |
CN116168045B (zh) | 扫变镜头的分割方法和系统、存储介质及电子设备 | |
CN113906735A (zh) | 网络监控相机系统及其操作方法 | |
CN112532913A (zh) | 一种视频混流方法、视频系统及服务器 | |
CN116320466A (zh) | 视频编码方法、装置、设备、存储介质及自动驾驶车辆 | |
CN114928715A (zh) | 数据传输方法及系统 | |
CN105338290A (zh) | 码流的合成方法及装置 | |
CN111107293B (zh) | 360度视频录制方法、装置、电子设备及存储介质 | |
CN109874036B (zh) | 一种视频分析方法及装置、设备、存储介质 | |
CN114359216A (zh) | 图像数据处理方法、装置、设备及存储介质 | |
CN112559111A (zh) | 一种共享桌面时的截屏方法和装置 | |
CN115529451B (zh) | 数据的传输方法及装置、存储介质、电子设备 | |
CN112040260A (zh) | 一种截图方法、装置、设备及计算机可读存储介质 | |
CN114448952B (zh) | 流媒体数据的传输方法和装置、存储介质及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |