[go: up one dir, main page]
More Web Proxy on the site http://driver.im/

CN107079098B - 基于ptz摄像机的影像播放方法及装置 - Google Patents

基于ptz摄像机的影像播放方法及装置 Download PDF

Info

Publication number
CN107079098B
CN107079098B CN201580057719.1A CN201580057719A CN107079098B CN 107079098 B CN107079098 B CN 107079098B CN 201580057719 A CN201580057719 A CN 201580057719A CN 107079098 B CN107079098 B CN 107079098B
Authority
CN
China
Prior art keywords
image
video
preset
same
background model
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580057719.1A
Other languages
English (en)
Other versions
CN107079098A (zh
Inventor
李光国
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SK Telecom Co Ltd
Original Assignee
SK Telecom Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SK Telecom Co Ltd filed Critical SK Telecom Co Ltd
Publication of CN107079098A publication Critical patent/CN107079098A/zh
Application granted granted Critical
Publication of CN107079098B publication Critical patent/CN107079098B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/147—Scene change detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/695—Control of camera direction for changing a field of view, e.g. pan, tilt or based on tracking of objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/41—Higher-level, semantic clustering, classification or understanding of video scenes, e.g. detection, labelling or Markovian modelling of sport events or news items
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/46—Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/49—Segmenting video sequences, i.e. computational techniques such as parsing or cutting the sequence, low-level clustering or determining units such as shots or scenes
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/87—Regeneration of colour television signals
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/40—Scenes; Scene-specific elements in video content
    • G06V20/44—Event detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

公开了一种基于PTZ摄像机的影像播放方法及装置。涉及一种如下的基于PTZ摄像机的影像播放方法及装置：在PTZ摄像机拍摄的多个预设影像中识别对相同位置进行拍摄的预设影像，而且只选择并播放被识别的预设影像。

Description

基于PTZ摄像机的影像播放方法及装置
技术领域
本申请涉及基于PTZ摄像机的影像播放方法及装置。
背景技术
该部分记载的内容仅用于提供本申请的背景信息，而不是用于构成现有技术。
PTZ(Pan-Tilt-Zoom摇摄/倾斜/变焦)摄像机具有在可上下左右旋转的摇摄(pan)/倾斜(Tilt)驱动装置上结合了安装全自动变焦镜头的摄像机的结构。PTZ(Pan-Tilt-Zoom)摄像机通过外部控制可旋转摄像机及放大或缩小镜头。因此，与固定式摄像机相比虽然价格昂贵，但是具有通过摄像机的旋转可对摄像机周围广阔地带进行监视，通过变焦镜头进行远距离/近距离监视及可对感兴趣的对象进行放大观察的优点。
通常，利用PTZ摄像机的事件监视装置每当接收影像帧时，会为监视客体新增生成背景模型，或者通过接收PTZ摄像机的移动控制信号，对每个预设影像重新生成用于监视客体的背景模型，并执行事件监视。但是，一般的事件监视装置由于每当PTZ摄像机发生移动时重新生成背景模型，因此存在检测移动物体的性能降低并且生成背景模型所需的运算量增大的问题。
此外，播放利用PTZ摄像机拍摄的影像时，为了识别或者检测特定情况，管理员需要长时间地持续监视PTZ摄像机的拍摄影像，需要依次监视不同位置的预设影像。因此，需要将大量的预设影像以简单且迅速地进行搜索且播放的方法。
发明内容
技术课题
本申请的目的在于，提供一种如下的基于PTZ摄像机的影像播放方法及装置：在PTZ摄像机拍摄的多个预设影像中识别对相同的位置进行拍摄的预设影像，而且只选择并播放被识别的预设影像。
解决课题的手段
根据本申请的一个方面，提供一种影像播放装置，其选择性地播放利用PTZ摄像机拍摄的具有多个拍摄区间的拍摄影像，该PTZ摄像机能够在相同位置处拍摄多个方向，其特征在于，该影像播放装置包括：参照影像生成部，其生成针对所述拍摄影像中选择出的区间的影像的参照影像；影像检测部，其基于所述参照影像识别并检测与所述选择出的区间的影像具有相同拍摄位置的相同影像；以及影像播放部，其连续播放检测出的所述相同影像。
此外，根据本申请的另一方面，提供一种影像播放方法，选择性地播放利用PTZ摄像机拍摄的具有多个拍摄区间的拍摄影像，该PTZ摄像机能够在相同的位置处拍摄多个方向，其特征在于，该影像播放方法包括：参照影像生成步骤，生成针对所述拍摄影像中选择出的区间的影像的参照影像；影像检测步骤，基于所述参照影像识别并检测与所述选择出的区间的影像具有相同拍摄位置的相同影像；以及影像播放步骤，连续播放检测出的所述相同影像。
发明效果
如上所述，根据本申请，具有如下效果：对于摄像机的拍摄位置反复变更的预设浏览(touring)影像，管理员能够只对特定拍摄位置的预设影像进行搜索或者监视。由于管理员能够只对特定拍摄位置的预设影像进行搜索或者监视，具有能够提高针对影像或者客体搜索的监视效率。
附图说明
图1是概略地示出本实施例涉及的基于PTZ摄像机的事件感应系统的模块结构图。
图2是用于说明本实施例涉及的基于PTZ摄像机的影像播放方法的顺序图。
图3是用于说明本实施例涉及的影像播放装置中确认场景变化的操作的示例图。
图4是用于说明本实施例涉及的影像播放装置中检测与参照影像对应的预设影像的操作的示例图。
图5是用于说明本实施例涉及的按照每个预设位置检测预设影像的操作的示例图。
具体实施方式
以下将参照附图对本实施例进行详细说明。
图1是概略地示出本实施例涉及的基于PTZ摄像机的事件感应系统的模块结构图。
本实施例涉及的事件感应系统包括PTZ(Pan-Tilt-Zoom)摄像机110、事件感应装置120及影像播放装置190。其中，事件感应装置120包括影像获取部130、场景变化确认部140、背景模型控制部150及事件感应部180，影像播放装置190包括影像位置设定部192、参照影像生成部194、影像检测部196及影像播放部198。
PTZ摄像机110作为具有摇摄(Pan)、倾斜(Tilt)、变焦(Zoom)等功能的摄像机，可对使用者想要监视的场所或者区域进行上下、左右、扩大或者缩小并进行监视。PTZ摄像机110可指定想要监视的拍摄位置，因此，通常相比于只监视固定的拍摄位置的摄像机，具有较宽的监视范围。
PTZ摄像机110利用有线或者无线通信与管理装置(未图示)连接，并基于与从管理装置(未图示)接收的控制命令对应的监视模式，执行监视功能。其中，监视模式中包括手动模式和预设模式，所述手动模式是使用者通过操纵杆操作对PTZ摄像机100进行手动调节并进行监视的模式；所述预设模式是对使用者预先设定的监视位置以一定的时间或者周期依次进行监视的模式。
本实施例涉及的PTZ摄像机110可以是设置在管理员预先设定的特定场所的固定位置处的高速球摄像机，PTZ摄像机110利用有线或者无线通信向与其连接的事件感应装置120传送以预设模式拍摄的预设影像的影像帧。
换而言之，PTZ摄像机110以规定的时间或者周期，利用摇摄(Pan)、倾斜(Tilt)、变焦(Zoom)等功能，对预先设定的场所或者区域的预设影像进行反复拍摄。例如，PTZ摄像机110能够基于从管理装置(未图示)获取的控制信号，在以每20秒至30秒的预先设定的周期以120°间隔移动的预设模式下进行工作。这种情况下，PTZ摄像机110在最初的20秒至30秒期间，拍摄第一预设影像(0°至120°)，接下来的20秒至30秒期间拍摄第二预设影像(120°至240°)，接下来的20秒至30秒期间拍摄第三预设影像(240°至360°)。PTZ摄像机110在拍摄第三预设影像之后的接下来的20秒至30秒期间重新拍摄第一预设影像(0°至120°)，以规定的周期反复拍摄第一预设影像、第二预设影像及第三预设影像。
事件感应装置120从PTZ摄像机110获取规定的预设影像的影像帧，基于对获取的影像帧的预设影像的场景变化进行确认，并根据确认结果以生成的背景模型为基础进行事件监视。
影像获取部130从PTZ摄像机110接收拍摄的预设影像的影像帧。其中，预设影像是具有多个拍摄区间(即PTZ摄像机110连续拍摄不同位置的区间)的拍摄影像。
影像获取部130优选实时地接收拍摄的预设影像的影像帧，但是不限于此，可依次获取预先拍摄的多个预设影像的影像帧。
换而言之，影像获取部130获取利用PTZ摄像机110在预先设定的场所或者区域以规定的周期拍摄的预设影像的影像帧。例如，影像获取部130从PTZ摄像机110接收在预先设定的第一场所拍摄的第一预设影像的影像帧。影像获取部130接收到第一预设影像的所有影像帧之后，连续接收PTZ摄像机110基于预先设定的周期进行移动并在第二场所拍摄的第二预设影像的影像帧。
影像获取部130基于预先设定的周期从PTZ摄像机110反复接收规定的预设影像。例如，影像获取部130接收到第一场所的第一预设影像(例如：0°至120°)、第二场所的第二预设影像(例如：120°至240°)及第三场所的第三预设影像(例如：240°至360°)之后，重新以第一预设影像、第二预设影像及第三预设影像的顺序接收影像帧。
场景变化确认部140作为用于判断PTZ摄像机110的移动与否的模块，确认从影像获取部130接收的影像帧的预设影像的变化与否。换而言之，场景变化确认部140确认影像获取部130接收的规定的预设影像的影像帧与之前接收的之前(相邻)影像帧是否包括在相同预设影像中。例如，场景变化确认部140比较从影像获取部130接收的影像帧和已接收的之前(相邻)影像帧，当存在预先设定的临界值或者比例以上的差值时，判断为包括影像帧的预设影像和包括之前影像帧的预设影像互为不同的场景、即互为不同的预设影像。
另外，场景变化确认部140比较由影像获取部130接收的影像帧和已接收的之前影像帧，当差值小于预先设定的临界值或者比例时，判断为包括影像帧的预设影像和包括之前影像帧的预设影像为相同的场景、即互为没有场景变化的相同预设影像。
以下说明场景变化确认部140比较当前影像帧和之前(相邻)影像帧来判断场景变化与否的操作。
场景变化确认部140比较当前影像帧和之前影像帧的全部或者部分像素值的亮度，基于计算出的像素差值确认预设影像的场景变化。
例如，对于包括w(横向像素数)×h(纵向像素数)个像素的当前影像帧和之前影像帧，场景变化确认部140分别对位于垂直、对角线、水平等规定的线上的像素的亮度或者颜色进行取样。
场景变化确认部140比较分别在规定的同一线上取样的当前影像帧和之前影像帧的像素值来计算出同一线的像素差值，计算出的像素差值为预先设定的临界值以上时，判断为包括当前影像帧的预设影像发生变化。其中，本发明虽然仅仅记载了分别对于当前影像帧和之前影像帧，场景变化确认部140只利用规定的同一线上的像素确认预设影像的场景变化的情况，但这是为了减少用于检测场景变化的计算量，只要场景变化确认部140能够判断场景变化，当前影像帧和之前影像帧中使用的像素的个数在应用中可进行调整。
另外，图1中记载的场景变化确认部140可使用用于判断影像帧的场景变化的视觉节奏(Visual Rhythm)方式，但是不限于此，只要利用规定的影像帧及其相邻的影像帧能够判断预设影像的场景变化，可应用任何方式。
场景变化确认部140判断为当前影像帧是预设影像变化而形成的影像帧时，背景模型控制部150生成或者提取与当前影像帧对应的背景模型，并向事件监视部180传送。即，当对于包括场景被认为发生变化的当前影像帧的预设影像存在已存储的现有背景模型时，背景模型控制部150提取现有背景模型并对现有背景模型进行更新，当不存在已存储的现有背景模型时，生成与影像帧对应的新增背景模型并将背景模型向事件监视部180传送。
本实施例涉及的背景模型控制部150包括现有背景模型处理部160和新增背景模型处理部170。
现有背景模型处理部160提取包括当前影像帧的预设影像的现有背景模型。换而言之，现有背景模型处理部160比较当前影像帧和预先生成的多个背景模型并提取被判断为类似的现有背景模型。其中，现有背景模型是指对包括当前影像帧的特定的预设影像的新增背景模型分别持续地更新所接收的特定的预设影像的多个影像帧而形成的背景模型。
例如，第一预设影像包括当前影像帧时，现有背景模型处理部160确认是否存在与第一预设影像对应的现有背景模型，并提取该现有背景模型。其中，与第一预设影像对应的现有背景模型是指以基于第一预设影像的第一个影像帧生成的背景模型为基准，对以后接收的第一预设影像的影像帧持续地进行更新直至收到第二预设影像的影像帧之前为止生成的背景模型。
现有背景模型处理部160可从位于事件感应装置120的外部的数据库(未图示)中提取现有背景模型，也可以从事件感应装置120的内部具有的存储部(未图示)提取现有背景模型。
以下说明现有背景模型处理部160将当前影像帧与已存储的多个背景模型进行比较并提取与包括当前影像帧的预设影像对应的现有背景模型的操作。
现有背景模型处理部160将当前影像帧分别与已存储的多个背景模型进行比较来计算出比较差值。现有背景模型处理部160利用数学式1计算出比较差值。
[数学式1]
Figure GDA0002179196040000061
(e：比较差值，m：背景模型，W：当前影像帧的宽度，H：当前影像帧的高度，x，y：规定的像素(坐标值)，I：输入的当前影像帧)
现有背景模型处理部160将从规定的像素(x，y)位置处的当前影像帧的颜色值I(x，y)减去规定的像素(x，y)位置处的背景模型mi的颜色值mi(x，y)而得的差值的数列分别以影像帧的宽度和高度进行求和而计算出比较差值e(mi)。
现有背景模型处理部160将已存储的多个背景模型分别与当前影像帧进行比较并选择计算出的多个比较差值e(mi)中具有最小值的背景模型，当选择的背景模型的比较差值e(mi)小于预先设定的临界值T时，提取所选择的背景模型作为类似于当前影像帧的现有背景模型。
现有背景模型处理部160将已存储的多个背景模型分别与当前影像帧进行比较来计算出比较差值的过程中，为了减少基于当前影像帧包括的客体的误差，只利用从当前影像帧中排除被预测为可能存在多个客体的区域的预测背景区域，并可计算出比较差值。其中，图5中将记载针对预测背景区域的说明。
现有背景模型处理部160对提取的现有背景模型更新(学习)当前影像帧来生成更新背景模型。以下说明现有背景模型处理部160对现有背景模型更新当前影像帧的操作。
现有背景模型处理部160计算出现有背景模型和新接收的影像帧的加权和，并更新背景模型。换而言之，现有背景模型处理部160利用像素(x，y)在当前时间t的现有背景模型mt(x，y)和在t输入的影像帧It(x，y)的加权和，更新为t+1时间的更新背景模型mt+1(x，y)。将前面所述的现有背景模型更新为更新背景模型的数学式2如下。
[数学式2]
mt+1(x，y)
＝(1-α)×mt(x，y)+α×It(x，y)
(m：背景模型，x，y：规定的像素(坐标值)，α：背景模型学习率，t：当前时间，I：输入的影像帧)
现有背景模型处理部160在所述的数学式2中将现有背景模型更新为更新背景模型的速度可基于学习率α被调节，学习率α设置为0至1之间的值。
另外，现有背景模型处理部160可对由场景变化确认部140确认为预设影像没有发生变化的当前影像帧进行更新。换而言之，当收到预设影像没有发生变化的当前影像帧时，现有背景模型处理部160可对之前使用的之前背景模型更新当前影像帧，来生成更新背景模型。
新增背景模型处理部170生成当前影像帧的新增背景模型。换而言之，当与包括当前影像帧的预设影像对应的现有背景模型不存在时，新增背景模型处理部170生成当前影像帧的新增背景模型。例如，当第一预设影像包括当前影像帧，并且只存在第二预设影像和第三预设影像的现有背景模型时，新增背景模型处理部170基于第一预设影像的当前影像帧生成新增背景模型。
事件感应部180从背景模型控制部150接收背景模型，并在从当前影像帧中排除了背景模型的关注区域内，感应与移动的客体有关的事件。换而言之，事件感应部180在排除了从背景模型控制部150接收的生成的新增背景模型或者更新背景模型的关注区域内，感应事件。事件感应部180将关注区域内的事件感应结果信息向使用者或者管理员传送并输出。
事件感应部180利用在关注区域内设定像素块并以像素块为基准进行边缘检测、比较已存储的参照影像等方式，划分影像并对客体进行分类，从而感应事件，但不限于此，也可以在关注区域内滑动预先设定的尺寸的窗口并进行客体识别。
影像播放装置190在PTZ摄像机110拍摄的多个预设影像中识别拍摄相同的位置的预设影像，并只选择识别的预设影像并播放。其中，影像播放装置190可直接从PTZ摄像机110获取所拍摄的多个预设影像，但不仅限于此，可从已存储多个预设影像的数据库(未图示)获取，或者也可以在事件感应装置120执行事件感应后获取已存储的多个预设影像。以下说明影像播放装置190对已存储的多个预设影像进行选择性地播放的操作。
影像位置设定部192在多个预设影像中设定影像被拍摄的位置并选择特定的预设影像。影像位置设定部192在多个预设影像中将根据基于管理员的操作或者命令的选择信号选择的预设影像确定为特定的预设影像。例如，影像位置设定部192在包括第一预设影像、第二预设影像及第三预设影像的多个预设影像中，当接收到选择第一预设影像的信号时，将第一预设影像确定为特定的预设影像。
另外，影像位置设定部192在多个预设影像中也可以将拍摄不同位置的各个预设影像选为特定的预设影像。
参照影像生成部194生成针对特定的预设影像的参照影像。其中，参照影像是指用于检测与特定的预设影像具有相同拍摄位置的预设影像的影像。
参照影像生成部194将特定的预设影像的第一个影像帧作为参照影像而生成，或者将具有特定的预设影像中包括的多个影像帧的平均像素的影像帧作为参照影像而生成。更具体而言，参照影像生成部194将特定的预设影像中包括的多个影像帧中最先存储的第一个帧作为参照影像而生成。而且，参照影像生成部194能够在特定的预设影像所包括的多个影像帧的每个影像帧中利用相同位置的各像素来计算出平均像素值，并利用具有计算出的平均像素值的平均像素来生成参照影像。
当影像位置设定部192选择了拍摄不同位置的多个特定的预设影像时，参照影像生成部194生成与每个特定的预设影像对应的多个参照影像。
影像检测部196基于参照影像识别并检测与特定的预设影像具有相同拍摄位置的相同预设影像。
影像检测部196比较参照影像和连续于特定的预设影像的预设影像，当计算出的像素差值小于预先设定的临界值时，将该预设影像识别并检测为与特定的预设影像具有相同拍摄位置的相同预设影像。
影像检测部196比较参照影像和连续于特定的预设影像的预设影像，当计算出的像素差值为预先设定的临界值以上时，将该预设影像识别为与特定的预设影像具有不同拍摄位置的预设影像。其中，当拍摄不同位置的预设影像之后还存在后续的预设影像时，影像检测部196比较后续的预设影像和参照影像，来确认是否是与特定的预设影像具有相同拍摄位置的相同预设影像。当后续的预设影像继续存在时，影像检测部196反复确认是否是相同预设影像。
另外，当拍摄不同位置的预设影像之后不存在后续的预设影像时，影像检测部196中止基于参照影像确认是否是相同预设影像的操作。
当参照影像生成部194生成多个参照影像时，影像检测部196分别检测与各个参照影像对应的相同预设影像，并将检测出的各个相同预设影像按照拍摄的位置连续地存储。其中，检测出的各个相同预设影像优选向数据库(未图示)传送并存储，但不限于此，也可以存储在影像播放装置190内部具有的存储部(未图示)中。
影像播放部198以时间顺序连续地进行播放与特定的预设影像具有相同拍摄位置的相同预设影像。
图2是用于说明本实施例涉及的基于PTZ摄像机的影像播放方法的顺序图。
影像播放装置190确定多个预设影像中的一个特定的预设影像(S210)。影像播放装置190在多个预设影像中将根据基于管理员的操作或者命令的选择信号选择的预设影像确定为特定的预设影像。
影像播放装置190生成并存储针对特定的预设影像的参照影像(S220)。其中，参照影像是指用于检测与特定的预设影像具有相同拍摄位置的预设影像的影像。
影像播放装置190检测与特定的预设影像具有相同拍摄位置的相同预设影像(S230)。当存在类似于参照影像的影像帧时(S240)，影像播放装置190将该预设影像检测为与特定的预设影像具有相同拍摄位置的相同预设影像而进行播放(S250)。
影像播放装置190在检测出相同预设影像之后，在影像没有结束时(S260)，移动至步骤S230而检测与特定的预设影像具有相同拍摄位置的相同预设影像。
另外，影像播放装置190在检测出相同预设影像之后，在影像结束时(S260)，结束选择性地播放影像的操作。
图3是用于说明本实施例涉及的影像播放装置中确认场景变化的操作的示例图。
如图3所记载，影像播放装置190利用参照影像和规定的预设影像，识别与特定的预设影像具有相同拍摄位置的相同预设影像。图3中影像播放装置190比较参照影像帧310和规定的预设影像帧320，来确认是否是相同预设影像。
影像播放装置190生成第一取样信息314和第二取样信息324，所述第一取样信息314取样于位于参照影像帧310的第一对角线312即S(O)至S(n)上的n个像素的颜色，所述第二取样信息324取样于位于规定的预设影像帧320的第二对角线322即S(O)至S(n)上的n个像素的颜色。
影像播放装置190按照每个相邻的与时间(t)对应的2个列(Column)计算第一取样信息314和第二取样信息324的颜色差值d。
当第一取样信息314和第二取样信息324间计算的颜色差值d中存在预先设定的临界值以上的值、即存在峰值330时，影像播放装置190将规定的预设影像帧320识别为与特定的预设影像具有不同拍摄位置的预设影像。
另外，当第一取样信息314和第二取样信息324间计算的颜色差值d小于预先设定的临界值、即不存在峰值330时，影像播放装置190将规定的预设影像帧320识别为与特定的预设影像具有相同拍摄位置的相同预设影像。
图4是用于说明本实施例涉及的影像播放装置中检测与参照影像对应的预设影像的操作的示例图。
如图4所示，影像播放装置190选择最初播放的第一预设影像410作为特定的预设影像，并生成针对最初播放的第一预设影像410的参照影像。
影像播放装置190将与最初播放的第一预设影像410连续地播放的第二预设影像和第三预设影像与参照影像进行比较，并识别为不是相同预设影像。
影像播放装置190将与最初播放的第三预设影像连续地第二次播放的第一预设影像420和参照影像进行比较，并识别且检测为相同预设影像。然后，影像播放装置190将连续播放的第二预设影像和第三预设影像与参照影像进行比较，并识别为不是相同预设影像。
影像播放装置190将与第二次播放的第三预设影像连续地第三次播放的第一预设影像430和参照影像进行比较，并识别且检测为相同预设影像。影像播放装置190反复执行确认是否是相同预设影像的操作，直至连续播放的预设影像不存在为止。
图5是用于说明本实施例涉及的按照每个预设位置检测预设影像的操作的示例图。
如图5所示，影像播放装置190在多个预设影像中将拍摄不同位置的第一预设1(610)、第一预设2(620)，第一预设3(630)分别选为特定的预设影像，并分别生成针对特定的预设影像的参照影像。
影像播放装置190利用针对第一预设1(610)的参照影像，提取第二预设1(612)、第三预设1(614)等作为相同预设影像。影像播放装置190利用针对第一预设2(620)的参照影像，提取第二预设2(622)、第三预设2(624)等作为相同预设影像。影像播放装置190利用针对第一预设3(630)的参照影像，提取第二预设3(632)作为相同预设影像。
影像播放装置190将检测出的各个相同预设影像按照每个相同位置连续地存储，并分别生成为其他文件，或者将选择的位置的影像生成为其他文件并输出。
以上说明仅仅是为了举例说明本实施例的技术思想，只要是本实施例所属的技术领域的技术人员，在不超过本实施例的本质特征的范围内，可进行各种修改和变形。因此，本实施例不是为了限定本实施例的技术思想，而是为了对其进行说明，本实施例的技术思想的范围不限于上述实施例。对本实施例的保护范围的解释要依据所附权利要求书，应当解释为与其等同范围内的所有技术思想均属于本实施例的权利范围内。
附图标记说明
110：PTZ摄像机；120：事件感应装置；130：影像获取部；140：场景变化确认部；150：背景模型控制部；160：现有背景模型处理部；170：新增背景模型处理部；180：事件感应部；190：影像播放装置；192：影像位置设定部；194：参照影像生成部；196：影像检测部；198：影像播放部。
相关申请的交叉引用
依据美国专利法119(a)条(35U.S.C.119(a))，本专利申请对2014年10月24日在韩国申请的专利申请第10-2014-0145032号要求优先权，其所有内容作为参考文献并入本专利申请中。同时，基于相同理由，本专利申请在美国以外的其他国家要求优先权时，其所有内容作为参考文献并入本专利申请中。

Claims (10)

1.一种影像播放装置，其选择性地播放利用PTZ摄像机拍摄的具有多个拍摄区间的拍摄影像，该PTZ摄像机能够在固定位置处拍摄多个方向，其特征在于，该影像播放装置包括：
参照影像生成部，其生成针对所述拍摄影像中的所述多个拍摄区间中选择出的区间的影像的参照影像；
影像检测部，其基于所述参照影像识别并检测与所述选择出的区间的影像具有相同拍摄位置的相同影像；以及
影像播放部，其仅连续播放检测出的相同拍摄位置的所述相同影像。
2.如权利要求1所述的影像播放装置，其特征在于，
所述影像检测部比较所述参照影像和连续于所述选择出的区间的影像的下一影像，当计算出的像素差值小于预先设定的临界值时，将所述下一影像识别为所述相同影像。
3.如权利要求1所述的影像播放装置，其特征在于，
所述参照影像生成部将所述选择出的区间的影像的第一个影像帧选定为所述参照影像。
4.如权利要求1所述的影像播放装置，其特征在于，
所述参照影像生成部在所述选择出的区间的影像所包括的多个影像帧的每个影像帧中计算出相同位置的像素的平均像素值，利用具有所述平均像素值的平均像素来生成所述参照影像。
5.如权利要求1所述的影像播放装置，其特征在于，
该影像播放装置还包括影像位置设定部，所述影像位置设定部基于所输入的选择信号选择所述拍摄影像中的所述选择出的区间的影像，
所述影像检测部以所述选择信号为基准，以预先设定的周期或者预先设定的帧数，确认所述拍摄区间的变化来检测所述相同影像。
6.如权利要求1所述的影像播放装置，其特征在于，
当比较所述参照影像和连续于所述选择出的区间的影像的下一影像而计算出的像素差值为预先设定的临界值以上时，所述影像检测部将所述下一影像识别为与所述选择出的区间的影像具有不同拍摄位置的拍摄区间的影像。
7.如权利要求6所述的影像播放装置，其特征在于，
当所述下一影像之后存在后续的追加影像时，所述影像检测部反复执行比较所述参照影像和所述追加影像来检测所述相同影像的操作。
8.如权利要求6所述的影像播放装置，其特征在于，
当所述下一影像之后不存在后续的追加影像时，所述影像检测部中止基于所述参照影像检测所述相同影像的操作。
9.如权利要求1所述的影像播放装置，其特征在于，
在所述参照影像生成部生成了针对所述拍摄影像中的不同拍摄位置的拍摄区间的各个影像的参照影像时，所述影像检测部基于各个所述参照影像，检测与所述不同拍摄位置的拍摄区间的各个影像具有相同拍摄位置的各个相同影像，且将检测出的各个所述相同影像按照每个拍摄位置连续地存储。
10.一种影像播放方法，选择性地播放利用PTZ摄像机拍摄的具有多个拍摄区间的拍摄影像，该PTZ摄像机能够在固定位置处拍摄多个方向，其特征在于，该影像播放方法包括：
参照影像生成步骤，生成针对所述拍摄影像中的所述多个拍摄区间中选择出的区间的影像的参照影像；
影像检测步骤，基于所述参照影像识别并检测与所述选择出的区间的影像具有相同拍摄位置的相同影像；以及
影像播放步骤，仅连续播放检测出的相同拍摄位置的所述相同影像。
CN201580057719.1A 2014-10-24 2015-10-05 基于ptz摄像机的影像播放方法及装置 Active CN107079098B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020140145032A KR102128319B1 (ko) 2014-10-24 2014-10-24 팬틸트줌 카메라 기반의 영상 재생방법 및 장치
KR10-2014-0145032 2014-10-24
PCT/KR2015/010478 WO2016064107A1 (ko) 2014-10-24 2015-10-05 팬틸트줌 카메라 기반의 영상 재생방법 및 장치

Publications (2)

Publication Number Publication Date
CN107079098A CN107079098A (zh) 2017-08-18
CN107079098B true CN107079098B (zh) 2020-10-23

Family

ID=55761104

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580057719.1A Active CN107079098B (zh) 2014-10-24 2015-10-05 基于ptz摄像机的影像播放方法及装置

Country Status (4)

Country Link
US (1) US10122984B2 (zh)
KR (1) KR102128319B1 (zh)
CN (1) CN107079098B (zh)
WO (1) WO2016064107A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10915755B2 (en) * 2018-12-11 2021-02-09 Canon Kabushiki Kaisha Alignment-free video change detection using deep blind image region prediction
CN109948689B (zh) * 2019-03-13 2022-06-03 北京达佳互联信息技术有限公司 一种视频生成方法、装置、电子设备及存储介质
US11232327B2 (en) * 2019-06-19 2022-01-25 Western Digital Technologies, Inc. Smart video surveillance system using a neural network engine
US11070712B2 (en) * 2019-08-30 2021-07-20 Puwell Technology Llc Method and system for control of a digital camera system
KR102586643B1 (ko) * 2021-11-19 2023-10-10 한국전자기술연구원 투어링 cctv 영상을 활용한 차로별 교통 흐름 예측 방법

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1269754A4 (en) * 2000-03-14 2009-03-11 Joseph Robert Marchese DIGITAL VIDEO SYSTEM USING NETWORKED CAMERAS
US7082209B2 (en) * 2000-08-31 2006-07-25 Hitachi Kokusai Electric, Inc. Object detecting method and object detecting apparatus and intruding object monitoring apparatus employing the object detecting method
JP3698420B2 (ja) * 2001-06-12 2005-09-21 シャープ株式会社 画像監視装置及び画像監視方法及び画像監視処理プログラム
KR100452097B1 (ko) * 2002-05-02 2004-10-12 주식회사 윈포넷 영상데이터의 변화값 추출을 이용한 영상데이터 저장방법
US20100035682A1 (en) * 2008-07-01 2010-02-11 Yoostar Entertainment Group, Inc. User interface systems and methods for interactive video systems
JP4623199B2 (ja) * 2008-10-27 2011-02-02 ソニー株式会社 画像処理装置、画像処理方法およびプログラム
US8364024B2 (en) * 2009-02-03 2013-01-29 Broadcom Corporation Constructing video frames and synchronizing audio data in a media player from data received via a plurality of diverse protocol stack paths
KR101178772B1 (ko) * 2009-09-22 2012-09-07 휴앤에스(주) 도로관리 시스템 및 도로관리 방법
US8798388B2 (en) * 2009-12-03 2014-08-05 Qualcomm Incorporated Digital image combining to produce optical effects
AU2009251048B2 (en) * 2009-12-18 2013-12-19 Canon Kabushiki Kaisha Background image and mask estimation for accurate shift-estimation for video object detection in presence of misalignment
JP2011182253A (ja) * 2010-03-02 2011-09-15 Canon Inc 撮像装置及び撮像方法
JP2012003087A (ja) * 2010-06-17 2012-01-05 Olympus Corp 撮像装置
JP5445363B2 (ja) * 2010-07-08 2014-03-19 株式会社リコー 画像処理装置、画像処理方法および画像処理プログラム
US9154747B2 (en) * 2010-12-22 2015-10-06 Pelco, Inc. Stopped object detection
US8791999B2 (en) * 2011-01-21 2014-07-29 Apple Inc. Systems and methods for display calibration
KR101498608B1 (ko) * 2012-03-12 2015-03-04 삼성테크윈 주식회사 영상데이터 검색장치

Also Published As

Publication number Publication date
US10122984B2 (en) 2018-11-06
CN107079098A (zh) 2017-08-18
US20170264877A1 (en) 2017-09-14
KR20160048428A (ko) 2016-05-04
WO2016064107A1 (ko) 2016-04-28
KR102128319B1 (ko) 2020-07-09

Similar Documents

Publication Publication Date Title
CN107079098B (zh) 基于ptz摄像机的影像播放方法及装置
EP3084577B1 (en) Selection and tracking of objects for display partitioning and clustering of video frames
JP4241742B2 (ja) 自動追尾装置及び自動追尾方法
JP6532217B2 (ja) 画像処理装置、画像処理方法、及び画像処理システム
US10515471B2 (en) Apparatus and method for generating best-view image centered on object of interest in multiple camera images
US9098748B2 (en) Object detection apparatus, object detection method, monitoring camera system and storage medium
US10334150B2 (en) Camera system and method of tracking object using the same
JP6465600B2 (ja) 映像処理装置および映像処理方法
JP6924064B2 (ja) 画像処理装置およびその制御方法、ならびに撮像装置
KR102282470B1 (ko) 카메라 장치 및 이를 이용한 객체 추적 방법
JP4578864B2 (ja) 自動追尾装置及び自動追尾方法
KR100964726B1 (ko) 영상 카메라 시스템에서 이동 물체 특성을 이용한 이동물체 추적 방법
JP2016076791A (ja) 物体追尾装置、物体追尾方法、およびプログラム
KR101938381B1 (ko) 촬상 장치 및 촬상 방법
KR102107137B1 (ko) 팬틸트줌 카메라를 이용한 이벤트 감지방법 및 장치
CN114120165A (zh) 枪球联动的目标跟踪方法、装置、电子装置和存储介质
JP2009211525A (ja) 物体検出装置
KR102080456B1 (ko) 압축영상에 대한 신택스 기반의 ptz 카메라의 객체 추적 제어 방법
JP4699056B2 (ja) 自動追尾装置及び自動追尾方法
KR101272631B1 (ko) 이동물체 감지장치 및 방법
JP4628851B2 (ja) 物体検出方法および物体検出装置
JP2021022783A (ja) 制御装置、追尾システム、制御方法、及びプログラム
JP2017085439A (ja) 追尾装置
JP2023124598A (ja) 主被写体判定装置、撮像装置、主被写体判定方法、及びプログラム
KR20140046605A (ko) 영상 판독 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant