RU2681364C1 - Система и способ сокрытия объектов в видеоархиве по требованию пользователей - Google Patents
Система и способ сокрытия объектов в видеоархиве по требованию пользователей Download PDFInfo
- Publication number
- RU2681364C1 RU2681364C1 RU2018105895A RU2018105895A RU2681364C1 RU 2681364 C1 RU2681364 C1 RU 2681364C1 RU 2018105895 A RU2018105895 A RU 2018105895A RU 2018105895 A RU2018105895 A RU 2018105895A RU 2681364 C1 RU2681364 C1 RU 2681364C1
- Authority
- RU
- Russia
- Prior art keywords
- video
- region
- operator
- areas
- interpolation
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims description 37
- 238000012545 processing Methods 0.000 claims abstract description 8
- 238000005516 engineering process Methods 0.000 abstract description 2
- 239000000126 substance Substances 0.000 abstract 1
- 230000000873 masking effect Effects 0.000 description 12
- 238000010586 diagram Methods 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000007935 neutral effect Effects 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/60—Protecting data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
- G06T3/4007—Scaling of whole images or parts thereof, e.g. expanding or contracting based on interpolation, e.g. bilinear interpolation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/255—Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
- H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30241—Trajectory
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Health & Medical Sciences (AREA)
- Bioethics (AREA)
- General Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Closed-Circuit Television Systems (AREA)
Abstract
Изобретение относится к защите конфиденциальной информации, а именно к обработке видеоинформации, полученной с камер видеонаблюдения, с целью сокрытия приватной информации в видеоархиве. Технический результат – повышение эффективности сокрытия объектов в видеоархиве. Система сокрытия объектов в видеоархиве содержит камеру видеонаблюдения, память, выполненную с возможностью хранения видеоданных, поступающих от камер видеонаблюдения, процессор для обработки видеоданных в соответствии с командами, получаемыми от графического пользовательского интерфейса, графический пользовательский интерфейс, содержащий средства ввода и вывода данных, причем упомянутые средства ввода данных содержат блок получения запроса, блок задания опорной области, причем опорная область задается на первом и на последнем кадре видео из видеоархива, на которых виден выбранный объект, блок интерполяции положений областей и блок сохранения видео. 3 н. и 26 з.п. ф-лы, 4 ил.
Description
ОБЛАСТЬ ТЕХНИКИ
Настоящая группа изобретений относится к области защиты конфиденциальной информации, а более конкретно к системам и способам обработки видеоинформации, полученной с камер видеонаблюдения, с целью сокрытия по требованию пользователей приватной информации в видеоархиве.
УРОВЕНЬ ТЕХНИКИ
Под системами видеонаблюдения понимается программно-аппаратное обеспечение или технические средства, использующие, в том числе и методы компьютерного зрения для автоматизированного сбора данных, на основании анализа потокового видео. Системы видеонаблюдения могут опираться на алгоритмы обработки изображения и распознавания образов, позволяющие анализировать видео без прямого участия человека. Системы видеонаблюдения, в зависимости от конкретных целей, могут реализовывать множество функций, например таких, как: обнаружение объектов, слежение за движением объектов, распознавание объектов, идентификация объектов, и т.д.
В настоящее время системы видеонаблюдения, например, такие как системы замкнутого телевидения (CCTV) быстро распространяются с целью обеспечения общей безопасности в охраняемых зонах. Помимо того, что большинство предприятий оснащено камерами, во многих городах уже развернута городская система видеонаблюдения.
Пропорционально скорости распространения таких систем растет и потребность в защите частной жизни людей. Конфиденциальность людей должна быть защищена по ряду причин. Например, некоторым людям просто неудобно постоянно находиться под видеонаблюдением, а некоторым (например, знаменитостям или просто хорошо обеспеченным гражданам) это даже не безопасно. Хотя данные о людях записываются непреднамеренно, однако эти данные сохраняются и порой становятся общедоступными в сети Интернет. Для решения указанной проблемы были разработаны различные методы маскировки приватной информации. Чаще всего используются способы распознавания лиц или объектов, с последующим шифрованием видео в области обнаруженного объекта. Однако указанные способы требуют высокой вычислительной мощности оборудования для качественной маскировки приватной информации.
Из уровня техники известно решение, раскрытое в заявке US 2014/0023248 A1, G06K 9/00, опубл. 23.01.2014, в котором раскрыты устройство и способ защиты конфиденциальной информации в видеоизображениях. Указанное устройство содержит: блок разделения видеопоследовательности на кадры; блок обнаружения лиц; блок распознавания лица, выполненный с возможностью сравнения обнаруженных лиц с целевым лицом; и блок обработки, для выборочной маскировки области лица. Указанное решение направлено на сокрытие всех других лиц в видеоизображении кроме целевого лица, или же на сокрытие только целевого лица. При этом данное решение характеризуется высокой вычислительной сложностью из-за распознавания всех лиц, имеющихся в видео и их последующего сравнения с целевым лицом.
Также из уровня техники известно еще одно решение, раскрытое в заявке US 2016/0155465 A1, G11B 20/00, опубл. 02.06.2016, в котором раскрыт способ маскировки видеоданных. Основными этапами данного способа являются: обнаружение области в кадре видео, которую необходимо замаскировать; маскировка обнаруженной области; вставка информации маскировки; сохранение замаскированного кадра вместе со вставленной информацией маскировки. Главным недостатком данного решения является тот факт, что для того, чтобы замаскировать все видео, вышеуказанные этапы способа повторяются для каждого кадра видео.
Наиболее близким по технической сущности является решение, раскрытое в заявке US 2010/0328460 A1, H04N 7/18, опубл. 30.12.2010, характеризующее метод маскировки выбранных объектов. Указанное решение описывает модуль для маскировки данных в системе видеонаблюдения, включающей камеры, размещенные в зоне контроля, которые обнаруживают все движущиеся объекты. Система видеонаблюдения содержит устройство для выбора объектов, а модуль маскировки предназначен для вывода области выбранных объектов в замаскированном виде, причем маскировка выполняется в заданной ограниченной области зоны контроля. Основным отличием данного решения от заявляемого решения является логика маскировки объектов именно в заданной области контроля, которая определяется расстоянием от камеры по диаграмме глубины сцены. Кроме того, данное решение не подразумевает автоматического расчета положений заслоняющих областей на промежуточных кадрах видео путем интерполяции.
РАСКРЫТИЕ СУЩНОСТИ ИЗОБРЕТЕНИЯ
Заявляемое техническое решение направлено на устранение недостатков, присущих предшествующему уровню техники и на развитие уже известных решений.
Техническим результатом заявленной группы изобретений является расширение арсенала технических средств, в части сокрытия объектов в видеоархиве, а также снижение вычислительной сложности таких систем, посредством задания опорной области, заслоняющей выбранный объект на первом и на последнем кадре, и расчета положений вычисленных областей на промежуточных кадрах путем интерполяции.
Данный технический результат достигается тем, что система сокрытия объектов в видеоархиве содержит: по меньшей мере, одну камеру видеонаблюдения; память, выполненную с возможностью хранения видеоданных, поступающих от камер видеонаблюдения; по меньшей мере, один процессор для обработки видеоданных в соответствии с командами, получаемыми от графического пользовательского интерфейса; графический пользовательский интерфейс, содержащий средства ввода и вывода данных, причем упомянутые средства ввода данных содержат: блок получения запроса, выполненный с возможностью получать от пользователей требование скрыть изображение конкретного выбранного объекта; блок задания опорной области, сконфигурированный для предоставления оператору системы возможности задавать опорную область, заслоняющую выбранный объект, причем опорная область задается на первом и на последнем кадре видео из видеоархива, на которых виден выбранный объект; блок интерполяции положений областей, выполненный с возможностью автоматически рассчитывать положения вычисленных областей на промежуточных кадрах между упомянутыми первым и последним кадрами видео путем интерполяции; блок сохранения видео, выполненный с возможностью сохранять измененное видео в видеоархив, причем измененное видео включает опорные и вычисленные области, заслоняющие выбранный объект, на каждом его кадре в заданном интервале от первого до последнего кадра.
В одном частном варианте заявленного решения объект является подвижным или неподвижным.
В другом частном варианте заявленного решения объектом может являться: человек, лицо человека или номер транспортного средства.
Еще в одном частном варианте блок задания опорной области дополнительно сконфигурирован для предоставления оператору системы возможности задавать, по меньшей мере, одно из: формы области, цвета области, содержания области, причем указанная область может содержать изображение или текст.
В другом частном варианте заявленного решения форма опорной области является одной из: овала, круга, прямоугольника, многоугольника.
Еще в одном частном варианте интерполяция выполняется в соответствии с допущением, что выбранный объект, который необходимо скрыть, движется прямолинейно и равномерно.
В другом частном варианте заявленного решения для, по меньшей мере, одной камеры видеонаблюдения имеется информация о траекториях движения объектов.
Еще в одном частном варианте графический пользовательский интерфейс дополнительно содержит блок выбора траектории движения объекта, сконфигурированный для выбора траектории движения конкретного выбранного объекта, причем блок интерполяции дополнительно выполнен с возможностью учитывать информацию о выбранной траектории движения объекта при расчете положений вычисленных областей.
В другом частном варианте заявленного решения блок задания опорной области дополнительно сконфигурирован для предоставления оператору возможности редактировать вычисленные области до этапа сохранения измененного видео.
Еще в одном частном варианте оператор может отредактировать вычисленную обдасть на, по меньшей мере, одном из промежуточных кадров, при этом отредактированная область станет опорной областью и видео, таким образом, будет разбито на, по меньшей мере, два интервала, причем блок интерполяции в таком случае автоматически выполнит перерасчет положений вычисленных областей на каждом промежуточном кадре в составе полученных интервалов.
В другом частном варианте заявленного решения блок интерполяции выполнен с возможностью выполнять перерасчет положений вычисленных областей в том случае, если оператор системы посредством использования блока задания опорной области добавит, по меньшей мере, одну дополнительную опорную область до или после уже замаскированного интервала видео.
Еще в одном частном варианте блок задания опорной области дополнительно сконфигурирован для предоставления оператору возможности удалять, по меньшей мере, одну опорную область, при этом блок интерполяции выполняет перерасчет положений вычисленных областей.
В другом частном варианте заявленного решения блок сохранения видео сохраняет измененное видео вместо первоначального видео, полученного из видеоархива.
Еще в одном частном варианте после сохранения измененного видео, заданные опорные области и вычисленные области остаются неизменными и отображаются при просмотре измененного видео и при экспорте его из системы.
Указанный технический результат также достигается и за счет выполнения способа сокрытия объектов в видеоархиве, реализуемого вычислительной системой, причем способ содержит этапы, на которых: получают видеоданные от, по меньшей мере, одной камеры видеонаблюдения; сохраняют полученные видеоданные в видеоархив; получают от пользователей требование скрыть изображение конкретного выбранного объекта; предоставляют оператору системы возможность задавать опорную область, заслоняющую выбранный объект, причем опорная область задается на первом и на последнем кадре видео из видеоархива, на которых виден выбранный объект; автоматически рассчитывают положения вычисленных областей на промежуточных кадрах между упомянутыми первым и последним кадром видео путем интерполяции положений областей; сохраняют измененное видео в видеоархив, причем измененное видео включает опорные и вычисленные области, заслоняющие выбранный объект, на каждом его кадре в заданном интервале от первого до последнего кадра.
А также, данный технический результат достигается за счет считываемого компьютером носителя данных, содержащего исполняемые процессором компьютера инструкции для осуществления вариантов способов сокрытия объектов в видеоархиве.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ
Фиг. 1 - блок-схема системы сокрытия объектов в видеоархиве;
Фиг. 2 - пример задания оператором опорной области, заслоняющей объект в кадре видео;
Фиг. 3 - пример кадра измененного видео, сохраненного в видеоархив;
Фиг. 4 - блок-схема способа сокрытия объектов в видеоархиве;
ОСУЩЕСТВЛЕНИЕ ИЗОБРЕТЕНИЯ
Ниже будет приведено описание примерных вариантов осуществления заявленной группы изобретений. Однако заявленная группа изобретений не ограничивается только этими вариантами осуществления. Специалистам будет очевидно, что под объем заявленной группы изобретений, описанной в формуле, могут попадать и другие варианты реализации.
Заявляемое техническое решение в различных своих вариантах осуществления может быть выполнено в виде систем и способов, реализуемых различными компьютерными средствами, а также в виде считываемого компьютером носителя данных, хранящего исполняемые процессором компьютера инструкции.
На Фиг. 1 показана блок-схема системы сокрытия объектов в видеоархиве. Система включает в себя: по меньшей мере, одну камеру видеонаблюдения (10, …, 1n); память (20); по меньшей мере, один процессор (30, …, 3m); и графический пользовательский интерфейс (40), который в свою очередь содержит: блок получения запроса (50), блок задания опорной области (60), блок интерполяции положений областей (70) и блок сохранения видео (80). Указанные блоки пользовательского интерфейса представляют собой средства ввода данных, при этом пользовательский интерфейс содержит и средства вывода данных (не показаны).
В данном контексте под системами понимаются любые вычислительные системы, построенные на базе программно-аппаратных средств, например, такие как: персональные компьютеры, смартфоны, ноутбуки, планшеты и т.д.
Процессор компьютерной системы в отдельных вариантах ее реализации может быть заменен на: микропроцессор, ЭВМ (электронно-вычислительная машина), ПЛК (программируемый логический контроллер) или интегральную схему.
В роли устройства памяти могут выступать, но, не ограничиваясь, жесткие диски (HDD), флеш-память, ПЗУ (постоянное запоминающее устройство), твердотельные накопители (SSD) и т.д.
Графический пользовательский интерфейс (ГПИ) представляет собой систему средств для взаимодействия пользователя с компьютерной системой, основанную на представлении всех доступных пользователю системных объектов и функций в виде графических компонентов экрана (окон, значков, меню, кнопок, списков и т.п.). При этом пользователь имеет произвольный доступ (с помощью устройств ввода данных) ко всем видимым экранным объектам - блокам интерфейса, которые отображаются на дисплее (мониторе). Устройство ввода данных пользователя может представлять собой, но не ограничиваться, например, манипулятор мышь, клавиатуру, тачпад, стилус, джойстик, трекпад и т.п.
Следует отметить, что в указанную компьютерную систему могут входить и любые другие известные в данном уровне техники устройства.
Далее будет подробно описан пример работы вышеупомянутой системы сокрытия объектов в видеоархиве. Все нижеописанные этапы работы системы также применимы и к реализации заявляемого способа сокрытия объектов в видеоархиве.
Как известно, видеоданные, получаемые от камер видеонаблюдения, сохраняются в видеоархив системы видеонаблюдения. Основная задача заявляемого решения заключается в том, что любому человеку, попавшему в поле зрения камер видеонаблюдения, предоставляется возможность обратиться к оператору системы, с просьбой убрать его изображение из видеоархива. В другом случае, пользователь может обратиться к оператору, с просьбой убрать изображение любого объекта из видеоархива. Объект может быть как подвижным, так и неподвижным. Например, объектом может являться одно из: человека, лица человека, транспортного средства, номера транспортного средства, домашнего питомца и т.д. Специалисту в данной области технике будет очевидно, что этим списком возможности предлагаемой системы сокрытия объектов не ограничиваются. Скрыть можно абсолютно любую приватную информацию, присутствующую в кадре видео.
Для реализации поставленной задачи графический пользовательский интерфейс системы содержит блок получения запроса, сконфигурированный для получения от пользователей требования скрыть изображение конкретного объекта.
Для примера предположим, что оператор получил запрос от одного пользователя скрыть его изображение (т.е. скрыть человека в полный рост) в видео с камер видеонаблюдения. Для этого пользовательский интерфейс системы содержит блок задания опорной области, сконфигурированный для предоставления оператору системы возможности задавать опорную область, заслоняющую требуемый объект. Оператор выбирает объект (по требованию пользователя) и вручную задает опорную область на первом и на последнем кадре видео из видеоархива, на которых виден выбранный объект. Например, в своей просьбе пользователь может указать конкретный день и конкретное время, в которое он был в охраняемой зоне. Тогда на основании этих сведений оператор быстро найдет первый кадр, в котором появляется выбранный объект, и последний кадр, после которого выбранный объект пропадает из зоны видимости камер видеонаблюдения. Посредством блока задания опорной области оператор может задать форму опорной области (например: прямоугольник, многоугольник, овал, круг и т.д.) и цвет области. Следует отметить, что оператор может задать область любой другой формы, например, посредством полилинии (ломаной линии). Кроме того, оператор может вставить в выбранную область другое нейтральное изображение или текст. Текст может содержать информацию о дате и/или времени, когда выбранный объект был скрыт и/или о порядковом номере запроса, полученного оператором.
На Фиг. 2 показан пример задания оператором опорной области, заслоняющей объект в кадре видео. Поскольку нужно заслонить человека в полный рост, оператор выбрал наиболее подходящую для этого форму области - прямоугольную.
После того, как опорные области заданы, блок интерполяции положений областей автоматически рассчитывает положения заслоняющих областей на промежуточных кадрах между первым и последним кадром видео, на которых виден выбранный объект, путем интерполяции. Суть интерполяции заключается в использовании уже известных данных о опорных областях (например, размер, местоположение в кадре и тд.) для получения аналогичных ожидаемых областей на промежуточных кадрах видео. Рассчитанные путем интерполяции заслоняющие области далее по тексту будут называться вычисленными областями. При этом расчет положений вычисленных областей производится с учетом допущения, что выбранный объект движется прямолинейно и равномерно.
В том случае, если для камер видеонаблюдения имеется информация о траекториях движения объектов, то эта информация может быть использована для ускорения процесса сокрытия объектов. Указанная информация может быть определена при помощи видео аналитики, встроенной в каждую камеру видеонаблюдения. В таком случае местоположение движущихся объектов определяется при помощи сенсоров, фиксирующих различные части спектра (видимые, тепловые) или датчиков. Кроме того, информация о траекториях движения объектов может быть вычислена на сервере для любой камеры системы видеонаблюдения.
В случае наличия такой информации в графическом пользовательском интерфейсе системы предусмотрен блок выбора траектории движения объекта. При помощи данного блока оператор может выбрать траекторию движения конкретного объекта и тогда система путем интерполяции автоматически рассчитывает положения вычисленных областей, заслоняющих объект, на всем интервале его нахождения в видео с минимальным количеством опорных областей.
Следует отметить, что блок задания опорной области дополнительно сконфигурирован для предоставления оператору возможности редактировать вычисленные области. Например, оператор может поправить положение вычисленной области на одном или нескольких промежуточных кадрах. Предположим, что оператор отредактировал одну вычисленную область на промежуточном кадре. В результате отредактированная область также становится опорной областью и заданный первоначальными опорными областями интервал видео, таким образом, разбивается на два интервала: от первого кадра до отредактированного промежуточного кадра, и от указанного промежуточного кадра до последнего кадра. Блок интерполяции в таком случае автоматически выполняет перерасчет положений вычисленных областей на каждом промежуточном кадре внутри полученных двух интервалов исходя из новых условий все по тому же алгоритму, который уже описан выше.
В одном из частных вариантов заявленного решения оператор может добавить одну или более дополнительных опорных областей до или после уже замаскированного интервала видео. В таком случае блок интерполяции также выполнит перерасчет положений вычисленных областей в каждом из полученных интервалов.
Кроме того, если оператор по каким-то причинам решит, что одна (или несколько) из заданных им опорных областей не нужны, то для такого случая блок задания опорной области предоставляет оператору возможность удалить ненужную опорную область, при этом блок интерполяции снова выполнит перерасчет положений вычисленных областей.
После того как оператор завершил редактирование всех требуемых по его мнению заслоняющих областей и блок интерполяции автоматически рассчитал положения вычисленных областей на каждом из полученных интервалов между опорными областями, оператор может сохранить полученное измененное видео в видеоархив вместо первоначального видео посредством использования блока сохранения видео, размещенного в графическом пользовательском интерфейсе. После сохранения измененного видео, заслоняющие области (опорные и вычисленные) становятся неизменными и не удаляемыми какими-либо средствами системы видеонаблюдения и отображаются при просмотре видеоархива и при экспорте его из системы. Видео может быть экспортировано из системы в любом из известных из уровня техники форматов представления видео.
На Фиг. 3 представлен пример кадра измененного видео. В указанном кадре выбранный объект отображен в неузнаваемом виде, а именно: объект заслонен прямоугольной однотонной черной областью.
Далее будет описан пример конкретной реализации способа сокрытия объектов в видеоархиве. Для примера, на Фиг. 4 представлена блок-схема одного из вариантов реализации способа сокрытия объектов в видеоархиве.
Указанный способ содержит этапы, на которых:
(100) получают видеоданные от, по меньшей мере, одной камеры видеонаблюдения;
(200) сохраняют полученные видеоданные в видеоархив;
(300) получают от пользователей требование скрыть изображение конкретного выбранного объекта;
(400) предоставляют оператору системы возможность задавать опорную область, заслоняющую выбранный объект, причем опорная область задается на первом и на последнем кадре видео из видеоархива, на которых виден выбранный объект;
(500) автоматически рассчитывают положения вычисленных областей на промежуточных кадрах между упомянутыми первым и последним кадром видео путем интерполяции положений областей;
(600) сохраняют измененное видео в видеоархив, причем измененное видео включает опорные и вычисленные области, заслоняющие выбранный объект, на каждом его кадре в заданном интервале от первого до последнего кадра.
Следует отметить, что данный способ может быть реализован посредством использования компьютерной системой и, следовательно, может быть расширен и уточнен всеми теми же частными вариантами исполнения, которые уже были описаны выше для реализации компьютерной системы сокрытия объектов в видеоархиве.
Кроме того, варианты осуществления настоящей группы изобретений могут быть реализованы с использованием программного обеспечения, аппаратных средств, программной логики или их комбинации. В данном примере осуществления программная логика, программное обеспечение или набор инструкций хранятся на одном из различных традиционных машиночитаемых носителей, то есть на считываемом компьютером носителе данных.
В контексте данного документа «считываемым компьютером носителем данных» может быть любая среда или средства, которые могут содержать, хранить, передавать, распространять или транспортировать инструкции (команды) для их использования (исполнения) компьютерной системой, такой как компьютер. Машиночитаемый носитель может являться энергонезависимым машиночитаемым носителем данных.
При необходимости, по меньшей мере, часть различных операций, рассмотренных в описании данного решения, может быть выполнена в отличном от представленного порядке и/или одновременно друг с другом.
Хотя данное техническое решение было описано подробно в целях иллюстрации наиболее востребованных в настоящее время и предпочтительных вариантов осуществления, следует понимать, что данное изобретение не ограничивается раскрытыми вариантами осуществления и более того, предназначено для модификации и различных других комбинаций признаков из описанных вариантов осуществления. Например, следует понимать, что настоящее изобретение предполагает, что в возможной степени, один или более признаков любого варианта осуществления могут быть объединены с другим одним или более признаками любого другого варианта осуществления.
Claims (43)
1. Система сокрытия объектов в видеоархиве, содержащая:
по меньшей мере одну камеру видеонаблюдения;
память, выполненную с возможностью хранения видеоданных, поступающих от камер видеонаблюдения;
по меньшей мере один процессор для обработки видеоданных в соответствии с командами, получаемыми от графического пользовательского интерфейса;
графический пользовательский интерфейс, содержащий средства ввода и вывода данных, причем упомянутые средства ввода данных содержат:
блок получения запроса, выполненный с возможностью получать от пользователей требование скрыть изображение конкретного выбранного объекта;
блок задания опорной области, сконфигурированный для предоставления оператору системы возможности задавать опорную область, заслоняющую выбранный объект, причем опорная область задается на первом и на последнем кадре видео из видеоархива, на которых виден выбранный объект;
блок интерполяции положений областей, выполненный с возможностью автоматически рассчитывать положения вычисленных областей на промежуточных кадрах между упомянутыми первым и последним кадрами видео путем интерполяции;
блок сохранения видео, выполненный с возможностью сохранять измененное видео в видеоархив, причем измененное видео включает опорные и вычисленные области, заслоняющие выбранный объект, на каждом его кадре в заданном интервале от первого до последнего кадра.
2. Система по п. 1, в которой объект является подвижным или неподвижным.
3. Система по п. 1, в которой объектом может являться человек, лицо человека или номер транспортного средства.
4. Система по любому из пп. 1-3, в которой блок задания опорной области дополнительно сконфигурирован для предоставления оператору системы возможности задавать по меньшей мере одно из: формы области, цвета области, содержания области, причем указанная область может содержать изображение или текст.
5. Система по п. 4, в которой форма опорной области является одной из: овала, круга, прямоугольника, многоугольника.
6. Система по п. 1, в которой интерполяция выполняется в соответствии с допущением, что выбранный объект, который необходимо скрыть, движется прямолинейно и равномерно.
7. Система по п. 1, в которой для по меньшей мере одной камеры видеонаблюдения имеется информация о траекториях движения объектов.
8. Система по п. 7, в которой графический пользовательский интерфейс дополнительно содержит блок выбора траектории движения объекта, сконфигурированный для выбора траектории движения конкретного выбранного объекта, причем блок интерполяции дополнительно выполнен с возможностью учитывать информацию о выбранной траектории движения объекта при расчете положений вычисленных областей.
9. Система по п. 1 или 8, в которой блок задания опорной области дополнительно сконфигурирован для предоставления оператору возможности редактировать вычисленные области до этапа сохранения измененного видео.
10. Система по п. 9, в которой оператор может отредактировать вычисленную область на по меньшей мере одном из промежуточных кадров, при этом отредактированная область станет опорной областью и видео, таким образом, будет разбито на по меньшей мере два интервала, причем блок интерполяции в таком случае автоматически выполнит перерасчет положений вычисленных областей на каждом промежуточном кадре в составе полученных интервалов.
11. Система по п. 9, в которой блок интерполяции выполнен с возможностью выполнять перерасчет положений вычисленных областей в том случае, если оператор системы посредством использования блока задания опорной области добавит по меньшей мере одну дополнительную опорную область до или после уже замаскированного интервала видео.
12. Система по п. 10 или 11, в которой блок задания опорной области дополнительно сконфигурирован для предоставления оператору возможности удалять по меньшей мере одну опорную область, при этом блок интерполяции выполняет перерасчет положений вычисленных областей.
13. Система по п. 1, в которой блок сохранения видео сохраняет измененное видео вместо первоначального видео, полученного из видеоархива.
14. Система по п. 1 или 13, в которой после сохранения измененного видео, заданные опорные области и вычисленные области остаются неизменными и отображаются при просмотре измененного видео и при экспорте его из системы.
15. Способ сокрытия объектов в видеоархиве, реализуемый вычислительной системой, причем способ содержит этапы, на которых:
получают видеоданные от по меньшей мере одной камеры видеонаблюдения;
сохраняют полученные видеоданные в видеоархив;
получают от пользователей требование скрыть изображение конкретного выбранного объекта;
предоставляют оператору системы возможность задавать опорную область, заслоняющую выбранный объект, причем опорная область задается на первом и на последнем кадре видео из видеоархива, на которых виден выбранный объект;
автоматически рассчитывают положения вычисленных областей на промежуточных кадрах между упомянутыми первым и последним кадром видео путем интерполяции положений областей;
сохраняют измененное видео в видеоархив, причем измененное видео включает опорные и вычисленные области, заслоняющие выбранный объект, на каждом его кадре в заданном интервале от первого до последнего кадра.
16. Способ по п. 15, в котором объект является подвижным или неподвижным.
17. Система по п. 15, в которой объектом может являться человек, лицо человека или номер транспортного средства.
18. Способ по любому из пп. 15-17, в котором оператору системы дополнительно предоставляется возможность задавать по меньшей мере одно из: формы области, цвета области, содержания области, причем указанная область может содержать изображение или текст.
19. Способ по п. 18, в котором форма опорной области является одной из: овала, круга, прямоугольника, многоугольника.
20. Способ по п. 15, в котором интерполяция выполняется в соответствии с допущением, что выбранный объект, который необходимо скрыть, движется прямолинейно и равномерно.
21. Способ по п. 15, в котором для по меньшей мере одной камеры видеонаблюдения имеется информация о траекториях движения объектов.
22. Способ по п. 21, в котором на этапе задания опорной области можно дополнительно выбрать траекторию движения конкретного выбранного объекта, при этом на этапе интерполяции положений областей дополнительно учитывается информация о выбранной траектории движения объекта.
23. Способ по п. 15 или 22, в котором оператору системы дополнительно предоставляется возможность редактировать вычисленные области до этапа сохранения измененного видео.
24. Способ по п. 23, в котором оператор может отредактировать вычисленную область на по меньшей мере одном из промежуточных кадров, при этом отредактированная область станет опорной областью и видео, таким образом, будет разбито на по меньшей мере два интервала, причем в таком случае автоматически выполнится перерасчет положений вычисленных областей на каждом промежуточном кадре в составе полученных интервалов.
25. Способ по п. 23, в котором дополнительно выполняется перерасчет положений вычисленных областей путем интерполяции в том случае, если оператор системы добавит по меньшей мере одну дополнительную опорную область до или после уже замаскированного интервала видео.
26. Способ по п. 24 или 25, в котором на этапе задания опорной области оператору дополнительно предоставляется возможность удалять по меньшей мере одну опорную область, при этом после удаления выполняется перерасчет положений вычисленных областей путем интерполяции.
27. Способ по п. 15, в котором на этапе сохранения видео сохраняется измененное видео вместо первоначального видео, полученного из видеоархива.
28. Способ по п. 15 или 27, в котором после сохранения измененного видео, заданные опорные области и вычисленные области остаются неизменными и отображаются при просмотре измененного видео и при экспорте его из системы.
29. Считываемый компьютером носитель данных, содержащий исполняемые процессором компьютера инструкции для осуществления способов по любому из пп. 15-28.
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| RU2018105895A RU2681364C1 (ru) | 2018-02-16 | 2018-02-16 | Система и способ сокрытия объектов в видеоархиве по требованию пользователей |
| DE102018124149.6A DE102018124149A1 (de) | 2018-02-16 | 2018-09-29 | System und verfahren zur maskierung von objekten im videoarchiv auf anfrage des nutzers |
| US16/162,366 US10841642B2 (en) | 2018-02-16 | 2018-10-16 | System and method for masking objects in a video archive upon the demand of users |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| RU2018105895A RU2681364C1 (ru) | 2018-02-16 | 2018-02-16 | Система и способ сокрытия объектов в видеоархиве по требованию пользователей |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| RU2681364C1 true RU2681364C1 (ru) | 2019-03-06 |
Family
ID=65632933
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| RU2018105895A RU2681364C1 (ru) | 2018-02-16 | 2018-02-16 | Система и способ сокрытия объектов в видеоархиве по требованию пользователей |
Country Status (3)
| Country | Link |
|---|---|
| US (1) | US10841642B2 (ru) |
| DE (1) | DE102018124149A1 (ru) |
| RU (1) | RU2681364C1 (ru) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP3751851A1 (en) * | 2019-06-14 | 2020-12-16 | Axis AB | Method of highlighting an object of interest in an image or video |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR102722392B1 (ko) * | 2019-03-28 | 2024-10-25 | 삼성전자 주식회사 | 전자 장치 및 이미지에 포함된 개인 정보의 보안 방법 |
| CN111432286B (zh) * | 2019-12-31 | 2022-05-20 | 杭州海康威视数字技术股份有限公司 | 视频处理的方法、装置和系统 |
| US12041378B2 (en) * | 2021-09-17 | 2024-07-16 | BCD International, Inc. | Combined security and video camera control system |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20100328460A1 (en) * | 2008-02-01 | 2010-12-30 | Marcel Merkel | Masking module for a video surveillance system, method for masking selected objects, and computer program |
| US20130108105A1 (en) * | 2011-10-31 | 2013-05-02 | Electronics And Telecommunications Research Institute | Apparatus and method for masking privacy region based on monitored video image |
| US20140185920A1 (en) * | 2013-01-02 | 2014-07-03 | International Business Machines Corporation | Image selection and masking using imported depth information |
| US20160155465A1 (en) * | 2014-11-28 | 2016-06-02 | Korea Electronics Technology Institute | Video masking processing method and apparatus |
| RU2634225C1 (ru) * | 2016-06-20 | 2017-10-24 | Общество с ограниченной ответственностью "САТЕЛЛИТ ИННОВАЦИЯ" (ООО "САТЕЛЛИТ") | Способы и системы поиска объекта в видеопотоке |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101936802B1 (ko) | 2012-07-20 | 2019-01-09 | 한국전자통신연구원 | 얼굴인식 기반의 개인정보보호 장치 및 방법 |
-
2018
- 2018-02-16 RU RU2018105895A patent/RU2681364C1/ru active
- 2018-09-29 DE DE102018124149.6A patent/DE102018124149A1/de not_active Withdrawn
- 2018-10-16 US US16/162,366 patent/US10841642B2/en active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20100328460A1 (en) * | 2008-02-01 | 2010-12-30 | Marcel Merkel | Masking module for a video surveillance system, method for masking selected objects, and computer program |
| US20130108105A1 (en) * | 2011-10-31 | 2013-05-02 | Electronics And Telecommunications Research Institute | Apparatus and method for masking privacy region based on monitored video image |
| US20140185920A1 (en) * | 2013-01-02 | 2014-07-03 | International Business Machines Corporation | Image selection and masking using imported depth information |
| US20160155465A1 (en) * | 2014-11-28 | 2016-06-02 | Korea Electronics Technology Institute | Video masking processing method and apparatus |
| RU2634225C1 (ru) * | 2016-06-20 | 2017-10-24 | Общество с ограниченной ответственностью "САТЕЛЛИТ ИННОВАЦИЯ" (ООО "САТЕЛЛИТ") | Способы и системы поиска объекта в видеопотоке |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP3751851A1 (en) * | 2019-06-14 | 2020-12-16 | Axis AB | Method of highlighting an object of interest in an image or video |
| KR20200143232A (ko) * | 2019-06-14 | 2020-12-23 | 엑시스 에이비 | 이미지 또는 비디오에서 관심 물체를 강조하는 방법 |
| US11244168B2 (en) | 2019-06-14 | 2022-02-08 | Axis Ab | Method of highlighting an object of interest in an image or video |
| KR102601432B1 (ko) * | 2019-06-14 | 2023-11-10 | 엑시스 에이비 | 이미지 또는 비디오에서 관심 물체를 강조하는 방법 |
Also Published As
| Publication number | Publication date |
|---|---|
| DE102018124149A1 (de) | 2019-08-22 |
| US10841642B2 (en) | 2020-11-17 |
| US20190261045A1 (en) | 2019-08-22 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| RU2681364C1 (ru) | Система и способ сокрытия объектов в видеоархиве по требованию пользователей | |
| US11756587B2 (en) | Masking in video stream | |
| EP3457683B1 (en) | Dynamic generation of image of a scene based on removal of undesired object present in the scene | |
| US9372874B2 (en) | Content processing apparatus, content processing method, and program | |
| CN107750369B (zh) | 用于显示多个图像的电子设备和用于处理图像的方法 | |
| JP2022118201A (ja) | 画像処理システム、画像処理方法及びプログラム | |
| CN106687902B (zh) | 基于内容分析的图像显示、可视化和管理 | |
| JP2017535839A (ja) | 画像処理、アクセス方法及び装置 | |
| US9424653B2 (en) | Method and apparatus for identifying a representative area of an image | |
| KR20180018561A (ko) | 이미지 영역을 선택 및 추적함으로써 비디오를 확대축소하기 위한 장치 및 방법 | |
| US10210598B2 (en) | Electronic device for displaying a plurality of images and method for processing an image | |
| CN112714253A (zh) | 视频录制方法、装置、电子设备和可读存储介质 | |
| JP2015170343A (ja) | 画像表示装置および画像表示方法 | |
| WO2023202570A1 (zh) | 图像处理方法和处理装置、电子设备和可读存储介质 | |
| CN111669495B (zh) | 拍照方法、拍照装置和电子设备 | |
| US20110304644A1 (en) | Electronic apparatus and image display method | |
| CN113225451B (zh) | 图像处理方法、装置和电子设备 | |
| US20180225476A1 (en) | Automated image editing system | |
| CN114143455A (zh) | 拍摄方法、装置及电子设备 | |
| CN112765620A (zh) | 显示控制方法、装置、电子设备及介质 | |
| RU2706576C1 (ru) | Система и способ объединения нескольких видеоизображений в одно панорамное видеоизображение | |
| CN111756998B (zh) | 构图方法、装置及电子设备 | |
| CN114500855A (zh) | 显示方法、显示装置、电子设备和可读存储介质 | |
| KR100361699B1 (ko) | 방송 화면에서의 초상권 보호 시스템 및 그 제어방법 | |
| CN114554098A (zh) | 显示方法、显示装置、电子设备和可读存储介质 |