СПОСОБ ИНДЕКСИРОВАНИЯ ВИДЕОДАННЫХ ПРИ ПОМОЩИ КАРТЫ Российский патент 2014 года по МПК G06T7/20 G06K9/46 

Описание патента на изобретение RU2531876C2

Изобретение относится к обработке данных, а именно к области охранного телевидения, видеонаблюдения, видеоаналитики, хранения и поиска видеоданных. Изобретение позволяет реализовать эффективный поиск и анализ данных в территориально-распределенных системах видеонаблюдения о перемещениях объектов, таких как людей и транспортных средств, для различных отраслей, включая охрану и безопасность, транспорт и сети розничных продаж, спорт и развлечения, жилищно-коммунальное хозяйство и социальную инфраструктуру. Изобретение может быть использовано в локальных и глобальных сетях, на выделенных или облачных серверах.

Актуальной проблемой развития территориально-распределенных систем видеонаблюдения является значительный объем информации, поступающий с видеокамер. С одной стороны, современные алгоритмы видеоаналитики позволяют вести автоматическое обнаружение (detection), сопровождение (слежение, tracking), классификацию и идентификацию объектов (людей, транспортных средств). С другой стороны, объем данных, формируемый видеоаналитикой о перемещениях объектов (метаданные с местоположением и/или траекториями движения объектов) в поле зрения камеры, является весьма существенным. Поиск и анализ объектов в больших массивах видеоданных является высокозатратным с точки зрения аппаратно-программного обеспечения и времени, расходуемыми пользователями системы видеонаблюдения.

Некоторые существующие системы видеонаблюдения записывают информацию о движении объекта, рассчитанную видеоаналитикой, в базу данных в виде траекторий (последовательности местоположений) в системе координат кадра. Пользователь имеет возможность сделать поиск в базе данных траекторий и найти траекторию, которая удовлетворяет критериям, заданным в пространстве кадра и времени. Данный подход к анализу траекторий движения объектов в рамках одного кадра имеет следующие недостатки.

Во-первых, использование координат кадра для хранения траектории предполагает, что пользователь должен знать камеру, которая зафиксировала искомый объект. В территориально-распределенных сетях видеонаблюдения с большим числом камер данное требование практически невыполнимо. Пользователю сложно ориентироваться в большом количестве камер и учитывать геометрию зон действия камер для задания критериев поиска.

Во-вторых, траектория движения объекта в системе координат кадра неоднородна по своей точности. Объекты на переднем плане камеры сопровождаются с высокой точностью, и возникает избыточная детализация траектории. Объекты на заднем плане камеры сопровождаются с низкой точностью, и возникает недостаточная детализация траектории. Прямой поиск по неоднородным данным с различной детализацией не является эффективным. Необходимо преобразование и/или индексирование координат объектов для получения однородных траекторий.

В третьих, в случае, если две или более видеокамер обнаруживают один объект, то в области перекрытия зон действия этих камер возникает избыточность данных. В результате, расходуется лишняя память базы данных, увеличивается время поиска и анализа данных, так как пользователь получает дублирующие записи.

Из-за описанных недостатков архивы траекторий в системах видеонаблюдений занимают существенный объем дискового пространства, а на поиск в архиве с сотнями тысяч траекторий объекта пользователь может потратить несколько часов или даже дней.

Настоящее изобретение направлено на решение описанных проблем и повышение эффективности поиска данных о перемещениях объектов на территории, контролируемой множеством камер.

Техническим результатом настоящего изобретения является улучшение процедуры доступа к нужной части видеоматериала поскольку увязывает видеоматериал с факторами и ориентирами, которыми человек обычно пользуется как опорными точками, при установлении ассоциативных связей, снижение объема хранимой информации вследствие исключения дублированных записей.

Способ индексирования видеоданных при помощи карты реализуется согласно изобретению следующим образом: вначале получают видеоданные с, по крайней мере, одной видеокамеры, затем по полученным видеоданным находят, по крайней мере, один подвижный объект и определяют его местоположение и/или параметры движения в двумерной системе координат кадра - местоположение на кадре, далее полученное местоположение и/или параметры движения найденного объекта преобразуют из двумерной системы координат кадра в двумерную систему координаты карты - местоположение на карте, затем создают по меньшей мере, одну индексирующую запись, устанавливающую взаимосвязь между видеоданными, содержащими найденный объект, и местоположением и/или параметрами движения найденного объекта на карте, далее индексирующую запись записывают в базу данных и/или хранилище.

Местоположение и/или параметры движения могут быть определены при помощи детектора движения.

Местоположение и/или параметры движения могут быть определены при помощи детектора объектов, в том числе при помощи детектора людей, детектора лица человека или детектора номерного знака автомобиля.

Местоположение и/или параметры движения могут быть определены при помощи видеоаналитики, встроенной в сетевую камеру или в видеосервер.

Местоположение и/или параметры движения могут быть определены при помощи серверной видеоаналитики.

Местоположение и/или параметры движения могут быть уточнены при помощи камеры, фиксирующей различные части спектра, такие как видимые, тепловые, и/или датчиков, отличных по принципу действия от видеокамеры, таких как радары.

Местоположение на кадре или карте может быть визуализировано для пользователя путем отображения условных обозначений объекта поверх карты на экране монитора.

Видеоданные могут быть визуализированы для пользователя путем отображения видеоданных поверх карты на экране монитора.

Найденный объект может быть идентифицирован, причем людей идентифицируют по лицам, а транспортные средства идентифицируют по номерным знакам.

Вместе с индексирующей записью может быть записана в базу данных и/или хранилище временная последовательность местоположений объекта на карте - траектория движения объекта.

Последовательность местоположений на карте может быть сжата перед записью методом сглаживания траектории, или методом кусочно-линейной аппроксимации, или методом построения сплайн-аппроксимации.

Местоположение объекта и/или параметры его движения может быть непрерывно определено по мере движения объекта в реальном масштабе времени.

Индексирование видеоданных может осуществляться, по крайней мере, в двух, измерениях.

Может быть использовано аффинное преобразование для преобразования местоположения из системы координат кадра в систему координат карты.

Преобразование систем координат может быть рассчитано на основании взаимно однозначного отображения между множеством узловых точек на кадре и множеством узловых точек на карте.

Местоположение объекта на карте, определенное по данным одной видеокамеры, может быть уточнено путем сопоставления с данными другой видеокамеры, зафиксировавшей этот же самый объекта, с использованием методов многокамерного слежения.

Сопоставление и/или объединение местоположений могут осуществлять методом корреляции местоположений или методом вычисления квадратов расстояний между местоположениями.

Видеокамера может быть выполнена с возможностью поворота и/или изменения увеличения при помощи моторизированного привода, при этом привязку зоны действия видеокамеры к карте изменяют в зависимости от текущего положения видеокамеры.

Индексирующую запись могут связывать с областью карты, которую вручную задает пользователь системы видеонаблюдения.

Индексирующая запись может быть связана с областью карты, определяемой алгоритмом автоматически, причем алгоритм может разделять карту на области либо равномерно, либо неравномерно с учетом плотности обнаружения объектов в каждой области, при этом области могут перекрываться.

Индексирующую запись может быть связана с направлением движения объекта.

Индексирующая запись может быть связана со скоростью движения объекта.

Индексирующая запись может быть связана с сигнальной линией, которую пересекает объект.

Индексирующие записи могут быть объединены в иерархическую структуру.

Индексирующая запись может быть связана с интервалом времени движения объекта.

Индексирующая запись может быть связана с числом объектов, находящихся в заданной области.

Индексирующая запись может содержать минимальное и/или максимальное расстояние от заданной точки до точек траектории объекта.

Индексирующая запись может содержать минимальный ограничивающий прямоугольник траектории движения объекта.

Индексирующая запись может содержать уникальный идентификатор объекта.

Индексирующая запись может быть связана с типом - классом объекта.

Индексирующая запись может быть связана с типом движения объекта, определенным по траектории движения объекта на карте.

Индексирующая запись может быть связана с текстовыми тегами. Индексирующие записи могут сохранять в реляционной базе данных.

Настоящее изобретение поясняется рис.1-7.

На рис.1 представлена одна из возможных схем индексирования видеоданных согласно настоящему изобретению. На рис.2 представлена схема поиска индексирования видеоданных. На рис.3 изображены примеры кадров, полученных с видеокамер, и рассчитанных траекторий объектов на кадрах. На рис.4 приведен пример карты и проекций траекторий движения объектов, зарегистрированных различными видеокамерами. На рис.5 изображена обобщенная траектория движения объектов, полученная путем объединения траекторий, зарегистрированных различными видеокамерами. На рис.6 приведен пример структуры индекса с записями, устанавливающими взаимосвязь между местоположением и/или параметрами движения найденного объекта на карте и видеоданными. На рис.7 представлен эскиз пользовательского интерфейса для задания областей индексирования и/или формирования запроса поиска видеоданных на карте.

Способ индексирования видеоданных включает следующие шаги, отображенные на рис.1:

Шаг 1. Получение видеоданных с видеокамеры

На шаге 1 получают видеоданные, то есть один или несколько кадров с видеокамеры с сенсором CCD, CMOS или иным типом сенсора, например тепловизионным сенсором. Изображение может быть цветным или черно-белым. Пример кадров, полученных с видеокамеры, представлен на рис.3.

Шаг 2. Обнаружение местоположения объекта на кадре

На шаге 2 по полученным видеоданным находят, по крайней мере, один подвижный объект и определяют местоположение и/или параметры движения найденного объекта в двумерной системе координат кадра (далее - местоположение на кадре). Для обнаружения подвижного объекта может быть использован детектор движения или более сложная видеоаналитика. Например, на рис.3 обнаруженные объекты выделены черными прямоугольными рамками, а последовательность их местоположений (траектория движения) показана белым цветом. В результате анализа временной последовательности местоположений (траекторий) могут быть определены параметры движения, такие как как скорость (включая абсолютное значение скорости и направление) и ускорение.

Шаг 3. Отображение местоположения объекта на карту

На шаге 3 полученное местоположение и/или параметры движения найденного объекта преобразуют из двумерной системы координат кадра в двумерную систему координаты карты (далее - местоположение на карте).

Привязка расположения видеокамер к карте может быть реализована в процессе первоначальной калибровки системы видеонаблюдения. Наиболее оптимально это осуществлять при помощи точечной калибровки (на кадре, отображаемом видеокамерой, выбирается набор точек с известными местоположениями на карте). В процессе этой калибровки для каждой видеокамеры определяется матрицей преобразования А, которая позволяет однозначно осуществлять преобразование местоположение объекта из локального местоположения r на кадре в глобальное местоположение R на карте:

R=A·r или [ X Y 1 ] = [ p 00 p 01 p 02 p 10 p 11 p 12 p 20 p 21 p 22 ] [ x y 1 ]

Например, на рис.4 представлены отдельные траектории движения объектов на карте, зарегистрированных различными видеокамерами, и преобразованные в систему координат карты.

На шаге 3 отдельные движения объектов на карте, зарегистрированных различными видеокамерами, могут быть сопоставлены и/или объединены в обобщенную траекторию (например, см. рис.5).

Объединение траекторий на карте позволяет: а) устранить избыточность метаданных с траекториями объектов в области перекрытия зон действия камер, что сократит объем данных и время поиска; б) реализовать многокамерный анализ перемещений объектов, то есть анализировать перемещения объектов от одной видеокамеры к другой; в) вычислить более точное местоположение объекта на карте, например, геодезическими методами с использование известных координат и ориентации камер.

Сопоставление и/или объединение местоположений может производиться, например, методом корреляции местоположений или методом вычисления квадратов расстояний между местоположениями. В случае, если значения корреляционной функции в окрестности близости траекторий больше порогового значения, либо если сумма квадратов между точками различных траектории меньше порогового значения, то считаются, что траектории соответствуют одному объекту и объединяются. В области объединения, обобщенная траектория может содержать координаты местоположения, усредненные по траекториям, зафиксированным отдельными камерами.

Шаг 4. Добавление индексирующей записи в хранилище

На шаге 4 в базу данных или иное хранилище добавляют, по крайней мере, одну индексирующую запись, устанавливающую взаимосвязь между видеоданными, содержащими найденный объект с одной стороны, и местоположением и/или параметрами движения найденного объекта на карте с другой стороны. Таким образом устанавливается взаимосвязь между видеоданными и местоположением (параметрами движения)

На рис.6 приведен пример структуры индекса с записями. Карта (3) разделена на области A1, A2, B1, B2, C1, C2 и связана с видеоданными (1) через индексирующие записи (2). Таким же образом установлена взаимосвязь между параметрами движения (5), включая направления движения (6) и скорости движения (7) с одной стороны и видеоданными (1) с другой стороны. Связь между индексирующей записью и видеоданными может быть реализована путем хранения в индексирующей записи идентификатора кадра, временной метки и/или имени файла с видеоданными. Связь между индексирующей записью и местоположением может быть реализована путем хранения в индексирующей записи либо координатами на карте, либо ссылки на область или другой объект на карте (например, точку или сигнальную линию), относительно которого происходит индексирование. Аналогичным образом может быть реализовать связь между индексирующей записью и параметрами движения.

Множество индексирующих записей будем называть индексом. Индекс может иметь древовидную (иерархическую) структуру, например в R-дерево, KD-дерево и другие В-деревья, для повышения эффективности поиска в пространстве карты.

R-дерево разбивает пространство двумерной карты на множество иерархически вложенных и, возможно, пересекающихся прямоугольников. В случае трехмерной карты это будут прямоугольные параллелепипеды.

Алгоритмы вставки и удаления индексирующей записей в R-дерево используют эти ограничивающие прямоугольники для обеспечения того, чтобы видеоданные, близкорасположенные на карте, были помещены в одну листовую вершину. В частности, ссылка на новые видеоданные попадет в ту листовую вершину, для которой потребуется наименьшее расширение ее ограничивающего прямоугольника. Каждый элемент листовой вершины может хранить два поля данных: ссылку на видеоданные и ограничивающий прямоугольник этого объекта.

Аналогично, алгоритмы поиска (например, пересечение, включение, окрестности) используют ограничивающие прямоугольники для принятия решения о необходимости поиска в дочерней вершине. Таким образом, большинство вершин никогда не затрагиваются в ходе поиска. Это свойство R-деревьев обусловливает их применимость для баз данных, где вершины могут выгружаться на диск по мере необходимости.

Для расщепления переполненных вершин могут применяться различные алгоритмы, что порождает деление R-деревьев на подтипы: квадратичные и линейные.

Могут быть использованы приоритетные R-деревья, которые оптимальны для наихудшего случая распределения видеоданных на карте.

Могут быть использованы другие способы разбиения пространства карты на области для связывания с индексирующими записями с видеоданными, например диаграмма Вороного.

В индексирующую запись могут записываться хеши для быстрого сравнения траектории (последовательности местоположений) объекта и параметров движения (скорости и направления) с запросами пользователя.

Могут быть использованы индексы современных баз данных, в том числе реляционных баз данных.

Шаги 1-4 повторяют по мере поступления новых видеоданных с видеокамер и по мере движения объектов в поле зрения видеокамер.

Поиск индексированных видеоданных может включать следующие шаги (рис.2):

Шаг 1 Формирование запроса пользователя на карте

Пользователь выделяет область поиска объекта на карте. На рис.7 приведен такой пользовательский интерфейс. Например, могут быть использоваться инструменты выделения области: 1) прямоугольная область; 2) сигнальная линия; 3) эллиптическая (круглая) область; 4) область произвольной формы.

Запрос может быть сложным, только содержать несколько критериев для поиска. Например, вместе с областью на карте может быть указано направление и интервал времени движение объекта.

Шаг 2 Поиск видеоданных по индексу

Находят видеоданные, соответствующие запросу пользователя, при помощи индекса, построенного на шаге 4. Индекс позволяет многократно сократить объем данных, которые необходимо сравнить с запросом пользователя, что существенно сокращает временные затраты на поиск и/или требования к аппаратным ресурсам.

Шаг 3 Представление найденных видеоданных пользователю

Найденные видеоданные могут быть отображены пользователю в виде отдельного отчета или непосредственно на карте. Видеоданные могут отображаться либо в виде статических кадров, либо в виде фрагментов видео. Видеоданные могут дополняться текстовой информацией, например о месте и времени обнаружения объектов (событий).

Способ индексирования видеоданных может быть использован не только на живом (поточном) видео, поступающем с камер в реальном масштабе времени, но на архивном видео, записанном в хранилище (постобработка).

Способ индексирования видеоданных может быть использован в системах видеонаблюдения, построен с применением стандартов и/или рекомендаций «Форума по интерфейсу открытого сетевого видео» («Open Network Video Interface Forum», ONVIF, www.onvif.org) или «Общества по физической безопасности совместимости» («Physical Security Interoperability Alliance», PSIA, psiaalliance.org). В частности, координаты объекта и/или его траектория может передаваться в метаданных, сообщениях и/или событиях в соответствии с рекомендациями ONVIF и/или PSIA.

Похожие патенты RU2531876C2

название год авторы номер документа
СПОСОБ ИНДЕКСИРОВАНИЯ ВИДЕОДАННЫХ ДЛЯ ФАСЕТНОЙ КЛАССИФИКАЦИИ 2017
  • Грабко Антон Николаевич
  • Сапежко Павел Александрович
  • Птицын Николай Вадимович
RU2660599C1
СИСТЕМА И СПОСОБ ОТОБРАЖЕНИЯ ДВИЖУЩИХСЯ ОБЪЕКТОВ НА КАРТЕ МЕСТНОСТИ 2020
  • Алтуев Мурат Казиевич
  • Калугин Иван Юрьевич
RU2742582C1
СПОСОБ И СИСТЕМА ОТОБРАЖЕНИЯ ДАННЫХ С ВИДЕОКАМЕРЫ 2018
  • Алтуев Мурат Казиевич
RU2679200C1
СПОСОБ ПЕРЕДАЧИ ДВИЖЕНИЯ СУБЪЕКТА ИЗ ВИДЕО НА АНИМИРОВАННОГО ПЕРСОНАЖА 2019
  • Ашманов Станислав Игоревич
  • Сухачев Павел Сергеевич
RU2708027C1
СПОСОБЫ И СИСТЕМЫ ПОИСКА ОБЪЕКТА В ВИДЕОПОТОКЕ 2016
  • Разумков Артем Владимирович
  • Коробков Александр Владимирович
  • Харебов Петр Владимирович
  • Ястребов Алексей Георгиевич
  • Невельский Александр Анатольевич
  • Гаврилов Константин Алексеевич
  • Дураков Андрей Викторович
  • Городилов Алексей Юрьевич
  • Краев Алексей Георгиевич
  • Заякин Андрей Валерьевич
RU2634225C1
СИСТЕМА И СПОСОБ ОТСЛЕЖИВАНИЯ ДВИЖУЩИХСЯ ОБЪЕКТОВ ПО ВИДЕОДАННЫМ 2021
  • Маргарян Вардан Таронович
  • Алексеенко Григорий Олегович
  • Цей Нур Адибович
  • Сучков Егор Петрович
  • Ворончев Никита Викторович
RU2775162C1
Способ автоматического контроля технологического процесса и безопасности и интеллектуальная видеосистема для его реализации 2022
  • Потапов Александр Сергеевич
RU2788432C1
СПОСОБ СОЗДАНИЯ И ИСПОЛЬЗОВАНИЯ РЕКУРСИВНОГО ИНДЕКСА ПОИСКОВЫХ МАШИН 2011
  • Серебренников Олег Александрович
RU2459242C1
СПОСОБ (ВАРИАНТЫ) СИСТЕМАТИЗАЦИИ ВИДЕОДАННЫХ ПРОИЗВОДСТВЕННОГО ПРОЦЕССА И СИСТЕМА (ВАРИАНТЫ) 2013
  • Птицын Николай Вадимович
RU2672307C2
СПОСОБ РАНЖИРОВАНИЯ ВИДЕОДАННЫХ 2012
  • Птицын Николай Вадимович
RU2484529C1

Иллюстрации к изобретению RU 2 531 876 C2

Реферат патента 2014 года СПОСОБ ИНДЕКСИРОВАНИЯ ВИДЕОДАННЫХ ПРИ ПОМОЩИ КАРТЫ

Изобретение относится к средствам видеонаблюдения. Техническим результатом является исключение дублирующих записей в хранилище данных за счет создания индексирующей записи, устанавливающей взаимосвязь содержащих найденный объект наблюдения видеоданных и его местоположение на карте. В способе получают видеоданные с двух видеокамер, определяют подвижный объект и его местоположение и/или параметры движения в двумерной системе координат кадра, преобразуют полученное местоположение и/или параметры движения найденного объекта из двумерной системы координат кадра в двумерную систему координаты карты, где при обнаружении указанного объекта в зоне видимости, по крайней мере, двух камер объединяют координаты объекта в обобщенную траекторию, создают индексирующую запись, устанавливающую взаимосвязь между видеоданными, содержащими найденный объект, и местоположением и/или параметрами движения найденного объекта на карте, индексирующую запись записывают в базу данных и/или хранилище. 2 н. и 68 з.п. ф-лы, 7 ил.

Формула изобретения RU 2 531 876 C2

1. Способ индексирования видеоданных при помощи карты, включающий следующие шаги:
- получают видеоданные с, по крайней мере, двух видеокамер;
- определяют, по крайней мере, один подвижный объект и его местоположение и/или параметры движения в двумерной системе координат кадра - местоположение на кадре;
- преобразуют полученное местоположение и/или параметры движения найденного объекта из двумерной системы координат кадра в двумерную систему координаты карты - местоположение на карте, при этом при обнаружении указанного объекта в зоне видимости, по крайней мере, двух камер объединяют координаты объекта в обобщенную траекторию;
- создают, по меньшей мере, одну индексирующую запись, устанавливающую взаимосвязь между видеоданными, содержащими найденный объект, и местоположением и/или параметрами движения найденного объекта на карте;
- индексирующую запись записывают в базу данных и/или хранилище.

2. Способ по п.1, характеризующийся тем, что местоположение и/или параметры движения определяют при помощи детектора движения.

3. Способ по п.1, характеризующийся тем, что местоположение и/или параметры движения определяют при помощи детектора объектов, в том числе при помощи детектора людей, детектора лица человека или детектора номерного знака автомобиля.

4. Способ по п.1, характеризующийся тем, что местоположение и/или параметры движения определяют при помощи видеоаналитики, встроенной в сетевую камеру или в видеосервер.

5. Способ по п.1, характеризующийся тем, что местоположение и/или параметры движения определяют при помощи серверной видеоаналитики.

6. Способ по п.1, характеризующийся тем, что местоположение и/или параметры движения уточняют при помощи камеры, фиксирующей различные части спектра, такие как видимые, тепловые, и/или датчиков, отличных по принципу действия от видеокамеры, таких как радара.

7. Способ по п.1, характеризующийся тем, что местоположение на кадре или карте визуализируют для пользователя путем отображения условных обозначений объекта поверх карты на экране монитора.

8. Способ по п.1, характеризующийся тем, что видеоданные визуализируют для пользователя путем отображения видеоданных поверх карты на экране монитора.

9. Способ по п.1, характеризующийся тем, что найденный объект идентифицируют, причем людей идентифицируют по лицам, а транспортные средства идентифицируют по номерным знакам.

10. Способ по п.1, характеризующийся тем, что вместе с индексирующей записью записывают в базу данных и/или хранилище временную последовательность местоположений объекта на карте - траекторию движения объекта.

11. Способ по п.10, характеризующийся тем, что последовательность местоположений на карте сжимают перед записью методом сглаживания траектории, или методом кусочно-линейной аппроксимации, или методом построения сплайн-аппроксимации.

12. Способ по п.1, характеризующийся тем, что местоположение объекта и/или параметры его движения непрерывно определяют по мере движения объекта в реальном масштабе времени.

13. Способ по п.1, характеризующийся тем, что индексирование видеоданных осуществляют, по крайней мере, в двух, измерениях.

14. Способ по п.1, характеризующийся тем, что используют аффинное преобразование для преобразования местоположения из системы координат кадра в систему координат карты.

15. Способ по п.1, характеризующийся тем, что преобразование систем координат рассчитывают на основании взаимно однозначного отображения между множеством узловых точек на кадре и множеством узловых точек на карте.

16. Способ по п.1, характеризующийся тем, что местоположение объекта на карте, определенное по данным одной видеокамеры, уточняют путем сопоставления с данными другой видеокамеры, зафиксировавшей этот же самый объекта, с использованием методов многокамерного слежения.

17. Способ по п.16, характеризующийся тем, что сопоставление и/или объединение местоположений осуществляют методом корреляции местоположений или методом вычисления квадратов расстояний между местоположениями.

18. Способ по п.1, характеризующийся тем, что видеокамера выполнена с возможностью поворота и/или изменения увеличения при помощи моторизированного привода, при этом привязку зоны действия видеокамеры к карте изменяют в зависимости от текущего положения видеокамеры.

19. Способ по п.1, характеризующийся тем, что индексирующую запись связывают с областью карты, которую вручную задает пользователь системы видеонаблюдения.

20. Способ по п.1, характеризующийся тем, что индексирующую запись связывают с областью карты, определяемой алгоритмом автоматически, причем алгоритм может разделять карту на области либо равномерно, либо неравномерно с учетом плотности обнаружения объектов в каждой области, при этом области могут перекрываться.

21. Способ по п.1, характеризующийся тем, что индексирующую запись связывают с направлением движения объекта.

22. Способ по п.1, характеризующийся тем, что индексирующую запись связывают со скоростью движения объекта.

23. Способ по п.1, характеризующийся тем, что индексирующую запись связывают с сигнальной линией, которую пересекает объект.

24. Способ по п.1, характеризующийся тем, что индексирующие записи объединяют в иерархическую структуру.

25. Способ по п.1, характеризующийся тем, что индексирующую запись связывают с интервалом времени движения объекта.

26. Способ по п.1, характеризующийся тем, что индексирующую запись связывают с числом объектов, находящихся в заданной области.

27. Способ по п.1, характеризующийся тем, что индексирующая запись содержит минимальное и/или максимальное расстояние от заданной точки до точек траектории объекта.

28. Способ по п.1, характеризующийся тем, что индексирующая запись содержит минимальный ограничивающий прямоугольник траектории движения объекта.

29. Способ по п.1, характеризующийся тем, что индексирующая запись содержит уникальный идентификатор объекта.

30. Способ по п.1, характеризующийся тем, что индексирующую запись связывают с типом - классом объекта.

31. Способ по п.1, характеризующийся тем, что индексирующую запись связывают с типом движения объекта, определенным по траектории движения объекта на карте.

32. Способ по п.1, характеризующийся тем, что индексирующую запись связывают с текстовыми тегами.

33. Способ по п.1, характеризующийся тем, что индексирующие записи сохраняют в реляционной базе данных.

34. Способ поиска индексированных при помощи карты видеоданных, включающий следующие шаги:
- получают видеоданные с, по крайней мере, одной видеокамеры;
- определяют, по крайней мере, один подвижный объект и его местоположение и/или параметры движения в двумерной системе координат кадра - местоположение на кадре;
- преобразуют полученное местоположение и/или параметры движения найденного объекта из двумерной системы координат кадра в двумерную систему координаты карты - местоположение на карте;
- создают, по меньшей мере, одну индексирующую запись, устанавливающую взаимосвязь между видеоданными, содержащими найденный объект, и местоположением и/или параметрами движения найденного объекта на карте;
- индексирующую запись записывают в базу данных и/или хранилище;
- формируют запрос пользователя на карте;
- производят поиск видеоданных по созданным индексирующим записям и отображение видеоданных, соответствующих запросу пользователя.

35. Способ по п.34, характеризующийся тем, что местоположение и/или параметры движения определяют при помощи детектора движения.

36. Способ по п.34, характеризующийся тем, что местоположение и/или параметры движения определяют при помощи детектора объектов, в том числе при помощи детектора людей, детектора лица человека или детектора номерного знака автомобиля.

37. Способ по п.34, характеризующийся тем, что местоположение и/или параметры движения определяют при помощи видеоаналитики, встроенной в сетевую камеру или в видеосервер.

38. Способ по п.34, характеризующийся тем, что местоположение и/или параметры движения определяют при помощи серверной видеоаналитики.

39. Способ по п.34, характеризующийся тем, что местоположение и/или параметры движения уточняют при помощи камеры фиксирующей различные части спектра, такие как видимые, тепловые и/или датчиков отличных по принципу действия от видеокамеры, таких как радара.

40. Способ по п.34, характеризующийся тем, что местоположение на кадре или карте визуализируют для пользователя путем отображения условных обозначений объекта поверх карты на экране монитора.

41. Способ по п.34, характеризующийся тем, что видеоданные визуализируют для пользователя путем отображения видеоданных поверх карты на экране монитора.

42. Способ по п.34, характеризующийся тем, что найденный объект идентифицируют, причем людей идентифицируют по лицам, а транспортные средства идентифицируют по номерным знакам.

43. Способ по п.34, характеризующийся тем, что вместе с индексирующей записью записывают в базу данных и/или хранилище временную последовательность местоположений объекта на карте - траекторию движения объекта.

44. Способ по п.43, характеризующийся тем, что последовательность местоположений на карте сжимают перед записью методом сглаживания траектории, или методом кусочно-линейной аппроксимации, или методом построения сплайн-аппроксимации.

45. Способ по п.34, характеризующийся тем, что местоположение объекта и/или параметры его движения непрерывно определяют по мере движения объекта в реальном масштабе времени.

46. Способ по п.34, характеризующийся тем, что индексирование видеоданных осуществляют, по крайней мере, в двух измерениях.

47. Способ по п.34, характеризующийся тем, что используют аффинное преобразование для преобразования местоположения из системы координат кадра в систему координат карты.

48. Способ по п.34, характеризующийся тем, что преобразование систем координат рассчитывают на основании взаимно однозначного отображения между множеством узловых точек на кадре и множеством узловых точек на карте.

49. Способ по п.34, характеризующийся тем, что местоположение объекта на карте, определенное по данным одной видеокамеры, уточняют путем сопоставления с данными другой видеокамеры, зафиксировавшей этот же самый объекта, с использованием методов многокамерного слежения.

50. Способ по п.49, характеризующийся тем, что сопоставление и/или объединение местоположений осуществляют методом корреляции местоположений или методом вычисления квадратов расстояний между местоположениями.

51. Способ по п.34, характеризующийся тем, что видеокамера выполнена с возможностью поворота и/или изменения увеличения при помощи моторизированного привода, при этом привязку зоны действия видеокамеры к карте изменяют в зависимости от текущего положения видеокамеры.

52. Способ по п.34, характеризующийся тем, что индексирующую запись связывают с областью карты, которую вручную задает пользователь системы видеонаблюдения.

53. Способ по п.34, характеризующийся тем, что индексирующую запись связывают с областью карты, определяемой алгоритмом автоматически, причем алгоритм может разделять карту на области либо равномерно, либо неравномерно с учетом плотности обнаружения объектов в каждой области, при этом области могут перекрываться.

54. Способ по п.34, характеризующийся тем, что индексирующую запись связывают с направлением движения объекта.

55. Способ по п.34, характеризующийся тем, что индексирующую запись связывают со скоростью движения объекта.

56. Способ по п.34, характеризующийся тем, что индексирующую запись связывают с сигнальной линией, которую пересекает объект.

57. Способ по п.34, характеризующийся тем, что индексирующие записи объединяют в иерархическую структуру.

58. Способ по п.34, характеризующийся тем, что индексирующую запись связывают с интервалом времени движения объекта.

59. Способ по п.34, характеризующийся тем, что индексирующую запись связывают с числом объектов, находящихся в заданной области.

60. Способ по п.34, характеризующийся тем, что индексирующая запись содержит минимальное и/или максимальное расстояние от заданной точки до точек траектории объекта.

61. Способ по п.34, характеризующийся тем, что индексирующая запись содержит минимальный ограничивающий прямоугольник траектории движения объекта.

62. Способ по п.34, характеризующийся тем, что индексирующая запись содержит уникальный идентификатор объекта.

63. Способ по п.34, характеризующийся тем, что индексирующую запись связывают с типом - классом объекта.

64. Способ по п.34, характеризующийся тем, что индексирующую запись связывают с типом движения объекта, определенным по траектории движения объекта на карте.

65. Способ по п.34, характеризующийся тем, что индексирующую запись связывают с текстовыми тегами.

66. Способ по п.34, характеризующийся тем, что индексирующие записи сохраняют в реляционной базе данных.

67. Способ по п.34, характеризующийся тем, что запрос пользователя дополнительно содержит критерии поиска.

68. Способ по п.34, характеризующийся тем, что найденные видеоданные, отображаются в виде отчета или непосредственно на карте.

69. Способ по п.34, характеризующийся тем, что найденные видеоданные отображаются в виде статических кадров или фрагментов видео.

70. Способ по п.68 или 69, характеризующийся тем, что видеоданные дополнительно содержат текстовую информацию.

Документы, цитированные в отчете о поиске Патент 2014 года RU2531876C2

US 20060007308 А1, 12.01.2006
JP 2011090047 A, 06.05.2011
Топчак-трактор для канатной вспашки 1923
  • Берман С.Л.
SU2002A1
ПЕРЕГРУЗОЧНОЕ УСТРОЙСТВО 1991
  • Шишкин В.В.
RU2031824C1
US20110007946 A1, 13.01.2011
US 20040210568 A1, 21.10.2004
US 5625815 A, 29.04.1997
СПОСОБ СУШКИ ДЛИННОМЕРНЫХ ИЗДЕЛИЙ ИЗ ДРЕВЕСИНЫ 2005
  • Гордеев Владимир Федорович
  • Адиков Сергей Геннадьевич
  • Сипиков Евгений Александрович
RU2315252C2
СИСТЕМА И СПОСОБ АВТОМАТИЗИРОВАННОГО ВИДЕОНАБЛЮДЕНИЯ И РАСПОЗНАВАНИЯ ОБЪЕКТОВ И СИТУАЦИЙ 2003
  • Кан Илья Александрович
  • Лунин Константин Вячеславович
  • Малистов Алексей Сергеевич
  • Петричкович Ярослав Ярославович
  • Солохин Антон Александрович
  • Сомиков Василий Петрович
  • Хамухин Анатолий Владимирович
RU2268497C2

RU 2 531 876 C2

Авторы

Птицын Николай Вадимович

Даты

2014-10-27Публикация

2012-05-15Подача