Система автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов Российский патент 2019 года по МПК G06T7/20 H04N21/80 

Система автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов.

Изобретение относится к системам создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов за счет системы идентификации. Система предназначена для формирования видеоролика, снятого в местах оказания развлекательных услуг, проведения культурно-массовых и спортивных мероприятий, с изначально заданным сценарием. Цель создания видеороликов - сохранение впечатлений от участия в соревнованиях, от посещения определенного места, повышение популярности места, на территории которого был создан видеоролик.

Из уровня техники известны системы слежения, основанные на данных полученных с множества видеокамер, с использованием технологий идентификации объекта слежения.

Известен способ обнаружения человеческих объектов в видео, патент RU 2635066, МПК G06K9/00, опубл. 08.11.2017. В известном патенте раскрыты способы, устройства и системы для выполнения анализа видеоконтента для обнаружения в видеоизображении людей или других объектов, представляющих интерес. Обнаружение людей может быть использовано для учета большого числа людей в толпе, определения местоположения каждого человека и/или выполнения анализа толпы в контролируемых областях. 

Известна система отслеживания положения покупателей магазина в реальном времени с помощью множественной сети связи, патент RU 2470362, МПК G06Q30/02, G08C21/00, опубл. 20.12.2012. Известная система предназначена для определения и отслеживания каждого предполагаемого положения действующего лица в магазине с помощью видеокамер, в то время как указанное действующее лицо работает с электронным устройством, которое позволяет определить его координаты на территории магазина.

Известна система и способ для слежения за объектом, заявка US2018033153, МПК G06K9/00, опубл. 01.02.2018, который принимаем за прототип. Известная система включает множество видеокамер, расположенных на определенной территории, блок идентификации объекта, позволяющий с высокой точностью определить положение объекта, блок хранения данных полученных с видеокамер. Известное техническое решение позволяет сформировать видео, в котором с высокой точностью присутствует заданный объект слежения.

Известные технические решения относятся к системам видеонаблюдения и позволяют повысить безопасность охраняемой территории, например магазина или торгового центра. Известные системы позволяют отслеживать объект, как в реальном времени, так и на записанных ранее видеоданных, хранящихся на сервере. Пользователи известных систем - сотрудники безопасности, которые с помощью интерфейса системы задают цель слежения (определенного человека), отрезок времени и дату и получают видеоролик, в котором присутствует заданная цель слежения. Работа известных систем основана на идентификации личности человека по видеоданным, полученным с камер видеонаблюдения. Недостатком известных систем является их ограниченный функционал, не позволяющий создавать видеоролики с заданным сценарием.

Технический результат предлагаемого изобретения заключается в расширении функционального возможностей системы видеонаблюдения с целью обеспечения возможности создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов.

Технический результат достигается тем, что предложена система для автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов, которая содержит:

блок сьемки, включающий, по крайней мере, одно устройство записи первичных видеоданных;

модуль хранения информации, включающий блок для хранения первичных видеоданных;

блок идентификации заданного объекта или группы объектов в первичных видеоданных;

блок ввода информации о заданном объекте или группе объектов для их идентификации;

при этом система дополнительно содержит:

блок извлечения релевантных видеоданных с присутствием в кадре заданного объекта или группы объектов;

блок обработки релевантных видеоданных;

по крайней мере, один сценарный шаблон, включающий набор данных для работы блока съемки, блока извлечения и блока обработки;

при этом модуль хранения информации дополнительно включает блок хранения релевантных видеоданных, блок хранения сценарных шаблонов, блок хранения сценарных видеороликов.

Блок обработки релевантных видеоданных преимущественно выполнен с возможностью формирования сценарных видеороликов на основании релевантных видеоданных и данных сценарного шаблона. В частности блок идентификации может включать электронное устройство с уникальным идентификатором. Предложенная система может дополнительно содержать блок передачи сценарных видеороликов, по меньшей мере, одним из следующих способов: онлайн трансляция, запись на носитель, передача через интернет, в частности через социальные сети. При этом блок ввода информации может быть выполнен с возможностью выбора сценарного шаблона и с возможностью выбора способа передачи сценарного видеоролика блоком передачи. Блок съемки может дополнительно включать в свой состав телеметрическую систему. Предложенная система может быть выполнена с возможностью формирования сценарного видеоролика в режиме реального времени.

Предложенное изобретение поясняется графическим материалом.

На чертеже представлена общая схема системы автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов.

Под термином «сценарный шаблон» в данном описании понимается набор данных для работы определенных блоков системы, которые определяют сюжет и художественный стиль сценарного видеоролика.

Под термином «заданный объект» в данном описании подразумевается движущийся объект, который интересен потребителю и присутствие которого он хочет запечатлеть в видеоролике. Это может быть сам потребитель, если цель сценарного видеоролика, например, является сохранение впечатлений от полученной развлекательной услуги. Это может быть машина, когда территорией оказания развлекательных услуг является гоночная трасса. Это может быть участник соревнований, например в случае проведения спортивных мероприятий.

Под термином «потребитель» в данном описании понимается человек, который получает определенным способом готовый сценарный видеоролик, сформированный предложенной системой.

Предложенная система автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов содержит следующие блоки:

Блок сьемки (1), включающий, по крайней мере, одно устройство записи первичных видеоданных. В качестве устройств первичных видеоданных возможно использование стандартных видеокамер, видеокамер с разным фокусным расстоянием, управляемых видеокамер, в том числе установленных на беспилотных летательных аппаратах с дистанционным управлением. Преимущественно блок сьемки содержит множество видеокамер различного вида, которые работают по данным сценарного шаблона. К данным сценарного шаблона в части работы блока съемки относятся, в частности, данные, задающие план кадра, глубину резкости, геометрию кадра, поле зрения объектива, движение камеры, приближение и удаление заданного объекта в кадре и др. Блок съемки может дополнительно включать телеметрическую систему. В состав телеметрической системы, как правило, включены датчики, установленные на заданном объекте и формирующие данные о его состоянии. Например, в случае авто и мотогонок телеметрическая система включает датчики, установленные на транспортном средстве и пилоте, которые в ходе заезда фиксируют данные состояния транспортного средства (скорость передвижения, расход топлива, время прохождения пути и др.) и пилота (например сердечный ритм). Наличие динамики данных телеметрической системы в итоговом сценарном видеоролике определенно повышает интерес потребителя к нему и его зрелищность.

Блок ввода информации (2) о заданном объекте для его идентификации. Преимущественно блок ввода информации содержит интерфейс, с помощью которого пользователь предложенной системы вводит данные, позволяющие идентифицировать заданный объект. Например, это может быть ФИО человека, профиль в социальной сети, логин. Блок ввода информации может быть выполнен с возможностью выбора сценарного шаблона. Преимущественно система включает множество сценарных шаблонов и потребитель имеет возможность выбрать тот, который ему более интересен в плане сюжета, художественного стиля и цены. Блок ввода информации может быть выполнен с возможностью выбора способа передачи сценарного видеоролика потребителю. Способы могут быть различными, в частности, онлайн трансляция сценарного видеоролика, запись сценарного видеоролика на носитель (флешкарту, диск), передача сценарного видеоролика через интернет и социальные сети.

Блок идентификации (3) заданного объекта в первичных видеоданных. Блок идентификации включает устройства и программное обеспечение, которые позволяют распознавать и определять местоположение заданного объекта на первичных видеоданных и ставить определенные метки. Работа данного блока может быть основана на различных способах идентификации заданного объекта. В частности, блок идентификации может включать электронное устройство с уникальным идентификатором, беспроводная связь с которым позволяет определять местоположение заданного объекта. Примером такого электронного устройства может быть электронный браслет, который надевают человеку. В случае мотогоночных соревнований такое электронное устройство устанавливают на машине. Другим примером такого электронного устройства может быть личный телефон заданного человека, на который заранее устанавливают специальную программу. Определив координаты заданного объекта в определенный момент времени, блок идентификации ставит метки на первичных видеоданных, снятых в данный момент времени камерами, в зоне которых были расположены данные координаты. Работа блока идентификации может быть также основана на идентификации личности по биометрическим параметрам в первичных видеоданных.

Блок извлечения релевантных видеоданных (4) с присутствием в кадре заданного объекта включает программное обеспечение, которое позволяет по меткам, установленным блоком идентификации, и данным сценарного шаблона, вырезать видеофрагменты с присутствием в кадре заданного объекта из первичных видеоданных. К данным сценарного шаблона в части формирования релевантных видеоданных, в частности, относятся данные, которые задают местоположение заданного объекта в кадре, длину видеофрагмента, количество видеофрагментов, синхронизацию кадров и др.

Блок обработки релевантных видеоданных (5), включает программное обеспечение, которое позволяет формировать сценарные видеоролики, используя релевантные данные, сформированные блоком извлечения, и данные сценарного шаблона. К данным сценарного шаблона в части работы блока обработки (5), в частности, относятся: данные задающие вид монтажа, ритм монтажа, продолжительность монтажного эпизода, последовательность планов и кадров, цветокоррекцию, концентрацию внимания в кадре на определенных объектах съемки, добавление графических спецэффектов, совмещение кадра с данными телеметрической системы и др.

Модуль хранения информации, представляет собой одно или несколько устройств, например серверов. Модуль хранения информации содержит несколько блоков, в том числе блок хранения первичных видеоданных (6), блок хранения релевантных видеоданных (7), блок хранения сценарных шаблонов (8), блок хранения сценарных видеороликов (9).

Предложенная система может дополнительно содержать блок передачи сценарных видеороликов (10). Блок передачи выполнен с возможностью передачи готового сценарного видеоролика потребителю, по меньшей мере, одним из следующих способов: онлайн трансляция, запись на носитель, передача через интернет, в частности через социальные сети.

Блоки, входящие в предложенную систему, взаимодействуют на различных этапах и передают информацию друг другу посредством различных технологий: кабеля, интернета, беспроводного соединения и др. По необходимости на определенных этапах информация шифруется для ее сохранности и недоступности его для неавторизированных пользователей системы.

Предложенная система работает следующим образом.

Потребитель или пользователь системы через блок ввода информации (2) вводит данные о заданном объекте и при возможности выбирает способ передачи ему готового сценарного видеоролика. Если предложенная система содержит несколько сценарных шаблонов, то пользователь выбирает интересный ему сценарный шаблон из какого-то множества. Блок съемки (1) формирует первичные видеоданные в зоне нахождения заданного объекта в соответствии с данными сценарного шаблона и передает информацию в блок хранения первичных видеоданных (6). Блок идентификации (3) получает от блока ввода (2) информацию, необходимую для идентификации заданного объекта, распознает и определяет местоположение заданного объекта на первичных видеоданных и ставит определенные метки. Далее блок извлечения (4) по меткам и в соответствии с данными сценарного шаблона формирует набор релевантных видеоданных с присутствием в кадре заданного объекта, которые передает в блок хранения релевантных видеоданных (7). Далее блок обработки (5) монтирует сценарные видеоролик, используя релевантные данные, сформированные блоком извлечения (4), и данные сценарного шаблона, и сохраняет готовый сценарный видеоролик в блоке хранения сценарных видеороликов (9). Далее блок передачи (10) передает готовый сценарный видеоролик потребителю выбранным способом.

Устройство и работа предложенной системы описана с учетом присутствия в кадре одного заданного объекта. В случае, когда заданных объектов несколько, устройство и работа предложенной системы не меняется.

Предложенная система может быть выполнена с возможностью формирования сценарного видеоролика в режиме онлайн, что особенно актуально при трансляции спортивных и иных мероприятий.

Пример реализации предложенной системы возможен на картинге. Клиент, пришедший на картинг, при регистрации сообщает свои данные, выбирает сценарный шаблон путем просмотра фрагментов примеров разных сценарных видеороликов и выбирает способ передачи ему будущего сценарного видеоролика с его участием. При этом клиенту присваивается уникальный номер, соответствующий определенному карту, и надевают электронный браслет. Далее клиент готовится в раздевалке к заезду, где уже начинается его съемка видеокамерами. Далее клиент перемещается в другую локацию, например в зону пит-лейн, где проходит инструктаж и садится в карт. В каждой новой локации блок идентификации определяет местоположение клиента по электронному браслету. При этом в каждой новой локации съемка клиента происходит разными видеокамерами в соответствии с данными выбранного сценарного шаблона. Во время заезда сбор первичных видеоданных происходит с видеокамер, снимающих карт на гоночной трассе, и видеокамер, расположенных внутри карта. При этом во время заезда идентификация клиента происходит по электронному устройству, установленному на карте, и соответствующему уникальному номеру, присвоенному клиенту при регистрации. По окончании заезда клиент получает готовый видеоролик любым выбранным им способом, например путем его отправки в социальную сеть профиля клиента. Клиент доволен, поскольку у него сохранились впечатления от посещения парка развлечений и появилась возможность поделиться полученным видеороликом с друзьями и родными.

Другой пример реализации предложенной системы может быть следующим. Клиента, пришедшего на соревнование – мотогонку, идентифицируют в системе с его согласия. Далее клиент в течение какого-то времени меняет на территории соревнований свою локацию: посещает выставку техники, активности спонсоров, и проходит на свое место на трибуне. В каждой новой локации система определяет положение клиента и собирает видеоматериал с его присутствием в кадре. По проезду спортсмена к финишной полосе одна из камер системы от спортсмена направляется на клиента и снимает его. Предложенная система обрабатывает видеоматериал с различных видеокамер с присутствием в кадре заданного клиента и формирует видеоролик в соответствии с определенным сценарным шаблоном. Далее система высылает клиенту видеоролик с его пребыванием на соревновании в социальную сеть или транслирует онлайн в качестве истории в социальной сети в рамках его профиля.

Другой пример реализации предложенной системы на спортивных мероприятиях с использованием гоночной трассы, может быть следующим. Видеокамеры, размещенные на трассе и объединенные в рамках системы, следят за спортсменами на трассе. При этом система автоматически создает сценарный видеоролик только с моментами, которые наиболее интересно показать. Например, если мотогонщик упал с мотоцикла или он близко едет с другим пилотом, или другие вероятные события.

Очевидно, что предложенное изобретение позволяет расширить функциональные возможности системы видеонаблюдения и обеспечить возможность создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов.

Изобретение относится к области вычислительной техники. Технический результат – расширение функциональных возможностей системы видеонаблюдения для обеспечения возможности создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов. Система для автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов с возможностью автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов содержит: блок съемки; модуль хранения информации; блок идентификации заданного объекта или группы объектов в первичных видеоданных; блок ввода информации о заданном объекте или группе объектов для их идентификации; при этом система дополнительно содержит: блок извлечения релевантных видеоданных с присутствием в кадре заданного объекта или группы объектов; блок обработки релевантных видеоданных; по крайней мере, один сценарный шаблон, включающий набор данных для работы блока съемки, блока извлечения и блока обработки; при этом модуль хранения информации дополнительно включает блок хранения релевантных видеоданных, блок хранения сценарных шаблонов, блок хранения сценарных видеороликов. 7 з.п. ф-лы, 1 ил.

1. Система для автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов с возможностью автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов, содержащая:

блок съемки, включающий, по крайней мере, одно устройство записи первичных видеоданных;

модуль хранения информации, включающий блок для хранения первичных видеоданных;

блок идентификации заданного объекта или группы объектов в первичных видеоданных;

блок ввода информации о заданном объекте или группе объектов для их идентификации;

отличающаяся тем, что дополнительно содержит:

блок извлечения релевантных видеоданных с присутствием в кадре заданного объекта или группы объектов, причем под релевантными видеоданными понимаются видеофрагменты с присутствием в кадре заданного объекта, вырезанные по меткам, установленным блоком идентификации из первичных видеоданных;

блок обработки релевантных видеоданных;

по крайней мере, один сценарный шаблон, включающий набор данных для работы блока съемки, блока извлечения релевантных видеоданных и блока обработки релевантных видеоданных,

причем каждое устройство записи первичных видеоданных из блока съемки работает по данным сценарного шаблона, в котором данными сценарного шаблона в части работы блока съемки являются данные, задающие, в частности, план кадра, глубину резкости, геометрию кадра, поле зрения объектива, движение камеры, приближение и удаление заданного объекта в кадре;

причем блок извлечения релевантных видеоданных включает программное обеспечение, которое позволяет по меткам, установленным блоком идентификации, и данным сценарного шаблона вырезать видеофрагменты с присутствием в кадре заданного объекта из первичных видеоданных, в котором данными сценарного шаблона в части формирования релевантных видеоданных являются данные, которые задают, в частности, местоположение заданного объекта в кадре, длину видеофрагмента, количество видеофрагментов, синхронизацию кадров;

причем блок обработки релевантных видеоданных включает программное обеспечение, которое позволяет формировать сценарные видеоролики, используя релевантные данные, сформированные блоком извлечения, и данные сценарного шаблона, в котором данными сценарного шаблона в части работы блока обработки являются, в частности, данные, задающие вид монтажа, ритм монтажа, продолжительность монтажного эпизода, последовательность планов и кадров, цветокоррекцию, концентрацию внимания в кадре на определенных объектах съемки, добавление графических спецэффектов, совмещение кадра с данными телеметрической системы;

при этом модуль хранения информации дополнительно включает блок хранения релевантных видеоданных, блок хранения сценарных шаблонов, блок хранения сценарных видеороликов.

2. Система по п. 1, отличающаяся тем, что блок обработки релевантных видеоданных выполнен с возможностью формирования сценарных видеороликов на основании релевантных видеоданных и данных сценарного шаблона.

3. Система по п. 1, отличающаяся тем, что блок идентификации включает электронное устройство с уникальным идентификатором.

4. Система по п. 1, отличающаяся тем, что дополнительно содержит блок передачи сценарных видеороликов, по меньшей мере, одним из следующих способов: онлайн трансляция, запись на носитель, передача через интернет, в частности через социальные сети.

5. Система по п. 1, отличающаяся тем, что блок ввода информации выполнен с возможностью выбора способа передачи сценарного видеоролика блоком передачи.

6. Система по п. 1, отличающаяся тем, что блок ввода информации выполнен с возможностью выбора сценарного шаблона.

7. Система по п. 1, отличающаяся тем, что блок съемки дополнительно включает телеметрическую систему.

8. Система по п. 1, отличающаяся тем, что выполнена с возможностью формирования сценарного видеоролика в режиме реального времени.