Система автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов Российский патент 2021 года по МПК G06T7/20 G06K9/72 H04N21/80 

Изобретение относится к системам создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов за счет системы идентификации. Система предназначена для формирования видеоролика, снятого в местах оказания развлекательных услуг, проведения культурно-массовых и спортивных мероприятий, с изначально заданным сценарием. Цель создания видеороликов - сохранение впечатлений от участия в соревнованиях, от посещения определенного места, повышение популярности места, на территории которого был создан видеоролик.

Настоящее изобретение является техническим развитием системы для автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов с возможностью автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов (Патент RU2683499C1), содержащей: блок съемки, включающий, по крайней мере, одно устройство записи первичных видеоданных; модуль хранения информации, включающий блок для хранения первичных видеоданных; блок идентификации заданного объекта или группы объектов в первичных видеоданных; блок ввода информации о заданном объекте или группе объектов для их идентификации; блок извлечения релевантных видеоданных с присутствием в кадре заданного объекта или группы объектов, причем под релевантными видеоданными понимаются видеофрагменты с присутствием в кадре заданного объекта, вырезанные по меткам, установленным блоком идентификации из первичных видеоданных; блок обработки релевантных видеоданных; по крайней мере, один сценарный шаблон, включающий набор данных для работы блока съемки, блока извлечения релевантных видеоданных и блока обработки релевантных видеоданных, причем каждое устройство записи первичных видеоданных из блока съемки работает по данным сценарного шаблона, в котором данными сценарного шаблона в части работы блока съемки являются данные, задающие, в частности, план кадра, глубину резкости, геометрию кадра, поле зрения объектива, движение камеры, приближение и удаление заданного объекта в кадре; причем блок извлечения релевантных видеоданных включает программное обеспечение, которое позволяет по меткам, установленным блоком идентификации, и данным сценарного шаблона вырезать видеофрагменты с присутствием в кадре заданного объекта из первичных видеоданных, в котором данными сценарного шаблона в части формирования релевантных видеоданных являются данные, которые задают, в частности, местоположение заданного объекта в кадре, длину видеофрагмента, количество видеофрагментов, синхронизацию кадров; причем блок обработки релевантных видеоданных включает программное обеспечение, которое позволяет формировать сценарные видеоролики, используя релевантные данные, сформированные блоком извлечения, и данные сценарного шаблона, в котором данными сценарного шаблона в части работы блока обработки являются, в частности, данные, задающие вид монтажа, ритм монтажа, продолжительность монтажного эпизода, последовательность планов и кадров, цветокоррекцию, концентрацию внимания в кадре на определенных объектах съемки, добавление графических спецэффектов, совмещение кадра с данными телеметрической системы; при этом модуль хранения информации дополнительно включает блок хранения релевантных видеоданных, блок хранения сценарных шаблонов, блок хранения сценарных видеороликов. Блок обработки релевантных видеоданных может быть выполнен с возможностью формирования сценарных видеороликов на основании релевантных видеоданных и данных сценарного шаблона. Блок идентификации может включать электронное устройство с уникальным идентификатором. Система может дополнительно содержать блок передачи сценарных видеороликов, по меньшей мере, одним из следующих способов: онлайн трансляция, запись на носитель, передача через интернет, в частности через социальные сети. Блок ввода информации может быть выполнен с возможностью выбора способа передачи сценарного видеоролика блоком передачи и/или с возможностью выбора сценарного шаблона. Блок съемки может дополнительно включать телеметрическую систему. Система может формировать сценарный видеоролик в режиме реального времени.

В данную систему заложены, но не реализованы возможности дальнейших совершенствований, связанных, в частности, с автоматическим созданием сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов с использованием материала, созданного или привлечённого самим пользователем.

Задачей изобретения являлось дополнение и изменение известной системы для устранения вышеуказанных недостатков.

Технический результат – расширение возможностей пользователя влиять на конечный результат.

Указанная задача решается системой для автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов с возможностью автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов, содержащей: модуль хранения информации, включающий блок для хранения первичных фото- и видеоданных; блок идентификации заданного объекта или группы объектов в первичных видеоданных; блок ввода информации о заданном объекте или группе объектов для их идентификации; блок извлечения релевантных фото- и видеоданных с присутствием в кадре заданного объекта или группы объектов, причем под релевантными видеоданными понимаются фото- и видеофрагменты с присутствием в кадре заданного объекта, вырезанные по меткам, установленным блоком идентификации из первичных фото- и видеоданных; блок обработки релевантных фото- и видеоданных; по крайней мере, один сценарный шаблон, включающий набор данных для работы блока извлечения релевантных фото- и видеоданных и блока обработки релевантных фото- и видеоданных, причем блок для хранения первичных фото- и видеоданных содержит ролики, созданные по данным по меньшей мере одного сценарного шаблона, в которых данными сценарного шаблона в части работы блока съемки являются данные, задающие, в частности, план кадра, глубину резкости, геометрию кадра, поле зрения объектива, движение камеры, приближение и удаление заданного объекта в кадре; причем блок извлечения релевантных видеоданных включает программное обеспечение, которое позволяет по меткам, установленным блоком идентификации, и данным сценарного шаблона вырезать видеофрагменты с присутствием в кадре заданного объекта из первичных видеоданных, в котором данными сценарного шаблона в части формирования релевантных фото- и видеоданных являются данные, которые задают, в частности, местоположение заданного объекта в кадре, длину фото- и видеофрагмента, количество фото- и видеофрагментов, синхронизацию кадров; причем блок обработки релевантных фото- и видеоданных включает программное обеспечение, которое позволяет формировать сценарные видеоролики, используя релевантные данные, сформированные блоком извлечения, и данные сценарного шаблона, в котором данными сценарного шаблона в части работы блока обработки являются, в частности, данные, задающие вид монтажа, ритм монтажа, продолжительность монтажного эпизода, последовательность планов и кадров, цветокоррекцию, концентрацию внимания в кадре на определенных объектах съемки, добавление графических спецэффектов, совмещение кадра с данными телеметрической системы; при этом модуль хранения информации дополнительно включает блок хранения релевантных фото- и видеоданных, блок хранения сценарных шаблонов, блок хранения сценарных видеороликов, которая, согласно предложению дополнительно содержит: по меньшей мере один связанный с блоком идентификации блок сбора информации о клиенте, включающей один или несколько показателей из следующих: местонахождение по GPS, Glonass или косвенным признакам, личные данные, касающиеся пола или возраста, или профиля в социальных сетях, доступ к фото- и видеоданным на устройстве пользователя или в базе данных пользователя, физическое состояния пользователя; по меньшей мере, один связанный с блоком извлечения релевантных данных блок подсъёмов, выполненных пользователем, при этом блок извлечения релевантных данных выполнен с возможностью выбора подсъема, исходя из привязки к объекту, которая может включать, но не ограничиваться местом или брендом, или личностью, или событием, или временем, или погодными условиями, или эмоциями, или праздниками, или трендами.

Как и в прототипе блок обработки релевантных видеоданных может быть выполнен с возможностью формирования сценарных видеороликов на основании релевантных фото- и видеоданных и данных сценарного шаблона.

Блок идентификации может включать электронное устройство с уникальным идентификатором.

Система может дополнительно содержать блок передачи сценарных видеороликов, по меньшей мере, одним из следующих способов: онлайн трансляция, запись на носитель, передача через интернет, в частности через социальные сети.

Блок ввода информации может быть выполнен с возможностью выбора способа передачи сценарного видеоролика блоком передачи и/или с возможностью выбора сценарного шаблона.

Блок съемки может дополнительно включать телеметрическую систему.

Система может формировать сценарный видеоролик в режиме реального времени.

Система может дополнительно содержать блок разграничения прав пользователей, содержащий сведения о, по меньшей мере, двух категориях пользователей: создатель шаблона, пользователь шаблона, где создатель шаблона — это тот пользователь, которому разрешается создавать, редактировать и модернизировать шаблоны, а пользователь шаблона — имеет возможность использовать шаблон в создании своего видеоконтента, а также делится полученным результатом и шаблоном, комментировать шаблон и пр. Другие категории пользователей, например «Бизнес-аккаунт» или «user-аккаунт» могут отличаться как условиями использования системы, так и функционалом, который предоставляется системой.

Предложенное изобретение поясняется графическим материалом.

На чертеже представлена общая схема системы автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов.

Под термином «сценарный шаблон» в данном описании понимается набор данных для работы определенных блоков системы, которые определяют сюжет и художественный стиль сценарного видеоролика.

Под терминами «объект» в данном описании подразумевается движущийся или стационарный объект, который интересен пользователю и присутствие которого он хочет запечатлеть в видеоролике. Это может быть сам пользователь, если цель сценарного видеоролика, например, является сохранение впечатлений от полученной развлекательной услуги. Это может быть машина, когда территорией оказания развлекательных услуг является гоночная трасса. Это может быть участник соревнований, например в случае проведения спортивных мероприятий. Это может музей, театр, участок городской или сельской местности, другая локация, в которой находится или побывал пользователь, или хотел бы побывать.

Под термином «потребитель» в данном описании понимается человек, который получает определенным способом готовый сценарный видеоролик, сформированный предложенной системой.

Термином «пользователь» в данном описании понимается потребитель, способный влиять на работу системы.

Под термином «подсъём» в данном описании понимается фото- или видеоконтент, изготовителем которого является пользователь (потребитель).

Предложенная система автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов содержит следующие блоки:

Блок подсъёмов 1, выполненных пользователем (потребителем). Данный блок содержит массив фото- и видеоматериалов, ассоциированных с конкретным пользователем – автором и/или владельцем этих материалов.

Блок сьемки (1), включающий, по крайней мере, одно устройство записи первичных фото- и видеоданных. В качестве устройств первичных фото- и видеоданных возможно использование стандартных фото- и видеокамер, видеокамер с разным фокусным расстоянием, управляемых видеокамер, в том числе установленных на беспилотных летательных аппаратах с дистанционным управлением. Преимущественно множество видеокамер различного вида работают по данным сценарного шаблона. К данным сценарного шаблона в части работы блока съемки относятся, в частности, данные, задающие план кадра, глубину резкости, геометрию кадра, поле зрения объектива, движение камеры, приближение и удаление заданного объекта в кадре и др. Блок съемки может дополнительно включать телеметрическую систему. В состав телеметрической системы, как правило, включены датчики, установленные на заданном объекте и формирующие данные о его состоянии. Например, в случае авто- и мотогонок телеметрическая система включает датчики, установленные на транспортном средстве и пилоте, которые в ходе заезда фиксируют данные состояния транспортного средства (скорость передвижения, расход топлива, время прохождения пути и др.) и пилота (например сердечный ритм). Наличие динамики данных телеметрической системы в итоговом сценарном видеоролике определенно повышает интерес потребителя к нему и его зрелищность.

Блок ввода информации (2) о заданном объекте для его идентификации. Преимущественно блок ввода информации содержит интерфейс, с помощью которого пользователь предложенной системы вводит данные, позволяющие идентифицировать заданный объект. Например, это может быть ФИО человека, профиль в социальной сети, логин. Блок ввода информации может быть выполнен с возможностью выбора сценарного шаблона. Преимущественно система включает множество сценарных шаблонов и потребитель имеет возможность выбрать тот, который ему более интересен в плане сюжета, художественного стиля и цены. Блок ввода информации может быть выполнен с возможностью выбора способа передачи сценарного видеоролика потребителю. Способы могут быть различными, в частности, онлайн трансляция сценарного видеоролика, запись сценарного видеоролика на носитель (флешкарту, диск), передача сценарного видеоролика через интернет и социальные сети.

Блок идентификации (3) заданного объекта в первичных видеоданных. Блок идентификации включает устройства и программное обеспечение, которые позволяют распознавать и определять местоположение заданного объекта на первичных фото- и видеоданных и ставить определенные метки. Работа данного блока может быть основана на различных способах идентификации заданного объекта. В частности, блок идентификации может включать электронное устройство с уникальным идентификатором, беспроводная связь с которым позволяет определять местоположение заданного объекта. Примером такого электронного устройства может быть электронный браслет, который надевают человеку. В случае мотогоночных соревнований такое электронное устройство устанавливают на машине. Другим примером такого электронного устройства может быть личный телефон заданного человека, на который заранее устанавливают специальную программу. Определив координаты заданного объекта в определенный момент времени, блок идентификации ставит метки на первичных фото- и видеоданных, снятых в данный момент времени камерами, в зоне которых были расположены данные координаты. Работа блока идентификации может быть также основана на идентификации личности по биометрическим параметрам в первичных видеоданных.

Блок извлечения релевантных данных (4) с присутствием в кадре заданного объекта включает программное обеспечение, которое позволяет по меткам, установленным блоком идентификации, и данным сценарного шаблона, вырезать или извлекать видеофрагменты (возможно, фотофрагментов) с присутствием в кадре заданного объекта из первичных видеоданных. К данным сценарного шаблона в части формирования релевантных фото- и видеоданных, в частности, относятся данные, которые задают местоположение заданного объекта в кадре, длину видеофрагмента, количество видеофрагментов, синхронизацию кадров и др.

Блок обработки релевантных фото- и видеоданных (5), включает программное обеспечение, которое позволяет формировать сценарные видеоролики, используя релевантные данные, сформированные блоком извлечения, и данные сценарного шаблона. К данным сценарного шаблона в части работы блока обработки (5), в частности, относятся: данные задающие вид монтажа, ритм монтажа, продолжительность монтажного эпизода, последовательность планов и кадров, цветокоррекцию, концентрацию внимания в кадре на определенных объектах съемки, добавление графических спецэффектов, совмещение кадра с данными телеметрической системы и др.

Модуль хранения информации, представляет собой одно или несколько устройств, например серверов. Модуль хранения информации содержит несколько блоков, в том числе блок хранения первичных фото- и видеоданных (6), блок хранения релевантных фото- и видеоданных (7), блок хранения сценарных шаблонов (8), блок хранения сценарных видеороликов (9).

Блок (6) содержит информацию с устройств записи первичных видеоданных. В качестве устройств первичных фото- и видеоданных возможно использование стандартных видеокамер, видеокамер с разным фокусным расстоянием, управляемых видеокамер, в том числе установленных на беспилотных летательных аппаратах с дистанционным управлением. Видеокамеры различного вида работают, преимущественно, по данным сценарного шаблона. К данным сценарного шаблона, в части работы устройств первичных видеоданных, относятся, в частности, данные, задающие план кадра, глубину резкости, геометрию кадра, поле зрения объектива, движение камеры, приближение и удаление заданного объекта в кадре и др. Блок (6) может включать данные от телеметрической системы. В состав телеметрической системы, как правило, включены датчики, установленные на заданном объекте и формирующие данные о его состоянии. Например, в случае авто- и мотогонок телеметрическая система включает датчики, установленные на транспортном средстве и пилоте, которые в ходе заезда фиксируют данные состояния транспортного средства (скорость передвижения, расход топлива, время прохождения пути и др.) и пилота (например сердечный ритм). Наличие динамики данных телеметрической системы в итоговом сценарном видеоролике определенно повышает интерес потребителя к нему и его зрелищность.

Предложенная система может дополнительно содержать блок передачи сценарных видеороликов (10). Блок передачи выполнен с возможностью передачи готового сценарного видеоролика потребителю, по меньшей мере, одним из следующих способов: онлайн трансляция, запись на носитель, передача через интернет, в частности через социальные сети.

Система также содержит блок (11) сбора информации о клиенте, блок (12) разграничения прав пользователей.

Блоки, входящие в предложенную систему, взаимодействуют на различных этапах и передают информацию друг другу посредством различных технологий: кабеля, интернета, беспроводного соединения и др. По необходимости на определенных этапах информация шифруется для ее сохранности и недоступности его для неавторизированных пользователей системы.

Предложенная система работает следующим образом.

Потребитель или пользователь системы через блок ввода информации (2) вводит данные о заданном объекте и при возможности выбирает способ передачи ему готового сценарного видеоролика. Если предложенная система содержит несколько сценарных шаблонов, то пользователь выбирает интересный ему сценарный шаблон из какого-то множества. Блок идентификации (3) получает от блоков (2) и (11) информацию, необходимую для идентификации заданного объекта, распознает и определяет местоположение заданного объекта на первичных видеоданных и ставит определенные метки. Далее блок извлечения (4) по меткам и в соответствии с данными сценарного шаблона формирует набор релевантных фото- и видеоданных с присутствием в кадре заданного объекта, а также фото- и видеоданные из блоков (1), которые передает в блок хранения релевантных видеоданных (7). Далее блок обработки (5) монтирует сценарный видеоролик, используя релевантные данные, сформированные блоком извлечения (4), и данные сценарного шаблона, и сохраняет готовый сценарный видеоролик в блоке хранения сценарных видеороликов (9). Далее блок передачи (10) передает готовый сценарный видеоролик потребителю выбранным способом.

Дополнительно пользователь может идентифицироваться в блоке (12), в результате чего может получить дополнительные полномочия на участие в создании видеоролика.

Предложенная система может быть выполнена с возможностью формирования сценарного видеоролика в режиме онлайн, что особенно актуально при трансляции спортивных и иных мероприятий.

Новые признаки системы открывают неограниченные возможности для её использования. При этом регистрация и авторизация пользователей возможна любым способом, например, через чат-бот, в котором происходит диалог с клиентом. В процессе регистрации, например, собирается база клиентов для последующей работы с ними. Полученные видео ролики могут быть размещены в социальные сети или отправлены в мессенджеры, при этом аналитика, полученная в ходе исследования движения видео, например, показы в социальных сетях пользователя или на видео-портале, например, «youtube», может быть использована в различных целях, например, для продвижения товаров на рынке и увеличения их продаж или продвижения мероприятия, места, события и т.д. Примером продвижения товара может быть организация конкурса для пользователей системы, когда пользователи, участвуют в акции от производителя товара, путем использования системы, например, сканируя QR-код, размещенный на упаковке товара мобильным телефоном. Затем, регистрируясь в системе (любым известным способом), например, взаимодействуя с чат-ботом, пользователь изготавливает видеоролик и скачивает его или размещает в социальных сетях. С размещенным роликом пользователя взаимодействуют другие пользователи, путем, например, просмотра или распространения видео. В процессе взаимодействия с видео, пользователю, который разместил видео изначально присваиваются, например, баллы активности. Чем выше баллы/рейтинг пользователя, тем больше его шанс победить в соревновании и получить приз. При этом каждый новый пользователь может также участвовать в конкурсе, например, проходя тот же путь, что и первый пользователь.

В путешествии, туристическом походе и т.п. пользователь посредством сканирования QR-кода или путем поиска доступных к созданию шаблонов видео переходит к созданию видео, производит съемку на свое устройство, далее следуя инструкциям загружает созданного видео и получает готовый видео контент с данной локации, далее пользователь может поделится этим контентом любым доступным способом, например: путем отправки видео или ссылки на видео в мессенджеры, соцсети и прочее.

Изобретение относится к области вычислительной техники. Технический результат заключается в расширении функциональных возможностей системы автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов с возможностью автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов за счет системы идентификации. Заявленная система содержит: модуль хранения информации, включающий блок для хранения первичных фото- и видеоданных; блок идентификации заданного объекта или группы объектов в первичных фото- и видеоданных; блок ввода информации о заданном объекте или группе объектов; блок извлечения релевантных видеоданных с присутствием в кадре заданного объекта или группы объектов; блок обработки релевантных фото- и видеоданных; сценарный шаблон, включающий набор данных для работы блока извлечения релевантных фото- и видеоданных и блока обработки релевантных фото- и видеоданных. 7 з.п. ф-лы, 1 ил.

1. Система для автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов с возможностью автоматического создания сценарного видеоролика с присутствием в кадре заданного объекта или группы объектов, содержащая:

модуль хранения информации, включающий блок для хранения первичных фото- и видеоданных;

блок идентификации заданного объекта или группы объектов в первичных фото- и видеоданных;

блок ввода информации о заданном объекте или группе объектов для их идентификации;

блок извлечения релевантных видеоданных с присутствием в кадре заданного объекта или группы объектов, причем под релевантными видеоданными понимаются фото- и видеофрагменты с присутствием в кадре заданного объекта, вырезанные по меткам, установленным блоком идентификации из первичных видеоданных;

блок обработки релевантных фото- и видеоданных;

по крайней мере, один сценарный шаблон, включающий набор данных для работы блока извлечения релевантных фото- и видеоданных и блока обработки релевантных фото- и видеоданных,

причем блок для хранения первичных фото- и видеоданных содержит фото- и видеоматериалы, созданные по данным по меньшей мере одного сценарного шаблона, в котором данными сценарного шаблона в части работы блока съемки являются данные, задающие, в частности, план кадра, глубину резкости, геометрию кадра, поле зрения объектива, движение камеры, приближение и удаление заданного объекта в кадре;

причем блок извлечения релевантных фото- и видеоданных включает программное обеспечение, которое позволяет по меткам, установленным блоком идентификации, и данным сценарного шаблона вырезать фото- и видеофрагменты с присутствием в кадре заданного объекта из первичных фото- и видеоданных, в котором данными сценарного шаблона в части формирования релевантных фото- и видеоданных являются данные, которые задают, в частности, местоположение заданного объекта в кадре, длину видеофрагмента, количество видеофрагментов, синхронизацию кадров;

причем блок обработки релевантных фото- и видеоданных включает программное обеспечение, которое позволяет формировать сценарные видеоролики, используя релевантные данные, сформированные блоком извлечения, и данные сценарного шаблона, в котором данными сценарного шаблона в части работы блока обработки являются, в частности, данные, задающие вид монтажа, ритм монтажа, продолжительность монтажного эпизода, последовательность планов и кадров, цветокоррекцию, концентрацию внимания в кадре на определенных объектах съемки, добавление графических спецэффектов, совмещение кадра с данными телеметрической системы;

при этом модуль хранения информации дополнительно включает блок хранения релевантных фото- и видеоданных, блок хранения сценарных шаблонов, блок хранения сценарных видеороликов,

отличающаяся тем, что дополнительно содержит:

по меньшей мере один связанный с блоком идентификации блок сбора информации о клиенте, включающей один или несколько показателей из следующих: местонахождение по GPS, Glonass или косвенным признакам, личные данные, касающиеся пола, или возраста, или профиля в социальных сетях, доступ к фото- и видеоматериалам на устройстве пользователя или в базе данных пользователя, физическое состояние пользователя;

по меньшей мере один связанный с блоком извлечения релевантных данных блок подсъёмов, выполненных пользователем,

при этом блок извлечения релевантных фото- и видеоданных выполнен с возможностью выбора фото- и видеоматериалов, исходя из привязки к объекту, которые могут включать, но не ограничиваться местом, или брендом, или личностью, или событием, или временем, или погодными условиями, или эмоциями, или праздниками, или трендами.

2. Система по п. 1, отличающаяся тем, что блок обработки релевантных фото- и видеоданных выполнен с возможностью формирования сценарных видеороликов на основании релевантных фото- и видеоданных и данных сценарного шаблона.

3. Система по п. 1, отличающаяся тем, что блок идентификации включает электронное устройство с уникальным идентификатором.

4. Система по п. 1, отличающаяся тем, что дополнительно содержит блок передачи сценарных видеороликов по меньшей мере одним из следующих способов: онлайн-трансляция, запись на носитель, передача через интернет, в частности через социальные сети.

5. Система по п. 1, отличающаяся тем, что блок ввода информации выполнен с возможностью выбора способа передачи сценарного видеоролика блоком передачи.

6. Система по п. 1, отличающаяся тем, что блок ввода информации выполнен с возможностью выбора сценарного шаблона.

7. Система по п. 1, отличающаяся тем, что выполнена с возможностью формирования сценарного видеоролика в режиме реального времени.

8. Система по п. 1, отличающаяся тем, что дополнительно содержит блок разграничения прав пользователей, содержащий сведения о по меньшей мере двух категориях пользователей: создатель шаблона, пользователь шаблона.