ОБЛАСТЬ ТЕХНИКИ
Изобретение относится к области обработки, хранения, разметки и поиска видеоданных в системах видео наблюдения /1/, /2/. Изобретение позволяет производить разметку видеоданных с использованием данных производственного процесса, а так же реализовать быстрый поиск объекта (человека, изделия или транспортного средства) в видеоархиве по данным производственного процесса.
Изобретение может быть использовано для решения таких задач как разметка (построение индекса) видеоархива, поиск видеоданных, обнаружение нарушений производственного процесса с автоматическим уведомлением пользователей, контроль качества и сроков выполнения работ, расследование причин брака продукции, определение ключевых показателей эффективности персонала, сбор статических данных о производственных процессе, выгрузка видеозаписей из видеоархива, содержащих документальную информацию о производственном процессе.
Изобретение может формировать данные для центра технологического мониторинга (центра контроля качества, службы безопасности) организации в реальном масштабе времени для предотвращения браков, срывов планов производства и возникновения угрозы жизнедеятельности исполнителя.
Изобретение может быть использовано для оказания удаленной технической поддержки, обучения персонала, предоставления результатов заказчику, размещения видео на корпоративном сайте в целях PR, разрешения споров с контрагентами и сотрудниками.
Изобретение может быть использовано для автоматического и полуавтоматического тегирования видео, то есть добавления текстовых тегов, ключевых слов, численных данных и другой аннотации к видео.
Изобретение может работать в локальных и глобальных сетях, на выделенных или облачных серверах, а так же может быть встроено непосредственно в видеокамеру, видеосервер, видеорегистратор и мобильное устройство в виде аппаратного и/или программного обеспечения.
Изобретение может быть использовано для предоставления различных сервисов в сети Интернет через браузер и/или мобильные устройства, в том числе сервисы обеспечения видеонаблюдения, видеозаписи, контроля производства, управления компании, мотивации и обучения персонала, взаимодействия с клиентами и PR.
Изобретение может быть использовано в таких отраслях как промышленное производство, добыча и переработка полезных ископаемых, энергетика, сельское хозяйство, автомобильный ремонт, общественное питание, жилищно-коммунальное хозяйство и социальная инфраструктура.
Изобретение может быть использовано для анализа розничных продаж (ритейл-анализа), контроля логистических операций (например, складов и почтовых сортировочных узлов) и контроля процессов в игорном бизнесе (казино, азартные игры, игровые автоматы, гемблинг (gambling).
Изобретение может быть использовано в системах видеонаблюдения, построенных с применением стандартов и/или рекомендаций Открытого форума интерфейсов сетевого видео (Open Network Video Interface Forum, ONVIF, www.onvif.org). Альянса совместимости физической безопасности (Physical Security Interoperability Alliance, PSIA, www.psiaalliance.org) или Общего протокола оповещений (Common Alerting Protocol, CAP, http://docs.oasis-open.org/emer gency/сар/).
Изобретение может быть интегрировано с производственным оборудованием, корпоративной системой бизнес-аналитики (Business Intelligence, BI), системой управления ресурсами предприятия (Enterprise Resource Planning, ERP) и системой управления контентом (Content Management System, CMS).
ПРЕДШЕСТВУЮЩИЙ УРОВЕНЬ ТЕХНИКИ
Система видеонаблюдения, как правило, включает одну или несколько видеокамер, хранилище видеоданных (видеосервер, систему архивирования видео или видеорегистратор) и рабочее место оператора /1/, /2/. Потоковые видеоданные получают с видеокамер, записывают в хранилище видеоданных и отображают на рабочем месте оператора.
Средства поиска видеоданных являются неотъемлемой частью практически любой системы видеонаблюдения. Современные хранилища видеоданных позволяют быстро находить и воспроизводить отдельные фрагменты записанного видео по запросу пользователя. Эта возможность произвольного (прямого) доступа к видеоданным реализуется за счет построения разметки видеоданных или индекса. Индекс представляет собой справочную таблицу (lookup table), формирующую взаимосвязь меток с адресами соответствующих им видеоданных. Индекс существенно сокращает время доступа к видеоданным, записанным в хранилище, для их последующей обработки пользователем или компьютером.
Временной индекс устанавливает взаимосвязь между временной шкалой и видеоданными, то есть позволяет хранилищу быстро находить видеоданные по заданным дате и времени.
Событийный индекс содержит таблицу событий и позволяет хранилищу быстро находить видеоданные по заданным событиям, таким как срабатывание детектора движения или других датчиков, подключенных к системе видеонаблюдения.
Видеоаналитика, то есть средства видеоанализа, на основе алгоритмов машинного зрения, может быть источником событий для построения индекса. Например, видеоаналитика позволяет определять такие события, как движение человека в заданном направлении, появление или исчезновение предмета /4/.
Индекс может содержать дополнительную информацию об объекте, распознанным видеоаналитикой, для последующего поиска видеоданных. Например, индекс может содержать регистрационный знак автомобиля, рост человека, цвет одежды, признаки лица.
Как правило, индексы строят в реальном масштабе времени по мере поступления видеоданных в хранилище от видеокамер наблюдения. Затем индексы используют при обработке запросов пользователей, осуществляющих поиск информации в хранилище видеоданных.
Онлайн-сервисы хранения видео, такие как YouTube (http://youtube.com/) и Vimeo (http://vimeo.com/), тоже используют различные индексы, например, индексы по издателям видео и по ключевым словам. Данные сервисы позволяет обратиться к видеофрагменту по гиперссылке и проиграть видео в браузере или на мобильном устройстве.
Онлайн-сервисы видеонаблюдения, такие как DropCam (http://dropcam.com/) и iVideon (http://ivideon.com/), позволяют принимать видеоданные с видеокамер наблюдения пользователей и транслировать эти видеоданные в браузер или на мобильное устройство.
Ограничением существующих систем видеонаблюдения и хранения является то, что видео не связано с производственным процессом. Пользователь должен вручную выбирать видеокамеру для мониторинга производственного процесса. Пользователь должен вручную просматривать многочасовые фрагменты видео, чтобы найти в нем нужное событие производства. Пользователь не может мгновенно проанализировать видеоданные, которые привязаны к интересующей его производственной операции.
При этом видео содержит массу полезной информации для управления организацией и производством, например, для обнаружения нарушений производственного процесса, контроля качества и сроков выполнения работ, расследования причин брака продукции, определение ключевых показателей эффективности персонала, повышения производительности труда.
Сегодня системы видеонаблюдения используются преимущественно службой безопасности организации и практически не используется другими сотрудниками организации. Технологический потенциал системы видеонаблюдения для приложений управления организацией и производством процессом сегодня не раскрыт.
В рамках настоящего изобретения термин «производственный процесс» обозначает процесс создания любых продуктов и услуг с участием человека в организации, а так же процесс по обслуживания инфраструктуры и материально-технической базы. Например, производственным процессом является промышленное производство строительных материалов, добыча и переработка полезных ископаемых, обслуживание оборудования электростанции, кормление животных на ферме, сервисное обслуживание и ремонт автомобиля, изготовление продуктов питания на фабрике, оказание медицинской помощи в больнице, проведение лабораторной работы в учебном заведении, обслуживание клиентов в отделении магазина, банка или парикмахерской, сортировка почтовых отправлений на почте, организация азартных игр в казино и др.
Одной из причин ограниченного применения систем видеонаблюдения для задач управления производственным процессом является отсутствие связи между видеоданными и данными производственного процесса. В организациях не формируются ссылки и не строится индекс, позволяющих сотруднику организации быстро найти видеоданные, соответствующие выбранным производственной операцией, исполнителю, изделию, номеру заказа или другим параметрам производственного процесса.
Прототипом выбрана система видеонаблюдения, например, сервисы iVideon компании ЗАО «Мобильные видеорешения» /3/.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ
Фиг.1. Одна из схем реализации способа разметки видеоданных производственного процесса.
Фиг.2. Пример видеоданных производственного процесса, отображающих исполнителя, производственное оборудование и исполнительское (пользовательское) устройство ввода.
Фиг.3. Пример пользовательского интерфейса исполнительское (пользовательское) устройство ввода.
Фиг.4. Пример отчета о выполнении операцией производственного процесса.
Фиг.5. Примеры начальных данных о зонах обслуживания видеокамер производства в виде плана производственного помещения и в виде таблицы соответствия видеокамер и производственных операций.
Фиг.6 Пример временного индекса видеоархива, полученного при помощи предлагаемого способа..
Фиг.7. Одна из схем реализации способа разметки видеоданных производственного процесса с использованием штрих кода.
КРАТКОЕ ОПИСАНИЕ
Заявлены способы систематизации видеоданных производственного процесса. Способ, согласно первого варианта включает следующие шаги:
- вводят данные о соответствии между, одной или более зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним рабочим местом выполнения производственной операции;
- формируют перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные;
- получают данные о производственной операции от одного или нескольких устройств ввода данных о производственной операции, содержащие, по крайне мере, значения одного или более идентификатора и одно или более рабочее место этой производственной операции;
- на основе полученных на предыдущих шагах данных выявляют, один или более источник видеоданных, в зоне обслуживания которого в данный момент выполняют вышеуказанную производственную операцию;
- формируют, одну или более ссылку, устанавливающую связь между видеоданными выявленного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и одним или более идентификатором из числа указанных в перечне разновидностей идентификаторов этой производственной операции.
Способ систематизации видеоданных производственного процесса согласно второго варианта включает, включает следующие шаги:
- вводят данные о соответствии между, по крайне мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним устройством ввода данных о производственной операции;
- формируют перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные;
- получают данные производственной операции от одного или нескольких устройств ввода данных о производственной операции, содержащие, по крайне мере, значения одного или более идентификатора и одно или более место этой производственной операции;
- на основе полученных на предыдущих шагах данных выявляют, один или более источник видеоданных, в зоне обслуживания которого в данный момент выполняют вышеуказанную производственную операцию;
- формируют, одну или более ссылку, устанавливающую связь между видеоданными выявленного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и одним или более идентификатором из числа указанных в перечне разновидностей идентификаторов этой производственной операции.
Ввод данных о соответствии между, по крайней мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним местом выполнения производственной операции может быть выполнен предварительно до начала выполнения производственного процесса.
Данные о производственной операции от одного или нескольких устройств ввода данных о производственной операции могут дополнительно содержать время начала, продолжительность и/или время окончания этой производственной операции.
В перечень идентификаторов (в индекс) видеоданных могут быть добавлены идентификаторы места выполнения производственной операции, идентификаторы исполнительского (пользовательского) оборудования, идентификаторы исполнителя, изделия, заказа, товара, услуги (продукта производственного процесса), посылки, контейнера, транспортного средства и/или технологической операции.
В перечень идентификаторов (в индекс) видеоданных могут быть добавлены так же данные о производственном процессе, например, показания приборов, таких как весы, термометр, счетчики-расходомеры жидкостей.
Ввод начальных данных о зоне обслуживания видеокамеры можно выполнять путем назначения типа производственного оборудования, которое находится в зоне обслуживания видеокамеры.
Ввод начальных данных о зоне обслуживания видеокамеры можно выполнять путем назначения типа производственных операций, которые выполняют в зоне обслуживания видеокамеры.
Ввод начальных данных о зоне обслуживания видеокамерой можно выполнять на этапе планирования производственной операции.
Ввод начальных данных о зоне обслуживания видеокамерой можно выполнять непосредственно перед началом производственной операции.
Ввод начальных данных о производственной операции можно выполнять заранее, например, на этапе формирования плана производства.
Ввод начальных данных о производственной операции можно выполнять в процессе производства.
Ввод начальных данных о производственной операции может выполнять исполнитель производственной операции.
Ввод начальных данных о производственной операции может выполнять сотрудник отдела планирования производства, руководитель исполнителя или заказчик производства.
Ввод начальных данных о производственной операции может выполняться автоматически на основе сигналов производственного оборудования без прямого участия исполнителя.
Зоны обслуживания можно задавать в виде таблицы ссылок, которая устанавливает взаимосвязь между зоной обслуживания видеокамеры, и каждым идентификатором числа указанных в перечне разновидностей идентификаторов этой производственной операции.
Ссылку можно формировать динамически по запросу пользователя на основе данных о производственной операции и/или событий видеоанализа и данных о зоне обслуживания видеокамеры.
Заявлены системы разметки видеоданных производственного процесса для реализации заявленных способов,
Система, согласно первого варианта, включает компьютерную систему, источник видеоданных, устройство ввода данных о производственной операции, причем, компьютерная система включает:
- один или более процессоров,
- устройство для хранения данных,
- одну или более программ;
причем одна или более программ хранится на устройстве для хранения данных и исполняются на одном или более процессоре, причем одна или более программ включают инструкции для управления компьютерной системой, реализующей заявленный способ, причем набор инструкций, по крайней мере, следующий:
- вводить начальные данные о соответствии между, по крайне мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним рабочим местом выполнения производственной операции;
- вводить перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные;
- получать данные о производственных операциях, поступающие, от одного или нескольких устройств ввода данных о производственных операциях;
- выявить один или более источник видеоданных, в зоне обслуживания которого происходит производственная операция;
- формировать, по крайней мере, одну ссылку, устанавливающую связь видеоданными от вышеуказанного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и идентификатором этой производственной операции.
Система, согласно второго варианта, включает компьютерную систему, источник видеоданных, устройство ввода данных о производственной операции, причем, компьютерная система включает:
- один или более процессоров,
- устройство для хранения данных,
- одну или более программ;
Одна или более программ может хранится на устройстве для хранения данных и исполняются на одном или более процессоре,
Одна или более программ включает инструкции для управления компьютерной системой, реализующей заявленный способ,
причем набор инструкций, по крайней мере, следующий:
- вводить начальные данные о соответствии между, по крайне мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним устройством ввода данных о производственной операции
- получать данные о производственных операциях, поступающие, от одного или нескольких устройств ввода данных о производственных операциях;
- вводить перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные;
- выявить один или более источник видеоданных, в зоне обслуживания которого происходит производственная операция;
- формировать, по крайней мере, одну ссылку, устанавливающую связь видеоданными от вышеуказанного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и идентификатором этой производственной операции.
Устройство ввода данных о производственной операции может быть стационарным или мобильным.
Устройство ввода данных о производственной операции может располагаться удаленно или может быть встроено в производственное оборудование.
Устройство ввода данных о производственной операции может быть реализовано на базе стандартного или специализированного компьютера, рабочей станции, планшетного компьютера, мобильного и/или персонального устройства.
Устройство ввода данных о производственной операции может быть выполнено как считыватель радиочастотных меток RFID (Radio-frequency identification), NFC (Near field communication) или подобное.
Устройство ввода данных о производственной операции может быть выполнено как считыватель одно- и/или двумерных штриховых кодов.
Устройство ввода данных о производственной операции может использовать вышеуказанный источник видеоданных или дополнительный источник видеоданных для автоматического распознавания идентификаторов изделий, посылок, контейнеров, грузовых автомобилей, вагонов.
В системе может использоваться дополнительно детектор движения или детектор присутствия человека в обслуживаемой зоне для формирования данных о производственном процессе и/или проверки их подлинности.
Ссылки могут быть комбинированными.
Устройство ввода данных о производственной операции может использовать голосовые команды и/или жесты исполнителя.
Устройство ввода данных о производственной операции может быть выполнено в виде программного или аппаратного модуля видеоанализа.
Ссылка может быть гиперссылкой.
Ссылка может быть сформирована из ранее записанных видеоданных. Ссылка на видеоданные может содержать один или комбинацию параметров из следующего списка:
- уникальная символьная последовательность,
- гиперссылка,
- унифицированный идентификатор ресурса (URI),
- идентификатор источника видеоданных,
- идентификатор зоны обслуживания источника видеоданных,
- временная метка начала производственной операции,
- временная метка окончания производственной операции,
- идентификатор производственной операции,
- идентификатор исполнителя,
- идентификатор производимого изделия,
- идентификатор выполняемого заказа;
- номер обрабатываемого объекта;
- номер партии обрабатываемых объектов.
ПОДРОБНОЕ ОПИСАНИЕ
Настоящее изобретение направлено на устранение описанной проблемы, препятствующей широкому применению системы видеонаблюдения для задач управления производственным процессом. Изобретение позволяет сформировать ссылку на видеоданные, связанные с событием производственной операцией или иным событием производственного процесса, а так же построить индекс видеоданных на основе операций или событий, таких как начало и конец производственной операции, приход или уход исполнителя на/с рабочего места, приход или уход заказчика, поступление изделия или материалов.
Ссылку на видеоданные производственной операции формируют на основе данных о производственных операциях и зонах обслуживания (зоне наблюдения) видеокамер.
Наряду с видеокамерой наблюдения, используют устройство ввода данных о сценарии производственного процесса, что позволяет разметить видеоданные с учетом событий производственного процесса.
К индексу видеоданных, поступающих с видеокамеры, добавлен идентификатор производственной операции, возможно происходящей рядом с этой видеокамерой или в зоне наблюдения этой видеокамеры. В индекс видеоданных может быть добавленные идентификаторы исполнителя, изделия, заказа, а так же иные данные о производственном процессе. Например, в индекс могут записываться измерения показаний приборов, таких как весы, термометр, счетчики-расходомеры жидкостей.
Техническим результатом настоящего изобретения является повышение эффективности использования камер видеонаблюдения для контроля производственного процесса в реальном масштабе времени, ускорение и повышение точности поиска видеоданных, содержащих изображение одного или множества исполнителей, производственной операции, производственного оборудования, изделия, заказчика.
Известные способы и устройства не позволяют достичь заявленный технический результат.
Для достижения заявленного технического результата предлагается способы систематизации видеоданных производственного процесса, включающие следующие шаги:
Вводят начальные данные о зоне обслуживания (зоне наблюдения) видеокамеры, размещенных на производстве. Зону обслуживания характеризуют ее геоположением, (местоположением) размером и геометрией зоны обзора. Согласно первого варианта вводят данные о соответствии между, по крайне мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним рабочим местом выполнения производственной операции
Согласно второго варианта вводят данные о соответствии между, по крайне мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним устройством ввода данных о производственной операции;
Далее формируют перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные;
Получают данные о технологической (производственной) операции от одного или нескольких устройств ввода данных о технологической (производственной) операции, содержащие, по крайне мере, значения одного или более идентификатора и одно или более рабочее место этой производственной операции.
На основе полученных на предыдущих шагах данных выявляют, один или более источник видеоданных, в зоне обслуживания которого в данный момент выполняют вышеуказанную производственную операцию. Это определяют путем сравнения известного места выполнения производственной операции с данными о зоне обслуживания, по крайней мере, одного источника видеоданных.
Формируют, одну или более ссылку, устанавливающую связь между видеоданными выявленного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и одним или более идентификатором из числа указанных в перечне разновидностей идентификаторов этой производственной операции.
Ввод начальных данных о зоне обслуживания видеокамеры может происходить путем задания зоны обслуживания видеокамеры на плане производственного помещения. Зона обслуживания видеокамеры может быть задана при помощи точки, многоугольника или любой другой геометрической фигуры, характеризующей зону обслуживания видеокамеры.
Ввод начальных данных о зоне обслуживания видеокамеры может происходить путем задания идентификаторов оборудования или идентификаторов рабочих мест, находящихся в зоне обслуживания этой видеокамеры.
Ввод начальных данных о зоне обслуживания видеокамеры может происходить путем задания идентификаторов производственных операций, осуществляемых в зоне обслуживания этой видеокамеры.
Ввод данных о соответствии между по крайней мере одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним местом выполнения производственной операции может быть выполнен предварительно до начала выполнения производственного процесса.
Данные о производственной операции от одного или нескольких устройств ввода данных о производственной операции могут дополнительно содержать время начала, продолжительность и/или время окончания этой производственной операции.
В перечень идентификаторов (в индекс) видеоданных могут быть добавлены так же данные о производственном процессе, например, показания приборов, таких как весы, термометр, счетчики-расходомеры жидкостей.
Ввод начальных данных о зоне обслуживания видеокамеры выполняют путем назначения идентификатора или типа производственного оборудования, которое находится в зоне обслуживания видеокамеры.
Ввод начальных данных о зоне обслуживания видеокамеры выполняют путем назначения типа производственных операций, которые выполняют в этой зоне. Ввод начальных данных о зоне обслуживания видеокамерой выполняют на этапе планирования производственной операции.
Зоны обслуживания могут быть заданы в виде таблицы, которая устанавливает взаимосвязь между видеокамерой и производственным оборудованием, типом производственной операции, производственным заказом, типом изделия, исполнителем или другой сущностью производственного процесса. Таблица может содержать идентификаторы видеокамер и идентификаторы вышеуказанных сущностей производственного процесса.
Зоны обслуживания задают в виде таблицы ссылок, которая устанавливает взаимосвязь между зоной обслуживания видеокамеры, и каждым идентификатором числа указанных в перечне разновидностей идентификаторов этой производственной операции.
Ссылку формируют динамически по запросу пользователя на основе данных о производственной операции и/или событий видеоанализа и данных о зоне обслуживания видеокамеры.
Ввод начальных данных о производственной операции и/или о зоне обслуживания видеокамерой выполняют заранее, например, на этапе планирования производственной операций, на этапе формирования плана производства или непосредственно перед начальном этой производственной операции.
Ввод начальных данных о производственной операции может также выполнен в процессе производства.
Ввод начальных данных о производственной операции может выполнять исполнитель производственной операции, сотрудник отдела планирования производства, руководитель исполнителя или заказчик производства.
Например, исполнитель производственной операции может считывать идентификатор рабочего места, например, штрих код или радиочастотную метку при помощи специального считывателя. Полученный идентификатор, согласно настоящему изобретению, может быть использован для автоматического определения видеокамеры, в зоне обслуживания которой осуществляется производственная операция.
Ввод начальных данных о производственной операции может выполняться автоматически на основе сигналов производственного оборудования без прямого участия человека.
Например, производственное оборудование может автоматически считывать идентификатор изделия, контейнера или транспортного средства (номер грузового автомобиля, номер вагона).
Видеоданные из источника видеоданных могут быть записаны в устройстве хранения, например, на жестком диске, сетевом хранилище, видеорегистраторе или в вирутализированном хранилище, таком как Amazon Glacier (http://en.wikipedia.org/wiki/Amazon_Glacier) или аналогичном.
Видеоданные из источника видеоданных могут быть отображены на устройстве отображения пользователю, например, на мониторе компьютера или экране мобильного устройства.
Данные о производственной операции могут быть записаны в устройство хранения.
Ссылка может быть записана в индекс видеоданных на устройстве хранения для последующего поиска видеоданных с использованием различных запросов, например, по запросу идентификатора производственной операции, исполнителя, изделия, номера заказа, времени выполнения операции.
Идентификатор производственной операции может назначаться программным обеспечением компьютерной системы и содержать цифры или иные символы.
Вместо идентификатора производственной операции можно использовать идентификатор (номер) заказа, исполнителя, изделия или материала.
Идентификатор производственной операции может быть составным, то есть включать идентификаторы исполнителя, изделия, заказа или материала.
Перечень разновидностей идентификаторов для разметки может быть запрограммирован разработчиком, и набор программных инструкций может не включать этого шага.
Заявлено два варианта системы разметки видеоданных производственного процесса для реализации настоящего изобретения.
Система включает вычислительное устройство, источник видеоданных, устройство ввода данных о производственной операции. Вычислительное устройство включает: - компьютер, содержащий один или более процессоров, - устройство для хранения данных, - одну или более программ. Указанную одну или более программу хранят на устройстве для хранения данных и исполняют на одном или более процессоре. Указанная программа включают инструкции для управления компьютерной системой, реализующей заявленный способ, причем набор инструкций, по крайней мере, следующий:
- согласно первого варианта, на первом шаге - вводят начальные данные о соответствии между, по крайне мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним местом выполнения производственной операции;
- согласно второго варианта на первом шаге- вводят начальные данные о соответствии между, по крайне мере, одной зоной обслуживания (зоной наблюдения) источника видеоданных (видеокамеры) и, по крайне мере, одним устройством ввода данных о производственной операции
- на втором шаге получают данные о производственных операциях, поступающие, от одного или нескольких устройств ввода данных о производственных операциях;
- на третьем шаге выявляют один или более источник видеоданных, в зоне обслуживания которого происходит производственная операция;
- вводить перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные;
- формируют, по крайней мере, одну ссылку, устанавливающую связь фрагмента (portion) видеоданных от вышеуказанного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и идентификатором этой производственной операции.
Устройство ввода данных о производственной операции может быть стационарным или мобильным
Устройство ввода данных о производственной операции может располагаться непосредственно на месте производства. В этом случае ввод данных осуществляет исполнитель производственной операции или другой назначенный сотрудник на рабочем месте выполнения операции.
Устройство ввода данных о производственной операции может располагаться удаленно. В этом случае ввод данных осуществляет сотрудник отдела планирования производства, руководитель исполнителя или заказчик производства, другой назначенный сотрудник.
Устройство ввода данных о производственной операции может быть мобильным. Например, начальник цеха может использовать мобильное устройство ввода данных о производственных операциях в различных точках цеха.
Источником видеоданных может быть ГР-видеокамера, IP-видеосервер (видеокодер), медиасервер такой как Wowza (http://wowza.com/) или визуализированный («облачный») сервис видеонаблюдения, такой как iVideon (http://iVideon.com/).
Источником видеоданных может быть аналоговая камера или камера машинного зрения с интерфейсом GigE Vision (Gigabit Ethernet Vision), USB (Universal Serial Bus) или HD-SDI (High Definition Serial Digital Interface).HcT04HHK0M видеоданных может быть видеокамера, встроенная в мобильное устройство исполнителя. При этом видеоданные о производственной операции и/или месте осуществления этой производственной операции могут вводиться через это мобильное устройство.
Устройство ввода данных о производственной операции может быть встроено в производственное оборудование. В этом случае ввод данных осуществляют автоматически на основе сигналов производственного оборудования без прямого участия исполнителя.
Устройство ввода данных о производственной операции может представлять собой сенсорную панель или кнопочную панель, при помощи которой исполнитель подает сигнал о начале и об окончании производственной операции.
Устройства ввода данных о производственной операции может быть так же использовано для ввода дополнительных данных о технологической операции, например, идентификатора исполнителя, изделия, номера заказа и других данных производственного процесса и других.
Устройства ввода данных о производственной операции может быть реализовано на базе стандартного или специализированного компьютера, рабочей станции, планшетного компьютера, мобильного устройства, персонального устройства.
Устройство ввода данных о производственной операции может представлять собой считыватель радиочастотных меток RFED (Radio-frequency identification), NFC (Near field communication), а так же считыватель штриховых кодов («баркодов», QR-кодов и прочих). Например, считыватель таких меток может использоваться на производстве, на складе, в логистическом центре торговой сети, в сортировочном узле почты для отслеживания компонентов, изделий, товаров, грузов или посылок по идентификатору. Считыватель меток используют для формирования ссылки на видео, содержащее объект с меткой - идентификатором. Полученный идентификатор может быть использован для разметки видеоархива и поиска объектов в нем.
Устройство ввода данных о производственной операции представляет собой считыватель одно- и/или двумерных штриховых кодов для формирования данных о производственном процессе и/или проверки их подлинности.
В некоторых реализациях настоящего изобретения в качестве идентификатора производственной операции или объекта производства могут использоваться комбинированные метки с использованием нескольких технологий, описанных выше, или других подходящих технологий, которые будут изобретены позже.
Устройство ввода данных о производственной операции использует голосовые команды и/или жесты исполнителя
Ссылка может быть гиперссылкой.
Ссылка может указывать на фрагменты ранее записанных видеоданных для получения архивного видео, а так же указывать на источник видеоданных для получения «живого» видео (видео в реальном масштабе времени) в процессе производственной операции.
Ссылка на видеоданные может быть сформирована по запросу пользователю в ручном, полуавтоматическом или автоматическом режиме.
Устройство ввода данных о производственной операции может представлять собой программный и/или аппаратный модули видеоанализа. При этом данные о производственной операции формируют на основе результатов работы видеоаналитики (видеоанализа). Могут быть использованы детекторы присутствия (отсутствия) человека на месте, в обслуживаемой зоне, детекторы входа (выхода) человека в зону производственной операции, появления (исчезновения) изделия, движения в зону производственной операции.
Ввод данных о производственной операции может осуществляться заранее, например, в режиме формирования плана производства, или в реальном масштабе времени - в процессе производства.
Модули видеоанализа могут быть использованы для контроля производственной операции. Например, в случае обнаружения активности в зоне производственной операции при отсутствии в то время, когда по графику производственной операции никаких действий происходить не должно, уведомляют исполнителя, технолога или иных назначенных для контроля сотрудников организации о начале незапланированной операции. В случае отсутствия активности в зоне производственной операции, когда по графику запланирована производственная операция, уведомляют сотрудников организации о наличии несоответствия плановых и фактических работ.
На основе радиосигналов, поступающих с персональных устройств или иных радиочастотных идентификаторов может быть определено местоположение исполнителей производственной операции.
Видеозапись производиться в событийном режиме. Начало записи может производиться в момент начала производственной операции или по детектору движения, а окончание записи - по окончанию операции. В некоторых случаях видеозапись производят в непрерывном режиме.
Компьютерная система дополнительно может отображать записанные видеоданные и связанные с ними идентификаторы производственных операций, исполнителей, изделий и иную технологическую информацию на устройстве отображения.
Ссылку, устанавливающую связь между записанными видеоданными, от источника видеоданных, и данными о производственной операции, полученными от источника данных о производственных операциях, сохраняют на устройстве хранения, например, на компьютере, сервере, видеорегистраторе, сетевом или облачном хранилище.
Ссылка может храниться в базе данных любого типа, в документах, веб-страницах.
Ссылка может представлять собой гиперссылку, унифицированный идентификатор ресурса (Uniform Resource Identifier, URI), комбинацию идентификатора видеокамеры и временной метки, идентификатор производственной операции, идентификатор видеозаписи, имя файла (например, в контейнере МР4, MKV, OGV, WMA), содержащую видеозапись производственной операции.
Ссылка может представлять собой гиперссылку на источник потокового видео, например, источник передающий видеоданные по протоколам RTSP (Real Time Streaming Protocol), RTMP (Real Time Messaging Protocol), HLS (HTTP Live Streaming) и DASH (Dynamic Adaptive Streaming over HTTP).
Ссылка может формироваться динамически по запросу пользователя на основе данных о производственной операции и/или событий видеоаналитики и данных о зоне обслуживания видеокамеры.
Видеоданные производственной операции могут отображаться на устройстве отображения, например, на мониторе сотрудника организации, в веб-браузере, на мобильном устройстве.
Согласно настоящему изобретению, описанный метод может быть использован для контроля производственного процесса как в оперативном режиме (в реальном масштабе времени по ходу производственной операции), так и в ретроспективном режиме (после завершения производственной операции).
В оперативном режиме, ссылка на видеоданные может быть передана пользователю, например, специалисту отдела контроля качества, в момент начала производственной операции для контроля этой операции. Пользователь может проанализировать только что записанное видео с момента начало производственной операции, а так же живое видео, поступающее в реальном масштабе времени с места производства.
Если пользователю необходимо просмотреть текущее статус производственной операции, то вместо ссылки на записанные видеоданные, может передаваться ссылка на поток видеоданных непосредственно от источника видеоданных (камеры).
В ретроспективном режиме, ссылка на видеоданные может быть включена в результаты поиска по архиву событий производства или в отчет о производственном процессе. Такая ссылка позволяет пользователю быстро начать просмотр видеоданных, связанных с выбранной производственной операций.
Например, пользователь может просматривать в браузере Интернет список производственных операций, где были нарушены плановые сроки выполнения операции, и быстро анализировать видеозаписи, содержащие эти производственные операции.
Настоящее изобретение может быть использовано совместно с существующими онлайн-сервисам видеонаблюдения и видеохранения, например, YouTube (http://voutube.com/), DropCam (http://dropcam.com/), iVideon. (http://ivideon.com/).
Система разметки видеоданных производственного процесса для реализации настоящего изобретения включает компьютерную систему, источник видеоданных, устройство ввода данных о производственной операции, причем, компьютерная система включает: один или более процессоров, устройство для хранения данных, одну или более программ; где одна или более программ хранятся на устройстве для хранения данных и исполняются на одном или более процессоре, причем одна или более программ включают инструкции. Инструкции предназначены для управления компьютерной системой, реализующей заявленный способ. Набор инструкций следующий:
Вводить начальные данные о зоне обслуживания, характеризующейся геоположением (месторасположением) и зоной обзора, по крайней мере, одного источника видеоданных.
Получать данные о производственных операциях, поступающие, от одного или нескольких устройств ввода данных о производственных операциях.
Определить, один или более идентификаторов источника видеоданных, в зоне обслуживания которого происходит производственная операция путем сравнения известного места выполнения производственной операции с данными о зоне обслуживания, по крайней мере, одного источника видеоданных.
Формировать, по крайней мере, одну ссылку, устанавливающую связь видеоданными от вышеопределенного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и идентификатором этой производственной операции.
Компьютерная система может осуществлять запись видеоданных в непрерывном режиме или в событийном режиме, когда осуществляется производственная операция.
Компьютерная система может осуществлять запись данных о производственных операциях, причем записываем данные могут быть использованы как индекс видеоданных для последующего поиска.
Ссылка на видеоданные может содержать один или комбинацию параметров из следующего списка: уникальная символьная последовательность, гиперссылка, унифицированный идентификатор ресурса (URI), идентификатор источника видеоданных, идентификатор зоны обслуживания источника видеоданных, временная метка начала производственной операции, временная метка окончания производственной операции, идентификатор производственной операции, идентификатор исполнителя, идентификатор производимого изделия, идентификатор выполняемого заказа.
Ссылка на видеоданные может содержать один или комбинацию параметров из следующего списка:
- уникальная символьная последовательность,
- гиперссылка,
- унифицированный идентификатор ресурса (URI),
- идентификатор источника видеоданных,
- идентификатор зоны обслуживания источника видеоданных,
- временная метка начала производственной операции,
- временная метка окончания производственной операции,
- идентификатор производственной операции,
- идентификатор исполнителя,
- идентификатор производимого (обрабатываемого) изделия,
- идентификатор выполняемого заказа;
- номер обрабатываемого объекта;
- номер партии обрабатываемых объектов.
Источник видеоданных и устройство ввода данных о производственной операции могут быть объединены в одно устройство. В этом случае взаимосвязь зоны обслуживания источника видеоданных и устройство ввода данных о производственной операции может быть заранее настроен производителем данного объединенного устройства.
Источником видеоданных может быть поворотная видеокамера (PTZ), а зону обслуживания видеокамеры уточняют, в т.ч. автоматически, после каждого изменения положения поворотной видеокамеры. Поворотная видеокамера может быть настроена на точки производства при помощи заранее запрограммированных позиций.
Ссылки, устанавливающие связь между записанными видеоданными и этапами производственной операцией можно хранить на вспомогательной компьютерной системе.
В качестве источника видеоданных может выступать одно из следующих устройств: видеокамера, видеорегистратор, видеосервер, видеокодер или другое подходящее.
В качестве источника видеоданных может быть видеокамера, встроенная в мобильное устройство исполнителя, причем видеоданные о производственной операции и/или месте осуществления этой производственной операции могут вводиться через это мобильное устройство.
Идентификатор производственной операции может быть как уникальным, так и неуникальным. Например, в качестве неуникального уникального идентификатора может быть использовать код обслуживания оборудования или тип производимого изделия.
В описанной реализации настоящего изобретения можно использовать специальное программное обеспечения (приложение) для производственного оборудование и персонального мобильного устройства, которое регистрирует данные о технологических операциях и реализует обратную связь с исполнителем. Например, специальное программное обеспечения может отображать запланированные производственные операции и информировать исполнителя путем подачи звукового сигнала в случае, если исполнитель забыл подать сигнал о начале или завершении операции.
Компьютерная система может быть виртуализирована или быть «облачной», то есть, не ограничена реализацией, физической конфигурацией или географическим положением аппаратного обеспечения.
Компьютерная система может быть может записывать видеоданные в событийном режиме по сигналу от источника данных о производственным процессе.
Компьютерная система может использовать детектор движения и/или видеоаналитику для более точного индексирования и поиска видеоданных о производственном процессе. При этом детектор движения и/или видеоаналитика могут быть встроены в видеокамеру, либо работать на сервере.
Например, детектор движения и/или видеоаналитика может быть использована для обнаружения фактов несоответствия производственного плана и фактической ситуации на производстве.
ПРИМЕРЫ ОСУЩЕСТВЛЕНИЯ ИЗОБРЕТЕНИЯ
На фиг.1 представлена одна из схем реализации способа разметки видеоданных производственного процесса. Видеокамера видеонаблюдения 11 установлена для наблюдения за производственным процессом. В зоне обслуживания видеокамеры и места производственной операции 16 находится производственное оборудование 18 и люди, исполнители этого процесса, 17. Видеоданные поступает с видеокамеры по каналу связи 12 на сервер обработки и хранения 13. На этапе конфигурирования настоящей системы, вводят начальные данные о зоне обслуживания видеокамеры, в результате чего видеокамера привязывается к конкретному производственному оборудованию или месту производственной операции. Устройство ввода данных о производственной операции 15 может быть стационарно зафиксированным в зоне производственной операции, а так же может быть удаленным и/или мобильным (переносимым). По ходу эксплуатации системы, исполнитель 17 или иной сотрудник организации вводит данные о начале и окончании производственной операции, которые поступают по каналу связи 14 на сервер обработки и хранения 13. Сервер 13 записывает одновременно полученные видеоданные и данные о производственных операциях.
Данные о начале и об окончании производственной операции могут быть введены по ходу производства или заранее, во время планирования производства.
Сервер 13 индексирует видеоданные на основе событий производственного процесса, получаемых от устройства ввода данных о производственной операции 15 и/или от производственного оборудования 18.
Камера 11 и/или сервер 18 осуществляют аналитическую обработку видеоданных камеры 11. В случае обнаружения движения людей в зоне обслуживания видеокамеры 16 без ввода данных о начале производственной операции, то сервер формирует сообщение для исполнителя 17 о необходимости ввести эти данные. Такое голосовое сообщение может передано через устройство ввода 15 или громкоговорящую связь.
В случае отсутствия движения в зоне обслуживания видеокамеры 16 свыше установленного времени, сервер может автоматически сформировать метку видеоданных об окончании производственной операции, причем метка может соответствовать моменту времени самого последнего движения в зоне 16.
Удаленный пользователь 112 через свое рабочее место 111 может подключиться по каналу связи 110 к серверу 13 для получения отчетов и видеоданных о производственных операциях. Удаленный пользователь 112 может быть менеджер организации, сотрудник центра технической поддержки, сотрудник центра технологического мониторинга (контроля качества), обучающий персонал.
Каналы связи 12, 14 и 110 могут быть проводными или беспроводными, частными (private) или общего пользования (public).
Технический результат настоящего изобретения в данном случае достигается следующим образом.
Сервер формируют следующие отчеты для пользователя 112: 1) производственные операции (выполняемые, законченные, невыполненные, задержанные); 2) исполнители с указанием числа выполненных и невыполненных операций в установленный срок; 3) изделия (заказы) с указанием числа изготовленных или неизготовленных изделий (заказов) в установленный срок.
Отчет содержит гиперссылки, позволяющие удаленному пользователю 112 просмотреть видеоданные по каждым производственной операции, исполнителю, изделию (заказу).
Кроме этого удаленный пользователь 112 получает сообщение на экране своего рабочего места 111 о начале и об окончании производственной операции. Пользователь может просмотреть «живое» в видео с установленных видеокамер, где происходит выбранная им производственная операция, а так же просмотреть записанное видео, соответствующее выбранным им производственной операции.
Удаленный пользователь 112 имеет средства голосовой связи с исполнителем 17, которые позволяет пользователю оперативно связаться с исполнителем и сообщить о выявленных производственных проблемах или ошибок исполнителя. Средства голосовой связи могут быть встроены в устройство ввода данных о производственной операции 15, в производственное оборудование 18 и в рабочее место удаленного пользователя 111.
В одной реализации изобретения, пользователю 112 передается ссылка на видеоданные, записанные на сервере 13.
В другой реализации изобретения пользователю 112 передается ссылка на видеоданные, содержащие происходящую производственную операцию и передаваемые непосредственно с видеокамеры 11 минуя подсистему записи сервера 13.
Производственное оборудование 18 может выполнять функции устройства ввода данных о производственной операции 15, передавая данные о начале и об окончании операции по каналу связи 19.
Пример видеоданных, полученных с видеокамеры 11 представлен на рис.2.
Пример графического интерфейса пользователя (GUI) устройство ввода данных 15 представлен на фиг.3.
Пример отчетов о производственном процессе, отображаемых на рабочем месте удаленного пользователя 11, представлен на фиг.4.
Пример начальных данных о зонах обслуживания видеокамер представлен на фиг.5.
Пример индекса видеоархива, представлен на фиг.6.
На фиг.2 представлен пример видеоданных производственного процесса, отображающих исполнителя 17, производственное оборудование 18 и устройство ввода данных о производственной операции 15.
На фиг.3 представлен пример пользовательского интерфейса устройства ввода данных о производственной операции. Настоящий интерфейс может быть реализовано на базе планшетного компьютера с сенсорным экраном. Интерфейс задержит следующие элементы:
Перечень изделий и производственных операций 31 содержит список запланированных производственных операций, а так же список незапланированных операций, которые должен выполнять исполнитель 17 на месте производства производственной операции 16. Текущая (выполняемая) операция выделена цветом.
Фотография и текстовый идентификатор исполнителя 32 указаны для того чтобы избежать ошибки идентификации исполнителя 17.
Фотография и текстовый идентификатор места производственной операции 33 указаны для того чтоб избежать ошибки идентификации места производственной операции 16.
Описание производственной операции 34 содержит информацию, полезную для исполнителя при выполнении производственной операции, например, особенности технологического процесса, контрольные показания измерительных приборов.
Кнопка начала производственной операции 35 позволяет сформировать временную метку и ссылку на видеоданные начала производственной операции.
Кнопка окончания производственной операции 36 позволяет сформировать временную метку и ссылку на видеоданные окончания производственной операции.
Кнопка экстренного вызова 37 позволяет исполнителю оперативно связаться с центром технической поддержки в случае возникновении проблемы.
Схема или фотография изделия (заказа, клиента) 38 позволяет исполнителю проконтролировать корректность вводимой информации и выполнение производственной операции.
Кнопка выбора места операции 39 позволяет выбрать место производственной операции в том случае, когда настоящее устройство ввода данных является мобильным (переносным). Если устройство стационарно, то кнопка 39 не требуется.
Кнопка 310 позволяет открыть окно ввода текста и позволяет исполнителю ввести комментарии о проделанных работах.
На фиг.4 представлен пример отчета о производственном процессе для руководителя организации, полученного при помощи компьютерной системы фиг.1. Отчет включает:
Линейный график числа запланированных и выполненных заказов (производственных операций, изготовленных изделий) 41. Верхняя линия соответствует числу запланированных задач, а нижняя - выполненных. Руководитель может указать любую точку графика выполненных заказов и просмотреть список этих заказов, как показано в таблице 43.
Круговая диаграмма задержки заказов 42 показывает число заказов, выпаленных в срок, задержанных на 1 час, задержанных на 2 часа, задержанных на 3 и более часов. Руководитель может щелкнуть по любому сектору круговой диаграммы 42 и просмотреть список заказов, соответствующей сектору, как показано в таблице 43.
Таблица качества и сроков выполнения заказов 43 содержит порядковый номер заказа (производственной операции), идентификатор исполнителя, качество выполнения заказа, опоздание и ссылок на видео выполнения заказа. Каждый элемент таблицы является гиперссылкой, которая позволяет верифицировать указанные данные. Номер и содержание заказа определяют на этапе планирования. Исполнителя, время начала и время окончания работа над заказом определяют при помощи системы на фиг.1. Качество работ определяет специалист службы качества на основе видеоданных по ссылке, сформированной системой. Руководитель может выбрать для просмотра видео, содержащие каждую конкретную заданную операцию и просмотреть ее, воспользовавшись ссылкой «СМОТРЕТЬ», сформированной системой.
На фиг.5 представлен пример начальных данных о зоне обслуживания видеокамеры. Начальные данные содержат план производственного помещения 51, графическое обозначение зон обслуживания видеокамер 52-53 и таблицу соответствия идентификаторов видеокамер и идентификаторов производственных операций 54. Таблица 54 может формировать вручную пользователем или автоматически на основе плана 51. План 51 или таблица 54 позволяют автоматически определить идентификатор видеокамеры, в зоне которой происходит заданная производственная операция.
На фиг.6 представлен пример временного индекса архива. Пример содержит индекс для двух видеокамер 61 и 64. В зоне обслуживания видеокамеры 61 происходят производственные операции 62 и 63. В зоне обслуживания видеокамеры 64 происходят производственные операции 65 и 66.
На фиг.7 представлена одна из схем реализации способа разметки видеоданных производственного процесса с использованием штрихкода. Конвейер 70 сортировочного узла почты или логистического центра доставляет посылку 71 с меткой в виде штрихкода на место производственной операции 74 со другим штрикодом. Местом производственной операции может быть, например, рабочий стол или в контейнер. Место производственной операции 74 находится в зоне обслуживания видеокамеры 72. Устройством ввода данных о производственной операции является ручной считыватель штрихкодов 73, ассоциированным с исполнителем. К компьютерной системе 75 подключены видеокамера 72 и считыватель штрих-кодов 73. К этой же компьютерной системе могут быть подключены другие видеокамеры и считыватели штрихкодов, которые не показаны на фиг.7. Введены данные о соответствии зоны действия видеокамеры 72 и местом производственной операции 74. В перечень разновидностей идентификаторов включены: 1) идентификатор камеры; 2) идентификатор исполнителя (имеющий однозначную связь со считывателем штрих-кодов 73); 3) идентификатор посылок; 4) идентификатор места производственной операции.
Компьютерная система содержит дисковую подсистему хранения и записывает видеоданные, поступающее с видеокамеры 72 и данных о производственном процессе, поступающее со считывателя штрих-кодов 73.
Исполнитель считывает при помощи считывателя штрих-кодов 73 идентификатор места производственный операции 74. Компьютерная система автоматически определяет видеокамеру 72, в зоне обслуживания которой осуществляется производственная операция на основе ранее введенных данных о соответствии зоны действия видеокамеры 72 и идентификатора места производственной операции 7). Компьютерная система фиксирует связь между видеокамерой 72 (местом производственной операции) и считывателем штрих-кодов 73 (исполнителем).
Если исполнитель забывает считать идентификатор места производственной операции, то компьютерная система может автоматически информировать исполнителя по громкоговорящей связи после обнаружения движения в зоне действия видеокамеры 72.
Если в компьютерной системе зарегистрирован план работ исполнителей для данного места производственной операции, то компьютерная система может автоматически идентифицировать исполнителя на основе этого плана.
Исполнитель считывает при помощи считывателя штрих-кодов 73 идентификатор посылки 71. Компьютерная система автоматически определяет видеокамеру 72, в зоне обслуживания которой осуществляется производственная операция на основе связи, зафиксированной на предшествующем шаге.
Технический результат настоящего изобретения в данном случае достигается следующим образом.
Компьютерная система формирует ссылку на видеоданные, поступающие с видеокамеры 72, которая содержат: 1) идентификатор видеокамеры; 2) идентификатор места производственной операции; 3) идентификатор исполнителя, ассоциированный с ручным сканером штрих-кодов; 4) дата и время производственной операции; 5) идентификатор посылки. Полученная ссылка записывает в индекс видеоархива компьютерной системы.
Местом производственной операции может быть контейнер для посылок. Если штрих-код контейнера размещается наверху, то идентификатор места производственной операции (идентификатор контейнера) может быть получен компьютерной системой в автоматическом режиме путем считывания штрих-кода с контейнера через видеокамеру 72.
Изобретение промышленно применимо, поскольку использует промышленно изготовленные и промышленно применимые ресурсы.
Хотя данное изобретение описано примером его реализации, это описание не является ограничивающим, но приведено лишь для иллюстрации и лучшего понимания существа изобретения, объем которого определяется прилагаемой формулой изобретения.
СПИСОК ЛИТЕРАТУРЫ.
1. Дамьяновски В., CCTV. Библия видеонаблюдения. Цифровые и сетевые технологии, ООО «Ай-Эс-Эс Пресс», 2006, 478 с, ISBN: 5-87049-260-2
2. Fredrik Nilsson, Intelligent Network Video: Understanding Modern Video Surveillance Systems, CRC Press, 2008, ISBN-10: 1420061569
3. Сервис «iVideon» компании ЗАО «Мобильные видеорежения» http://ivideon.ru/
4. Птицын Н.В., Видеоаналитика, 2013, http://svnesis.ru/technology/videoanalitika
Изобретение относится к способам систематизации видеоданных производственного процесса. Техническим результатом является повышение эффективности использования камер видеонаблюдения для контроля производственного процесса в реальном времени, ускорение и повышение точности поиска видеоданных. Способ включает следующие шаги: ввод данных о соответствии между зоной обслуживания видеокамеры и рабочим местом или устройством ввода данных выполнения производственной операции; формирование перечня разновидностей идентификаторов для разметки; получение данных о производственной операции от устройств ввода данных; на основе полученных данных выявление источника, в зоне обслуживания которого в данный момент выполняют производственную операцию; формирование ссылки, устанавливающей связь между видеоданными камеры идентификатором этой производственной операции. Система для реализации заявленных способов включает компьютер, источник видеоданных, устройство ввода данных о производственной операции, одну или более программ для управления компьютерной системой, реализующей каждый из заявленных способов. 4 н. и 64 з.п. ф-лы, 7 ил.
1. Способ систематизации видеоданных производственного процесса, включающий следующие шаги:
- вводят данные о соответствии между по крайней мере одним источником видеоданных и по крайней мере одним рабочим местом выполнения производственной операции;
- формируют перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные, причем перечень разновидностей идентификаторов включает по крайней мере идентификатор исполнителя;
- получают по крайней мере один идентификатор производственной операции из одного или нескольких устройств ввода данных о производственной операции;
- выявляют по крайней мере один источник видеоданных на основе введенных данных о соответствии между рабочим местом выполнения производственной операции и источником видеоданных
- получают видеоданные из по крайней мере одного выявленного на предыдущем шаге источника видеоданных;
- записывают полученные видеоданные в хранилище видеоданных;
- осуществляют разметку полученных видеоданных на основании по меньшей мере одного идентификатора, полученного от по меньшей мере одного устройства ввода данных о производственной операции, для построения индекса видеоданных, причем индекс видеоданных содержит информацию о производственной операции;
- формируют по крайней мере одну ссылку, устанавливающую связь фрагмента видеоданных от вышеуказанного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и полученного идентификатора этой производственной операции;
- записывают ссылку в индекс видеоданных на устройстве хранения данных для последующего поиска видеоданных.
2. Способ систематизации видеоданных производственного процесса по п.1, в котором ввод данных о соответствии между по крайней мере одним источником видеоданных и по крайней мере одним рабочим местом выполнения производственной операции выполняют предварительно до начала выполнения производственного процесса.
3. Способ систематизации видеоданных производственного процесса по п.1, в котором данные о производственной операции от одного или нескольких устройств ввода данных о производственной операции дополнительно содержат время начала, продолжительность и/или время окончания этой производственной операции.
4. Способ систематизации видеоданных производственного процесса по п.1, в котором перечень идентификаторов включает идентификатор изделия, заказа, товара, услуги, посылки, контейнера, транспортного средства и/или производственной операции.
5. Способ систематизации видеоданных производственного процесса по п.1, в котором в перечень идентификаторов видеоданных добавлены также данные о производственном процессе, например показания приборов, таких как весы, термометр, счетчики-расходомеры жидкостей.
6. Способ систематизации видеоданных производственного процесса по п.1, в котором ввод начальных данных о зоне обслуживания видеокамеры выполняют путем назначения типа производственного оборудования, которое находится в зоне обслуживания видеокамеры.
7. Способ систематизации видеоданных производственного процесса по п.1, в котором ввод начальных данных о зоне обслуживания источника видеоданных выполняют путем назначения типа производственных операций, которые выполняют в зоне обслуживания источника видеоданных.
8. Способ систематизации видеоданных производственного процесса по п.1, в котором ввод начальных данных о зоне обслуживания источника видеоданных выполняют на этапе планирования производственной операции.
9. Способ систематизации видеоданных производственного процесса по п.1, в котором ввод начальных данных о зоне обслуживания источника видеоданных выполняют непосредственно перед началом производственной операции.
10. Способ систематизации видеоданных производственного процесса по п.1, в котором ввод начальных данных о производственной операции выполняют заранее, например, на этапе формирования плана производства.
11. Способ систематизации видеоданных производственного процесса по п.1, в котором ввод начальных данных о производственной операции выполняют в процессе производства.
12. Способ систематизации видеоданных производственного процесса по п.1, в котором ввод начальных данных о производственной операции выполняет исполнитель производственной операции.
13. Способ систематизации видеоданных производственного процесса по п.1, в котором ввод начальных данных о производственной операции выполняет сотрудник отдела планирования производства, руководитель исполнителя или заказчик производства.
14. Способ систематизации видеоданных производственного процесса по п.1, в котором ввод начальных данных о производственной операции выполняется автоматически на основе сигналов производственного оборудования без прямого участия исполнителя.
15. Способ систематизации видеоданных производственного процесса по п.1, в котором зоны обслуживания задают в виде таблицы ссылок, которая устанавливает взаимосвязь между зоной обслуживания видеокамеры и каждым идентификатором числа указанных в перечне разновидностей идентификаторов этой производственной операции.
16. Способ систематизации видеоданных производственного процесса по п.1, в котором ссылку формируют динамически по запросу пользователя на основе данных о производственной операции и/или событий видеоанализа и данных о зоне обслуживания видеокамеры.
17. Способ систематизации видеоданных производственного процесса по п.1, в котором ввод данных о производственном процессе выполняют по сигналам с датчика движения и/или на основе результатов работы устройства видеоанализа.
18. Способ систематизации видеоданных производственного процесса, включающий следующие шаги:
- вводят данные о соответствии между по крайней мере одним источником видеоданных и по крайней мере одним устройством ввода данных о производственной операции;
- формируют перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные, причем перечень разновидностей идентификаторов включает по крайней мере идентификатор исполнителя;
- получают по крайней мере один идентификатор производственной операции из одного или нескольких устройств ввода данных о производственной операции;
- выявляют по крайней мере один источник видеоданных на основе введенных данных о соответствии между источником видеоданных и устройством ввода данных о производственной операции, из которого поступил идентификатор;
- получают видеоданные из по крайней мере одного выявленного на предыдущем шаге источника видеоданных;
- записывают полученные видеоданные в хранилище видеоданных;
- осуществляют разметку полученных видеоданных на основании по меньшей мере одного идентификатора, полученного от по меньшей мере одного устройства ввода данных о производственной операции, для построения индекса видеоданных, причем индекс видеоданных содержит информацию о производственной операции;
- формируют по крайней мере одну ссылку, устанавливающую связь фрагмента видеоданных от вышеуказанного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и полученного идентификатора этой производственной операции;
- записывают ссылку в индекс видеоданных на устройстве хранения данных для последующего поиска видеоданных.
19. Способ систематизации видеоданных производственного процесса по п. 18, в котором ввод данных о соответствии между по крайней мере одним источником видеоданных и по крайней мере одним устройством ввода данных о производственной операции выполняют предварительно до начала выполнения производственного процесса.
20. Способ систематизации видеоданных производственного процесса по п. 18, в котором данные о производственной операции от одного или нескольких устройств ввода данных о производственной операции дополнительно содержат время начала, продолжительность и/или время окончания этой производственной операции.
21. Способ систематизации видеоданных производственного процесса по п. 18, в котором перечень идентификаторов видеоданных дополнительно включает идентификатор исполнителя, изделия, заказа, товара, услуги, посылки, контейнера, транспортного средства и/или производственной операции.
22. Способ систематизации видеоданных производственного процесса по п. 18, в котором в перечень идентификаторов видеоданных добавлены также данные о производственном процессе, например показания приборов, таких как весы, термометр, счетчики-расходомеры жидкостей.
23. Способ систематизации видеоданных производственного процесса по п. 18, в котором ввод начальных данных о зоне обслуживания источника видеоданных выполняют путем назначения типа производственного оборудования, которое находится в зоне обслуживания видеокамеры.
24. Способ систематизации видеоданных производственного процесса по п. 18, в котором ввод начальных данных о зоне обслуживания источника видеоданных выполняют путем назначения типа производственных операций, которые выполняют в зоне обслуживания видеокамеры.
25. Способ систематизации видеоданных производственного процесса по п. 18, в котором ввод начальных данных о зоне обслуживания источника видеоданных выполняют на этапе планирования производственной операции.
26. Способ систематизации видеоданных производственного процесса по п. 18, в котором ввод начальных данных о зоне обслуживания источника видеоданных выполняют непосредственно перед началом производственной операции.
27. Способ систематизации видеоданных производственного процесса по п. 18, в котором ввод начальных данных о производственной операции выполняют заранее, например, на этапе формирования плана производства.
28. Способ систематизации видеоданных производственного процесса по п. 18, в котором ввод начальных данных о производственной операции выполняют в процессе производства.
29. Способ систематизации видеоданных производственного процесса по п. 18, в котором ввод начальных данных о производственной операции выполняет исполнитель производственной операции.
30. Способ систематизации видеоданных производственного процесса по п. 18, в котором ввод начальных данных о производственной операции выполняет сотрудник отдела планирования производства, руководитель исполнителя или заказчик производства.
31. Способ систематизации видеоданных производственного процесса по п. 18, в котором ввод начальных данных о производственной операции выполняется автоматически на основе сигналов производственного оборудования без прямого участия исполнителя.
32. Способ систематизации видеоданных производственного процесса по п. 18, в котором зоны обслуживания задают в виде таблицы ссылок, которая устанавливает взаимосвязь между зоной обслуживания видеокамеры и каждым идентификатором числа указанных в перечне разновидностей идентификаторов этой производственной операции.
33. Способ систематизации видеоданных производственного процесса по п. 18, в котором ссылку формируют динамически по запросу пользователя на основе данных о производственной операции и/или событий видеоанализа и данных о зоне обслуживания видеокамеры.
34. Способ систематизации видеоданных производственного процесса по п. 18, в котором ввод данных о производственном процессе выполняют по сигналам с датчика движения (присутствия человека) и/или на основе результатов работы устройства видеоанализа.
35. Система систематизации видеоданных производственного процесса для реализации настоящего изобретения включает компьютерную систему, источник видеоданных, устройство ввода данных о производственной операции, причем компьютерная система включает:
- один или более процессор,
- устройство для хранения данных,
- одну или более программу;
причем одна или более программа хранится на устройстве для хранения данных и исполняется на одном или более процессоре,
причем одна или более программа включает инструкции для управления компьютерной системой, реализующей заявленный способ, причем набор инструкций по крайней мере следующий:
- вводить данные о соответствии между по крайней мере одним источником видеоданных и по крайней мере одним рабочим местом выполнения производственной операции;
- формировать перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные, причем перечень разновидностей идентификаторов включает по крайней мере идентификатор исполнителя;
- получать по крайней мере один идентификатор производственной операции из одного или нескольких устройств ввода данных о производственной операции;
- выявлять по крайней мере один источник видеоданных на основе введенных данных о соответствии между рабочим местом выполнения производственной операции и источником видеоданных;
- получать видеоданные из по крайней мере одного выявленного на предыдущем шаге источника видеоданных;
- записывать полученные видеоданные в хранилище видеоданных;
- осуществлять разметку полученных видеоданных на основании по меньшей мере одного идентификатора, полученного от по меньшей мере одного устройства ввода данных о производственной операции, для построения индекса видеоданных, причем индекс видеоданных содержит информацию о производственной операции;
- формировать по крайней мере одну ссылку, устанавливающую связь фрагмента видеоданных от вышеуказанного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и полученного идентификатора этой производственной операции;
- записывать ссылку в индекс видеоданных на устройстве хранения данных для последующего поиска видеоданных.
36. Система систематизации видеоданных производственного процесса по п.35, в которой устройство ввода данных о производственной операции является стационарным.
37. Система систематизации видеоданных производственного процесса по п.35, в которой устройство ввода данных о производственной операции является мобильным.
38. Система систематизации видеоданных производственного процесса по п.35, в которой устройство ввода данных о производственной операции располагается удаленно.
39. Система систематизации видеоданных производственного процесса по п.35, в которой устройство ввода данных о производственной операции встроено в производственное оборудование.
40. Система систематизации видеоданных производственного процесса по п.35, в которой устройство ввода данных о производственной операции реализовано на базе стандартного или специализированного компьютера, рабочей станции, планшетного компьютера, мобильного и/или персонального устройства.
41. Система систематизации видеоданных производственного процесса по п.35, в которой устройство ввода данных о производственной операции представляет собой считыватель радиочастотных меток RFID (Radio-frequency identification), NFC (Near field communication),
42. Система систематизации видеоданных производственного процесса по п.35, в которой устройство ввода данных о производственной операции представляет собой считыватель одно- и/или двумерных штриховых кодов для формирования ссылки на видео.
43. Система систематизации видеоданных производственного процесса по п.35, где используется дополнительно детектор движения или детектор присутствия человека в обслуживаемой зоне для формирования данных о производственном процессе и/или проверки их подлинности.
44. Система систематизации видеоданных производственного процесса по п.35, в которой ссылки являются комбинированными.
45. Система систематизации видеоданных производственного процесса по п.35, в которой устройство ввода данных о производственной операции использует голосовые команды и/или жесты исполнителя.
46. Система систематизации видеоданных производственного процесса по п.35, в которой устройство ввода данных о производственной операции представляет собой программный или аппаратный модули видеоанализа.
47. Система систематизации видеоданных производственного процесса по п.35, в которой ссылка является гиперссылкой.
48. Система систематизации видеоданных производственного процесса по п.35, в которой ссылка указывает на источник видеоданных для получения видеоданных в реальном масштабе времени.
49. Система систематизации видеоданных производственного процесса по п.35, в которой ссылка сформирована по запросу пользователя.
50. Система систематизации видеоданных производственного процесса по п.35, в которой ссылка указывает на ранее записанные видеоданные.
51. Система систематизации видеоданных производственного процесса по п.35, в которой ссылка на видеоданные может содержать один или комбинацию параметров из следующего списка:
- уникальная символьная последовательность,
- гиперссылка,
- унифицированный идентификатор ресурса (URI),
- идентификатор источника видеоданных,
- идентификатор зоны обслуживания источника видеоданных,
- временная метка начала производственной операции,
- временная метка окончания производственной операции,
- идентификатор производственной операции,
- идентификатор исполнителя,
- идентификатор производимого изделия,
- идентификатор выполняемого заказа;
- номер обрабатываемого объекта;
- номер партии обрабатываемых объектов.
52. Система систематизации видеоданных производственного процесса для реализации настоящего изобретения включает компьютерную систему, источник видеоданных, устройство ввода данных о производственной операции, причем компьютерная система включает:
- один или более процессор,
- устройство для хранения данных,
- одну или более программу;
причем одна или более программа хранится на устройстве для хранения данных и исполняется на одном или более процессоре, причем одна или более программа включает инструкции для управления компьютерной системой, реализующей заявленный способ, причем набор инструкций по крайней мере следующий:
- вводить данные о соответствии между по крайней мере одним источником видеоданных и по крайней мере одним устройством ввода данных о производственной операции;
- формировать перечень разновидностей идентификаторов для разметки, по которым впоследствии можно будет систематизировать видеоданные, причем перечень разновидностей идентификаторов включает по крайней мере идентификатор исполнителя;
- получать по крайней мере один идентификатор производственной операции из одного или нескольких устройств ввода данных о производственной операции;
- выявлять по крайней мере один источник видеоданных на основе введенных данных о соответствии между источником видеоданных и устройством ввода данных о производственной операции, из которого поступил идентификатор;
- получать видеоданные из по крайней мере одного выявленного на предыдущем шаге источника видеоданных;
- записывать полученные видеоданные в хранилище видеоданных;
- осуществлять разметку полученных видеоданных на основании по меньшей мере одного идентификатора, полученного от по меньшей мере одного устройства ввода данных о производственной операции, для построения индекса видеоданных, причем индекс видеоданных содержит информацию о производственной операции;
- формировать по крайней мере одну ссылку, устанавливающую связь фрагмента видеоданных от вышеуказанного источника видеоданных, в зоне обслуживания которого выполняется производственная операция, и полученного идентификатора этой производственной операции;
- записывать ссылку в индекс видеоданных на устройстве хранения данных для последующего поиска видеоданных.
53. Система систематизации видеоданных производственного процесса по п.52, в которой устройство ввода данных о производственной операции является стационарным.
54. Система систематизации видеоданных производственного процесса по п.52, в которой устройство ввода данных о производственной операции является мобильным.
55. Система систематизации видеоданных производственного процесса по п.52, в которой устройство ввода данных о производственной операции располагается удаленно.
56. Система систематизации видеоданных производственного процесса по п.52, в которой устройство ввода данных о производственной операции встроено в производственное оборудование.
57. Система систематизации видеоданных производственного процесса по п.52, в которой устройство ввода данных о производственной операции реализовано на базе стандартного или специализированного компьютера, рабочей станции, планшетного компьютера, мобильного и/или персонального устройства.
58. Система систематизации видеоданных производственного процесса по п.52, в которой устройство ввода данных о производственной операции представляет собой считыватель радиочастотных меток RFID (Radio-frequency identification), NFC (Near field communication).
59. Система систематизации видеоданных производственного процесса по п.52, в которой устройство ввода данных о производственной операции представляет собой считыватель одно- и/или двумерных штриховых кодов для формирования ссылки на видео.
60. Система систематизации видеоданных производственного процесса по п.52, где используется дополнительно детектор движения или детектор присутствия человека в обслуживаемой зоне для формирования данных о производственном процессе и/или проверки их подлинности.
61. Система систематизации видеоданных производственного процесса по п.52, в которой ссылки являются комбинированными.
63. Система систематизации видеоданных производственного процесса по п.52, в которой устройство ввода данных о производственной операции представляет собой программный или аппаратный модули видеоанализа.
64. Система систематизации видеоданных производственного процесса по п.52, в которой ссылка является гиперссылкой.
65. Система систематизации видеоданных производственного процесса по п.52, в которой ссылка указывает на источник видеоданных для получения видеоданных в реальном масштабе времени.
66. Система систематизации видеоданных производственного процесса по п.52, в которой ссылка сформирована по запросу пользователя.
67. Система систематизации видеоданных производственного процесса по п.52, в которой ссылка указывает на ранее записанные видеоданные.
68. Система систематизации видеоданных производственного процесса по п. 52, в которой ссылка на видеоданные может содержать один или комбинацию параметров из следующего списка:
- уникальная символьная последовательность,
- гиперссылка,
- унифицированный идентификатор ресурса (URI),
- идентификатор источника видеоданных,
- идентификатор зоны обслуживания источника видеоданных,
- временная метка начала производственной операции,
- временная метка окончания производственной операции,
- идентификатор производственной операции,
- идентификатор исполнителя,
- идентификатор производимого изделия,
- идентификатор выполняемого заказа;
- номер обрабатываемого объекта;
- номер партии обрабатываемых объектов.
| US 2006177119 A1, 10.08.2006 | |||
| WO 2011123741 A2, 06.10.2011 | |||
| US 2012036500 A1, 09.02.2012 | |||
| US 2012299727 A1, 29.11.2012 | |||
| US 2009009601 A1, 08.01.2009 | |||
| 0 |
|
SU154399A1 | |
| СПОСОБ РАНЖИРОВАНИЯ ВИДЕОДАННЫХ | 2012 |
|
RU2484529C1 |
