ОБЛАСТЬ ТЕХНИКИ
[0001] Настоящее раскрытие относится к устройству содействия отслеживанию, системе содействия отслеживанию, и способу содействия отслеживанию, каждый из которых обеспечивает отображение на устройстве отображения захваченного изображения от каждой из множества камер, которое собрано в блоке сбора изображений, и содействует работе контролирующего лица по отслеживанию движущегося объекта, подлежащего отслеживанию.
УРОВЕНЬ ТЕХНИКИ
[0002] Широко распространена система контроля, в которой множественные камеры установлены в зоне контроля, и экран контроля для отображения захваченного изображения от каждой из множества камер отображается на мониторе таким образом, чтобы он мог контролироваться контролирующим лицом. В такой системе контроля, захваченные изображения от камер собираются в записывающем устройстве, таким образом, контролирующее лицо может проверять, не являются ли виды действий, которые совершает некоторый человек в зоне контроля, проблематичными действиями, такими как магазинная кража.
[0003] Таким образом, в случае, когда контролирующее лицо отслеживает человека, просматривая экран контроля, когда человек движется в зоне контроля, камеры, которые захватывают изображение человека, переключаются последовательно, таким образом, необходимо последовательно проверять захваченные изображения от каждой из камер.
[0004] Таким образом, известна (см. Патентную литературу 1) технология обеспечения окна отображения изображений для отображения захваченного изображения от каждой камеры на экране отображения монитора, отображения изображения человека, обозначенного контролирующим лицом в качестве отслеживаемой цели в окне отображения изображений, и отображения маршрута движения человека на экране отображения монитора. В этой технологии, поскольку отображается маршрут движения, можно сравнительно легко выполнять работу по отслеживанию при последовательной смене камер, в результате чего в некоторой степени уменьшается нагрузка на контролирующее лицо, которое выполняет работу по отслеживанию.
СПИСОК ЦИТИРОВАНИЯ
ПАТЕНТНАЯ ЛИТЕРАТУРА
[0005] Патентная литература 1: Патент Японии № 4759988 B2
СУЩНОСТЬ ИЗОБРЕТЕНИЯ
[0006] Устройство выполняет процесс отслеживания человека с использованием технологии распознавания изображений для последовательного отображения захваченных изображений от каждой камеры, связанных с человеком, обозначенным в качестве отслеживаемой цели, на экране отображения монитора, но в процессе отслеживания может произойти ошибка в результате отслеживания, когда, например, отслеживание человека, обозначенного в качестве отслеживаемой цели, оказывается безуспешным, и этот человек заменяется другим человеком. Когда ошибка в результате отслеживания происходит таким образом, эта ошибка мешает работе по отслеживанию человека, следовательно, необходима работа по проверке отсутствия ошибок в результате отслеживания. В частности, в крупномасштабной системе контроля, охватывающей обширную зону контроля, в которой используется большое число камер контроля, например, десятки или сотни камер наблюдения, крайне трудно проверить результат отслеживания. Таким образом, необходима технология, способная эффективно проверять результат отслеживания.
[0007] Однако, согласно технологии, раскрытой в Патентной литературе 1, поскольку человек, установленный в качестве отслеживаемой цели, не всегда показывается в каждом окне отображения изображений экрана, а именно, изображение человека, установленного в качестве отслеживаемой цели, не отображается на экране без пропусков на протяжении всей траектории движения в зоне контроля, невозможно эффективно проверить результат отслеживания человека, установленного в качестве отслеживаемой цели, и, конкретно, существует проблема, состоящая в усложнении проверки при увеличении числа камер. Дополнительно, в случае, когда имеется ошибка в результате отслеживания человека, существует проблема, состоящая в невозможности эффективно устранить упомянутую проблему в предшествующем уровне техники и невозможности правильно выполнить процесс содействия для уменьшения нагрузки на контролирующее лицо.
[0008] В частности, в случае отслеживания человека в захваченном изображении камеры, сначала, для обозначения человека, подлежащего отслеживанию, необходимо выполнить работу по поиску изображения, захватывающего человека, подлежащего отслеживанию. В случае, когда имеется ошибка в результате отслеживания человека, необходимо выполнить работу по поиску изображения, захватывающего человека, который является отслеживаемой целью, в течение периода времени отслеживания. Однако при увеличении числа камер работа по нахождению соответствующего изображения становится очень трудной, и требуется технология, которая позволит контролирующему лицу эффективно выполнять работу по нахождению изображения, захватывающего человека, который является отслеживаемой целью.
[0009] Целью настоящего раскрытия является обеспечение устройства содействия отслеживанию, системы содействия отслеживанию, и способа содействия отслеживанию, в которых можно эффективно проверять, имеется ли ошибка в результате отслеживания движущегося объекта, установленного в качестве отслеживаемой цели, и корректировать информацию отслеживания простой операцией в случае, когда имеется ошибка в результате отслеживания движущегося объекта, и в которых, в частности, контролирующее лицо может эффективно выполнять работу по нахождению изображения, захватывающего движущийся объект, который является отслеживаемой целью.
[0010] Устройство содействия отслеживанию настоящего раскрытия является устройством содействия отслеживанию, которое отображает на устройстве отображения захваченное изображение от каждой из множества камер, которое собрано в средстве сбора изображений, и содействует работе контролирующего лица по отслеживанию движущегося объекта, подлежащего отслеживанию, и включает в себя вычислитель оценочного значения, который вычисляет оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер; установщик отслеживаемой цели, который отображает множество захваченных изображений на устройстве отображения, и, в ответ на операцию, выполненную контролирующим лицом, обозначающим движущийся объект, подлежащий отслеживанию, с использованием захваченных изображений, устанавливает обозначенный движущийся объект в качестве отслеживаемой цели; презентатор подтверждаемого изображения, который последовательно задает камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер, которые находятся в кооперационной связи, и отображает на устройстве отображения экран подтверждения отслеживаемой цели, на котором захваченное изображение движущегося объекта с наибольшим оценочным значением отображается в качестве подтверждаемого изображения, для каждой из камер; генератор миниатюр, который вырезает области движущихся объектов из захваченных изображений и генерирует миниатюрное изображение каждого из движущихся объектов; презентатор потенциально подходящих изображений (изображений-кандидатов), который в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, отображает на устройстве отображения экран выбора кандидатов, на котором миниатюрные изображения соответствующих движущихся объектов, имеющих оценочные значения, меньшие, чем у движущегося объекта, соответствующего подтверждаемому изображению, перечислены и отображены в качестве изображений-кандидатов, и позволяет контролирующему лицу выбрать изображение-кандидат, соответствующее движущемуся объекту, обозначаемому в качестве отслеживаемой цели; и корректор информации отслеживания, который корректирует межкамерную информацию отслеживания таким образом, чтобы движущийся объект, соответствующий изображению-кандидату, выбранному на экране выбора кандидатов, был связан с движущимся объектом, установленным в качестве отслеживаемой цели.
[0011] Система содействия отслеживанию настоящего раскрытия является системой содействия отслеживанию, которая отображает на устройстве отображения захваченное изображение от каждой из множества камер, которое собрано в средстве сбора изображений, и содействует работе контролирующего лица по отслеживанию движущегося объекта, подлежащего отслеживанию, и включает в себя камеру, которая захватывает изображение зоны контроля; устройство отображения, которое отображает захваченное изображение от каждой из камер; и множество устройств обработки информации, причем любое из множества устройств обработки информации включает в себя вычислитель оценочного значения, который вычисляет оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер; установщик отслеживаемой цели, который отображает множество захваченных изображений на устройстве отображения, и, в ответ на операцию, выполненную контролирующим лицом, обозначающим движущийся объект, подлежащий отслеживанию, с использованием захваченных изображений, устанавливает обозначенный движущийся объект в качестве отслеживаемой цели; презентатор подтверждаемого изображения, который последовательно задает камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер, которые находятся в кооперационной связи, и отображает на устройстве отображения экран подтверждения отслеживаемой цели, на котором захваченное изображение движущегося объекта с наибольшим оценочным значением отображается в качестве подтверждаемого изображения, для каждой из камер; генератор миниатюр, который вырезает области движущихся объектов из захваченных изображений и генерирует миниатюрное изображение каждого из движущихся объектов; презентатор изображений-кандидатов, который в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, отображает на устройстве отображения экран выбора кандидатов, на котором миниатюрные изображения соответствующих движущихся объектов, имеющих оценочные значения, меньшие, чем у движущегося объекта, соответствующего подтверждаемому изображению, перечислены и отображены в качестве изображений-кандидатов, и позволяет контролирующему лицу выбрать изображение-кандидат, соответствующее движущемуся объекту, обозначаемому в качестве отслеживаемой цели; и корректор информации отслеживания, который корректирует межкамерную информацию отслеживания таким образом, чтобы движущийся объект, соответствующий изображению-кандидату, выбранному на экране выбора кандидатов, был связан с движущимся объектом, установленным в качестве отслеживаемой цели.
[0012] Способ содействия отслеживанию настоящего раскрытия является способом содействия отслеживанию, который обеспечивает, чтобы устройство обработки информации осуществляло процесс отображения на устройстве отображения захваченного изображения от каждой из множества камер, которое собрано в средстве сбора изображений, и содействовало работе контролирующего лица по отслеживанию движущегося объекта, подлежащего отслеживанию, и включает в себя этап, на котором вычисляют оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер; этап, на котором отображают множество захваченных изображений на устройстве отображения, и, в ответ на операцию, выполненную контролирующим лицом, обозначающим движущийся объект, подлежащий отслеживанию, с использованием захваченных изображений, устанавливают обозначенный движущийся объект в качестве отслеживаемой цели; этап, на котором последовательно задают камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер, которые находятся в кооперационной связи, и отображают на устройстве отображения экран подтверждения отслеживаемой цели, на котором захваченное изображение движущегося объекта с наибольшим оценочным значением отображается в качестве подтверждаемого изображения, для каждой из камер; этап, на котором вырезают область движущегося объекта из захваченного изображения и генерируют миниатюрное изображение каждого из движущихся объектов; этап, на котором в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, отображают на устройстве отображения экран выбора кандидатов, на котором миниатюрные изображения соответствующих движущихся объектов, имеющих оценочные значения, меньшие, чем у движущегося объекта, соответствующего подтверждаемому изображению, перечислены и отображены в качестве изображений-кандидатов, и позволяют контролирующему лицу выбрать изображение-кандидат, соответствующее движущемуся объекту, обозначаемому в качестве отслеживаемой цели; и этап, на котором корректируют межкамерную информацию отслеживания таким образом, чтобы движущийся объект, соответствующий изображению-кандидату, выбранному на экране выбора кандидатов, был связан с движущимся объектом, установленным в качестве отслеживаемой цели.
[0013] Согласно настоящему раскрытию, поскольку изображение, захватываемое камерой, имеющей наилучшую возможность для показа движущегося объекта, установленного в качестве отслеживаемой цели, уточняется и отображается, можно эффективно проверять результат отслеживания движущегося объекта. В случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, а именно, имеется ошибка в результате отслеживания движущегося объекта, отображается изображение-кандидат, которое является заменой для подтверждаемого изображения, таким образом, информация отслеживания корректируется просто посредством выбора контролирующим лицом изображения-кандидата, и, таким образом, информация отслеживания может быть скорректирована простой операцией. В частности, поскольку миниатюрное изображение каждого движущегося объекта отображается на экране выбора кандидатов, легко идентифицировать движущийся объект на изображении, следовательно, можно устранить проблему отсутствия движущегося объекта, установленного в качестве отслеживаемой цели, и эффективно выполнить работу по нахождению изображения движущегося объекта, подлежащего отслеживанию.
КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ
[0014] Фиг. 1 является диаграммой общей конфигурации системы содействия отслеживанию согласно настоящему иллюстративному варианту осуществления.
Фиг. 2 является видом сверху, показывающим установочное расположение камер 1 в магазине.
Фиг. 3 является функциональной блок-схемой, показывающей схематичную конфигурацию PC 3.
Фиг. 4 является иллюстративной диаграммой, показывающей переходные состояния экрана, отображаемого на мониторе 7.
Фиг. 5 является блок-схемой последовательности операций, показывающей процедуру процесса, выполняемого в каждом блоке PC 3 в ответ на операцию контролирующего лица, выполненную на каждом экране.
Фиг. 6 является иллюстративной диаграммой, показывающей экран поиска человека в состоянии исходного обозначения в режиме специфического-для-человека списка.
Фиг. 7 является иллюстративной диаграммой, показывающей экран поиска человека в состоянии исходного обозначения в режиме специфического-для-камер списка.
Фиг. 8 является иллюстративной диаграммой, показывающей основную часть экрана поиска человека в режиме специфического-для-камер списка.
Фиг. 9 является иллюстративной диаграммой, показывающей экран с временной шкалой в состоянии подтверждения.
Фиг. 10А является иллюстративной диаграммой, показывающей основную часть экрана с временной шкалой в состоянии подтверждения.
Фиг. 10В является иллюстративной диаграммой, показывающей основную часть экрана с временной шкалой в состоянии подтверждения.
Фиг. 11 является иллюстративной диаграммой, показывающей экран с временной шкалой в состоянии непрерывного воспроизведения.
Фиг. 12 является иллюстративной диаграммой, показывающей экран с временной шкалой в состоянии отображения кандидатов.
Фиг. 13 является иллюстративной диаграммой, показывающей изображение-кандидат, отображаемое на экране с временной шкалой в состоянии отображения кандидатов.
Фиг. 14 является иллюстративной диаграммой, показывающей изображение-кандидат, отображаемое на экране с временной шкалой в состоянии отображения кандидатов.
Фиг. 15 является иллюстративной диаграммой, показывающей экран поиска человека в состоянии дополнительного обозначения в режиме специфического-для-человека списка.
Фиг. 16 является иллюстративной диаграммой, показывающей экран поиска человека в состоянии дополнительного обозначения в режиме специфического-для-камер списка.
ОПИСАНИЕ ВАРИАНТОВ ОСУЩЕСТВЛЕНИЯ
[0015] Первый аспект настоящего изобретения, реализованный для решения вышеупомянутых проблем, является устройством содействия отслеживанию, которое отображает на устройстве отображения захваченное изображение от каждой из множества камер, которое собрано в средстве сбора изображений, и содействует работе контролирующего лица по отслеживанию движущегося объекта, подлежащего отслеживанию, и включает в себя вычислитель оценочного значения, который вычисляет оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер; установщик отслеживаемой цели, который отображает множество захваченных изображений на устройстве отображения, и, в ответ на операцию, выполненную контролирующим лицом, обозначающим движущийся объект, подлежащий отслеживанию, с использованием захваченных изображений, устанавливает обозначенный движущийся объект в качестве отслеживаемой цели; презентатор подтверждаемого изображения, который последовательно задает камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер, которые находятся в кооперационной связи, и отображает на устройстве отображения экран подтверждения отслеживаемой цели, на котором захваченное изображение движущегося объекта с наибольшим оценочным значением отображается в качестве подтверждаемого изображения, для каждой из камер; генератор миниатюр, который вырезает области движущихся объектов из захваченных изображений и генерирует миниатюрное изображение каждого из движущихся объектов; презентатор изображений-кандидатов, который в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, отображает на устройстве отображения экран выбора кандидатов, на котором миниатюрные изображения соответствующих движущихся объектов, имеющих оценочные значения, меньшие, чем у движущегося объекта, соответствующего подтверждаемому изображению, перечислены и отображены в качестве изображений-кандидатов, и позволяет контролирующему лицу выбрать изображение-кандидат, соответствующее движущемуся объекту, обозначаемому в качестве отслеживаемой цели; и корректор информации отслеживания, который корректирует межкамерную информацию отслеживания таким образом, чтобы движущийся объект, соответствующий изображению-кандидату, выбранному на экране выбора кандидатов, был связан с движущимся объектом, установленным в качестве отслеживаемой цели.
[0016] Согласно этому, поскольку изображение, захватываемое камерой, имеющей наилучшую возможность для захвата движущегося объекта, установленного в качестве отслеживаемой цели, уточняется и отображается, можно эффективно проверять результат отслеживания движущегося объекта. В случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, а именно, имеется ошибка в результате отслеживания движущегося объекта, отображается изображение-кандидат, которое является заменой для подтверждаемого изображения, таким образом, информация отслеживания корректируется просто посредством выбора контролирующим лицом изображения-кандидата, и, таким образом, информация отслеживания может быть скорректирована простой операцией. В частности, поскольку миниатюрное изображение каждого движущегося объекта отображается на экране выбора кандидатов, легко идентифицировать движущийся объект на изображении, следовательно, можно устранить проблему отсутствия движущегося объекта, установленного в качестве отслеживаемой цели, и эффективно выполнить работу по нахождению изображения движущегося объекта, подлежащего отслеживанию.
[0017] Второй аспект настоящего изобретения является устройством содействия отслеживанию, которое отображает на устройстве отображения захваченное изображение от каждой из множества камер, которое собрано в средстве сбора изображений, и содействует работе контролирующего лица по отслеживанию движущегося объекта, подлежащего отслеживанию, и включает в себя вычислитель оценочного значения, который вычисляет оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер; генератор миниатюр, который вырезает области движущихся объектов из захваченных изображений и генерирует миниатюрное изображение каждого из движущихся объектов; установщик отслеживаемой цели, который отображает на устройстве отображения экран поиска отслеживаемой цели, на котором миниатюрные изображения соответствующих движущихся объектов отображаются в виде списка, и, в ответ на операцию, выполненную контролирующим лицом, обозначающим движущийся объект, подлежащий отслеживанию, посредством выбора миниатюрного изображения, устанавливает обозначенный движущийся объект в качестве отслеживаемой цели; презентатор подтверждаемого изображения, который последовательно задает камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер, которые находятся в кооперационной связи, и отображает на устройстве отображения экран подтверждения отслеживаемой цели, на котором захваченное изображение движущегося объекта с наибольшим оценочным значением отображается в качестве подтверждаемого изображения, для каждой из камер; презентатор изображений-кандидатов, который в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, отображает на устройстве отображения экран выбора кандидатов, на котором отображаются изображения-кандидаты соответствующих движущихся объектов, имеющих оценочные значения, меньшие, чем у движущегося объекта, соответствующего подтверждаемому изображению, и позволяет контролирующему лицу выбрать изображение-кандидат, соответствующее движущемуся объекту, обозначаемому в качестве отслеживаемой цели; и корректор информации отслеживания, который корректирует межкамерную информацию отслеживания таким образом, чтобы движущийся объект, соответствующий изображению-кандидату, выбранному на экране выбора кандидатов, был связан с движущимся объектом, установленным в качестве отслеживаемой цели.
[0018] Согласно этому, поскольку изображение, захватываемое камерой 1, имеющей наилучшую возможность для захвата движущегося объекта, установленного в качестве отслеживаемой цели, уточняется и отображается, можно эффективно проверять результат отслеживания движущегося объекта. В случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, а именно, имеется ошибка в результате отслеживания движущегося объекта, отображается изображение-кандидат, которое является заменой для подтверждаемого изображения, таким образом, информация отслеживания корректируется просто посредством выбора контролирующим лицом изображения-кандидата, и, таким образом, информация отслеживания может быть скорректирована простой операцией. В частности, поскольку миниатюрное изображение каждого движущегося объекта отображается на экране поиска отслеживаемой цели, легко идентифицировать движущийся объект на изображении, следовательно, можно устранить проблему отсутствия движущегося объекта, подлежащего отслеживанию, и эффективно выполнить работу по нахождению изображения движущегося объекта, подлежащего отслеживанию.
[0019] Дополнительно, третье изобретение выполнено таким образом, что установщик отслеживаемой цели располагает миниатюрные изображения последовательно по времени и отображает миниатюрные изображения в виде списка на экране поиска отслеживаемой цели.
[0020] Согласно этому, можно более эффективно выполнять работу по нахождению изображения движущегося объекта, подлежащего отслеживанию.
[0021] Дополнительно, четвертое изобретение выполнено с возможностью дополнительно включать в себя устройство воспроизведения изображений, которое прореживает и воспроизводит выбранное миниатюрное изображение, в ответ на операцию, выполненную контролирующим лицом, выбирающим миниатюрное изображение.
[0022] Согласно этому, можно за короткое время подтверждать миниатюрное изображение на протяжении всего периода времени отслеживания движущегося объекта, соответствующего миниатюрному изображению.
[0023] Дополнительно, пятое изобретение выполнено с возможностью дополнительно включать в себя установщик дополнительной отслеживаемой цели, который в случае, когда среди изображений-кандидатов, отображаемых на экране выбора кандидатов, нет изображения-кандидата, соответствующего движущемуся объекту, обозначенному в качестве отслеживаемой цели, отображает на устройстве отображения экран поиска отслеживаемой цели, на котором миниатюрные изображения соответствующих движущихся объектов отображаются в виде списка, и, в ответ на операцию, выполненную контролирующим лицом, обозначающим движущийся объект, подлежащий отслеживанию, посредством выбора миниатюрного изображения, устанавливает обозначенный движущийся объект в качестве дополнительной отслеживаемой цели, причем корректор информации отслеживания корректирует межкамерную информацию отслеживания таким образом, чтобы движущийся объект, который был установлен установщиком дополнительной отслеживаемой цели в качестве дополнительной отслеживаемой цели, был связан с движущимся объектом, который установлен в качестве отслеживаемой цели установщиком отслеживаемой цели.
[0024] Согласно этому, даже в случае, когда среди изображений-кандидатов, отображаемых на экране выбора кандидатов, нет изображения-кандидата, соответствующего движущемуся объекту, установленному в качестве отслеживаемой цели, информация отслеживания, соответствующая подтверждаемому изображению с ошибкой, корректируется контролирующим лицом, обозначающим движущийся объект, подлежащий отслеживанию, что позволяет предотвратить потерю информации отслеживания. В частности, поскольку миниатюрные изображения отображаются на экране поиска отслеживаемой цели, можно эффективно находить движущийся объект, установленный в качестве отслеживаемой цели.
[0025] Дополнительно, шестое изобретение выполнено таким образом, что установщик отслеживаемой цели отображает либо специфический-для-движущихся-объектов список изображений, для отображения миниатюрных изображений для соответствующих движущихся объектов в виде списка, либо специфический-для-камер список изображений, для отображения захваченных изображений от соответствующих камер в виде списка, на экране поиска отслеживаемой цели в ответ на операцию, выполненную контролирующим лицом, выбирающим режим отображения.
[0026] Согласно этому, поскольку можно переключаться между специфическим-для-камер списком изображений и специфическим-для-движущихся-объектов списком изображений в соответствии с потребностью пользователя, удобство для пользователя улучшается.
[0027] Седьмой аспект настоящего изобретения дополнительно включает в себя уточнитель признаков, который уточняет движущийся объект, который является кандидатом, на основе информации о признаках движущегося объекта, подлежащего отслеживанию, и презентатор изображений-кандидатов отображает миниатюрное изображение движущегося объекта, которое уточнено уточнителем признаков, на экране выбора кандидатов.
[0028] Согласно этому, поскольку число миниатюрных изображений, отображаемых на экране выбора кандидатов, уменьшается, можно эффективно выполнять работу по поиску движущегося объекта, установленного в качестве отслеживаемой цели.
[0029] Восьмой аспект настоящего изобретения дополнительно включает в себя уточнитель признаков, который уточняет искомый движущийся объект на основе информации о признаках движущегося объекта, подлежащего отслеживанию, и установщик отслеживаемой цели отображает миниатюрное изображение движущегося объекта, которое уточнено уточнителем признаков, на экране поиска отслеживаемой цели.
[0030] Согласно этому, поскольку число миниатюрных изображений, отображаемых на экране поиска отслеживаемой цели, уменьшается, можно эффективно выполнять работу по поиску движущегося объекта, подлежащего отслеживанию.
[0031] Девятое изобретение является системой содействия отслеживанию, которая отображает на устройстве отображения захваченное изображение от каждой из множества камер, которое собрано в средстве сбора изображений, и содействует работе контролирующего лица по отслеживанию движущегося объекта, подлежащего отслеживанию, и включает в себя камеру, которая захватывает изображение зоны контроля; устройство отображения, которое отображает захваченное изображение от каждой из камер; и множество устройств обработки информации, причем каждое из множества устройств обработки информации включает в себя вычислитель оценочного значения, который вычисляет оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер; установщик отслеживаемой цели, который отображает множество захваченных изображений на устройстве отображения, и, в ответ на операцию, выполненную контролирующим лицом, обозначающим движущийся объект, подлежащий отслеживанию, с использованием захваченных изображений, устанавливает обозначенный движущийся объект в качестве отслеживаемой цели; презентатор подтверждаемого изображения, который последовательно задает камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер, которые находятся в кооперационной связи, и отображает на устройстве отображения экран подтверждения отслеживаемой цели, на котором захваченное изображение движущегося объекта с наибольшим оценочным значением отображается в качестве подтверждаемого изображения, для каждой из камер; генератор миниатюр, который вырезает области движущихся объектов из захваченных изображений и генерирует миниатюрное изображение каждого из движущихся объектов; презентатор изображений-кандидатов, который в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, отображает на устройстве отображения экран выбора кандидатов, на котором миниатюрные изображения соответствующих движущихся объектов, имеющих оценочные значения, меньшие, чем у движущегося объекта, соответствующего подтверждаемому изображению, перечислены и отображены в качестве изображений-кандидатов, и позволяет контролирующему лицу выбрать изображение-кандидат, соответствующее движущемуся объекту, обозначаемому в качестве отслеживаемой цели; и корректор информации отслеживания, который корректирует межкамерную информацию отслеживания таким образом, чтобы движущийся объект, соответствующий изображению-кандидату, выбранному на экране выбора кандидатов, был связан с движущимся объектом, установленным в качестве отслеживаемой цели.
[0032] Согласно этому, подобно первому аспекту, можно эффективно проверять, имеется ли ошибка в результате отслеживания движущегося объекта, установленного в качестве отслеживаемой цели, и корректировать информацию отслеживания простой операцией в случае, когда имеется ошибка в результате отслеживания движущегося объекта, и, в частности, контролирующее лицо может эффективно выполнять работу по нахождению изображения, захватывающего движущийся объект, который является отслеживаемой целью, на экране выбора кандидатов.
[0033] Десятое изобретение является системой содействия отслеживанию, которая отображает на устройстве отображения захваченное изображение от каждой из множества камер, которое собрано в средстве сбора изображений, и содействует работе контролирующего лица по отслеживанию движущегося объекта, подлежащего отслеживанию, и содержит: камеру, которая захватывает изображение зоны контроля; устройство отображения, которое отображает захваченное изображение от каждой из камер; и множество устройств обработки информации, причем любое из множества устройств обработки информации включает в себя вычислитель оценочного значения, который вычисляет оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер; генератор миниатюр, который вырезает области движущихся объектов из захваченных изображений и генерирует миниатюрное изображение каждого из движущихся объектов; установщик отслеживаемой цели, который отображает на устройстве отображения экран поиска отслеживаемой цели, на котором миниатюрные изображения соответствующих движущихся объектов отображаются в виде списка, и, в ответ на операцию, выполненную контролирующим лицом, обозначающим движущийся объект, подлежащий отслеживанию, посредством выбора миниатюрного изображения, устанавливает обозначенный движущийся объект в качестве отслеживаемой цели; презентатор подтверждаемого изображения, который последовательно задает камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер, которые находятся в кооперационной связи, и отображает на устройстве отображения экран подтверждения отслеживаемой цели, на котором захваченное изображение движущегося объекта с наибольшим оценочным значением отображается в качестве подтверждаемого изображения, для каждой из камер; презентатор изображений-кандидатов, который в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, отображает на устройстве отображения экран выбора кандидатов, на котором отображаются изображения-кандидаты соответствующих движущихся объектов, имеющих оценочные значения, меньшие, чем у движущегося объекта, соответствующего подтверждаемому изображению, и позволяет контролирующему лицу выбрать изображение-кандидат, соответствующее движущемуся объекту, обозначаемому в качестве отслеживаемой цели; и корректор информации отслеживания, который корректирует межкамерную информацию отслеживания таким образом, чтобы движущийся объект, соответствующий изображению-кандидату, выбранному на экране выбора кандидатов, был связан с движущимся объектом, установленным в качестве отслеживаемой цели.
[0034] Согласно этому, подобно второму аспекту, можно эффективно проверять, имеется ли ошибка в результате отслеживания движущегося объекта, установленного в качестве отслеживаемой цели, и корректировать информацию отслеживания простой операцией в случае, когда имеется ошибка в результате отслеживания движущегося объекта, и, в частности, контролирующее лицо может эффективно выполнять работу по нахождению изображения, захватывающего движущийся объект, который является отслеживаемой целью, на экране поиска отслеживаемой цели.
[0035] Одиннадцатое изобретение является способом содействия отслеживанию, который обеспечивает, чтобы устройство обработки информации осуществляло процесс отображения на устройстве отображения захваченного изображения от каждой из множества камер, которое собрано в средстве сбора изображений, и содействовало работе контролирующего лица по отслеживанию движущегося объекта, подлежащего отслеживанию, и включает в себя этап, на котором вычисляют оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер; этап, на котором отображают множество захваченных изображений на устройстве отображения, и, в ответ на операцию, выполненную контролирующим лицом, обозначающим движущийся объект, подлежащий отслеживанию, с использованием захваченных изображений, устанавливают обозначенный движущийся объект в качестве отслеживаемой цели; этап, на котором последовательно задают камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер, которые находятся в кооперационной связи, и отображают на устройстве отображения экран подтверждения отслеживаемой цели, на котором захваченное изображение движущегося объекта с наибольшим оценочным значением отображается в качестве подтверждаемого изображения, для каждой из камер; этап, на котором вырезают область движущегося объекта из захваченного изображения и генерируют миниатюрное изображение каждого из движущихся объектов; этап, на котором в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, отображают на устройстве отображения экран выбора кандидатов, на котором миниатюрные изображения соответствующих движущихся объектов, имеющих оценочные значения, меньшие, чем у движущегося объекта, соответствующего подтверждаемому изображению, перечислены и отображены в качестве изображений-кандидатов, и позволяют контролирующему лицу выбрать изображение-кандидат, соответствующее движущемуся объекту, обозначаемому в качестве отслеживаемой цели; и этап, на котором корректируют межкамерную информацию отслеживания таким образом, чтобы движущийся объект, соответствующий изображению-кандидату, выбранному на экране выбора кандидатов, был связан с движущимся объектом, установленным в качестве отслеживаемой цели.
[0036] Согласно этому, подобно первому аспекту, можно эффективно проверять, имеется ли ошибка в результате отслеживания движущегося объекта, установленного в качестве отслеживаемой цели, и корректировать информацию отслеживания простой операцией в случае, когда имеется ошибка в результате отслеживания движущегося объекта, и, в частности, контролирующее лицо может эффективно выполнять работу по нахождению изображения, захватывающего движущийся объект, который является отслеживаемой целью, на экране выбора кандидатов.
[0037] Двенадцатое изобретение является способом содействия отслеживанию, который обеспечивает, чтобы устройство обработки информации осуществляло процесс отображения на устройстве отображения захваченного изображения от каждой из множества камер, которое собрано в средстве сбора изображений, и содействовало работе контролирующего лица по отслеживанию движущегося объекта, подлежащего отслеживанию, и включает в себя этап, на котором вычисляют оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер; этап, на котором вырезают область движущегося объекта из захваченного изображения и генерируют миниатюрное изображение каждого из движущихся объектов; этап, на котором отображают на устройстве отображения экран поиска отслеживаемой цели, на котором миниатюрные изображения соответствующих движущихся объектов отображаются в виде списка, и, в ответ на операцию, выполненную контролирующим лицом, обозначающим движущийся объект, подлежащий отслеживанию, посредством выбора миниатюрного изображения, устанавливают обозначенный движущийся объект в качестве отслеживаемой цели; этап, на котором последовательно задают камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер, которые находятся в кооперационной связи, и отображают на устройстве отображения экран подтверждения отслеживаемой цели, на котором захваченное изображение движущегося объекта с наибольшим оценочным значением отображается в качестве подтверждаемого изображения, для каждой из камер; этап, на котором в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, отображают на устройстве отображения экран выбора кандидатов, на котором миниатюрные изображения соответствующих движущихся объектов, имеющих оценочные значения, меньшие, чем у движущегося объекта, соответствующего подтверждаемому изображению, перечислены о отображены в качестве изображений-кандидатов, и позволяют контролирующему лицу выбрать изображение-кандидат, соответствующее движущемуся объекту, обозначаемому в качестве отслеживаемой цели; и этап, на котором корректируют межкамерную информацию отслеживания таким образом, чтобы движущийся объект, соответствующий изображению-кандидату, выбранному на экране выбора кандидатов, был связан с движущимся объектом, установленным в качестве отслеживаемой цели.
[0038] Согласно этому, подобно второму аспекту, можно эффективно проверять, имеется ли ошибка в результате отслеживания движущегося объекта, установленного в качестве отслеживаемой цели, и корректировать информацию отслеживания простой операцией в случае, когда имеется ошибка в результате отслеживания движущегося объекта, и, в частности, контролирующее лицо может эффективно выполнять работу по нахождению изображения, захватывающего движущийся объект, который является отслеживаемой целью, на экране поиска отслеживаемой цели.
[0039] Далее со ссылкой на чертежи будут описаны варианты осуществления. В описании настоящего иллюстративного варианта осуществления используются два отдельных японских термина, имеющих один и тот же смысл, состоящий в отслеживании. Хотя они используются только для удобства объяснения, они различаются в зависимости от использования, связанного с поведением контролирующего лица, и использования, связанного с процессами, выполняемыми на устройствах.
[0040] Фиг. 1 является диаграммой общей конфигурации системы содействия отслеживанию согласно настоящему иллюстративному варианту осуществления.
[0041] Система содействия отслеживанию сконструирована для розничного магазина, такого как супермаркет и хозяйственный магазин, и включает в себя камеру 1, записывающее устройство 2 (средство сбора изображений), PC 3 (устройство содействия отслеживанию), и устройство 4 обработки внутрикамерного отслеживания.
[0042] Камера 1 установлена в подходящем месте в магазине, и внутренняя часть магазина (зона контроля) визуализируется камерой 1, и захваченные изображения внутренней части магазина, захватываемые камерой 1, записываются в записывающем устройстве 2.
[0043] PC 3 соединен с устройством 6 ввода, таким как компьютерная мышь, с помощью которого контролирующее лицо (пользователь) выполняет различные операции ввода, и монитором 7 (устройством отображения), который отображает экран контроля. PC 3 установлен в помещении службы безопасности и т.п. магазина, и контролирующее лицо (сотрудник службы безопасности) может просматривать текущие захваченные изображения внутренней части магазина, выводимые из камеры 1 в реальном времени, и прошлые захваченные изображения внутренней части магазина, записанные в записывающем устройстве 2, на экране монитора, отображаемом на мониторе 7.
[0044] Монитор, не показанный на фиг. 1, также соединен с PC 11, обеспеченном в главной конторе, и отображает текущие захваченные изображения внутренней части магазина, выводимые из камеры 1, и прошлые захваченные изображения внутренней части магазина, записанные в записывающем устройстве 2, что позволяет пользователю в главной конторе проверять ситуацию в магазине.
[0045] Устройство 4 обработки внутрикамерного отслеживания выполняет процесс отслеживания человека (движущегося объекта), детектированного из захваченного изображения от камеры 1 и генерирования внутрикамерной информации отслеживания для каждого человека. Для процесса внутрикамерного отслеживания могут быть использованы известные технологии распознавания изображений (такие как технология детектирования человека и технология отслеживания человека). Здесь, в качестве внутрикамерной информации отслеживания, для каждого детектированного человека генерируют время детектирования человека (время визуализации рамки), положение детектирования человека, скорость движения человека, цветовую информацию изображения человека и т.п.
[0046] В настоящем иллюстративном варианте осуществления, устройство 4 обработки внутрикамерного отслеживания выполнено с возможностью непрерывно выполнять процесс внутрикамерного отслеживания независимо от PC 3, но может выполнять процесс отслеживания в ответ на команду от PC 3. Желательно, чтобы устройство 4 обработки внутрикамерного отслеживания выполняло процесс отслеживания для всех людей, детектированных из захваченных изображений, но процесс отслеживания может быть выполнен посредством фокусировки на человеке, обозначенном в качестве отслеживаемой цели, и на человеке, в высокой степени соответствующем этому человеку.
[0047] Далее будет описано установочное расположение камеры 1 в магазине. Фиг. 2 является видом сверху, показывающим установочное расположение камер 1 в магазине.
[0048] В магазине (зоне контроля) между зонами показа продуктов обеспечен проход, и множественные камеры 1 установлены таким образом, чтобы визуализировать, главным образом, этот проход.
[0049] Когда человек перемещается в проходе в магазине, человек визуализируется одной или более камерами 1, и, в соответствии с перемещением человека, визуализация этого человека передается следующей камере 1. В это время, камера, с которой принимается визуализация человека, ограничена формой прохода в магазине и зоной визуализации камеры 1, и в настоящем иллюстративном варианте осуществления камера, с которой принимается визуализация человека, называется камерой, имеющей кооперационную связь. Информация о кооперационной связи камеры устанавливается заранее и сохраняется в PC 3 в виде информации о кооперации камер. Информацию о кооперационной связи камер подготавливают для изменения числа камер 1 и их установочных местоположений, и т.п., установочная информация каждой камеры 1 может быть отдельно приобретена PC 3 во время запуска системы, и информация о кооперационной связи соответствующих камер может быть обновлена.
[0050] Далее будет описана схематичная конфигурация PC 3. Фиг. 3 является функциональной блок-схемой, показывающей схематичную конфигурацию PC 3.
[0051] PC 3 включает в себя блок 21 сбора информации отслеживания, блок 22 обработки межкамерного отслеживания, блок 23 приобретения входной информации, блок 24 обработки отслеживаемой цели, блок 25 представления изображений, уточнитель 26 признаков, генератор 27 миниатюр, устройство 28 воспроизведения изображений, и генератор 29 экранов.
[0052] Внутрикамерная информация отслеживания, генерируемая устройством 4 обработки внутрикамерного отслеживания, собирается в блоке 21 сбора информации отслеживания. Межкамерная информация отслеживания, генерируемая блоком 22 обработки межкамерного отслеживания, собирается в блоке 21 сбора информации отслеживания. Здесь межкамерная информация отслеживания является информацией, указывающей результат отслеживания, когда подтверждаемые изображения (изображения периодов времени), в которых люди, подлежащие отслеживанию, захватываются камерами, имеющими кооперационную связь, расположены в хронологическом порядке. Межкамерная информация отслеживания отображается, когда экран с временной шкалой (экран подтверждения отслеживаемой цели) генерируется презентатором 39 подтверждаемого изображения, описанным ниже. Хотя межкамерная информация отслеживания собирается в блоке 21 сбора информации отслеживания таким образом, что контролирующее лицо может подтверждать прошлый результат отслеживания (историю отслеживания), она может сохраняться временно.
[0053] Блок 23 приобретения входной информации выполняет процесс приобретения входной информации на основе операции ввода, в ответ на операцию ввода контролирующего лица с использованием устройства 6 ввода, такого как компьютерная мышь.
[0054] Блок 24 обработки отслеживаемой цели включает в себя блок 31 установления условий поиска, установщик 32 отслеживаемой цели, и установщик 33 дополнительной отслеживаемой цели.
[0055] Блок 31 установления условий поиска выполняет процесс установления условия поиска для нахождения изображения, в котором захвачен человек, который является отслеживаемой целью, в ответ на операцию ввода контролирующего лица. В настоящем иллюстративном варианте осуществления, экран поиска человека (экран поиска отслеживаемой цели, см. фиг. 6 и 7) отображается на мониторе 7, и экран поиска человека позволяет контролирующему лицу вводить дату и время фотографирования и информацию в отношении камеры 1 в качестве условия поиска на экране поиска человека.
[0056] Установщик 32 отслеживаемой цели выполняет процесс отображения на экране поиска человека даты и времени и изображения камеры 1, соответствующего условию поиска, из изображений, собранных в записывающем устройстве 2, на основе условия поиска, установленного блоком 31 установления условий поиска, и внутрикамерной информации отслеживания, собранной в блоке 21 сбора информации отслеживания, обеспечения контролирующему лицу возможности выбрать изображение на экране поиска человека для обозначения человека, который является отслеживаемой целью, и установления обозначенного человека в качестве отслеживаемой цели.
[0057] Блок 22 обработки межкамерного отслеживания включает в себя вычислитель 35 оценок связей (вычислитель оценочного значения), генератор 36 исходной информации отслеживания, селектор 37 кандидатов, и корректор 38 информации отслеживания.
[0058] Вычислитель 35 оценок связей приобретает внутрикамерную информацию отслеживания о каждой камере 1 из блока 21 сбора информации отслеживания и вычисляет оценку связи (оценочное значение), представляющую степень возможности того, что люди, которые детектированы и отслежены в процессе внутрикамерного отслеживания каждой камеры 1, являются одним и тем же человеком. В этом процессе, оценку связи вычисляют на основе информации отслеживания, такой как время детектирования человека (время визуализации рамки), положение детектирования человека, скорость движения человека, и цветовая информация изображения человека. В случае, когда имеется множество людей, которые могут быть одним и тем же человеком, в одной и той же камере, также может быть вычислено множество оценок связей. Оценки связей соответствующих камер 1 могут быть либо собраны в блоке 21 сбора информации отслеживания и т.п., либо собраны временно.
[0059] Генератор 36 исходной информации отслеживания выполняет процесс последовательного выбора для каждой камеры 1 человека, имеющего наибольшую оценку связи, а именно, наиболее вероятно являющегося тем человеком, который установлен установщиком 32 отслеживаемой цели в качестве отслеживаемой цели, в качестве отправного пункта, из людей, отслеженных посредством внутрикамерного отслеживания камеры 1, которая находится в кооперационной связи, и генерирования исходной информации отслеживания (межкамерной информации отслеживания), в которой эти люди связаны как один и тот же человек.
[0060] Конкретно, сначала человека, имеющего наибольшую оценку связи, выбирают из людей, которые отслежены посредством внутрикамерного отслеживания камеры 1, которая находится в кооперационной связи с камерой 1, которая захватывает изображение (изображение, обозначающее отслеживаемую цель), когда человека обозначают в качестве отслеживаемой цели на экране поиска человека, и затем человека, имеющего наибольшую оценку связи, выбирают из людей, которые отслежены посредством внутрикамерного отслеживания камеры 1, которая находится в кооперационной связи с камерой 1, которая захватывает выбранного человека. Такой процесс выбора человека повторяют для каждой камеры 1, которая находится в кооперационной связи. Такой процесс выбора человека выполняют как до, так и после временного отслеживания изображения, обозначающего отслеживаемую цель, и когда наибольшая оценка связи становится меньшей или равной заданному порогу, определяют, что в зоне контроля нет человека, установленного в качестве отслеживаемой цели, и выбор человека заканчивают.
[0061] Блок 25 представления изображений включает в себя презентатор 39 подтверждаемого изображения и презентатор 40 изображений-кандидатов.
[0062] Презентатор 39 подтверждаемого изображения выполняет процесс извлечения изображения человека, имеющего наибольшую оценку связи, а именно, изображения, которое наиболее вероятно захватывает человека, подлежащего отслеживанию, для каждой камеры 1, в качестве подтверждаемого изображения, на основе исходной информации отслеживания, генерируемой генератором 36 исходной информации отслеживания, и представления подтверждаемого изображения, конкретно, отображения экрана с временной шкалой в состоянии подтверждения (экрана подтверждения отслеживаемой цели, см. фиг. 9), на котором подтверждаемые изображения расположены и отображаются в порядке времени визуализации, на мониторе 7.
[0063] В случае, когда имеется ошибка в подтверждаемом изображении, представленном презентатором 39 подтверждаемого изображения, а именно, имеется ошибка в исходной информации отслеживания, генерируемой генератором 36 исходной информации отслеживания, селектор 37 кандидатов блока 22 обработки межкамерного отслеживания выполняет процесс выбора, в качестве человека-кандидата, человека, который, возможно, является человеком, установленным в качестве отслеживаемой цели, из людей, которые отслежены посредством внутрикамерного отслеживания в течение периода времени, соответствующего подтверждаемому изображению с ошибкой или отсутствующему подтверждаемому изображению.
[0064] В случае, когда имеется ошибка или отсутствие в подтверждаемом изображении, представленном презентатором 39 подтверждаемого изображения, презентатор 40 изображений-кандидатов извлекает изображение, связанное с человеком-кандидатом, выбранным селектором 37 кандидатов, а именно, изображение, которое, возможно, захватывает человека, установленного в качестве отслеживаемой цели, в качестве изображения-кандидата, и представляет изображение-кандидат. Конкретно, выполняется процесс отображения экрана с временной шкалой в состоянии отображения кандидатов (экрана выбора кандидатов, см. фиг. 12), на котором заданное число изображений-кандидатов отображается на мониторе 7, и обеспечения контролирующему лицу возможности выбрать изображение-кандидат, захватывающее человека, установленного в качестве отслеживаемой цели, на этом экране.
[0065] В случае, когда имеется подходящее изображение-кандидат среди изображений-кандидатов, представленных презентатором 40 изображений-кандидатов, корректор 38 информации отслеживания выполняет процесс коррекции информации отслеживания о человеке, установленном в качестве отслеживаемой цели, таким образом, чтобы человек, соответствующий изображению-кандидату, был связан с человеком, установленным в качестве отслеживаемой цели, и генерирования скорректированной информации отслеживания.
[0066] В это время, подобно процессу генерирования исходной информации отслеживания, корректор 38 информации отслеживания последовательно выбирает для каждой камеры 1 человека, имеющего наибольшую оценку связи, а именно, наиболее вероятно являющегося тем же человеком, начиная с человека, соответствующего изображению-кандидату, из людей, отслеженных посредством внутрикамерного отслеживания камеры 1, которая находится в кооперационной связи, и генерирует скорректированную информацию отслеживания, в которой эти люди связаны как один и тот же человек. В процессе коррекции информации отслеживания, человек, установленный установщиком 32 отслеживаемой цели, человек, соответствующий подтверждаемому изображению, для которого операция подтверждения выполнена контролирующим лицом, и человек, соответствующий изображению-кандидату, замененному подтверждаемым изображением, уже имеющим ошибку, исключаются из цели коррекции.
[0067] В случае, когда среди изображений-кандидатов, представленных презентатором 40 изображений-кандидатов, нет подходящего изображения-кандидата, установщик 33 дополнительной отслеживаемой цели блока 24 обработки отслеживаемой цели выполняет процесс отображения на мониторе 7 экрана поиска человека (экрана поиска отслеживаемой цели, см. фиг. 15 и 16), на котором отображаются изображения, собранные в записывающем устройстве 2, обеспечения контролирующему лицу возможности обозначить человека, установленного в качестве отслеживаемой цели, среди изображений, захваченных в течение периода времени, соответствующего подтверждаемому изображению с ошибкой или отсутствующему подтверждаемому изображению, на экране поиска человека, и дополнительного установления обозначенного человека в качестве отслеживаемой цели.
[0068] Корректор 38 информации отслеживания блока 22 обработки межкамерного отслеживания выполняет процесс связывания человека, установленного в качестве отслеживаемой цели установщиком 33 дополнительной отслеживаемой цели, с человеком, установленным в качестве отслеживаемой цели установщиком 32 отслеживаемой цели, коррекции информации отслеживания в отношении человека, установленного в качестве отслеживаемой цели, и генерирования скорректированной информации отслеживания.
[0069] Уточнитель 26 признаков выполняет процесс уточнения искомого человека, а именно, человека с миниатюрного изображения (изображения отслеживаемой цели), подлежащего отображению на экране поиска человека (см. фиг. 6), на основе информации о признаках человека, обозначенного в качестве отслеживаемой цели. Уточнитель 26 признаков выполняет процесс уточнения человека, который является кандидатом, а именно, человека с миниатюрного изображения (изображения-кандидата), подлежащего отображению на экране с временной шкалой в состоянии отображения кандидатов (см. фиг. 12), на основе информации о признаках человека, обозначенного в качестве отслеживаемой цели. Этот процесс может быть также применен в случае установления дополнительного человека в качестве отслеживаемой цели.
[0070] Здесь информация о признаках является, например, информацией в отношении пола, возраста, роста, цвета волос, цвета одежды, головного убора и надетых аксессуаров, цвета носимых вещей, таких как сумки, и т.п. В случае уточнения искомых людей, информация о признаках человека, подлежащего отслеживанию, может быть установлена посредством ввода изображения, захватывающего человека, который является отслеживаемой целью, или ввода информации о признаках на основании операции, выполненной пользователем. В случае уточнения людей, которые являются кандидатами, может быть использована информация о признаках, приобретенная из изображения человека, обозначенного в качестве отслеживаемой цели.
[0071] Генератор 27 миниатюр вырезает область человека из изображения камеры и генерирует миниатюрное изображение. В настоящем иллюстративном варианте осуществления, во время внутрикамерного отслеживания, выполняемого устройством 4 обработки внутрикамерного отслеживания, рамка человека, окружающая некоторую область человека (например, верхнюю часть тела человека), устанавливается на изображении камеры, и область рамки человека вырезается из изображения камеры для генерирования миниатюрного изображения.
[0072] Устройство 28 воспроизведения изображений выполняет процесс отображения захваченных изображений от камеры 1 в виде движущегося изображения на экране, отображаемом на мониторе 7. В настоящем иллюстративном варианте осуществления, процесс отображения экрана с временной шкалой в состоянии непрерывного воспроизведения (экрана непрерывного воспроизведения, см. фиг. 11) выполняется на мониторе 7, и на экране с временной шкалой с течением времени в виде движущегося изображения выполняется непрерывное воспроизведение последовательно отображаемых захваченных изображений от камеры 1, на которых захвачен человек, подлежащий отслеживанию.
[0073] Устройство 28 воспроизведения изображений выполняет процесс прореживания и воспроизведения миниатюрных изображений, подлежащих отображению на мониторе 7. При воспроизведении с прореживанием, миниатюрное изображение воспроизводится в состоянии, в котором частота кадров, а именно, частота кадров захваченного изображения, выводимого из камеры 1, уменьшается относительно исходной частоты кадров посредством процесса прореживания кадров. Конкретно, миниатюрные изображения последовательно генерируются с заданным интервалом, соответствующим частоте кадров, во время воспроизведения с прореживанием, из захваченного изображения в течение периода времени внутрикамерного отслеживания (периода времени, в течение которого выполняется внутрикамерное отслеживание), и воспроизводятся и отображаются миниатюрные изображения, которые расположены последовательно по времени. Дополнительно, миниатюрное изображение может быть воспроизведено и отображено с исходной частотой кадров при исходных установочных параметрах и т.п.
[0074] Генератор 29 экранов генерирует экран, подлежащий отображению на мониторе 7, конкретно, генерирует экран поиска человека (экран поиска отслеживаемой цели, см. фиг. 6, фиг. 7, фиг. 15, и фиг. 16) в ответ на команду от установщика 32 отслеживаемой цели и установщика 33 дополнительной отслеживаемой цели, генерирует экран с временной шкалой в состоянии подтверждения (экран подтверждения отслеживаемой цели, см. фиг. 9) в ответ на команду от презентатора 39 подтверждаемого изображения, генерирует экран с временной шкалой в состоянии отображения кандидатов (экран выбора кандидатов, см. фиг. 12) в ответ на команду от презентатора 40 изображений-кандидатов, и генерирует экран с временной шкалой в состоянии непрерывного воспроизведения (экран непрерывного воспроизведения, см. фиг. 11) в ответ на команду от устройства 28 воспроизведения изображений.
[0075] Дополнительно, каждый блок PC 3, показанный на фиг. 3, реализован посредством обеспечения того, чтобы процессор (центральный процессор (Central Processing Unit (CPU)) PC 3 выполнял программу (команду) содействия отслеживанию, хранимую в памяти, такой как накопитель на жестких дисках (Hard Disk Drive - HDD). Эти программы могут быть установлены в PC 3, который является устройством обработки информации, заранее и выполнены в виде специального устройства, или могут быть обеспечены для пользователя посредством записи в подходящем средстве записи программ или через сеть, в виде прикладной программы, работающей в заданной операционной системе (Operating System - OS).
[0076] Далее будет описан каждый экран, отображаемый на мониторе 7, и процессы, выполняемые в каждом блоке PC 3 в ответ на операцию контролирующего лица, выполняемую на каждом экране. Фиг. 4 является иллюстративной диаграммой, показывающей переходные состояния экрана, отображаемого на мониторе 7. Фиг. 5 является блок-схемой последовательности операций, показывающей процедуру процесса, выполняемого в каждом блоке PC 3 в ответ на операцию контролирующего лица, выполненную на каждом экране.
[0077] Сначала, когда в PC 3 выполняется операция для начала процесса содействия отслеживанию, на мониторе 7 отображается экран поиска человека (экран поиска отслеживаемой цели, см. фиг. 6 и 7) в состоянии исходного обозначения (этап 101). В это время, режим специфического-для-человека списка устанавливается для режима отображения в исходном состоянии, и сначала отображается экран поиска человека (см. фиг. 6) в режиме специфического-для-человека списка, который может быть переключен на экран поиска человека (см. фиг. 7) в режиме специфического-для-камеры списка посредством операции контролирующего лица. Пользователь может менять режим отображения в исходном состоянии.
[0078] Экран поиска человека используется для обозначения даты и времени, когда человек, подлежащий отслеживанию, произвел проблематичное действие, такое как магазинная кража, обозначения места, где человек, которого требуется отследить, произвел проблематичное действие, и камеры 1, которая захватывает зону, через которую, как предполагается, этот человек должен пройти, нахождения миниатюрного изображения, на котором захвачен человек, подлежащий отслеживанию, и обозначения человека, подлежащего отслеживанию. Если человек, подлежащий отслеживанию, захвачен на изображении, отображаемом при обозначении даты и времени и камеры 1, то контролирующее лицо выполняет операцию обозначения этого человека как отслеживаемой цели посредством выбора этого изображения (Да на этапе 102).
[0079] На экране поиска человека, когда контролирующее лицо обозначает человека, подлежащего отслеживанию, установщик 32 отслеживаемой цели выполняет процесс установления человека, обозначенного контролирующим лицом, в качестве отслеживаемой цели (этап 103). Затем, генератор 36 исходной информации отслеживания выполняет процесс последовательного выбора человека с наибольшей оценкой связи из людей, детектированных и отслеженных посредством процесса внутрикамерного отслеживания для каждой камеры 1, для каждой камеры, и генерирования исходной информации отслеживания (этап 104). Затем, презентатор 39 подтверждаемого изображения выполняет процесс извлечения изображения, которое наиболее вероятно захватывает человека, установленного в качестве отслеживаемой цели, в качестве подтверждаемого изображения для каждой камеры 1, на основе исходной информация отслеживания, и отображения экрана с временной шкалой (экрана подтверждения отслеживаемой цели, см. фиг. 9) в состоянии подтверждения, на котором отображается подтверждаемое изображение, на мониторе 7 (этап 105).
[0080] Экран с временной шкалой в состоянии подтверждения используется для обеспечения контролирующему лицу возможности проверять, имеется ли ошибка во внутрикамерной информации отслеживания (исходной информации отслеживания), посредством подтверждаемого изображения. В случае, когда ошибок нет во всех подтверждаемых изображениях, отображаемых на экране с временной шкалой в состоянии подтверждения, а именно, все подтверждаемые изображения связаны с человеком, установленным в качестве отслеживаемой цели, контролирующим лицом выполняется операция отдания команды на непрерывное воспроизведение (Да на этапе 106), и выполняется переход к экрану с временной шкалой в состоянии непрерывного воспроизведения (экрану непрерывного воспроизведения, см. фиг. 11) (этап 107).
[0081] На экране с временной шкалой в состоянии непрерывного воспроизведения выполняется непрерывное воспроизведение, при котором изображение от каждой камеры 1, в котором захвачена отслеживаемая цель, последовательно отображается с течением времени.
[0082] С другой стороны, в случае, когда среди множества подтверждаемых изображений, отображаемых на экране с временной шкалой в состоянии подтверждения, найдено подтверждаемое изображение с ошибкой, а именно, в случае, когда какое-либо подтверждаемое изображение не связано с человеком, установленным в качестве отслеживаемой цели, или в случае, когда подтверждаемое изображение того периода времени, когда человек, установленный в качестве отслеживаемой цели, должен был быть захвачен какой-либо камерой 1, отсутствует, контролирующее лицо выполняет операцию выбора подтверждаемого изображения и отдания команды на отображение изображения-кандидата (Да на этапе 108).
[0083] Затем, селектор 37 кандидатов выполняет процесс выбора человека, который, возможно, является человеком, установленным в качестве отслеживаемой цели, из людей, отслеженных посредством внутрикамерного отслеживания в течение периода времени, соответствующего подтверждаемому изображению, имеющему ошибку, или отсутствующему подтверждаемому изображению, и презентатор 40 изображений-кандидатов выполняет процесс извлечения изображения человека, выбранного в качестве изображения-кандидата селектором 37 кандидатов, и отображения экрана с временной шкалой (экрана выбора кандидатов, см. фиг. 12) в состоянии отображения изображений-кандидатов, на котором располагаются и отображаются изображения-кандидаты, на мониторе 7 (этап 109).
[0084] На экране с временной шкалой в состоянии отображения кандидатов, изображение, которое может захватывать человека, установленного в качестве отслеживаемой цели, отображается в качестве изображения-кандидата.
[0085] В случае, когда среди изображений-кандидатов, отображаемых на экране с временной шкалой в состоянии отображения кандидатов, имеется подходящее изображение-кандидат, а именно, найдено изображение-кандидат, относящееся к человеку, установленному в качестве отслеживаемой цели, контролирующим лицом выполняется операция выбора изображения-кандидата (Да на этапе 110).
[0086] Затем корректором 38 информации отслеживания блока 22 обработки межкамерного отслеживания выполняется процесс коррекции информации отслеживания таким образом, чтобы человек, соответствующий изображению-кандидату, выбранному на экране с временной шкалой в состоянии отображения кандидатов, был связан с человеком, который был сначала обозначен в качестве отслеживаемой цели (этап 111). Затем экран возвращается к экрану с временной шкалой к состоянию подтверждения (этап 105), и на экране с временной шкалой отображается изображение, в котором отражен результат коррекции информации отслеживания, а именно, подтверждаемое изображение синхронизированного экрана заменяется изображением камеры, в котором захватывается и отображается человек, соответствующий выбранному изображению-кандидату.
[0087] С другой стороны, в случае, когда среди изображений-кандидатов, отображаемых на экране с временной шкалой в состоянии отображения изображений-кандидатов, нет подходящего изображения-кандидата, а именно, изображение-кандидат человека, установленного в качестве отслеживаемой цели, не найдено, контролирующее лицо выполняет операцию выбора дополнительного обозначения (Да на этапе 112), и выполняется переход к экрану поиска человека в состоянии дополнительного обозначения (экрану поиска отслеживаемой цели, см. фиг. 15 и 16) (этап 113).
[0088] Контролирующее лицо выполняет работу по поиску изображения, в котором захвачен человек, установленный в качестве отслеживаемой цели, на экране поиска человека в состоянии дополнительного обозначения. В случае, когда изображение, в котором захвачен человек, установленный в качестве отслеживаемой цели, найдено на экране поиска человека в состоянии дополнительного обозначения, контролирующее лицо выполняет операцию выбора человека с этого изображения в качестве отслеживаемой цели посредством выбора этого изображения (Да на этапе 114).
[0089] Затем, корректор 38 информации отслеживания блока 22 обработки межкамерного отслеживания выполняет процесс коррекции информации отслеживания таким образом, чтобы человек, выбранный на экране поиска человека, был связан с человеком, который был сначала обозначен в качестве отслеживаемой цели (этап 111). Затем экран возвращается к экрану с временной шкалой в состоянии подтверждения (этап 105), и отображается результат коррекции информации отслеживания, а именно, подтверждаемое изображение синхронизированного экрана заменяется изображением человека, обозначенного на экране поиска человека, и замененное изображение отображается на экране с временной шкалой.
[0090] Как описано выше, в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране с временной шкалой в состоянии подтверждения, или в случае, когда подтверждаемое изображение отсутствует, контролирующее лицо выполняет операцию выбора изображения-кандидата или операцию поиска и обозначения человека, установленного в качестве отслеживаемой цели, и эти операции повторяются до тех пор, пока не останется никаких подтверждаемых изображений с ошибками или отсутствующих подтверждаемых изображений. Когда проверено, что никаких ошибок нет во всех подтверждаемых изображениях, и все подтверждаемые изображения присутствуют, контролирующее лицо выполняет операцию отдания команды на непрерывное воспроизведение (Да на этапе 106), и экран с временной шкалой в состоянии непрерывного воспроизведения (см. фиг. 11) отображается на мониторе 7 (этап 107).
[0091] Далее будет подробно описан каждый экран, показанный на фиг. 4.
[0092] Сначала будет описан экран поиска человека в состоянии исходного обозначения (экран поиска отслеживаемой цели), показанный на фиг. 4. Фиг. 6 является иллюстративной диаграммой, показывающей экран поиска человека в состоянии исходного обозначения в режиме специфического-для-человека списка. Фиг. 7 является иллюстративной диаграммой, показывающей экран поиска человека в состоянии исходного обозначения в режиме специфического-для-камер списка. Фиг. 8 является иллюстративной диаграммой, показывающей основную часть экрана поиска человека в режиме специфического-для-камер списка.
[0093] Экран поиска человека в состоянии исходного обозначения (экран поиска отслеживаемой цели) используется для обозначения даты и времени, когда человек, которого требуется отследить, произвел проблематичное действие, такое как магазинная кража, поиска изображения, в котором захвачен человек, подлежащий отслеживанию, и обозначения человека, подлежащего отслеживанию, на изображении.
[0094] Экран поиска человека снабжен участком 41 обозначения даты и времени поиска, участком 42 обозначения камеры поиска, участком 43 отображения изображений, участком 44 операции воспроизведения, участком 45 настройки времени отображения, участком 46 обозначения периода отображения, участком 47 обозначения диапазона настройки, кнопкой 48 отмены выбора, кнопкой 49 завершения установки, и участком 50 обозначения уточнения признаков.
[0095] Участок 41 обозначения даты и времени поиска снабжен участком 51 ввода даты и времени и кнопкой 52 поиска. На участке 51 ввода даты и времени контролирующее лицо вводит дату и время, которые являются серединой периода времени, в течение которого, как предполагается, может быть захвачен человек, подлежащий отслеживанию. Когда дата и время введены на участке 51 ввода даты и времени, и приведена в действие кнопка 52 поиска, захваченное изображение, соответствующее введенной дате и времени, отображается на участке 43 отображения изображений.
[0096] Участок 42 обозначения камеры поиска снабжен участком 53 выбора единственной камеры и участком 54 выбора множественных камер. Участок 53 выбора единственной камеры и участок 54 выбора множественных камер снабжены кнопкой 55 с зависимой фиксацией, участком 56 выбора меню, и кнопкой 57 отображения карты, соответственно.
[0097] Две кнопки 55 с зависимой фиксацией используются для выбора одного режима поиска из режима единственной камеры и режима множественных камер. В режиме единственной камеры, обозначается единственная камера 1, и изображение, в котором захвачен человек, подлежащий отслеживанию, находят среди изображений от единственной камеры 1. В режиме множественных камер обозначаются множественные камеры 1, и изображение, в котором захвачен человек, подлежащий отслеживанию, находят среди изображений от множественных камер 1.
[0098] На участке 56 выбора меню, посредством использования раскрывающегося меню, может быть выбрана камера 1. Когда приводится в действие кнопка 57 отображения карты, отображается экран отображения карты (не показан). На экране отображения карты, пиктограмма камеры, указывающая на положение камеры 1, наложена на изображение карты, показывающей планировку магазина, и камера 1 может быть выбрана на экране отображения карты.
[0099] Участок 54 выбора множественных камер снабжен списком 58 кнопок-флажков, кнопкой 59 очистки, и кнопкой 60 «выбрать все». В списке 58 кнопок-флажков, требуемое число камер 1 может быть выбрано кнопкой-флажком 61. Когда приводится в действие кнопка 59 очистки, выбранные состояния всех камер 1 отменяются. Когда приводятся в действие кнопки 60 «выбрать все», все камеры 1 могут быть установлены в выбранное состояние.
[0100] Информация о выбранном состоянии режима поиска (режим единственной камеры и режим множественных камер) и информация о выбранном состоянии камеры 1 сохраняются в блоке хранения информации, который не показан, и при следующем запуске экран поиска человека будет отображаться с тем режимом поиска и состоянием камеры 1, которые были выбраны во время последнего завершения работы.
[0101] На участке 43 отображения изображений, обеспечены вкладка 63 и участок 64 отображения даты и времени. Вкладка 63 используется для переключения между режимами отображения: режимом специфического-для-человека списка и режимом специфического-для-камеры списка. Когда выбирается вкладка 63 специфического-для-человека списка, отображается экран поиска человека в режиме специфического-для-человека списка, показанный на фиг. 6. Когда выбирается вкладка 63 специфического-для-камеры списка, отображается экран поиска человека в режиме специфического-для-камеры списка, показанный на фиг. 7.
[0102] На экране поиска человека в режиме специфического-для-человека списка, показанном на фиг. 6, на участке 43 отображения изображений отображается специфический-для-человека список 66 изображений, в котором в виде списка отображаются миниатюрные изображения 65 соответствующих искомых людей.
[0103] В специфическом-для-человека списке 66 изображений, специфические-для-камеры поля 67 отображения для камер 1 расположены в вертикальном направлении. На специфическом-для-камеры поле 67 отображения, миниатюрное изображение 65 отображается отдельно для каждой камеры 1, которая захватила миниатюрное изображение 65. В специфическом-для-человека списке 66 изображений, миниатюрные изображения 65 расположены в ряд последовательно по времени, и на специфическом-для-камеры поле 67 отображения миниатюрное изображение 65 человека, отслеженного посредством внутрикамерного отслеживания соответствующей камерой 1, отображается в порядке, в котором отслеживание начинается. Миниатюрное изображение 65 отображается в положении, соответствующем времени начала отслеживания. На экране поиска человека в состоянии исходного обозначения, показанном на фиг. 6, специфические-для-камеры поля 67 отображения расположены сверху вниз в порядке увеличения номера камеры.
[0104] В специфическом-для-человека списке 66 изображений, посредством выполнения операции (щелчка кнопкой мыши) выбора миниатюрного изображения 65 и обозначения человека с миниатюрного изображения 65 в качестве отслеживаемой цели, этот человек устанавливается в качестве отслеживаемой цели. В это время, поскольку человек, который является малым в захваченном изображении, увеличивается и отображается в миниатюрном изображении 65, идентификация человека становится более легкой по сравнению со случаем, когда захваченное изображение отображается таким, как оно есть, так что устраняется проблема пропуска человека, подлежащего отслеживанию, и можно эффективно находить человека, подлежащего отслеживанию.
[0105] Дополнительно, участок 43 отображения изображений снабжен вертикальной полосой 68 прокрутки и горизонтальной полосой 69 прокрутки. При приведении в действие вертикальной полосы 68 прокрутки, специфический-для-человека список 66 изображений может быть перемещен в вертикальном направлении и отображен, и при приведении в действие горизонтальной полосы 69 прокрутки, специфический-для-человека список 66 изображений может быть перемещен в горизонтальном направлении и отображен. Это позволяет эффективно находить миниатюрное изображение 65 человека, подлежащего отслеживанию, даже в случае, когда точно не известна камера 1, визуализирующая человека, подлежащего отслеживанию, и время визуализации.
[0106] Дополнительно, когда выполняется операция наведения мыши, состоящая в наложении курсора на миниатюрное изображение 65, отображаемое в специфическом-для-человека списке 66 изображений, миниатюрное изображение 65 прореживается и воспроизводится. Согласно этому, можно за короткое время подтвердить миниатюрное изображение 65 в течение всего периода внутрикамерного отслеживания относительно человека с миниатюрного изображения 65. В исходном состоянии (состоянии остановки) миниатюрного изображения 65, отображается миниатюрное изображение 65, извлеченное из изображения, захваченное в момент времени середины периода времени отслеживания при внутрикамерном отслеживании.
[0107] Когда операция наведения мыши выполняется на миниатюрном изображении 65, на миниатюрном изображении 65 появляется строка-подсказка 70 (рамка отображения) для отображения временной информации. В строке-подсказке 70 отображается период времени внутрикамерного отслеживания (время начала отслеживании и время окончания отслеживания), связанный с человеком, появляющимся в миниатюрном изображении 65. Таким образом, пользователь может узнать точное время появления человека, установленного в качестве отслеживаемой цели.
[0108] С другой стороны, на экране поиска человека в режиме специфического-для-камеры списка изображений, показанном на фиг. 7, на участке 43 отображения изображений отображается специфический-для-камер список 72 изображений, в котором изображения 71 камер, в виде изображений, целиком захваченных камерами 1, отображаются в виде списка. В специфическом-для-камер списке 72 изображений, изображения 71 камер отображаются в ряд сверху вниз в порядке увеличения номера камеры.
[0109] Как показано на фиг. 8, рамка 73 человека (метка отслеживания) отображается в зоне изображения человека, детектированного из изображения 71 камеры, а именно, человек, подлежащий внутрикамерному отслеживанию, отображается в изображении 71 камеры, и операция (щелчок кнопкой мыши) выбора рамки 73 человека выполняется таким образом, что человек устанавливается в качестве отслеживаемой цели.
[0110] На участке 43 отображения изображений, кнопка 74 удаления обеспечена для каждого изображения 71 камеры. Посредством приведения в действие кнопки 74 удаления изображение 71 камеры может быть удалено. Таким образом, посредством удаления изображения 71 камеры, которое определено как ненужное при последовательном просмотре изображения 71 камеры, число изображений 71 камер, отображаемых в виде списка на участке 43 отображения изображений, уменьшается, следовательно, становится легко находить человека, установленного в качестве отслеживаемой цели. Когда число изображений 71 камер, отображаемых в виде списка, изменяется, соответствующим образом изменяется размер каждого изображения 71 камеры, и когда число изображений 71 камер, отображаемых в виде списка, уменьшается, каждое изображение 71 камеры отображается с большим размером.
[0111] Участок 50 обозначения уточнения признаков используется для выбора того, следует ли или нет выполнять уточнение на основе информации о признаках, причем уточнение на основе информации о признаках выполняется кнопкой-флажком 81, и в специфическом-для-человека списке 66 изображений отображаются миниатюрные изображения 65 только тех людей, чьи внешние признаки подобны внешним признакам человека, подлежащего отслеживанию, чья информация о признаках была введена ранее.
[0112] Участок 44 операции воспроизведения используется для выполнения операций, связанных с воспроизведением изображения, отображаемого на участке 43 отображения изображений. Различные кнопки 82, такие как кнопка воспроизведения, кнопка обратного воспроизведения, кнопка остановки, кнопка ускоренной перемотки вперед, и кнопка ускоренной перемотки, обеспечены на участке 44 операции воспроизведения, и можно эффективно просматривать изображения и эффективно находить изображение, захватывающее человека, подлежащего отслеживанию, посредством приведения в действие кнопок 82.
[0113] Участок 45 настройки времени отображения используется для настройки времени отображения изображения, отображаемого на участке 43 отображения изображений. Участок 45 настройки времени отображения является так называемой полосой поиска, и подвижный ползунок 83 обеспечен вдоль полосы 84. Когда операция сдвига (перетаскивания) ползунка 83 выполняется с использованием устройства 6 ввода, такого как мышь, изображение в момент времени, указываемый ползунком 83, отображается на участке 43 отображения изображений. Полоса 84 определяет диапазон настройки времени отображения, серединой которого является момент времени, обозначенный на участке 41 обозначения даты и времени поиска.
[0114] Участок 46 обозначения периода отображения используется для ввода контролирующим лицом периода времени, в течение которого захватывается человек, который является отслеживаемой целью, в качестве периода отображения. Участок 46 обозначения периода отображения является так называемой полосой длительности, и полоса 86, представляющая период отображения, отображается в рамке 85. В случае, когда изображение, в котором отображается человек, подлежащий отслеживанию, отображается на участке 43 отображения изображений, и рамка 73 человека не отображается не человеке, участок 46 обозначения периода отображения используется для того, чтобы контролирующее лицо обозначило период времени, в течение которого человек, подлежащий отслеживанию, захватывается в изображении, вместо выбора рамки 73 человека.
[0115] Участок 47 обозначения диапазона настройки используется для обозначения диапазона настройки (эффективного диапазона воспроизведения) времени отображения изображения, отображаемого на участке 43 отображения изображений, а именно, диапазона перемещения ползунка 83, определяемого полосой 84 участка 45 настройки времени отображения. На участке 47 обозначения диапазона настройки, диапазон настройки времени отображения может быть выбран из заданных периодов времени (например, 5 минут, 15 минут, и т.п.) посредством раскрывающегося меню.
[0116] Когда приводится в действие кнопка 48 отмены выбора, контенты, обозначенные на участке 46 обозначения периода отображения, игнорируются, и обозначение периода отображения (времени начала и времени окончания) может быть выполнено повторно. Когда приводится в действие кнопка 49 завершения установки, выполняется переход к экрану с временной шкалой (см. фиг. 9) в состоянии подтверждения.
[0117] Далее будет описан экран с временной шкалой в состоянии подтверждения (экран подтверждения отслеживаемой цели), показанный на фиг. 4. Фиг. 9 является иллюстративной диаграммой, показывающей экран с временной шкалой в состоянии подтверждения. Фиг. 10А и 10В являются иллюстративными диаграммами, показывающей основную часть экрана с временной шкалой в состоянии подтверждения.
[0118] На экране поиска человека, показанном на фиг. 6 и 7, когда контролирующее лицо приводит в действие кнопку 49 завершения установки после обозначения человека, подлежащего отслеживанию, выполняется переход к экрану с временной шкалой в состоянии подтверждения, показанному на фиг. 9.
[0119] На экране с временной шкалой в состоянии подтверждения, захваченное изображение от каждой камеры 1, имеющей наибольшую возможность захватить человека, установленного в качестве отслеживаемой цели на экране поиска человека, отображается в качестве подтверждаемого изображения 101, чтобы позволить контролирующему лицу проверить, имеется ли ошибка во внутрикамерной информации отслеживания (исходной информации отслеживания), посредством использования подтверждаемого изображения 101.
[0120] На экране с временной шкалой обеспечен участок 91 отображения изображений, участок 44 операции воспроизведения, участок 45 настройки времени отображения, кнопка 92 отображения карты, кнопка 93 вывода отчета, и кнопка 94 возврата.
[0121] На участке 91 отображения изображений обеспечен участок 96 отображения подтверждаемых изображений и участок 97 отображения изображений-кандидатов. Участок 97 отображения изображений-кандидатов используется для отображения изображений на экране с временной шкалой в состоянии отображения кандидатов (см. фиг. 12), который будет подробно описан ниже.
[0122] На участке 96 отображения подтверждаемых изображений, изображения, получаемые посредством последовательного захвата человека, который является отслеживаемой целью, соответствующими камерами 1 в течение периода времени, когда человек, который является отслеживаемой целью, входит в зону контроля (в магазин) в начале отслеживания и выходит из зоны контроля, отображаются в ряд в виде подтверждаемых изображений 101 для соответствующих камер 1 в порядке времени визуализации, а именно, с левого конца в порядке времени визуализации от самого раннего времени визуализации. Дополнительно, для каждого подтверждаемого изображения 101 отображается время визуализации и идентификатор камеры 1.
[0123] В исходном состоянии, когда открывается экран с временной шкалой, подтверждаемое изображение 101 во время начала отслеживания, когда камера 1 начинает внутрикамерное отслеживание, отображается в виде неподвижного изображения. Когда в подтверждаемом изображении 101 нет ошибок, в ответ на операцию на участке 44 операции воспроизведения может быть выполнен переход к непрерывному воспроизведению. В подтверждаемом изображении 101, рамка 73 человека отображается на человеке, детектированном и отслеженном из подтверждаемого изображения 101, подобно экрану поиска человека (см. фиг. 8).
[0124] На участке 96 отображения подтверждаемых изображений для каждого подтверждаемого изображения 101 обеспечена кнопка 102 отображения кандидатов и кнопка 103 удаления. Когда приводится в действие кнопка 102 отображения изображений-кандидатов, выполняется переход к экрану с временной шкалой (см. фиг. 12) в состоянии отображения кандидатов. Посредством приведения в действие кнопки 103 удаления подтверждаемое изображение 101 может быть удалено.
[0125] На участке 96 отображения подтверждаемых изображений, изображение для обозначения отслеживаемой цели, а именно, изображение, обозначающее человека в качестве отслеживаемой цели на экране поиска человека (см. фиг. 6 и 7), также отображается в виде подтверждаемого изображения 101, и метка 104 отображается в подтверждаемом изображении 101 для идентификации изображения для обозначения отслеживаемой цели вместо кнопки 102 отображения кандидатов. Вместо метки 104 может быть отображено изображение рамки, представляющее изображение для обозначения отслеживаемой цели. Изображение рамки, представляющее состояние подтверждения, может быть отображено в подтвержденном подтверждаемом изображении 101.
[0126] Дополнительно, участок 96 отображения подтверждаемых изображений снабжен горизонтальной полосой 105 прокрутки. Посредством приведения в действие горизонтальной полосы 105 прокрутки, подтверждаемое изображение 101 может быть перемещено и отображено в направлении расположения подтверждаемых изображений 101, а именно, в горизонтальном направлении.
[0127] Поскольку то, относится или нет подтверждаемое изображение 101, отображаемое на участке 96 отображения подтверждаемых изображений, к человеку, обозначенному в качестве отслеживаемой цели, определяются на экране с временной шкалой, сконфигурированном таким образом, контролирующее лицо может проверять, имеется или нет ошибка в межкамерной информации отслеживания (исходной информации отслеживания) в отношении человека, обозначенного в качестве отслеживаемой цели. В случае, когда в межкамерной информации отслеживания имеется ошибка, человек, который является отслеживаемой целью, не захватывается в подтверждаемом изображении 101, или человек, который является отслеживаемой целью, захватывается, но рамка человека отображается на человеке, отличном от человека, установленного в качестве отслеживаемой цели, и контролирующее лицо может проверить, имеется ли или нет ошибка в межкамерной информации отслеживания, посредством просмотра подтверждаемого изображения 101.
[0128] Здесь, в случае, когда нет ошибок во всех подтверждаемых изображениях 101, отображаемых на участке 96 отображения подтверждаемых изображений, а именно, человек, который является отслеживаемой целью, захвачен во всех подтверждаемых изображениях 101, и рамка человека отображается на этом человеке, выполняется операция отдания команды на непрерывное воспроизведение, а именно, приводится в действие кнопка 82 воспроизведения на участке 44 операции воспроизведения. Выполняется переход к экрану с временной шкалой в состоянии непрерывного воспроизведения, показанному на фиг. 11.
[0129] Здесь, как показано на фиг. 10А, в рамке 107 отображения изображений участка 96 отображения подтверждаемых изображений, в исходном состоянии, увеличенное изображение 108, включающее в себя область человека (область рамки 73 человека), отображается в качестве подтверждаемого изображения 101. На увеличенном изображении 108, рамка 73 человека отображается на человеке, соответствующем подтверждаемому изображению 101. Увеличенное изображение 108 получают посредством вычисления коэффициента увеличения таким образом, чтобы увеличенное изображение находилось в пределах размера рамки отображения подтверждаемого изображения 101, в состоянии, в котором заданная граница обеспечивается вокруг области человека, и сохраняется отношение размеров изображения, и извлечения области, центрированной относительно центральной точки рамки 73 человека из захваченного изображения, на основе коэффициента увеличения. В увеличенном изображении 108 легко идентифицировать человека, поскольку человек отображается и увеличен относительно исходного захваченного изображения.
[0130] Когда операция наведения курсора мыши выполняется на увеличенном изображении 108, как показано на фиг. 10В, подтверждаемое изображение 101, отображаемое в рамке 107 отображения изображений, переключается с увеличенного изображения 108 на изображение 109 камеры. В изображении 109 камеры появляется полная зона визуализации камеры 1, и, по сравнению с увеличенным изображением 108, становится легче распознавать ситуацию вокруг человека.
[0131] Когда выполняется операция (щелчок кнопкой мыши) выбора подтверждаемого изображения 101 (изображения 109 камеры), увеличенный экран отображения (не показан) для увеличения и отображения подтверждаемого изображения 101 всплывает в другом окне, и подтверждаемое изображение 101 можно подробно наблюдать на этом экране.
[0132] Участок 44 операции воспроизведения и участок 45 настройки времени отображения используются для отображения подтверждаемого изображения 101 в виде движущегося изображения на экране с временной шкалой (см. фиг. 11) в состоянии непрерывного воспроизведения, который подобен экрану поиска человека (см. фиг. 6 и 7) и будет подробно описан ниже.
[0133] Когда приводится в действие кнопка 92 отображения карты, отображается экран отображения карты (не показан). На основании экрана отображения карты можно проверить положение камеры 1. Экран отображения карты получают посредством наложения пиктограмм камер, указывающих на положения камер 1, на изображение карты, показывающее планировку в магазине, и можно проверить положение камеры 1, которая захватила подтверждаемое изображение 101.
[0134] Кнопка 93 вывода отчета приводится в действие для вывода отчета о подтверждаемых изображениях 101 для каждой из камер 1, расположенных последовательно по времени. Кнопка 94 возврата приводится в действие для возврата к экрану с временной шкалой в состоянии подтверждения из экрана с временной шкалой в состоянии отображения кандидатов (фиг. 12).
[0135] Далее будет описан экран с временной шкалой (экран непрерывного воспроизведения) в состоянии непрерывного воспроизведения, показанный на фиг. 4. Фиг. 11 является иллюстративной диаграммой, показывающей экран с временной шкалой в состоянии непрерывного воспроизведения.
[0136] Хотя экран с временной шкалой в состоянии непрерывного воспроизведения имеет по существу такую же конфигурацию, что и экран с временной шкалой в состоянии подтверждения (см. фиг. 9), на экране с временной шкалой в состоянии непрерывного воспроизведения выполняется непрерывное воспроизведение, при котором подтверждаемые изображения 101, отображаемые на участке 96 отображения подтверждаемых изображений, последовательно отображаются в виде движущегося с течением времени изображения. Изображение 111 рамки, указывающее на то, что выполняется воспроизведение, отображается на воспроизводимом подтверждаемом изображении 101.
[0137] На участке 44 операции воспроизведения, начальная точка (левый конец) полосы 84, которая определяет диапазон перемещения ползунка 83 для настройки времени отображения подтверждаемого изображения 101, отображаемого на участке 96 отображения подтверждаемых изображений, а именно, диапазона настройки времени отображения, является временем начала подтверждаемого изображения 101, имеющего самое раннее время визуализации, и конечная точка (правый конец) полосы 84 является временем окончания подтверждаемого изображения 101, имеющего самое позднее время визуализации.
[0138] Поскольку подтверждаемые изображения 101 отображаются в ряд последовательно слева, начиная с подтверждаемого изображения, имеющего самое раннее время визуализации, на экране с временной шкалой в состоянии непрерывного воспроизведения, подтверждаемое изображение 101 воспроизводится последовательно слева во время непрерывного воспроизведения, но в случае, когда все подтверждаемые изображения 101 не приспосабливаются к участку 96 отображения подтверждаемых изображений, выполняется процесс автоматического перемещения подтверждаемых изображений 101 с соответствующей синхронизацией, так что контролирующее лицо может наблюдать ситуацию, в которой все подтверждаемые изображения 101 воспроизводятся непрерывно, без выполнения какой-либо специальной операции.
[0139] Когда выполняется операция (щелчок кнопкой мыши) выбора подтверждаемого изображения 101, увеличенный экран отображения (не показан) для увеличения и отображения подтверждаемого изображения 101 всплывает в отдельном окне, и подтверждаемое изображение 101 может быть отображено в виде движущегося изображения в состоянии, увеличенном на экране увеличенного отображения, и подтверждаемое изображение 101 может быть непрерывно воспроизведено на экране увеличенного отображения.
[0140] Далее будет описан экран с временной шкалой в состоянии отображения кандидатов (экран выбора кандидатов), показанный на фиг. 4. Фиг. 12 является иллюстративной диаграммой, показывающей экран с временной шкалой в состоянии отображения кандидатов. Фиг. 13 и 14 являются иллюстративными диаграммами, показывающими изображение-кандидат, отображаемое на экране с временной шкалой в состоянии отображения кандидатов.
[0141] В случае, когда в подтверждаемом изображении 101, отображаемом на экране с временной шкалой (см. фиг. 9) в состоянии подтверждения, имеется ошибка, а именно, человек, который является отслеживаемой целью, не захвачен в одном из подтверждаемых изображений 101, или человек, который является отслеживаемой целью, захвачен, но рамка человека, указывающая на отслеживаемую цель, отображается на человеке, отличном от человека, установленного в качестве отслеживаемой цели, выполняется переход к экрану с временной шкалой в состоянии отображения кандидатов, показанному на фиг. 12, посредством приведения контролирующим лицом в действие кнопки 102 отображения кандидатов, соответствующей подтверждаемому изображению 101.
[0142] На участке 96 отображения подтверждаемых изображений, рамка 107 отображения изображений находится в пустом состоянии (в состоянии, в котором подтверждаемое изображение 101 не отображается) до начала отслеживания человека, установленного в качестве отслеживаемой цели, или после завершения отслеживания, и вместо него отображается пиктограмма 121 добавления изображения. Здесь, в случае, когда рамка 107 отображения изображений находится в пустом состоянии, в то время, когда человек, установленный в качестве отслеживаемой цели, должен отслеживаться одной из камер 1, а именно, когда подтверждаемое изображение 101 отсутствует, выполняется переход к экрану с временной шкалой в состоянии отображения кандидатов, показанному на фиг. 12, посредством приведения в действие пиктограммы 121 добавления изображения рамки 107 отображения изображений.
[0143] На экране с временной шкалой в состоянии отображения кандидатов (экране выбора кандидатов), в случае, когда имеется ошибка в подтверждаемом изображении 101, отображаемом на экране с временной шкалой в состоянии подтверждения, или в случае, когда подтверждаемое изображение 101 отсутствует, изображение, которое, возможно, захватывает человека, установленного в качестве отслеживаемой цели, отображается в качестве изображения-кандидата дополнительно к подтверждаемому изображению 101, чтобы позволить контролирующему лицу выбрать это изображение, таким образом, можно заменить подтверждаемое изображение 101 с ошибкой и добавить подтверждаемое изображение 101 в то время, когда подтверждаемое изображение 101 отсутствует.
[0144] Когда кнопка 102 отображения кандидатов или пиктограмма 121 добавления изображения приводится в действие снова на экране с временной шкалой в состоянии отображения кандидатов, экран возвращается к экрану с временной шкалой в состоянии подтверждения.
[0145] Экран с временной шкалой в состоянии отображения кандидатов является по существу таким же, как экран с временной шкалой в состоянии подтверждения (см. фиг. 9), но миниатюрные изображения 122, в качестве изображений-кандидатов, отображаются в виде списка на участке 97 отображения изображений-кандидатов. На экране с временной шкалой в состоянии отображения кандидатов, изображение 129 рамки, указывающее на выбранное состояние, отображается с заданным цветом отображения (например, желтым) в рамке 107 отображения изображений подтверждаемого изображения 101, соответствующего изображению-кандидату.
[0146] Участок 97 отображения изображений-кандидатов снабжен первым полем 123 отображения кандидатов в верхнем ряду, вторым полем 124 отображения кандидатов в среднем ряду, и третьим полем 125 отображения кандидатов в нижнем ряду, и миниатюрные изображения 122 отображаются в ряд в полях 123, 124, и 125 отображения кандидатов.
[0147] Здесь, в настоящем иллюстративном варианте осуществления, как показано на фиг. 13, начиная с камеры 1, которая захватила изображение (изображение для обозначения отслеживаемой цели), выбранное после обозначения человека в качестве отслеживаемой цели, камеры 1, которые захватили человека, который является отслеживаемой целью, задаются последовательно на основе внутрикамерной информации отслеживания. В это время последовательно повторяется процесс выбора человека с наибольшей оценкой связи, а именно, человека, который наиболее вероятно является тем самым человеком, среди людей, отслеженных посредством внутрикамерного отслеживания камер 1, находящихся в кооперационной связи, и подтверждаемое изображение 101 выбранного человека отображается на экране с временной шкалой.
[0148] Здесь, когда имеется камера 1 с ошибкой в подтверждаемом изображении 101, отображаемом на экране с временной шкалой, со ссылкой на камеру 1 (подтвержденную последнюю камеру), имеющую подтверждение того, что ее подтверждаемое изображение 101 не имеет никаких ошибок, находящуюся в непосредственной близости от камеры 1, подлежащей замене, а именно, на камеру 1, которая отследила человека, установленного в качестве отслеживаемой цели, непосредственно до или после камеры 1, подлежащей замене, миниатюрное изображение 122 (изображение-кандидат) человека, отслеженного посредством внутрикамерного отслеживания камеры 1, находящейся в кооперационной связи с камерой 1, отображается на экране с временной шкалой.
[0149] В это время, в первом поле 123 отображения кандидатов, среди людей, отслеженных посредством внутрикамерного отслеживания камеры 1, находящейся в кооперационной связи с подтвержденной последней камерой, дополнительно к человеку на подтверждаемом изображении 101, отображаются миниатюрные изображения 122 людей, чьи оценки связи больше или равны заданному пороговому значению. Здесь, в случае, когда имеется множество соответствующих людей, миниатюрные изображения 122 отображаются в ряд в горизонтальном направлении слева направо в порядке уменьшения оценок связей.
[0150] Во втором поле 124 отображения кандидатов, среди людей, отслеженных посредством внутрикамерного отслеживания камеры 1, находящейся в кооперационной связи с подтвержденной последней камерой, отображаются миниатюрные изображения 122 людей, чьи оценки связи меньше заданного порогового значения. Здесь, в случае, когда имеется множество соответствующих людей, миниатюрные изображения 122 отображаются в ряд в горизонтальном направлении слева направо в порядке уменьшения оценок связей.
[0151] В третьем поле 125 отображения кандидатов, среди людей, отслеженных посредством внутрикамерного отслеживания подтвержденной последней камеры, отображаются миниатюрные изображения 122 людей, которые являются близкими по времени, а именно, людей, отслеженных до или после периода времени отслеживания человека, который подтвержден в качестве отслеживаемой цели. Например, внутрикамерное отслеживание прерывается, когда человек входит в туалет, и внутрикамерное отслеживание возобновляется, когда человек выходит из туалета, и в это время, при внутрикамерном отслеживании, человек, который входит в туалет, и человек, который выходит из туалета, могут не связываться как один и тот же человек, а могут стать разными людьми в отслеживании камеры. Таким образом, в случае, когда человек, который является отслеживаемой целью, не выходит из зоны визуализации подтвержденной последней камеры и отслеживается как другой человек, среди людей, которые отслежены посредством внутрикамерного отслеживания подтвержденной последней камеры, имеется человек, который является отслеживаемой целью, и миниатюрное изображение 122 такого человека отображается в третьем поле 125 отображения кандидатов.
[0152] Как показано на фиг. 14, если подтверждаемое изображение 101 того периода времени, который должен быть отображен на экране с временной шкалой, отсутствует, то со ссылкой на камеру (подтвержденную последнюю камеру), имеющую подтверждение того, что ее подтверждаемое изображение 101 не имеет никаких ошибок, находящуюся в непосредственной близости по времени, когда подтверждаемое изображение 101 отсутствует, а именно, на камеру 1, которая отследила человека, установленного в качестве отслеживаемой цели, непосредственно до или после камеры 1, подлежащей добавлению, миниатюрное изображение 122 (изображение-кандидат) человека, отслеженного посредством внутрикамерного отслеживания камеры 1, находящейся в кооперационной связи с камерой 1, отображается на экране с временной шкалой.
[0153] В это время, поскольку нет человека, чья оценка связи является большей или равной заданному пороговому значению, миниатюрное изображение 122 не отображается в первом поле 123 отображения кандидатов. С другой стороны, второе поле 124 отображения кандидатов и третье поле 125 отображения кандидатов являются такими, как второе поле 124 отображения кандидатов и третье поле 125 отображения кандидатов, показанные на фиг. 13.
[0154] Таким образом, миниатюрное изображение человека, который с большой вероятностью является человеком, установленным в качестве отслеживаемой цели, отображается в первом поле 123 отображения кандидатов, миниатюрное изображение человека, который с меньшей вероятностью является человеком, установленным в качестве отслеживаемой цели, отображается на втором поле 124 отображения кандидатов, и миниатюрное изображение человека, который в исключительных случаях может быть человеком, установленным в качестве отслеживаемой цели, отображается в третьем поле 125 отображения кандидатов. Таким образом, посредством просмотра миниатюрных изображений 122 сверху вниз в порядке: первое поле 123 отображения кандидатов в верхнем ряду, второе поле 124 отображения кандидатов в среднем ряду, и третье поле 125 отображения кандидатов в нижнем ряду, можно эффективно находить миниатюрные изображения 122 человека, установленного в качестве отслеживаемой цели.
[0155] Как показано на фиг. 12, подобно экрану поиска человека (см. фиг. 6), в режиме специфического-для-человека списка, миниатюрное изображение 122 прореживается и воспроизводится на участке 97 отображения изображений-кандидатов посредством выполнения операции наведения курсора мыши на миниатюрное изображение 122. При выполнении операции наведения курсора мыши на миниатюрное изображение 122 отображается всплывающая подсказка 130 с временной информацией.
[0156] Участок 97 отображения изображений-кандидатов снабжен вертикальной полосой 126 прокрутки и горизонтальной полосой 127 прокрутки. Посредством приведения в действие вертикальной полосы 126 прокрутки, поля 123, 124 и 125 отображения кандидатов могут быть перемещены в вертикальном направлении и отображены, и посредством приведения в действие горизонтальной полосы 127 прокрутки, поля 123, 124 и 125 отображения кандидатов могут быть перемещены в горизонтальном направлении и отображены.
[0157] На экране с временной шкалой в состоянии отображения кандидатов обеспечен участок 50 обозначения уточнения признаков. Участок 50 обозначения уточнения признаков используется для выбора того, следует ли или нет выполнять уточнение на основе информации о признаках, причем уточнение на основе информации о признаках выполняется посредством включения кнопки-флажка 81, и на участке 97 отображения изображений-кандидатов отображаются миниатюрные изображения 122 только тех людей, чьи внешние признаки подобны внешним признакам человека, который является отслеживаемой целью.
[0158] В случае, когда среди миниатюрных изображений 122, отображаемых на участке 97 отображения изображений-кандидатов на экране с временной шкалой в состоянии отображения кандидатов, имеется подходящее изображение-кандидат, а именно, найдено миниатюрное изображение 122, в котором захвачен человек, который является отслеживаемой целью, контролирующее лицо выполняет операцию (щелчок кнопкой мыши) выбора миниатюрного изображения 122.
[0159] Затем, корректор 38 информации отслеживания (см. фиг. 3) выполняет процесс коррекции информации отслеживания таким образом, чтобы человек, соответствующий миниатюрному изображению 122 (изображению-кандидату), выбранному на экране с временной шкалой в состоянии отображения кандидатов, был связан с человеком, который обозначен в качестве отслеживаемой цели на экране поиска человека (см. фиг. 6 и 7). Затем экран с временной шкалой (см. фиг. 9) в состоянии подтверждения отображается на мониторе 7 в состоянии, в котором отображается результат коррекции информации отслеживания.
[0160] На экране с временной шкалой в состоянии подтверждения, отображается изображение, в котором отображается результат коррекции информации отслеживания, а именно, отображается изображение, в котором выбранное из-за наличия ошибки подтверждаемое изображение 101 на экране с временной шкалой в состоянии подтверждения заменено изображением камеры, соответствующим миниатюрному изображению 122, выбранному на экране с временной шкалой в состоянии отображения кандидатов. Когда подтверждаемое изображение 101, имеющее ошибку, заменяется, могут быть изменены предшествующее и последующее изображения 101 замененного подтверждаемого изображения 101.
[0161] А именно, в корректоре 38 информации отслеживания выполняется процесс последовательного выбора человека, имеющего наибольшую оценку связи для каждой камеры 1, причем человек соответствует миниатюрному изображению 122 (изображению-кандидату), в качестве отправного пункта. В случае, когда выбранный человек является отличным от человека, соответствующего подтверждаемому изображению 101, происходит замена человека, и подтверждаемое изображение 101 изменяется соответствующим образом. Когда информация отслеживания корректируется в корректоре 38 информации отслеживания, человек, установленный в установщике 32 отслеживаемой цели, человек, соответствующий подтверждаемому изображению 101, для которого операция подтверждения выполнена контролирующим лицом, и человек, соответствующий подтверждаемому изображению 101, замененному подтверждаемым изображением 101, уже имеющим ошибку, исключаются из цели коррекции, так что подтверждаемые изображения, относящиеся к этим людям, не изменяются.
[0162] На участке 97 отображения изображений-кандидатов обеспечена кнопка 128 ручного поиска. В случае, когда нет подходящего изображения-кандидата, а именно, миниатюрное изображение 122 человека, установленного в качестве отслеживаемой цели, не найдено среди изображений-кандидатов, отображаемых на экране с временной шкалой в состоянии отображения кандидатов, выбирают кнопку 128 ручного поиска, в результате чего выполняется переход к экрану поиска человека (см. фиг. 1) в состоянии дополнительного обозначения, показанному на фиг. 15 и 16.
[0163] Далее будет описан экран поиска человека в состоянии дополнительного обозначения. Фиг. 15 является иллюстративной диаграммой, показывающей экран поиска человека в состоянии дополнительного обозначения в режиме специфического-для-человека списка. Фиг. 16 является иллюстративной диаграммой, показывающей экран поиска человека в состоянии дополнительного обозначения в режиме специфического-для-камер списка.
[0164] Экран поиска человека (экран поиска отслеживаемой цели) в состоянии дополнительного обозначения предназначен для нахождения человека, который является отслеживаемой целью, посредством отображения миниатюрного изображения 65 или изображения 71 камеры для периода времени, соответствующего подтверждаемому изображению 101 с ошибкой, в случае, когда нет никаких подходящих изображений среди миниатюрных изображений 122, отображаемых на экране с временной шкалой в состоянии отображения кандидатов (см. фиг. 12). Экран поиска человека в состоянии дополнительного обозначения предназначен для нахождения человека, который является отслеживаемой целью, посредством отображения миниатюрного изображения 65 или изображения 71 камеры для периода времени, соответствующего отсутствующему подтверждаемому изображению 101 на экране с временной шкалой (см. фиг. 9) в состоянии подтверждения.
[0165] Как показано на фиг. 15, экран поиска человека в состоянии дополнительного обозначения в режиме специфического-для-человека списка является по существу таким же, как экран поиска человека (см. фиг. 6) в состоянии исходного обозначения, но порядок специфического-для-камеры поля 67 отображения является отличным от экрана поиска человека в состоянии исходного обозначения, а именно, камера 1, находящаяся в кооперационной связи с подтвержденной последней камерой, отображается сверху, и затем после нее отображается подтвержденная последняя камера. Другие камеры отображаются в порядке увеличения номера камеры. Таким образом, посредством предпочтительного просмотра изображения камеры 1, находящейся в кооперации с подтвержденной последней камерой, можно эффективно находить изображение человека, установленного в качестве отслеживаемой цели.
[0166] На экране поиска человека в состоянии дополнительного обозначения в режиме специфического-для-человека списка, изображение 131 рамки отображается в специфическом-для-камеры поле 67 отображения. Изображение 131 рамки отображается с использованием разных цветов в зависимости от ситуации.
[0167] Например, в случае, когда операция замены подтверждаемого изображения 101 выполняется на экране с временной шкалой (см. фиг. 9) в состоянии подтверждения, а именно, в случае, когда приводится в действие кнопка 102 отображения кандидатов подтверждаемого изображения 101 с ошибкой, красное изображение 131 рамки отображается в специфическом-для-камеры поле 67 отображения подтвержденной последней камеры. В случае, когда операция добавления подтверждаемого изображения 101 выполняется на экране с временной шкалой в состоянии подтверждения, а именно, в случае, когда приводится в действие пиктограмма 121 добавления изображения рамки 107 отображения изображений в пустом состоянии, синее изображение 131 рамки отображается в специфическом-для-камеры поле 67 отображения подтвержденной последней камеры. Желтое изображение 131 рамки отображается в специфическом-для-камеры поле 67 отображения камеры 1, находящейся в кооперационной связи с подтвержденной последней камерой.
[0168] Как показано на фиг. 16, экран поиска человека в состоянии дополнительного обозначения в режиме специфического-для-камеры списка является по существу таким же, как экран поиска человека (см. фиг. 7) в состоянии исходного обозначения, но изображение 132 рамки отображается в изображении 71 камеры. В отношении изображения 132 рамки, подобно экрану поиска человека (см. фиг. 15) в режиме специфического-для-человека списка, изображение 132 рамки отображается с использованием разных цветов отображения для подтвержденной последней камеры, которая является ссылочной камерой, и для камеры, находящейся в кооперационной связи с подтвержденной последней камерой. Изображение 132 рамки отображается с использованием разных цветов отображения для подтвержденной последней камеры в случае выполнения операции замены подтверждаемого изображения 101 и в случае выполнения операции добавления подтверждаемого изображения 101.
[0169] На экране поиска человека в состоянии дополнительного обозначения, в качестве исходного состояния отображается миниатюрное изображение 65 или изображение 71 камеры для периода времени, соответствующего подтверждаемому изображению 101 с ошибкой, и периода времени, соответствующего отсутствующему подтверждаемому изображению 101, но при необходимости можно изменять дату и время поиска посредством использования участка 41 обозначения даты и времени поиска. На экране поиска человека в состоянии дополнительного обозначения, камера 1, находящаяся в кооперационной связи с подтвержденной последней камерой, и подтвержденная последняя камера предпочтительно отображаются в качестве исходного состояния, но посредством участка 42 обозначения камеры поиска можно при необходимости увеличивать или уменьшать число искомых камер 1.
[0170] Как описано выше, иллюстративный вариант осуществления был описан в качестве примера технологии, раскрытой в настоящей заявке. Однако технология настоящего раскрытия этим не ограничивается и может быть также применена к иллюстративным вариантам осуществления, в которых реализованы изменения, замены, добавления, опущения, и т.п. Дополнительно, можно также объединять компоненты, описанные в вышеупомянутом иллюстративном варианте осуществления, для обеспечения нового иллюстративного варианта осуществления.
[0171] Например, в вышеупомянутом иллюстративном варианте осуществления был описан пример розничного магазина, такого как супермаркет. Однако настоящее изобретение может быть применено к коммерческим предприятиям, отличным от розничных магазинов, таким как рестораны, например, семейные рестораны, а также может быть применено к средствам, таким как места коммерческой деятельности, отличные от магазинов.
[0172] В вышеупомянутом иллюстративном варианте осуществления был описан пример, в котором человек отслеживается в качестве движущегося объекта, но можно также отслеживать движущийся объект, отличный от человека, например, транспортное средство, такое как автомобиль или велосипед.
[0173] В вышеупомянутом иллюстративном варианте осуществления, показанном на фиг. 1 и 3, был описан пример, в котором устройство 4 обработки внутрикамерного отслеживания выполняло процесс внутрикамерного отслеживания, и PC 3 выполняло процесс межкамерного отслеживания и процесс содействия отслеживанию, но также возможно, чтобы PC 3 выполнял процесс внутрикамерного отслеживания. Блок обработки внутрикамерного отслеживания может быть обеспечен в камере 1. Весь или часть блока 22 обработки межкамерного отслеживания может быть сконфигурирована с устройством обработки отслеживания, отличным от PC 3.
[0174] В вышеупомянутом иллюстративном варианте осуществления, показанном на фиг. 2, камеры 1 являются камерами коробчатого типа, угол наблюдения которых ограничен. Однако настоящее изобретение этим не ограничивается, и может быть также использована всенаправленная камера, способная формировать изображение в широком диапазоне.
[0175] В вышеупомянутом иллюстративном варианте осуществления, процесс внутрикамерного отслеживания и процесс содействия отслеживанию выполняются устройством, установленным в магазине, но, как показано на фиг. 1, эти необходимые процессы могут быть выполнены PC 11, обеспеченном в главной конторе, или облачным компьютером 12, образующими систему облачных вычислений. Вышеупомянутые необходимые процессы могут совместно использоваться множественными устройствами обработки информации, и информация может передаваться между множественными устройствами обработки информации через средство связи, такое как сеть с Интернет-протоколом (internet protocol - IP) или локальная сеть (local area network - LAN), или запоминающее средство, такое как жесткий диск или карта памяти. В этом случае, система содействия отслеживанию может быть сконфигурирована с множественными устройствами обработки информации, которые совместно используют необходимые процессы.
[0176] В частности, в системной конфигурации, включающей в себя облачный компьютер 12, дополнительно к PC 3 и PC 11, обеспеченным в магазине и главной конторе, необходимая информация может отображаться в портативном терминале 13, таком как смартфон или планшетный терминал, который соединен через сеть с облачным компьютером 12 таким образом, что необходимая информация может быть подтверждена в любом месте, например, в наружном месте, дополнительно к магазину и главной конторе.
[0177] В вышеупомянутом иллюстративном варианте осуществления, записывающее устройство 2, которое собирает захваченные изображения от камеры 1, установлено в магазине, но когда процессы, необходимые для содействия отслеживанию, выполняются PC 11, установленным в главной конторе, или облачным компьютером 12, захваченные изображения от камеры 1 могут быть переданы в главную контору или средство управления системы облачных вычислений, и захваченные изображения от камеры 1 могут собираться в устройствах, установленных в них.
ПРОМЫШЛЕННАЯ ПРИМЕНИМОСТЬ
[0178] Устройство содействия отслеживанию, система содействия отслеживанию и способ содействия отслеживанию согласно настоящему раскрытию обеспечивают эффект, состоящий в способности эффективно проверять, имеется ли ошибка в результате отслеживания движущегося объекта, установленного в качестве отслеживаемой цели, и корректировать информацию отслеживания простой операцией в случае, когда имеется ошибка в результате отслеживания движущегося объекта, в частности, при этом контролирующее лицо может эффективно выполнять работу по нахождению изображения, захватывающего движущийся объект, который является отслеживаемой целью, при этом система содействия отслеживанию и способ содействия отслеживанию обеспечивают отображение на устройстве отображения захваченного изображения от каждой из множества камер, которое собрано в средстве сбора изображений, и содействуют работе контролирующего лица по отслеживанию движущегося объекта, подлежащего отслеживанию.
ССЫЛОЧНЫЕ ПОЗИЦИИ НА ЧЕРТЕЖАХ
[0179]
1 - камера
2 - записывающее устройство (средство сбора изображений)
3 - PC (устройство содействия отслеживанию)
4 - устройство обработки внутрикамерного отслеживания
6 - устройство ввода
7 - монитор
11 - PC
12 - облачный компьютер
13 - портативный терминал
21 - блок сбора информации отслеживания
26 - уточнитель признаков
27 - генератор миниатюр
28 - устройство воспроизведения изображений
29 - генератор экранов
32 - установщик отслеживаемой цели
33 - установщик дополнительной отслеживаемой цели
35 - вычислитель оценок связей (вычислитель оценочных значений)
36 - генератор исходной информации отслеживания
37 - селектор кандидатов
38 - корректор информации отслеживания
39 - презентатор подтверждаемого изображения
40 - презентатор изображений-кандидатов.
Изобретение относится к средствам для содействия отслеживанию. Технический результат заключается в обеспечении возможности проверки ошибок в результате отслеживания, корректировки ошибочной информации отслеживания и нахождения изображения человека, подлежащего отслеживанию. Вычисляют оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер. Отображают множество захваченных изображений на устройстве отображения, и, в ответ на выполненную контролирующим лицом операцию обозначения движущегося объекта, который должен отслеживаться, с использованием захваченных изображений, устанавливают обозначенный движущийся объект в качестве отслеживаемой цели. Последовательно задают камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер. 6 н. и 6 з.п. ф-лы, 17 ил.
1. Устройство содействия отслеживанию, которое отображает на устройстве отображения захваченное изображение от каждой из множества камер, которое собрано в средстве сбора изображений, и содействует работе контролирующего лица по отслеживанию движущегося объекта, который должен отслеживаться, содержащее:
вычислитель оценочного значения, который вычисляет оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер;
установщик отслеживаемой цели, который отображает множество захваченных изображений на устройстве отображения, и, в ответ на выполненную контролирующим лицом операцию обозначения движущегося объекта, который должен отслеживаться, с использованием захваченных изображений, устанавливает обозначенный движущийся объект в качестве отслеживаемой цели;
презентатор подтверждаемого изображения, который последовательно задает камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер, которые находятся в рабочей взаимосвязи, и отображает на устройстве отображения экран подтверждения отслеживаемой цели, на котором захваченное изображение движущегося объекта с наибольшим оценочным значением отображается в качестве подтверждаемого изображения, для каждой из камер;
генератор миниатюр, который вырезает области движущихся объектов из захваченных изображений и генерирует миниатюрное изображение каждого из движущихся объектов;
презентатор изображений-кандидатов, который в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, отображает на устройстве отображения экран выбора кандидатов, на котором миниатюрные изображения соответствующих движущихся объектов, имеющих оценочные значения, меньшие чем у движущегося объекта, соответствующего подтверждаемому изображению, перечислены и отображены в качестве изображений-кандидатов, и позволяет контролирующему лицу выбрать изображение-кандидат, соответствующее движущемуся объекту, обозначаемому в качестве отслеживаемой цели; и
корректор информации отслеживания, который корректирует межкамерную информацию отслеживания таким образом, чтобы движущийся объект, соответствующий изображению-кандидату, выбранному на экране выбора кандидатов, был связан с движущимся объектом, установленным в качестве отслеживаемой цели.
2. Устройство содействия отслеживанию, которое отображает на устройстве отображения захваченное изображение от каждой из множества камер, которое собрано в средстве сбора изображений, и содействует работе контролирующего лица по отслеживанию движущегося объекта, который должен отслеживаться, содержащее:
вычислитель оценочного значения, который вычисляет оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер;
генератор миниатюр, который вырезает области движущихся объектов из захваченных изображений и генерирует миниатюрное изображение каждого из движущихся объектов;
установщик отслеживаемой цели, который отображает на устройстве отображения экран поиска отслеживаемой цели, на котором миниатюрные изображения соответствующих движущихся объектов отображаются в виде списка, и, в ответ на выполненную контролирующим лицом операцию обозначения движущегося объекта, который должен отслеживаться, посредством выбора миниатюрного изображения, устанавливает обозначенный движущийся объект в качестве отслеживаемой цели;
презентатор подтверждаемого изображения, который последовательно задает камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер, которые находятся в рабочей взаимосвязи, и отображает на устройстве отображения экран подтверждения отслеживаемой цели, на котором захваченное изображение движущегося объекта с наибольшим оценочным значением отображается в качестве подтверждаемого изображения, для каждой из камер;
презентатор изображений-кандидатов, который в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, отображает на устройстве отображения экран выбора кандидатов, на котором отображаются изображения-кандидаты соответствующих движущихся объектов, имеющих оценочные значения, меньшие чем у движущегося объекта, соответствующего подтверждаемому изображению, и позволяет контролирующему лицу выбрать изображение-кандидат, соответствующее движущемуся объекту, обозначаемому в качестве отслеживаемой цели; и
корректор информации отслеживания, который корректирует межкамерную информацию отслеживания таким образом, чтобы движущийся объект, соответствующий изображению-кандидату, выбранному на экране выбора кандидатов, был связан с движущимся объектом, установленным в качестве отслеживаемой цели.
3. Устройство содействия отслеживанию по п.2, в котором установщик отслеживаемой цели располагает миниатюрные изображения последовательно по времени и отображает миниатюрные изображения в виде списка на экране поиска отслеживаемой цели.
4. Устройство содействия отслеживанию по п.1 или 2, дополнительно содержащее средство воспроизведения изображений, которое прореживает и воспроизводит выбранное миниатюрное изображение в ответ на выполненную контролирующим лицом операцию выбора миниатюрного изображения.
5. Устройство содействия отслеживанию по п.2, дополнительно содержащее:
установщик дополнительной отслеживаемой цели, который в случае, когда среди изображений-кандидатов, отображаемых на экране выбора кандидатов, нет изображения-кандидата, соответствующего движущемуся объекту, обозначенному в качестве отслеживаемой цели, отображает на устройстве отображения экран поиска отслеживаемой цели, на котором миниатюрные изображения соответствующих движущихся объектов отображаются в виде списка, и, в ответ на выполненную контролирующим лицом операцию обозначения движущегося объекта, который должен отслеживаться, посредством выбора миниатюрного изображения, устанавливает обозначенный движущийся объект в качестве дополнительной отслеживаемой цели,
причем корректор информации отслеживания корректирует межкамерную информацию отслеживания таким образом, чтобы движущийся объект, который был установлен установщиком дополнительной отслеживаемой цели в качестве дополнительной отслеживаемой цели, был связан с движущимся объектом, который установлен в качестве отслеживаемой цели установщиком отслеживаемой цели.
6. Устройство содействия отслеживанию по п.2, в котором установщик отслеживаемой цели отображает либо относящийся к движущимся объектам список изображений для отображения миниатюрных изображений для соответствующих движущихся объектов в виде списка, либо относящийся к камерам список изображений для отображения захваченных изображений от соответствующих камер в виде списка на экране поиска отслеживаемой цели в ответ на выполненную контролирующим лицом операцию выбора режима отображения.
7. Устройство содействия отслеживанию по п.1, дополнительно содержащее:
уточнитель признаков, который уточняет движущийся объект как являющийся кандидатом на основе информации о признаках движущегося объекта, который должен отслеживаться,
причем презентатор изображений-кандидатов отображает миниатюрное изображение движущегося объекта, уточненного уточнителем признаков, на экране выбора кандидатов.
8. Устройство содействия отслеживанию по п.2 или 5, дополнительно содержащее:
уточнитель признаков, который уточняет искомый движущийся объект на основе информации о признаках движущегося объекта, который должен отслеживаться,
причем установщик отслеживаемой цели отображает миниатюрное изображение движущегося объекта, уточненного уточнителем признаков, на экране поиска отслеживаемой цели.
9. Система содействия отслеживанию, которая отображает на устройстве отображения захваченное изображение от каждой из множества камер, которое собрано в средстве сбора изображений, и содействует работе контролирующего лица по отслеживанию движущегося объекта, который должен отслеживаться, содержащая:
камеры, каждая из которых захватывает изображение зоны контроля;
устройство отображения, которое отображает захваченное изображение от каждой из камер; и
множество устройств обработки информации,
причем любое из множества устройств обработки информации включает в себя
вычислитель оценочного значения, который вычисляет оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер;
установщик отслеживаемой цели, который отображает множество захваченных изображений на устройстве отображения, и, в ответ на выполненную контролирующим лицом операцию обозначения движущегося объекта, который должен отслеживаться, с использованием захваченных изображений, устанавливает обозначенный движущийся объект в качестве отслеживаемой цели;
презентатор подтверждаемого изображения, который последовательно задает камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер, которые находятся в рабочей взаимосвязи, и отображает на устройстве отображения экран подтверждения отслеживаемой цели, на котором захваченное изображение движущегося объекта с наибольшим оценочным значением отображается в качестве подтверждаемого изображения, для каждой из камер;
генератор миниатюр, который вырезает области движущихся объектов из захваченных изображений и генерирует миниатюрное изображение каждого из движущихся объектов;
презентатор изображений-кандидатов, который в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, отображает на устройстве отображения экран выбора кандидатов, на котором миниатюрные изображения соответствующих движущихся объектов, имеющих оценочные значения, меньшие чем у движущегося объекта, соответствующего подтверждаемому изображению, перечислены и отображены в качестве изображений-кандидатов, и позволяет контролирующему лицу выбрать изображение-кандидат, соответствующее движущемуся объекту, обозначаемому в качестве отслеживаемой цели; и
корректор информации отслеживания, который корректирует межкамерную информацию отслеживания таким образом, чтобы движущийся объект, соответствующий изображению-кандидату, выбранному на экране выбора кандидатов, был связан с движущимся объектом, установленным в качестве отслеживаемой цели.
10. Система содействия отслеживанию, которая отображает на устройстве отображения захваченное изображение от каждой из множества камер, которое собрано в средстве сбора изображений, и содействует работе контролирующего лица по отслеживанию движущегося объекта, который должен отслеживаться, содержащая:
камеры, каждая из которых захватывает изображение зоны контроля;
устройство отображения, которое отображает захваченное изображение от каждой из камер; и
множество устройств обработки информации,
причем любое из множества устройств обработки информации включает в себя
вычислитель оценочного значения, который вычисляет оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер;
генератор миниатюр, который вырезает области движущихся объектов из захваченных изображений и генерирует миниатюрное изображение каждого из движущихся объектов;
установщик отслеживаемой цели, который отображает на устройстве отображения экран поиска отслеживаемой цели, на котором миниатюрные изображения соответствующих движущихся объектов отображаются в виде списка, и, в ответ на выполненную контролирующим лицом операцию обозначения движущегося объекта, который должен отслеживаться, посредством выбора миниатюрного изображения, устанавливает обозначенный движущийся объект в качестве отслеживаемой цели;
презентатор подтверждаемого изображения, который последовательно задает камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер, которые находятся в рабочей взаимосвязи, и отображает на устройстве отображения экран подтверждения отслеживаемой цели, на котором захваченное изображение движущегося объекта с наибольшим оценочным значением отображается в качестве подтверждаемого изображения, для каждой из камер;
презентатор изображений-кандидатов, который в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, отображает на устройстве отображения экран выбора кандидатов, на котором отображаются изображения-кандидаты соответствующих движущихся объектов, имеющих оценочные значения, меньшие чем у движущегося объекта, соответствующего подтверждаемому изображению, и позволяет контролирующему лицу выбрать изображение-кандидат, соответствующее движущемуся объекту, обозначаемому в качестве отслеживаемой цели; и
корректор информации отслеживания, который корректирует межкамерную информацию отслеживания таким образом, чтобы движущийся объект, соответствующий изображению-кандидату, выбранному на экране выбора кандидатов, был связан с движущимся объектом, установленным в качестве отслеживаемой цели.
11. Способ содействия отслеживанию для предписания устройству обработки информации осуществлять процесс отображения на устройстве отображения захваченного изображения от каждой из множества камер, которое собрано в средстве сбора изображений, и содействовать работе контролирующего лица по отслеживанию движущегося объекта, который должен отслеживаться, причем способ содержит:
этап, на котором вычисляют оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер;
этап, на котором отображают множество захваченных изображений на устройстве отображения, и, в ответ на выполненную контролирующим лицом операцию обозначения движущегося объекта, который должен отслеживаться, с использованием захваченных изображений, устанавливают обозначенный движущийся объект в качестве отслеживаемой цели;
этап, на котором последовательно задают камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер, которые находятся в рабочей взаимосвязи, и отображают на устройстве отображения экран подтверждения отслеживаемой цели, на котором захваченное изображение движущегося объекта с наибольшим оценочным значением отображается в качестве подтверждаемого изображения, для каждой из камер;
этап, на котором вырезают область движущегося объекта из захваченного изображения и генерируют миниатюрное изображение каждого из движущихся объектов;
этап, на котором в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, отображают на устройстве отображения экран выбора кандидатов, на котором миниатюрные изображения соответствующих движущихся объектов, имеющих оценочные значения, меньшие чем у движущегося объекта, соответствующего подтверждаемому изображению, перечислены и отображены в качестве изображений-кандидатов, и позволяют контролирующему лицу выбрать изображение-кандидат, соответствующее движущемуся объекту, обозначаемому в качестве отслеживаемой цели; и
этап, на котором корректируют межкамерную информацию отслеживания таким образом, чтобы движущийся объект, соответствующий изображению-кандидату, выбранному на экране выбора кандидатов, был связан с движущимся объектом, установленным в качестве отслеживаемой цели.
12. Способ содействия отслеживанию для предписания устройству обработки информации осуществлять процесс отображения на устройстве отображения захваченного изображения от каждой из множества камер, которое собрано в средстве сбора изображений, и содействовать работе контролирующего лица по отслеживанию движущегося объекта, подлежащего отслеживанию, причем способ содержит:
этап, на котором вычисляют оценочное значение, представляющее уровень идентичности между движущимися объектами, на основе информации отслеживания движущихся объектов, детектируемых из захваченного изображения от каждой из множества камер;
этап, на котором вырезают область движущегося объекта из захваченного изображения и генерируют миниатюрное изображение каждого из движущихся объектов;
этап, на котором отображают на устройстве отображения экран поиска отслеживаемой цели, на котором миниатюрные изображения соответствующих движущихся объектов отображаются в виде списка, и, в ответ на выполненную контролирующим лицом операцию обозначения движущегося объекта, который должен отслеживаться, посредством выбора миниатюрного изображения, устанавливают обозначенный движущийся объект в качестве отслеживаемой цели;
этап, на котором последовательно задают камеру, с которой принимается визуализация движущегося объекта, установленного в качестве отслеживаемой цели, посредством повторения процесса выбора движущегося объекта с наибольшим оценочным значением среди движущихся объектов, детектированных из захваченных изображений камер, которые находятся в рабочей взаимосвязи, и отображают на устройстве отображения экран подтверждения отслеживаемой цели, на котором захваченное изображение движущегося объекта с наибольшим оценочным значением отображается в качестве подтверждаемого изображения, для каждой из камер;
этап, на котором в случае, когда имеется ошибка в подтверждаемом изображении, отображаемом на экране подтверждения отслеживаемой цели, отображают на устройстве отображения экран выбора кандидатов, на котором отображаются миниатюрные изображения соответствующих движущихся объектов, имеющих оценочные значения, меньшие чем у движущегося объекта, соответствующего подтверждаемому изображению, и позволяют контролирующему лицу выбрать изображение-кандидат, соответствующее движущемуся объекту, обозначаемому в качестве отслеживаемой цели; и
этап, на котором корректируют межкамерную информацию отслеживания таким образом, чтобы движущийся объект, соответствующий изображению-кандидату, выбранному на экране выбора кандидатов, был связан с движущимся объектом, установленным в качестве отслеживаемой цели.
US 9191633 B2, 17.11.2015 | |||
US 9357181 B2, 31.05.2016 | |||
US 9251599 B2, 02.02.2016 | |||
Способ защиты переносных электрических установок от опасностей, связанных с заземлением одной из фаз | 1924 |
|
SU2014A1 |
Способ приготовления лака | 1924 |
|
SU2011A1 |
JP 4706535 B2, 22.06.2011 | |||
ОСНОВАННОЕ НА АНАЛИЗЕ ИЗОБРАЖЕНИЙ ОТСЛЕЖИВАНИЕ ПЕРЕМЕЩЕНИЯ | 2005 |
|
RU2387011C2 |
СПОСОБ СЛЕЖЕНИЯ ЗА ОБЪЕКТОМ И УСТРОЙСТВО ДЛЯ ЕГО ОСУЩЕСТВЛЕНИЯ | 1991 |
|
RU2153235C2 |
Авторы
Даты
2020-07-21—Публикация
2017-05-11—Подача