СПОСОБ СОПРОВОЖДЕНИЯ ОБЪЕКТОВ Российский патент 2023 года по МПК G06T7/269 

Описание патента на изобретение RU2796096C1

Изобретение относится к способам сопровождения объектов, преимущественно наземных целей, по оцифрованному сигналу телевизионного изображения.

Известен способ сопровождения объектов по телевизионному сигналу, при котором в качестве эталонного изображения объекта сопровождения выбирают центральный участок первого кадра телевизионного изображения, а на втором и всех последующих кадрах телевизионного изображения в каждой точке изображения вычисляют разностную корреляционную функцию [авторское свидетельство СССР №1562980, МПК H04N 7/18, Устройство определения координат объекта / Алпатов Б.А. и др., заявл. 01.02.1988, опубл. 07.05.1990].

В этом способе за координаты объекта сопровождения на обрабатываемом кадре изображения принимают точку минимума разностной корреляционной функции. После чего производят обновление изображения объекта сопровождения путем его сглаживания посредством межкадровой экспоненциальной фильтрации.

При этом при вычислении разностной корреляционной функции сумму модулей разностей сигналов анализируемого изображения и сигналов изображения объекта сопровождения умножают на весовую функцию, сформированную в процессе обработки предыдущего кадра.

В процессе обработки предыдущего кадра указанную весовую функцию формируют путем выделения на сглаженном изображении объекта сопровождения множества точек, в которых значения сигнала больше заранее заданного порогового значения. В этих точках точкам весовой функции придают значения «1», а в остальных точках - значения «0».

При сопровождении движущегося объекта и при изменении ракурса объекта на текущем кадре в окне с объектом сопровождения появятся точки, принадлежащие объекту сопровождения, которые на предыдущем кадре были фоном. Понятно, что в процессе обработки предыдущего кадра в этих точках значения сигнала были меньше порогового значения и в этих точках весовой функции были приданы нулевые значения. Поскольку при вычислении разностной корреляционной функции сумма модулей разностей сигналов анализируемого изображения и сигналов изображения объекта сопровождения умножается на весовую функцию, то при обработке текущего кадра в этих точках разностная корреляционная функция будет также иметь нулевые значения.

Таким образом, с помощью этого способа невозможно сопровождать движущиеся объекты и объекты с быстрым межкадровым изменением ракурса, поскольку на каждом новом кадре все точки объекта сопровождения, которые на предыдущем кадре были фоном, будут обнуляться.

Известен способ сопровождения объектов по телевизионному сигналу, при котором выполняют предварительную обработку оцифрованного видеосигнала телевизионного изображения, вычисляют разностную корреляционную функцию и находят минимум разностной корреляционной функции [патент РФ №2153235, МПК H04N 7/18, Способ слежения за объектом и устройство для его осуществления / Шахрай В.И. и др., заявл. 25.01.1991, опубл. 20.07.2000].

Недостатком известного способа является то, что предварительную обработку оцифрованного видеосигнала телевизионного изображения объекта выполняют дифференциальным оператором, получая градиентное изображение. Как известно, обработка цифрового сигнала дифференциальным оператором подчеркивает все высокочастотные составляющие изображения. Поэтому после обработки дифференциальным оператором изображения, зашумленного помехами, на изображении будет большое количество ложных целей или точек фона, которые могут быть ошибочно приняты за объект. При этом количество ложных целей может оказаться настолько большим, что это существенно затормозит или даже сделает невозможной обработку телевизионного изображения в режиме реального времени.

Кроме того, в известном способе вычисление разностной корреляционной функции производят путем сравнения градиентов яркости эталонного и текущего изображений в точках изображения, определяемых эталонной маской. А эталонную маску формируют из адресов локальных экстремумов, в которых градиент яркости превышает заданный порог. Вследствие этого эталонная маска имеет форму, повторяющую контур объекта сопровождения. Это может привести к потере объекта сопровождения, поскольку при его перемещении по фону с неоднородной яркостью контур градиентного изображения объекта может сильно изменяться.

В известном способе в качестве новых координат объекта сопровождения принимают координаты точки минимума разностной корреляционной функции. При этом при выборе этой точки минимума не учитывается удаленность этой точки от центра эталона. Это также увеличивает вероятность «перескока» на ложную цель., если сумма градиентов яркости этой ложной цели будет близка к сумме градиентов яркости эталонной маски.

Вследствие всех вышеперечисленных недостатков известный способ сопровождения объектов будет хорошо работать только по высококонтрастному изображению, на котором отсутствуют помехи, и при отношении сигнал/шум (ОСШ) более 6 дБ. В реальных условиях наблюдения такой способ сопровождения будет неработоспособным.

Известен способ сопровождения объектов по оцифрованному сигналу телевизионного изображения, при котором оператор на экране телевизионного изображения наводит окно на объект сопровождения, и вычисляют корреляционную функцию F(α,β) яркостей h(i, j) точек изображения в окне с объектом сопровождения и яркостей точек анализируемого изображения в окнах, размеры которых совпадают с размерами окна с объектом сопровождения, где i и j - координаты точек телевизионного изображения, находящихся внутри окна с объектом сопровождения, а α и β - величины смещения координат центра окна анализируемого изображения относительно координат центра окна с объектом сопровождения по осям, соответственно, i и j [Телевизионные методы сопровождения объектов в сложных условиях наблюдения. В.И. Можейко и др. / Изв. ВУЗов. Приборостроение. 2009. Т. 52, №8, с. 20-29.] - прототип.

В этом способе сопровождения объектов перед вычислением корреляционной функции F(α, β) яркостное изображение, полученное в окне, наведенном оператором на объект сопровождения, обрабатывают дифференциальным оператором, формируя контур объекта сопровождения, сравнивают полученное градиентное изображение с пороговым значением, создавая бинарное изображение, заполняют контур объекта посредством дилатации и запоминают координаты точек полученного бинарного изображения в качестве эталонной маски.

Недостатком этого способа сопровождения является то, что корреляционную функцию F(α,β) вычисляют в окнах, размеры и форма которых совпадает с размерами и формой эталонной маски. При значительных размерах объекта сопровождения дилатация не позволит заполнить точки изображения внутри контура объекта сопровождения. В результате корреляционную функцию F(α,β) будут вычислять по точкам изображения, координаты которых в окне анализируемого изображения совпадают с координатами точек контура объекта сопровождения. Это может привести к потере объекта сопровождения, поскольку при перемещении объекта сопровождения по фону с неоднородной яркостью контур градиентного изображения объекта может сильно изменяться.

Кроме того, в этом случае будет сложно выделить контур объекта сопровождения на телевизионных изображениях, зашумленных помехами, в условиях плохой видимости, например во время дождя или снегопада, а также при работе по низкоконтрастному изображению с отношением сигнал/шум (ОСШ) менее 3 дБ. Известный способ позволит устойчиво выделять контур объекта только на высококонтрастных изображениях при отношении сигнал/шум более 6 дБ. Это делает известный способ сопровождения неработоспособным в реальных условиях наблюдения.

Кроме того, в известном способе не учитывается удаленность ложной цели от центра изображения, что также может привести к потере объекта сопровождения, если в кадре окажется другой объект, сумма градиентов яркости которого будет близка к сумме градиентов яркости эталонной маски.

Задача, на решение которой направлено предлагаемое изобретение, - обеспечение возможности сопровождения объектов на низкоконтрастных телевизионных изображениях с отношением сигнал/шум (ОСШ) менее 3 дБ, сопровождения объектов, перемещающихся по фону с неоднородной яркостью, а также сопровождения объектов на телевизионных изображениях, зашумленных помехами и в условиях плохой видимости.

Для решения этой задачи в способе сопровождения объектов по оцифрованному сигналу телевизионного изображения, при котором оператор на экране телевизионного изображения наводит окно на объект сопровождения, и вычисляют корреляционную функцию F(a,P) яркостей h(i, у) точек изображения в окне с объектом сопровождения и яркостей точек анализируемого изображения в окнах, размеры которых совпадают с размерами окна с объектом сопровождения, где i и j - координаты точек телевизионного изображения, находящихся внутри окна с объектом сопровождения, а α и β - величины смещения координат центра окна анализируемого изображения относительно координат центра окна с объектом сопровождения по осям, соответственно, i и j, согласно изобретения, после наведения оператором окна на объект сопровождения задают зону анализа телевизионного изображения в виде прямоугольной рамки, размеры которой меньше или равны размерам экрана телевизионного изображения, но больше размеров окна с объектом сопровождения, при этом окно с объектом сопровождения расположено в зоне анализа, за координаты центра зоны анализа при обработке первого кадра телевизионного изображения принимают координаты центра окна с объектом сопровождения, а корреляционную функцию F(α,β) при обработке как первого, так и всех последующих кадров вычисляют в каждой точке зоны анализа. После чего обрабатывают корреляционную функцию F(α, β) дифференциальным оператором, получая градиентное изображение, вычисляют сумму градиентов яркости Gэ точек градиентного изображения, находящихся в окне с объектом сопровождения. Умножая эту сумму градиентов яркости Gэ на коэффициент к, меньший 1, получают значение порога Р. После чего во всех точках градиентного изображения, находящихся в зоне анализа, вычисляют суммы градиентов яркости Gi,j в окнах, размеры которых совпадают с размерами окна с объектом сопровождения, сравнивают суммы градиентов яркости Gi,j с порогом Р, и запоминают координаты (in, jn) центров окон, в которых суммы градиентов яркости Сi,j больше порога Р. После чего в окне с объектом сопровождения и в каждом окне, координаты центра которого совпадают с запомненными координатами (in, jn), вычисляют критерии Аn, Вn, Сn и критерий Кnn ⋅ Вn ⋅ Сn, где Аn - критерий отличия суммы яркостей точек изображения в окне анализируемого изображения от суммы яркостей h(i, у) точек изображения в окне с объектом сопровождения, Вn - критерий отличия суммы градиентов яркости Gi,j точек градиентного изображения в окне анализируемого изображения от суммы градиентов яркости Gэ точек градиентного изображения в окне с объектом сопровождения, Сn - критерий удаленности центра окна анализируемого изображения от центра зоны анализа. Принимают за координаты центра нового окна с объектом сопровождения координаты центра окна, в котором значение критерия Кn имеет наибольшее значение, совмещают центр зоны анализа с центром нового окна с объектом сопровождения, после чего переходят к обработке следующего кадра телевизионного изображения, начиная с операции вычисления корреляционной функции F(α,β).

В качестве одного из возможных вариантов за координаты нулевых отсчетов по осям i и j зоны анализа принимают координаты одного из углов зоны анализа, а оси i и j совмещают с граничными линиями зоны анализа. В этом случае критерий Вn вычисляют по формуле:

где IM, JM - размеры окна с объектом сопровождения по осям i и j; IZ, JZ - размеры зоны анализа по осям i и j.

Критерий Сn можно вычислять по разным формулам. Например, критерий Сn можно вычислять по формуле:

Корреляционную функцию F(α, β) можно вычислять как разностную корреляционную функцию по следующей формуле:

В этом случае критерий Аn вычисляют по формуле:

где Fn - значение функции F(α,β) в точке с координатами (in, jn); Fmax и Fmin - соответственно, максимальное и минимальное значения функции F(α,β) в зоне анализа.

Корреляционную функцию F(α,β) можно также вычислять как классическую корреляционную функцию по следующей формуле:

В этом случае критерий Аn вычисляют по формуле:

При обработке телевизионного изображения, зашумленного большим количеством помех, перед операцией вычисления корреляционной функции F(α,β) выполняют предварительную обработку каждого кадра оцифрованного телевизионного изображения посредством низкочастотной фильтрации.

После операции совмещения центра зоны анализа с центром нового окна с объектом сопровождения производят обновление изображения в окне с объектом сопровождения посредством экспоненциальной фильтрации.

Технический результат, обеспечиваемый предлагаемым изобретением, - повышение надежности сопровождения объекта, снижение вероятности его потери.

Изобретение поясняется чертежами. На фиг. 1 изображен один из кадров телевизионного изображения; на фиг. 2 - контур сечения поверхности разностной корреляционной функции F(α, β) плоскостью, перпендикулярной оси i; на фиг. 3 - контур сечения поверхности классической корреляционной функции F(α,β) плоскостью, перпендикулярной оси i.

Сопровождение объектов по оцифрованному сигналу телевизионного изображения предлагаемым способом осуществляют следующим образом.

Оператор на экране S телевизионного изображения наводит окно М на объект сопровождения. Задают зону анализа Z телевизионного изображения в виде прямоугольной рамки, размеры которой меньше или равны размерам экрана S, но больше размеров окна М с объектом сопровождения. При этом окно М с объектом сопровождения расположено в зоне анализа Z. Оси i и j совпадают с граничными линиями зоны анализа, а за координаты нулевых отсчетов по осям i и j принимают координаты одного из углов зоны анализа Z. Удобнее всего за координаты нулевых отсчетов по осям i и j принять координаты левого верхнего угла зоны анализа Z.

При необходимости, а именно при обработке телевизионного изображения, зашумленного большим количеством помех, выполняют предварительную обработку оцифрованного телевизионного изображения в зоне анализа посредством низкочастотной фильтрации. Низкочастотная фильтрация позволяет сгладить на изображении точечные помехи небольшого размера. Низкочастотную фильтрацию выполняют, например, посредством масок или других подобных масок.

При обработке первого кадра телевизионного изображения за координаты центра зоны анализа Z принимают координаты центра окна М с объектом сопровождения. После этого при обработке как первого, так и всех последующих кадров в каждой точке зоны анализа Z вычисляют корреляционную функцию F(α,β) яркостей h(i, j) точек изображения в окне М с объектом сопровождения и яркостей точек анализируемого изображения в окнах N, размеры которых совпадают с размерами окна М с объектом сопровождения, где i и j - координаты точек телевизионного изображения, находящихся внутри окна М с объектом сопровождения, а α и β - величины смещения координат центра окна N анализируемого изображения относительно координат центра окна М с объектом сопровождения по осям, соответственно, i и j.

Корреляционную функцию F(α,β) можно вычислять разными способами. Например, корреляционную функцию F(α,β) можно вычислять как разностную корреляционную функцию по следующей формуле:

где IМ, IM - размеры окна М с объектом сопровождения по осям i и j; IZ, JZ - размеры зоны анализа Z по осям i и j.

А можно корреляционную функцию F(α,β) вычислять как классическую корреляционную функцию по следующей формуле:

После этого полученную корреляционную функцию F(α, β) обрабатывают дифференциальным оператором, получая градиентное изображение. В качестве дифференциального оператора можно применять, например, операторы Превитта, Собела и другие подобные операторы.

После этого вычисляют сумму градиентов яркости Gэ точек градиентного изображения, находящихся в окне М с объектом сопровождения. Умножая эту сумму градиентов яркости Gэ на коэффициент к, меньший 1, получают значение порога Р. Как правило к=0,5…0,9.

Во всех точках градиентного изображения, находящихся в зоне анализа Z, вычисляют суммы градиентов яркости Gi,j в окнах N анализируемых изображений, размеры которых совпадают с размерами окна М с объектом сопровождения. Сравнивают суммы градиентов яркости Gi,j с порогом Р. Запоминают координаты (in, jn) центров окон N, в которых суммы градиентов яркости Gi,j больше порога Р.

После этого в окне М с объектом сопровождения и в каждом окне N анализируемого изображения, координаты центра которого совпадают с запомненными координатами (in, jn), вычисляют критерии Аn, Вn, Сn и критерий Кnn⋅Вn⋅Сn, где Аn - критерий отличия суммы яркостей точек изображения в окне N анализируемого изображения от суммы яркостей h(i, j) точек изображения в окне М с объектом сопровождения; Вn - критерий отличия суммы градиентов яркости Gi,j точек градиентного изображения в окне N анализируемого изображения от суммы градиентов яркостей G3 точек градиентного изображения в окне М с объектом сопровождения, Сn - критерий удаленности центра окна N анализируемого изображения от центра зоны анализа Z.

В том случае, когда корреляционную функцию F(α,β) вычисляют как разностную корреляционную функцию, критерий Аn вычисляют по формуле:

где Fn - значение функции F(α,β) в точке с координатами (in, jn); Fmax и Fmin - максимальное и минимальное значения функции F(α,β) в зоне анализа Z телевизионного изображения (см. фиг. 2). В этом случае, чем меньше значение Fn будет отличаться от значения Fmin, тем значение критерия Аn будет больше.

А в том случае, когда корреляционную функцию F(α,β) вычисляют как классическую корреляционную функцию, критерий Аn вычисляют по формуле:

В этом случае, чем меньше значение Fn будет отличаться от значения Fmax, тем значение критерия Аn будет больше (см. фиг. 3).

Критерий Вn вычисляют по формуле:

где IM, IM - размеры окна с объектом сопровождения по осям i и j; IZ, JZ - размеры зоны анализа по осям i и j. Чем больше будет значение суммы градиентов яркости Gi,j точек градиентного изображения в окне анализируемого изображения, тем значение критерия Вn будет больше.

Критерий Сn можно вычислять по разным формулам. Один из возможных вариантов - вычисление критерия Сn по следующей формуле:

Чем меньше будет расстояние от центра окна анализируемого изображения до центра зоны анализа, тем значение критерия Сn будет больше.

За координаты центра нового окна с объектом сопровождения принимают координаты центра окна, в котором значение критерия Кn, равного произведению Аn ⋅ Вn ⋅ Сn, имеет наибольшее значение. После этого совмещают центр зоны анализа Z с центром нового окна с объектом сопровождения.

После этого производят обновление изображения в окне с объектом сопровождения посредством экспоненциальной фильтрации. Экспоненциальную фильтрацию осуществляют, например, по следующей формуле:

где hn(i,j) - яркости точек отфильтрованного изображения в новом окне с объектом сопровождения; hn-1(i,j) - яркости точек отфильтрованного изображения в окне с объектом сопровождения на предыдущем кадре; - яркости точек неотфильтрованного изображения в новом окне с объектом сопровождения; kh - эмпирически подбираемый коэффициент (0<kh<1).

После этого переходят к обработке следующего кадра оцифрованного телевизионного изображения, начиная либо с вычисления корреляционной функции F(α,β), либо - при обработке телевизионного изображения, зашумленного большим количеством помех, - с низкочастотной фильтрации следующего кадра.

Похожие патенты RU2796096C1

название год авторы номер документа
СПОСОБ ОБРАБОТКИ ПОСЛЕДОВАТЕЛЬНОСТИ ИЗОБРАЖЕНИИ ДЛЯ ОПРЕДЕЛЕНИЯ КООРДИНАТ ОБЪЕКТОВ НА ОСНОВЕ КОМПЛЕКСИРОВАНИЯ БАЗОВЫХ АЛГОРИТМОВ 2014
  • Алпатов Борис Алексеевич
  • Бабаян Павел Вартанович
  • Смирнов Сергей Александрович
RU2575401C1
СПОСОБ СЛЕЖЕНИЯ ЗА ОБЪЕКТОМ И УСТРОЙСТВО ДЛЯ ЕГО ОСУЩЕСТВЛЕНИЯ 1991
  • Шахрай В.И.
  • Каракозов Ю.А.
  • Иванов И.В.
  • Андрианов Г.П.
  • Дятков С.Ю.
RU2153235C2
СПОСОБ СЕЛЕКЦИИ НАЗЕМНЫХ И ВОЗДУШНЫХ ОБЪЕКТОВ (ЕГО ВАРИАНТЫ) И УСТРОЙСТВО ДЛЯ ЕГО ОСУЩЕСТВЛЕНИЯ (ЕГО ВАРИАНТЫ) 1999
  • Алексеев Е.Г.
  • Банкгальтер Р.И.
  • Данилов А.П.
  • Забаров В.С.
  • Зенкин С.М.
  • Злобина Е.В.
  • Золотарь Ю.А.
  • Китаев Н.Н.
  • Кокорина В.Я.
  • Моченов В.А.
  • Мягков В.К.
  • Руженцев А.В.
  • Семенов В.И.
  • Феклин А.А.
  • Щукин Ю.В.
RU2173881C2
СПОСОБ ОБНАРУЖЕНИЯ И АВТОСОПРОВОЖДЕНИЯ ОБЪЕКТОВ ЦЕЛЕУКАЗАНИЯ ОПТИКО-ЭЛЕКТРОННОЙ СИСТЕМОЙ БЕСПИЛОТНОГО ЛЕТАТЕЛЬНОГО АППАРАТА 2020
  • Лупанчук Владимир Юрьевич
  • Чаровский Максим Александрович
  • Сергеев Юрий Алексеевич
  • Чаровская Екатерина Александровна
  • Нужненко Антон Сергеевич
  • Изосимов Артем Васильевич
RU2748763C1
СПОСОБ ОБРАБОТКИ ПОСЛЕДОВАТЕЛЬНОСТИ ИЗОБРАЖЕНИЙ ДЛЯ ОБНАРУЖЕНИЯ И СЛЕЖЕНИЯ ЗА ВОЗДУШНЫМИ ОБЪЕКТАМИ 2010
  • Алпатов Борис Алексеевич
  • Бабаян Павел Вартанович
  • Костяшкин Леонид Николаевич
  • Муравьёв Сергей Иванович
  • Муравьёв Вадим Сергеевич
  • Романов Юрий Николаевич
  • Эгель Владимир Николаевич
RU2419150C1
Способ автоматического распознавания сцен и объектов на изображении 2021
  • Тупиков Владимир Алексеевич
  • Павлова Валерия Анатольевна
  • Крюков Сергей Николаевич
  • Бондаренко Владимир Александрович
RU2778906C1
СПОСОБ ОБРАБОТКИ СИГНАЛОВ ДЛЯ ОПРЕДЕЛЕНИЯ ПАРАМЕТРОВ ГЕОМЕТРИЧЕСКИХ ИСКАЖЕНИЙ ФОНА В ПОСЛЕДОВАТЕЛЬНОСТИ ТЕЛЕВИЗИОННЫХ ИЗОБРАЖЕНИЙ 2008
  • Алпатов Борис Алексеевич
  • Бабаян Павел Вартанович
  • Блохин Алексей Николаевич
  • Костяшкин Леонид Николаевич
  • Стротов Валерий Викторович
RU2367111C1
СПОСОБ РЕНТГЕНОВСКОЙ ТОМОГРАФИИ И УСТРОЙСТВО ДЛЯ ЕГО ОСУЩЕСТВЛЕНИЯ 2012
  • Сырямкин Владимир Иванович
  • Буреев Артем Шамильевич
  • Васильев Александр Владимирович
  • Глушков Глеб Сергеевич
  • Богомолов Евгений Николаевич
  • Бразовский Василий Владимирович
  • Шидловский Станислав Викторович
  • Горбачев Сергей Викторович
  • Бородин Владимир Алексеевич
  • Осипов Артем Владимирович
  • Шидловский Виктор Станиславович
  • Осипов Юрий Мирзоевич
  • Осипов Олег Юрьевич
  • Ткач Александр Александрович
  • Повторев Владимир Михайлович
RU2505800C2
СПОСОБ ВИДЕОСОПРОВОЖДЕНИЯ С УЛУЧШЕННЫМИ ДИНАМИЧЕСКИМИ ХАРАКТЕРИСТИКАМИ И УСТРОЙСТВО ДЛЯ ЕГО ОСУЩЕСТВЛЕНИЯ 2018
  • Арзуманян Эдуард Погосович
  • Сорока Евгений Зиновьевич
RU2716005C2
СПОСОБ ОЦЕНКИ ЗАПАСА НАСАЖДЕНИЙ 1998
  • Давыдов В.Ф.
  • Щербаков А.С.
  • Комаров Е.Г.
  • Маковская О.Ю.
  • Ватковский О.С.
RU2133565C1

Иллюстрации к изобретению RU 2 796 096 C1

Реферат патента 2023 года СПОСОБ СОПРОВОЖДЕНИЯ ОБЪЕКТОВ

Изобретение относится к способам сопровождения наземных объектов по оцифрованному сигналу телевизионного изображения. Технический результат - повышение надежности сопровождения объекта, снижение вероятности его потери. Оператор на экране S телевизионного изображения наводит окно М на объект сопровождения. Задают зону анализа Z телевизионного изображения, размеры которой меньше или равны размерам экрана S, но больше размеров окна М с объектом сопровождения. Принимают координаты центра окна М с объектом сопровождения за координаты центра зоны анализа Z. Выполняют предварительную обработку оцифрованного телевизионного изображения посредством низкочастотной фильтрации. В каждой точке зоны анализа Z вычисляют корреляционную функцию F(α,β) яркостей точек изображения в окне М с объектом сопровождения и яркостей точек анализируемого изображения в окнах N, размеры которых совпадают с размерами окна М. Корреляционную функцию F(α,β) вычисляют либо как разностную корреляционную функцию, либо как классическую корреляционную функцию. Полученную корреляционную функцию F(α,β) обрабатывают дифференциальным оператором, получая градиентное изображение. После этого вычисляют сумму градиентов яркости Gэ точек изображения в окне М с объектом сопровождения. Умножая эту сумму градиентов яркости G на коэффициент к меньший 1, получают значение порога Р. Во всех точках градиентного изображения, находящихся в зоне анализа Z, вычисляют суммы градиентов яркости Gi,j в окнах N анализируемых изображений, размеры которых совпадают с размерами окна М с объектом сопровождения. Запоминают координаты (in, jn) центров окон N, в которых суммы градиентов яркости Gi,j больше порога Р. После этого в окне М с объектом сопровождения и в каждом окне N анализируемого изображения, координаты центра которого совпадают с запомненными координатами (in, jn), вычисляют критерии Аn, Вn, Сn и критерий Кnn ⋅ Вn ⋅ Сn, где Аn - критерий отличия суммы яркостей точек изображения в окне N анализируемого изображения от суммы яркостей точек изображения в окне М с объектом сопровождения; Вn - критерий отличия суммы градиентов яркости Gi,j - точек градиентного изображения в окне N анализируемого изображения от суммы градиентов яркости Gэ точек градиентного изображения в окне М с объектом сопровождения, Сn - критерий удаленности центра окна N анализируемого изображения от центра зоны анализа Z. За координаты центра нового окна с объектом сопровождения принимают координаты центра окна, в котором значение критерия Кn имеет наибольшее значение. Совмещают центр зоны анализа Z с центром нового окна с объектом сопровождения. После этого производят обновление изображения в окне с объектом сопровождения посредством экспоненциальной фильтрации. После чего переходят к обработке следующего кадра телевизионного изображения. 9 з.п. ф-лы, 3 ил.

Формула изобретения RU 2 796 096 C1

1. Способ сопровождения объектов по оцифрованному сигналу телевизионного изображения, при котором оператор на экране телевизионного изображения наводит окно на объект сопровождения, и вычисляют корреляционную функцию F(α,β) яркостей h(i, j) точек изображения в окне с объектом сопровождения и яркостей точек анализируемого изображения в окнах, размеры которых совпадают с размерами окна с объектом сопровождения, где i и j - координаты точек телевизионного изображения, находящихся внутри окна с объектом сопровождения, а α и β - величины смещения координат центра окна анализируемого изображения относительно координат центра окна с объектом сопровождения по осям, соответственно, i и j, отличающийся тем, что после наведения оператором окна на объект сопровождения задают зону анализа телевизионного изображения в виде прямоугольной рамки, размеры которой меньше или равны размерам экрана телевизионного изображения, но больше размеров окна с объектом сопровождения, при этом окно с объектом сопровождения расположено в зоне анализа, за координаты центра зоны анализа при обработке первого кадра телевизионного изображения принимают координаты центра окна с объектом сопровождения, а корреляционную функцию F(α,β) при обработке как первого, так и всех последующих кадров вычисляют в каждой точке зоны анализа, после чего обрабатывают корреляционную функцию F(α,β) дифференциальным оператором, получая градиентное изображение, вычисляют сумму градиентов яркости Gэ точек градиентного изображения, находящихся в окне с объектом сопровождения, умножая эту сумму градиентов яркости G на коэффициент к меньший 1, получают значение порога Р, после чего во всех точках градиентного изображения, находящихся в зоне анализа, вычисляют суммы градиентов яркости Gi,j в окнах, размеры которых совпадают с размерами окна с объектом сопровождения, сравнивают суммы градиентов яркости Gi,j с порогом Р и запоминают координаты (in, jn) центров окон, в которых суммы градиентов яркости Gi,j больше порога Р, после чего в окне с объектом сопровождения и в каждом окне, координаты центра которого совпадают с запомненными координатами (in, jn), вычисляют критерии An, Вn, Сn и критерий Кnn ⋅ Вn ⋅ Сn, где Аn - критерий отличия суммы яркостей точек изображения в окне анализируемого изображения от суммы яркостей h(i, j) точек изображения в окне с объектом сопровождения, Вn - критерий отличия суммы градиентов яркости Gi,j точек градиентного изображения в окне анализируемого изображения от суммы градиентов яркости Gэ точек градиентного изображения в окне с объектом сопровождения, Сn - критерий удаленности центра окна анализируемого изображения от центра зоны анализа, принимают за координаты центра нового окна с объектом сопровождения координаты центра окна, в котором значение критерия Кn имеет наибольшее значение, совмещают центр зоны анализа с центром нового окна с объектом сопровождения, после чего переходят к обработке следующего кадра телевизионного изображения, начиная с операции вычисления корреляционной функции F(α,β).

2. Способ по п. 1, отличающийся тем, что за координаты нулевых отсчетов по осям i и j принимают координаты одного из углов зоны анализа, а оси i и j совмещают с граничными линиями зоны анализа.

3. Способ по п. 2, отличающийся тем, что критерий Вn вычисляют по формуле

где IM, JM - размеры окна с объектом сопровождения по осям i и j; IZ,JZ - размеры зоны анализа по осям i и j.

4. Способ по п. 2, отличающийся тем, что критерий Сn вычисляют по формуле

где IZ, JZ - размеры зоны анализа по осям i и j.

5. Способ по п. 2, отличающийся тем, что корреляционную функцию F(α,β) вычисляют как разностную корреляционную функцию по следующей формуле:

где IM, JM - размеры окна с объектом сопровождения по осям i и j; IZ, JZ - размеры зоны анализа по осям i и j.

6. Способ по п. 5, отличающийся тем, что критерий Аn вычисляют по формуле

где Fn - значение функции F(α,β) в точке с координатами (in, jn); Fmax и Fmin - максимальное и минимальное значения функции F(α,β) в зоне анализа.

7. Способ по п. 2, отличающийся тем, что корреляционную функцию F(α,β) вычисляют как классическую корреляционную функцию по следующей формуле:

где IМ, JМ - размеры окна с объектом сопровождения по осям i и j; IZ, JZ - размеры зоны анализа по осям i и j.

8. Способ по п. 7, отличающийся тем, что критерий Аn вычисляют по формуле

где Fn - значение функции F(α,β) в точке с координатами (in, jn); Fmax и Fmin - максимальное и минимальное значения функции F(α,β) в зоне анализа.

9. Способ по п. 1, отличающийся тем, что перед операцией вычисления корреляционной функции F(α,β) выполняют предварительную обработку оцифрованного телевизионного изображения посредством низкочастотной фильтрации.

10. Способ по п. 1, отличающийся тем, что после операции совмещения центра зоны анализа с центром нового окна с объектом сопровождения производят обновление изображения в окне с объектом сопровождения посредством экспоненциальной фильтрации.

Документы, цитированные в отчете о поиске Патент 2023 года RU2796096C1

CN 103577833 A, 12.02.2014
СПОСОБ ОБНАРУЖЕНИЯ И АВТОСОПРОВОЖДЕНИЯ ОБЪЕКТОВ ЦЕЛЕУКАЗАНИЯ ОПТИКО-ЭЛЕКТРОННОЙ СИСТЕМОЙ БЕСПИЛОТНОГО ЛЕТАТЕЛЬНОГО АППАРАТА 2020
  • Лупанчук Владимир Юрьевич
  • Чаровский Максим Александрович
  • Сергеев Юрий Алексеевич
  • Чаровская Екатерина Александровна
  • Нужненко Антон Сергеевич
  • Изосимов Артем Васильевич
RU2748763C1
СПОСОБ ВИДЕОСОПРОВОЖДЕНИЯ С УЛУЧШЕННЫМИ ДИНАМИЧЕСКИМИ ХАРАКТЕРИСТИКАМИ И УСТРОЙСТВО ДЛЯ ЕГО ОСУЩЕСТВЛЕНИЯ 2018
  • Арзуманян Эдуард Погосович
  • Сорока Евгений Зиновьевич
RU2716005C2
СПОСОБ ПОМЕХОУСТОЙЧИВОГО ГРАДИЕНТНОГО ВЫДЕЛЕНИЯ КОНТУРОВ ОБЪЕКТОВ НА ЦИФРОВЫХ ИЗОБРАЖЕНИЯХ 2015
  • Пантюхин Максим Александрович
  • Самойлин Евгений Александрович
RU2589301C1
СПОСОБ СЕЛЕКЦИИ НАЗЕМНЫХ И ВОЗДУШНЫХ ОБЪЕКТОВ (ЕГО ВАРИАНТЫ) И УСТРОЙСТВО ДЛЯ ЕГО ОСУЩЕСТВЛЕНИЯ (ЕГО ВАРИАНТЫ) 1999
  • Алексеев Е.Г.
  • Банкгальтер Р.И.
  • Данилов А.П.
  • Забаров В.С.
  • Зенкин С.М.
  • Злобина Е.В.
  • Золотарь Ю.А.
  • Китаев Н.Н.
  • Кокорина В.Я.
  • Моченов В.А.
  • Мягков В.К.
  • Руженцев А.В.
  • Семенов В.И.
  • Феклин А.А.
  • Щукин Ю.В.
RU2173881C2
CN 104036250 B, 10.11.2017
WO 2017170876 A1, 05.10.2017
СПОСОБ СЛЕЖЕНИЯ ЗА ОБЪЕКТОМ И УСТРОЙСТВО ДЛЯ ЕГО ОСУЩЕСТВЛЕНИЯ 1991
  • Шахрай В.И.
  • Каракозов Ю.А.
  • Иванов И.В.
  • Андрианов Г.П.
  • Дятков С.Ю.
RU2153235C2

RU 2 796 096 C1

Авторы

Ивлюшкин Алексей Николаевич

Боровых Олег Анатольевич

Трофимов Сергей Викторович

Даты

2023-05-17Публикация

2022-05-13Подача