Устройство компьютерной системы панорамного телевизионного наблюдения с повышенной разрешающей способностью Российский патент 2020 года по МПК H04N7/00 

Описание патента на изобретение RU2721381C1

Предлагаемое изобретение относится к панорамному телевизионному наблюдению, которое выполняется компьютерной системой при помощи телевизионной камеры кругового обзора в области, близкой к полусфере, т.е. в пространственном угле 360 градусов по азимуту и десятки градусов по углу места. Телевизионная камера такой системы имеет два сенсора: «кольцевой» и «прямоугольный» (матричный) фотоприемники, - изготовленные по технологии комплементарных структур «металл-окисел-полупроводник» (КМОП).

Наиболее близким по технической сущности к заявляемому изобретению следует считать устройство компьютерной системы панорамного телевизионного наблюдения [1], содержащее последовательно соединенные телевизионную камеру и сервер, являющийся узлом локальной вычислительной сети, к которому подключены два или более персональных компьютеров, при этом телевизионная камера, формирующая «кольцевой» растр изображения, содержит последовательно расположенные и оптически связанные панорамный объектив и «кольцевой» фотоприемник, который выполнен по технологии приборов с зарядовой связью (ПЗС) и содержит на общем кремниевом кристалле в виде кругового кольца «кольцевую» фотоприемную область (мишень), «кольцевой» регистр сдвига и блок преобразования «заряд - напряжение» (БПЗН) с организацией «плавающая диффузия», при этом на мишени линейки светочувствительных элементов, чередующиеся с линейками экранированных от света элементами, расположены вдоль радиальных направлений от воображаемого центра кругового кольца к его внешней периферии и расположенному там «кольцевому» регистру сдвига, а число элементов в каждой «кольцевой» строке мишени равно числу элементов в «кольцевом» регистре сдвига, причем на мишени площадь светочувствительных элементов и равная ей площадь экранированных элементов различны от строки к строке, увеличиваясь по мере движения к внешней периферии до максимальной величины, не превышающей площадь элемента «кольцевого» регистра сдвига; в состав телевизионной камеры также входят блок «кольцевой» развертки видеосигнала, блок формирования апертуры (БФА) и соединенные последовательно сигнальный процессор и аналого-цифровой преобразователь (АЦП), выход которого является выходом телевизионной камеры, причем информационный вход сигнального процессора подключен к выходу БПЗН «кольцевого» фотоприемника, первый выход блока «кольцевой» развертки - к управляющим входам фотоприемной области «кольцевого» фотоприемника, второй выход блока «кольцевой» развертки - к управляющим входам «кольцевого» регистра сдвига «кольцевого» фотоприемника, третий выход блока «кольцевой» развертки - к управляющему входу БПЗН «кольцевого» фотоприемника, четвертый выход блока «кольцевой» развертки - к входу синхронизации сигнального процессора, пятый выход блока «кольцевой» развертки - к тактовому входу АЦП, шестой выход блока «кольцевой» развертки - к информационному входу БФА, седьмой выход блока «кольцевой» развертки - к синхронизирующему входу БФА, выход которого подключен к управляющему входу блока «кольцевой» развертки, причем период управляющих импульсов Тr, формируемых на выходе БФА, определяется соотношением:

где Тр - период считывания элемента в «кольцевом» фотоприемнике;

nm - коэффициент, целое число, величина которого для текущей строки считывания в «кольцевом» фотоприемнике, равна отношению:

где Δ1 - площадь светочувствительного элемента для первой строки считывания в «кольцевом» фотоприемнике;

Δm - площадь светочувствительного элемента для текущей строки считывания в «кольцевом» фотоприемнике,

при этом в разъем расширения на материнской плате сервера установлена плата видео, согласованная по каналам ввода/вывода, управлению и питанию с шиной сервера, содержащая блок электрического вписывания изображения (БЭВИ), который осуществляет программным путем вложение (вставку) «кольцевого» кадра телевизионной камеры в «прямоугольный» растр компьютерного монитора, причем в режиме наблюдения панорамного сюжета полностью вход БЭВИ подключен к выходу блока оперативной памяти на кадр, а выход БЭВИ - к выходу «сеть» сервера; в состав платы видео входит также блок преобразования «кольцевого» кадра в «прямоугольные» кадры (БПКП), который заменяет БЭВИ при переводе компьютерной системы в режим последовательного обзора панорамного сюжета, т.е. вход БПКП в этом режиме подключен к выходу блока оперативной памяти на кадр, а выход БПКП - к выходу «сеть» сервера, причем число «прямоугольных» кадров т, соответствующих одному текущему «кольцевому» кадру и которые являются его фрагментами, удовлетворяет соотношению:

где γг - горизонтальный угол поля зрения в градусах наблюдаемого оператором изображения, а само это преобразование выполняется тоже программным путем.

Недостаток прототипа - ограниченная разрешающая способность вдоль строки для «прямоугольных» кадров-фрагментов из-за уменьшения в т раз для каждого из них количества светочувствительных элементов (пикселов) по отношению к «кольцевому» изображению, а также ограниченная степень интеграции телевизионной камеры из-за применяемой технологии ПЗС для изготовления ее «кольцевого» сенсора, принципиально не позволяющей разместить на кристалле электронное «обрамление» фотоприемника. Здесь под этим термином конкретно подразумевается блоковая совокупность, включающая в себя блок «кольцевой» развертки видеосигнала, БФА, сигнальный процессор и АЦП.

Задачей изобретения является увеличение разрешающей способности наблюдаемых раздельно фрагментов «кольцевого» кадра при помощи дополнительного фотоприемника, являющимся «прямоугольным» (матричным) сенсором, а также повышение степени интеграции телевизионной камеры за счет выполнения «кольцевого» и матричного сенсоров по технологии КМОП, с размещением на их кристаллах необходимого электронного «обрамления».

Поставленная задача в заявляемом устройстве системы панорамного телевизионного наблюдения решается тем, что, как и в устройстве прототипа [1], содержащем последовательно соединенные телевизионную камеру и сервер, являющийся узлом локальной вычислительной сети, к которому подключены два или более персональных компьютеров, при этом в разъем расширения на материнской плате сервера установлена плата видео, согласованная по каналам ввода/вывода, управлению и питанию с шиной сервера, содержащая БЭВИ, который осуществляет программным путем вставку «кольцевого» кадра телевизионной камеры в «прямоугольный» растр компьютерного монитора, причем в режиме наблюдения панорамного сюжета полностью вход БЭВИ подключен к выходу блока оперативной памяти на кадр, а выход БЭВИ - к выходу «сеть» сервера; при этом телевизионная камера, формирующая «кольцевой» растр изображения, содержит последовательно расположенные панорамный объектив и «кольцевой» фотоприемник (сенсор), который содержит на мишени линейки светочувствительных пикселов, расположенных вдоль радиальных направлений от воображаемого центра кругового кольца к его внешней периферии, причем число светочувствительных пикселов в каждой «кольцевой» строке мишени одинаково, а их площадь от строки к строке различна, увеличиваясь по мере движения к внешней периферии сенсора, но при этом, в отличие от прототипа [1], «кольцевой» сенсор выполнен на кристалле, изготовленном по технологии КМОП, причем мишень сенсора состоит из фотодиодных активных пикселов, каждый из которых имеет усилитель с коэффициентом усиления Km, а также встроенный АЦП, обеспечивающий передачу видеосигнала активного пиксела на свою «радиальную» шину видео, при этом все они в совокупности объединяют активные пикселы мишени в «радиальные» столбцы, причем управление АЦП для пикселов, расположенных вдоль каждой «кольцевой» строки сенсора, осуществляется при помощи отдельно взятой «кольцевой» строчной шины, общее количество которых определяет число строк в сенсоре, а количество «радиальных» шин видео - число пикселов в каждой строке сенсора; при этом на общем кристалле «кольцевого» фотоприемника размещаются и блоки, выполняющие развертку и формирование на первом выходе «Видео» телевизионной камеры напряжения цифрового «кольцевого» видеосигнала, а именно: «кольцевой» регистр кадровой развертки, осуществляющий выбор «кольцевой» строки; «кольцевой» коммутатор видеосигналов, содержащий коммутаторы видеосигнала для каждого «радиального» столбца, которые управляются с соответствующего выхода «кольцевого» мультиплексора строчной развертки и обеспечивают передачу видеосигнала на выходе каждой «радиальной» шины видео на «кольцевую» шину видео, выход которой является выходом «Видео» фотоприемника, причем коэффициент усиления Km активного пиксела для каждой текущей «кольцевой» строки сенсора изменяется по соотношению:

где Δ1 и Δm - соответственно светочувствительная площадь активного пиксела для первой и текущей «кольцевой» строки считывания в «кольцевом» сенсоре, обеспечивая одинаковую величину считывающей апертуры в пределах всего «кольцевого» растра изображения, а в состав телевизионной камеры дополнительно введены матричный фотоприемник, установленный на блоке наведения, светоделитель, расположенный на выходе панорамного объектива, селектор синхроимпульсов, генератор электронной отметки и коммутатор-смеситель, выход которого является выходом «Видео» телевизионной камеры, при этом матричный фотоприемник, как и «кольцевой» сенсор, выполнен по технологии КМОП, с аналогичной организацией по методу «координатная адресация», причем число его «прямоугольных» строк равно числу «кольцевых» строк у «кольцевого» сенсора, но в отличие от него, число пикселов в строке превышает показатель, равный числу пикселов в строке у «кольцевого» сенсора, деленному на m, а коэффициент усиления Km активного пиксела для каждой текущей «прямоугольной»» строки мишени сохраняется постоянным и неизменным по величине; светоделитель, воспринимающий на входе выходное оптическое изображение панорамного объектива, обеспечивает формирование на первом выходе оптического изображения одного из фрагментов «кольцевого» кадра, проецируемого на мишень матричного фотоприемника, а на втором выходе - оптического изображения всего «кольцевого» кадра, проецируемого на мишень «кольцевого» фотоприемника; блок наведения осуществляет плавное пространственное перемещение матричного фотоприемника в пределах круга в положение, отмечаемое на изображении в режиме наблюдения панорамного сюжета полностью электронной отметкой, которая одновременно является геометрическим центром предлагаемого к рассмотрению отдельно взятого фрагмента «кольцевого» кадра, при этом управление блоком наведения выполняется по команде оператора системы с компьютера; управление режимом «Видео» тоже выполняется по команде оператора, которая подается на управляющий вход коммутатора-смесителя, первый информационный вход которого подключен к выходу «Видео» «кольцевого» фотоприемника, второй информационный вход коммутатора-смесителя - к выходу «Видео» матричного фотоприёмника, а третий информационный вход коммутатора-смесителя - к выходу сигнала генератора электронной отметки, управляющий вход которого подключён к выходу датчика положения блока наведения, причём выход «Видео» «кольцевого» фотоприёмника подключён к входу селектора синхроимпульсов, выход кадровых синхроимпульсов (КСИ) которого подключён к первому входу генератора электронной отметки и соответственно к входу синхронизации коммутатора-смесителя, выход строчных синхроимпульсов (ССИ) селектора синхроимпульсов - ко второму входу генератора электронной отметки; а выход смеси синхроимпульсов приёмника (ССП) селектора синхроимпульсов - к входу внешней синхронизации матричного фотоприёмника; в качестве сервера компьютерной системы используется системный блок одного из компьютерных пользователей.

Совокупность известных и новых признаков для заявляемого устройства не известна из уровня техники, следовательно, предлагаемое техническое решение соответствует критерию новизны.

Важно отметить следующее. Светочувствительная площадь пикселов «кольцевой» мишени заявляемого фотоприёмника, как и для прототипа [1], от строки к строке различна. Это вызывается необходимостью для «кольцевого» фотоприёмника, имеющего одинаковое число пикселов в каждой строке, выравнивания разрешающей способности в пределах кадра путём обеспечения одинаковой величины технологического (производственного) зазора между светочувствительными элементами.

Но при этом, как в заявляемом решении, так и в прототипе [1], не происходит межстрочного нарушения чувствительности сенсора по следующим обстоятельствам.

Параметр считывающей апертуры для всех пикселов каждой текущей строки «кольцевого» кадра определяется произведением коэффициента усиления Km пиксела на величину его светочувствительной площади Δm.

Как следует из соотношения (4), этот показатель остается постоянным (неизменным) для всех светочувствительных пикселов «кольцевого» фотоприемника. Не меняется и величина шумовой «дорожки» для каждого активного пиксела этого сенсора, что является обязательным условием для реализации чувствительности фотоприемника и его отношения сигнал/шум.

Отметим, что в прототипе [1] этот принцип также соблюдается, но реализуется по другому методу, см. опубликованные выше соотношения (1) и (2).

Поэтому предлагаемое техническое решение соответствует критерию о наличии изобретательского уровня.

На фиг. 1 приведена структурная схема заявляемой компьютерной системы панорамного телевизионного наблюдения и на этом же чертеже - структурная схема телевизионной камеры в ее составе; на фиг. 2 приведена схемотехническая организация нового «кольцевого» фотоприемника; на фиг. 3 - подробности этой организации применительно к отдельно взятому «радиальному» столбцу; на фиг. 4 - возможная оптическая схема светоделителя; на фиг. 5 - иллюстрация возможных положений мишени матричного фотоприемника на платформе блока наведения; на фиг. 6 - иллюстрация выполнения задачи по электрическому вписыванию изображения «кольцевого» кадра в прямоугольный растр компьютерного монитора; на фиг. 7 - пример выполнения электрической схемы блока наведения; на фиг. 8, по данным [2], представлена фотография изображения, полученного при помощи отечественного панорамного зеркально-линзового объектива.

Заявляемая компьютерная система панорамного телевизионного наблюдения (см. фиг. 1) содержит последовательно соединенные телевизионную камеру 1 и сервер 2 (с установленной в нем платой видео), который является узлом локальной вычислительной сети, с возможностью подключения к ней двух или более персональных компьютеров в позиции 3.

В качестве сервера 2 использован системный блок компьютера 4 оператора системы.

Телевизионная камера 1, см. фиг. 1, содержит в своем составе панорамный объектив 1-1, «кольцевой» фотоприемник 1-2, светоделитель в позиции 1-3, матричный фотоприемник 1-4, блок наведения 1-5, коммутатор-смеситель 1-6, генератор 1-7 электронной отметки и селектор синхроимпульсов 1-8. Выход коммутатора-смесителя 1-6 является выходом «Видео» телевизионной камеры.

По линии связи одна команда управления телевизионной камерой с компьютера 4 оператора системы поступает на управляющий вход коммутатора-смесителя 1-6, затем другая команда - на блок наведения 1-5. Первый информационный вход блока 1-6 подключен к выходу «Видео» «кольцевого» фотоприемника 1-2, его второй информационный вход - к выходу «Видео» матричного фотоприемника 1-4, а его третий информационный вход - к выходу генератора электронной отметки 1-7. На управляющий вход генератора 1-7 электронной отметки подается сигнал с датчика положения блока наведения 1-5. Выход «Видео» «кольцевого» фотоприемника 1-2 подключен также к входу селектора 1-8 синхроимпульсов, выход КСИ которого подключен к первому входу генератора 1-7 и соответственно к входу синхронизации коммутатора-смесителя 1-6, выход ССИ - ко второму входу генератора 1-7, а выход ССП - к входу внешней синхронизации матричного фотоприемника 1-4.

Как и в прототипе [1], плата видео выполняет программным путем следующие операции:

- запись «кольцевого» видеосигнала в оперативную память сервера в автоматическом режиме;

- электрическое вписывание изображения «кольцевого» кадра из оперативной памяти в «прямоугольный» растр компьютерного монитора в режиме 1 работы системы (наблюдения панорамного сюжета полностью).

Но в заявляемом решении в режиме 2 работы системы предусмотрена возможность мониторинга фрагментов «кольцевого» кадра с повышенной разрешающей способностью при помощи матричного фотоприемника. При этом, по сравнению с прототипом [1], здесь принципиально исключаются пропуски видеоинформации на последовательных стыках (между соседними «прямоугольными» кадрами), см. фиг. 5, т.к. эти участки могут быть просмотрены дополнительно.

Следует отметить, что в компьютерной программе применительно к операции по реализации электрического вписывания «кольцевого» кадра в «прямоугольный» растр монитора должно быть реализовано соблюдение последовательности передачи телевизионных строк.

При условии размещения вписываемого кадра в центральной части экрана монитора выполнение этой задачи представлено на фиг. 6.

Продемонстрируем заложенный в эту программы алгоритм, используя растровое положение точечных изображений от двух пикселов «А» и «В» для «кольцевого» фотоприемника 1-2.

Пусть, как показано на фиг. 2, пиксел «А» считывается первым в первой «кольцевой» строке сенсора, а пиксел «В» - точно посередине этой строки.

Тогда в «прямоугольном» растре компьютерного монитора (см. фиг. 4) изображение от пиксела «А» будет занимать положение центрального элемента его первой строки, а изображение от пиксела «В» - положение центрального элемента его последней строки.

Панорамный объектив 1-1 телевизионной камеры, как и в прототипе, предназначен для формирования оптического изображения кругового обзора (кольцевого изображения). В качестве технического решения для панорамного объектива 1-1, совпадающим с аналогичным решением для прототипа, может быть предложен панорамный зеркально-линзовый объектив, конструкция которого запатентована в России отечественными специалистами [2].

Угловое поле в пространстве предметов для этого объектива составляет 360 градусов по азимуту и может достигать (75-80) градусов по углу места. Наличие пассивной (неинформативной) области в центре оптического кадра панорамного объектива, см. фиг. 8, подтверждает целесообразность выбора формы фотоприемника 1-2, как и в прототипе, в пользу кругового кольца.

Светоделитель 1-3 телевизионной камеры предназначен для направления светового потока с выхода панорамного объектива 1-1 по двум каналам: на мишень матричного фотоприемника 1-4 (выход 1) и на мишень «кольцевого» фотоприемника (выход 2).

В качестве возможного технического решения оптической схемы светоделителя 1-3 может быть использована схема, представленная на фиг. 4, которая была ранее использована в описании к патенту РФ [3].

Светоделитель 1-3 содержит последовательно расположенные и оптически связанные полупрозрачное зеркало 1-3-1, коллективную линзу 1-3-2, отражающее зеркало 1-3-3 и дополнительный объектив 1-3-4, причем вход светоделителя оптически связан с входом полупрозрачного зеркала 1-3-1, первый выход светоделителя - с выходом полупрозрачного зеркала 1-3-1, а второй выход светоделителя - с выходом дополнительного объектива 1-3-4.

«Кольцевой» фотоприемник 1-2 (см. фиг. 2) выполнен по технологии КМОП и содержит на общем кристалле «кольцевую» фотоприемную область (мишень) 1-2-1, «кольцевой» регистр 1-2-2 кадровой развертки, «кольцевой» коммутатор 1-2-3 видеосигналов и «кольцевой» мультиплексор 1-2-4.

Как показано на фиг. 2, активные пикселы на мишени фотоприемника объединены в столбцы, которые расположены вдоль радиальных направлений от воображаемого центра кругового кольца.

Каждый активный пиксел мишени (см. фиг. 3) имеет в своем составе светочувствительную область (площадь) 1-2-1-1, усилитель 1-2-1-2 с коэффициентом усиления Km для каждой текущей «кольцевой» строки и АЦП 1-2-1-3.

«Кольцевой» коммутатор 1-2-3 видеосигналов состоит из отдельных коммутаторов 1-2-3-1 видеосигнала, число которых соответствует числу активных пикселов в строке, объединенных «кольцевой» шиной видео 1-2-3-2.

Отметим, что показанная на фиг. 2 форма светочувствительной площади пиксела в виде прямоугольника, а на фиг. 3 - латинской буквы L, - являются условными. На практике электроды зарядового накопления активных пикселов мишени сенсора, совпадающие с площадью их светочувствительной площади, могут быть выполнены совершенно иначе, например, с геометрической формой в виде части кругового кольца.

Управление АЦП 1-2-1-3 пиксела, как и всех остальных пикселов мишени, осуществляется с управляющего входа «кольцевого» мультиплексора 1-2-3. передающей сигнал управления с соответствующего выхода «кольцевого» регистра 1-2-2 кадровой развертки.

Видеосигнал с выхода каждого АЦП 1-2-1-3 для каждого активного пиксела отдельного взятого «радиального» столбца передается на «радиальную» шину видео 1-2-1-5. Далее при помощи «своего» ключевого МОП-транзистора коммутатора 1-2-3-1, управляемого с одного из выходов мультиплексора 1-2-4, цифровой видеосигнал текущего пиксела передается на «кольцевую» шину видео 1-2-3-2, а затем транслируется по ней на выход фотоприемника.

То же самое формирование цифрового видеосигнала происходит и в пределах других радиально расположенных столбцов «кольцевой» мишени 1-2-1 каждого из двух фотоприемников сенсорного блока 1-2.

Отметим, что на фиг. 2 пунктирные стрелки показывают управление «кольцевыми» строчными шинами 1-2-1-4 фотоприемника со стороны «кольцевого» регистра 1-2-2 кадровой развертки. То, что здесь, как и на фиг. 3, изображены лишь четыре строчные шины является условностью чертежа. На самом деле число шин 1-2-1-4 соответствует показателю действительного числа «кольцевых» строк в заявляемом сенсоре.

Поясним дополнительно на фиг. 2 и другое. Стрелки с непрерывными линиями отмечают передачу сигнала изображения в сенсоре по «радиальным» шинам видео 1-2-1-5 в направлении к «кольцевому» коммутатору 1-2-3 видеосигналов.

В результате в «кольцевом» растре последовательно один за другим для каждого пиксела отдельно взятой «кольцевой» строки и последовательно строка за строкой для мишени в целом формируется в цифровом виде напряжение выходного видеосигнала фотоприемника.

Благодаря принятой для изготовления предлагаемого датчика видеосигнала технологии КМОП, обеспечивается возможность интегрировать на один общий кристалл не только фотоприемник с АЦП для каждого активного пиксела, но и блоки цифровой развертки телевизионной камеры. Реализация такого решения обеспечивает существенное снижение общего энергопотребления телевизионной камеры.

Матричный фотоприемник 1-4, выполненный также по технологии КМОП, сохраняет все признаки прибора, реализованного по методу «координатная адресация» американскими специалистами в «нулевые» двухтысячные годы. Об этом сообщалось и подробно комментировалось в отечественной монографии [4, с. 67, рис. 1.21]. Очевидно, что по этой технологии на кристалле матричного фотоприемника 1-4 также реализуется задача по формированию цифрового видеосигнала «прямоугольного» растра с пониженным энергопотреблением.

Возвращаясь к фотоприемнику 1-2, следует признать, что схемотехническая организация на кристалле КМОП «кольцевого» сенсора с аналогичными возможностями не предлагалась.

Несомненно, что «кольцевая» форма мишени КМОП-фотоприемника и блоков развертки позволяет эффективнее использовать в телевизионных камерах полезную площадь используемого кристалла для телевизионно-компьютерного наблюдения панорамных сюжетов.

В заявляемом решении блок наведения 1-5 осуществляет плавное круговое пространственное перемещение мишени матричного фотоприемника 1-4 по проекции «кольцевого» изображения панорамной сцены, формируемого на первом выходе светоделителя 1-3 (см. фиг. 4 и 5).

Электрическая схема блока 1-5 может быть реализована на базе технического решения, которое ранее было использовано в описании к патенту РФ [3].

Рассмотрим работу блока 1-5 (см. фиг. 7), электрическая схема которого выполнена на двух оптронах HSSR, обозначенных как VT1 и VT2.

Изделие HSSR-7111 согласно [5] - однополюсный нормально разомкнутый оптрон с выходным каскадом на мощных МОП-транзисторах, имеет очень малое сопротивление во включенном состоянии и работает в точности как полупроводниковое реле. Максимальная величина сопротивления нагрузочной цепи оптрона HSSR-7111 во включенном состоянии составляет 1 Ом, а максимальный ток нагрузки в зависимости от схемы включения составляет 0,8 Ампер или вдвое больше (1,6 Ампер). Будем считать, что управление наведением осуществляется командами в соответствии с табл. 1.

Отметим, что подаваемые в телевизионную камеру с компьютера по двухпроводной линии связи сигналы управления блоком 1-5 наведения являются постоянными напряжениями положительной или отрицательной полярности величиной (5…12) Вольт, отсчитываемой относительно провода «общий».

При отсутствии команд управления эти напряжений тоже отсутствуют. Поэтому оптроны VT1 и. VT2 разомкнуты, а электродвигатель М обесточен.

Пусть по линии связи на блок 1-5 наведения поступает команда «Управление поворотом» - «Вперед». Тогда оптрон VT2 замыкается, а электродвигатель М подключается к источнику переменного напряжения ~U и начинает вращаться.

Если взамен этой команды поступит команда «Управление поворотом» - «Назад», то замкнется оптрон VT1, а электродвигатель М будет вращаться в другом направлении.

Концевые выключатели SF1 и SF2 обеспечивают границы позиционирования в пределах одного кругового оборота матричного фотоприемника 1-5.

Датчик положения выполнен на базе переменного резистора RPn имеющего линейную зависимость изменения сопротивления от угла поворота, а постоянный резистор Rn* служит для реализации настроечной работы по точному позиционированию. Движок резистора RPn кинематически (через редуктор) связан с двигателем М.

Отметим, что сигнал датчика положения (напряжение Un с потенциометра RPn), поступает на управляющий вход генератора 1-7 электронной отметки, обеспечивая перемещение маркера на «кольцевом» изображении в соответствии с командами, поступающими с блока наведения 1-5.

Заявляемое устройство компьютерной системы панорамного телевизионного наблюдения с повышенной разрешающей способностью работает следующим образом.

Как и в прототипе [1], предполагается, что телевизионная камера 1 установлена в фиксированное положение, например при помощи фотоштатива (на фиг. 1 он не показан).

Характеристика сигналов управления телевизионной камерой 1 с компьютера 4, сопутствующих команде «Выбор режима видео», представлена в табл. 2. Они являются типовыми логическими сигналами в уровнях ТТЛ.

При ее включении компьютерной системы она начинает действовать по умолчанию в режиме 1.

Тогда на мишень «кольцевого» фотоприемника 1-2 проецируется «кольцевое» оптическое изображение контролируемого панорамного сюжета, а на мишень матричного сенсора 1-4 - фрагмент этого изображения.

По выходу «Видео» сформированный цифровой телевизионный сигнал (ЦТС) по интерфейсу (например, USB 2,0) передается на сервер 2, где выполняется запись видеоинформации в блок оперативной памяти на кадр.

В этом режиме оператор компьютера 4 наблюдает полное изображение панорамной сцены, формируемое «кольцевым» фотоприемником 1-2 и электронную отметку на нем, например «крест», который показывает текущее местоположение геометрического центра мишени матричного фотоприемника 1-4.

Будем считать, что наша электронная отметка («крест») априори располагается точно в середине «кольцевого» изображения по его ширине.

Отметим еще раз, что показатель считывающей апертуры для сенсора 1-2 неизменен для всех светочувствительных пикселов мишени, несмотря на различие их по площади для составляющих «кольцевых» строк.

А это гарантирует одинаковую чувствительность для всех элементов мишени и одновременно выравнивание разрешающей способности «кольцевого» изображения по всей площади мишени сенсора.

Если оператор компьютера 4 затем выполнит переключение системы в режим 2, то ему будет предложено телевизионное изображение, которое формируется в данный момент матричным фотоприемником 1-4 при его текущем местоположении.

Для того, чтобы коммутация режимов работы системы происходила без внесения искажений в наблюдаемые изображения, фотоприемники телевизионной камеры работают в режиме Genlock, который обеспечивается путем подачи на вход внешней синхронизации матричного сенсора 1-4 сигнала синхронизации приемника (ССП) от «кольцевого» сенсора 1-2.

Дополнительно к этому в коммутаторе-смесителе 1-6 обеспечивается «привязка» временного процесса переключения команд к интервалу кадрового синхроимпульса (КСИ), вырабатываемого на выходе селектора 1-8 синхроимпульсов.

Если число светочувствительных пикселов в строке матричного фотоприемника 1-4 равно числу пикселов для «кольцевой» строки сенсора 1-2, получаемый выигрыш в разрешающей способности (четкости) этого фрагмента панорамного изображения, по сравнению с прототипом [1], составит m раз.

После завершения записи этого изображения в дополнительный блок памяти сервера 2 оно также становится доступным для всех пользователей компьютеров 3.

Важно отметить, что благодаря светоделителю 1-3 и блоку наведения 1-5, может быть реализовано точное позиционирование мишени матричного фотоприемника 1-4 в пределах всей площади панорамного изображения, формируемого «кольцевым» фотоприемником 1-2, т.е. без потерь его отдельных участков.

В настоящее время все элементы структурной схемы устройства компьютерной системы панорамного телевизионного наблюдения с повышенной разрешающей способностью освоены или могут быть освоены отечественной промышленностью.

Поэтому следует считать предполагаемое изобретение соответствующим требованию о промышленной применимости.

ИСТОЧНИКИ ИНФОРМАЦИИ

1. Патент РФ №2665695. МПК H04N 7/00. Устройство компьютерной системы панорамного телевизионного наблюдения. / В.М. Смелков // Б.И. - 2018. - №25.

2. Патент РФ №2185645. МПК G02B 13/06, G02B 17/08. Панорамный зеркально-линзовый объектив. / А.В. Куртов, В.А. Соломатин // Б.И. - 2002. - №20.

3. Патент РФ №2504100. H04N 5/225. Телевизионная система с селективным масштабированием изображения. / В.М. Смелков // Б.И. - 2014. - №1.

4. Березин В.В., Умбиталиев А.А., Фахми Ш.С., Цыцулин А.К. и Шипилов Н.Н. Твердотельная революция в телевидении: Телевизионные системы на основе приборов с зарядовой связью, систем на кристалле и видеосистем на кристалле. Под ред. А.А. Умбиталиева и А.К. Цыцулина. - М.: «Радио и связь», 2006.

5. www.avagotech.com.

Похожие патенты RU2721381C1

название год авторы номер документа
Устройство компьютерной системы панорамного телевизионного наблюдения с селективным масштабированием изображения (варианты) 2021
  • Смелков Вячеслав Михайлович
RU2780039C1
Устройство компьютерной системы панорамного телевизионного наблюдения с повышенной разрешающей способностью 2021
  • Смелков Вячеслав Михайлович
RU2755809C1
Устройство компьютерной системы панорамного телевизионного наблюдения с повышенной разрешающей способностью 2019
  • Смелков Вячеслав Михайлович
RU2723640C1
Устройство компьютерной системы панорамного телевизионного наблюдения с селективным масштабированием изображения 2020
  • Смелков Вячеслав Михайлович
RU2727920C1
Устройство компьютерной системы панорамного телевизионного наблюдения с повышенной разрешающей способностью 2022
  • Смелков Вячеслав Михайлович
RU2785152C1
Устройство компьютерной системы панорамного телевизионного наблюдения с селективным масштабированием изображения (варианты) 2022
  • Смелков Вячеслав Михайлович
RU2787358C1
Устройство компьютерной системы панорамного телевизионного наблюдения с селективным масштабированием изображения 2020
  • Смелков Вячеслав Михайлович
RU2743571C1
Устройство компьютерной системы панорамного телевизионного наблюдения с селективным масштабированием изображения 2021
  • Смелков Вячеслав Михайлович
RU2756234C1
Способ формирования видеосигнала в телевизионно-компьютерной системе для контроля промышленных изделий, имеющих форму кругового кольца 2019
  • Смелков Вячеслав Михайлович
RU2725973C1
Способ формирования видеосигнала в телевизионно-компьютерной системе для контроля промышленных изделий, имеющих форму кругового кольца 2021
  • Смелков Вячеслав Михайлович
RU2755494C1

Иллюстрации к изобретению RU 2 721 381 C1

Реферат патента 2020 года Устройство компьютерной системы панорамного телевизионного наблюдения с повышенной разрешающей способностью

Изобретение относится к панорамному телевизионному наблюдению, которое выполняется компьютерной системой при помощи телевизионной камеры кругового обзора в области, близкой к полусфере, т.е. в пространственном угле 360 градусов по азимуту и десятки градусов по углу места. Техническим результатом является увеличение разрешающей способности наблюдаемых раздельно фрагментов «кольцевого» кадра при помощи дополнительного фотоприемника, являющегося «прямоугольным» (матричным) сенсором, а также повышение степени интеграции телевизионной камеры. Результат достигается тем, что телевизионная камера имеет два сенсора: «кольцевой» и «прямоугольный» (матричный) фотоприемники, изготовленные по технологии комплементарных структур «металл-окисел-полупроводник» (КМОП), с размещением на их кристаллах необходимого электронного «обрамления». 2 з.п. ф-лы, 8 ил., 2 табл.

Формула изобретения RU 2 721 381 C1

1. Устройство компьютерной системы панорамного телевизионного наблюдения с повышенной разрешающей способностью, содержащее последовательно соединенные телевизионную камеру и сервер, являющийся узлом локальной вычислительной сети, к которому подключены два или более персональных компьютера, при этом в разъем расширения на материнской плате сервера установлена плата видео, согласованная по каналам ввода/вывода, управлению и питанию с шиной сервера, содержащая блок электронного вписывания изображения (БЭВИ), который осуществляет программным путем вложение (вставку) «кольцевого» кадра телевизионной камеры в «прямоугольный» растр компьютерного монитора, причем в режиме наблюдения панорамного сюжета полностью вход БЭВИ подключен к выходу блока оперативной памяти на кадр, а выход БЭВИ - к выходу «сеть» сервера; при этом телевизионная камера, формирующая «кольцевой» растр изображения, содержит последовательно расположенные панорамный объектив и «кольцевой» фотоприемник (сенсор), который содержит на мишени линейки светочувствительных пикселов, расположенных вдоль радиальных направлений от воображаемого центра кругового кольца к его внешней периферии, причем число светочувствительных пикселов в каждой «кольцевой» строке мишени одинаково, а их площадь от строки к строке различна, увеличиваясь по мере движения к внешней периферии сенсора, отличающееся тем, что «кольцевой» сенсор выполнен на кристалле, изготовленном по технологии комплементарных структур металл-окисел-полупроводник (КМОП), причем мишень сенсора состоит из фотодиодных активных пикселов, каждый из которых имеет усилитель с коэффициентом усиления Km, а также встроенный аналого-цифровой преобразователь (АЦП), обеспечивающий передачу видеосигнала активного пиксела на свою «радиальную» шину видео, при этом все они в совокупности объединяют активные пикселы мишени в «радиальные» столбцы, причем управление АЦП для пикселов, расположенных вдоль каждой «кольцевой» строки сенсора, осуществляется при помощи отдельно взятой «кольцевой» строчной шины, общее количество которых определяет число строк в сенсоре, а количество «радиальных» шин видео - число пикселов в каждой строке сенсора; при этом на общем кристалле «кольцевого» фотоприемника размещаются и блоки, выполняющие развертку и формирование на первом выходе «Видео» телевизионной камеры напряжения цифрового «кольцевого» видеосигнала, а именно: «кольцевой» регистр кадровой развертки, осуществляющий выбор «кольцевой» строки; «кольцевой» коммутатор видеосигналов, содержащий коммутаторы видеосигнала для каждого «радиального» столбца, которые управляются с соответствующего выхода «кольцевого» мультиплексора строчной развертки и обеспечивают передачу видеосигнала на выходе каждой «радиальной» шины видео на «кольцевую» шину видео, выход которой является выходом «Видео» фотоприемника, причем коэффициент усиления Km активного пиксела для каждой текущей «кольцевой» строки сенсора изменяется по соотношению:

где Δ1 и Δm - соответственно светочувствительная площадь активного пиксела для первой и текущей «кольцевой» строки считывания в «кольцевом» сенсоре, обеспечивая одинаковую величину считывающей апертуры в пределах всего «кольцевого» растра изображения, а в состав телевизионной камеры дополнительно введены матричный фотоприемник, установленный на блоке наведения, светоделитель, расположенный на выходе панорамного объектива, селектор синхроимпульсов, генератор электронной отметки и коммутатор-смеситель, выход которого является выходом «Видео» телевизионной камеры, при этом матричный фотоприемник, как и «кольцевой» сенсор, выполнен по технологии КМОП с аналогичной организацией по методу «координатная адресация», причем число его «прямоугольных» строк равно числу «кольцевых» строк у «кольцевого» сенсора, а коэффициент усиления Km активного пиксела для каждой текущей «прямоугольной»» строки мишени сохраняется постоянным и неизменным по величине; светоделитель, воспринимающий на входе выходное оптическое изображение панорамного объектива, обеспечивает формирование на первом выходе оптического изображения одного из фрагментов «кольцевого» кадра, проецируемого на мишень матричного фотоприемника, а на втором выходе - оптического изображения всего «кольцевого» кадра, проецируемого на мишень «кольцевого» фотоприемника; блок наведения осуществляет плавное пространственное перемещение матричного фотоприемника в пределах круга в положение, отмечаемое на изображении в режиме наблюдения панорамного сюжета полностью электронной отметкой, которая одновременно является геометрическим центром предлагаемого к рассмотрению отдельно взятого фрагмента «кольцевого» кадра, при этом управление блоком наведения выполняется по команде оператора системы с компьютера; управление режимом «Видео» тоже выполняется по команде оператора, которая подается на управляющий вход коммутатора-смесителя, первый информационный вход которого подключен к выходу «Видео» «кольцевого» фотоприемника, второй информационный вход коммутатора-смесителя - к выходу «Видео» матричного фотоприемника, а третий информационный вход коммутатора-смесителя - к выходу сигнала генератора электронной отметки, управляющий вход которого подключен к выходу датчика положения блока наведения; причем выход «Видео» «кольцевого» фотоприемника подключен к входу селектора синхроимпульсов, выход кадровых синхроимпульсов (КСИ) которого подключен к первому входу генератора электронной отметки и соответственно к входу синхронизации коммутатора-смесителя, выход строчных синхроимпульсов (ССИ) селектора синхроимпульсов - ко второму входу генератора электронной отметки, а выход смеси синхроимпульсов приемника (ССП) селектора синхроимпульсов - к входу внешней синхронизации матричного фотоприемника; в качестве сервера компьютерной системы используется системный блок одного из компьютерных пользователей.

2. Устройство компьютерной системы панорамного телевизионного наблюдения по п. 1, отличающееся тем, что в «кольцевом» фотоприемнике телевизионной камеры электроды зарядового накопления активных пикселов мишени сенсора, совпадающие с площадью их светочувствительной площади, выполнены с геометрической формой в виде части кругового кольца.

3. Устройство компьютерной системы панорамного телевизионного наблюдения по п. 1, отличающееся тем, что светоделитель телевизионной камеры содержит последовательно расположенные и оптически связанные полупрозрачное зеркало, коллективную линзу, отражающее зеркало и дополнительный объектив, причем вход светоделителя оптически связан с входом полупрозрачного зеркала, первый выход светоделителя - с выходом полупрозрачного зеркала, а второй выход светоделителя - с выходом дополнительного объектива.

Документы, цитированные в отчете о поиске Патент 2020 года RU2721381C1

Устройство компьютерной системы панорамного телевизионного наблюдения 2017
  • Смелков Вячеслав Михайлович
RU2665695C1
US 2007103543 A1, 2007.05.10
US 2008030611 A1, 2008.02.07
US 2004042783 A1, 2004.03.04
WO 2012029063A1, 2012.03.08
US 20060275025 A1, 2006.12.07
US 2013214371 A1, 2013.08.22
US 2006072020 A1, 2006.04.06
US 5262852 A, 1993.11.16
WO 2012068423 A2, 2012.05.24.

RU 2 721 381 C1

Авторы

Смелков Вячеслав Михайлович

Даты

2020-05-19Публикация

2019-08-12Подача