СПОСОБ ОБЪЕМНОГО ТЕЛЕВИДЕНИЯ Российский патент 2000 года по МПК H04N13/00 H04N15/00 

Изобретение относится к области телевизионной техники, а именно к телевизионным системам, в которых формируется, передается и воспроизводится объемное изображение объектов, например, для телевизионного вещания, медицинской диагностики, конструирования деталей машин, компьютерных игр, создания театральных эффектов и т.д.

Объемное телевидение (ОТВ) осуществляется следующими основными этапами:
- наблюдение объекта с разных ракурсов совокупностью передающих камер, формирующих единое поле видеосигналов, отражающих трехмерное состояние наблюдаемой сцены (объекта);
- кодирование этого поля видеосигналов в форме, оптимальной для последующей передачи (или записи);
- передачу, прием и декодирование сформированных видеосигналов;
- преобразование принятой видеоинформации в оптические поля ракурсов, наблюдаемые зрителем.

На каждом из этих этапов имеют место специфические трудности и технические противоречия, в частности:
- на этапе наблюдения необходимо видеть объект под различными углами, чтобы обеспечить в последующем зрителю, наблюдающему объемное изображение, широкий угол видения объекта с сочетанием плавности его оглядывания по вертикали и по горизонтали;
- на этапах формирования и кодирования сигналов от многочисленных ракурсов необходимо представление этих сигналов в форме, совместимой со стандартными телевизионными сигналами (видеосигналами);
- на этапе передачи (или записи) сигналов ОТВ, содержащих информацию о многочисленных ракурсах, желательно использовать стандартный телевизионный канал и стандартную записывающую аппаратуру;
- на этапе воспроизведения объемного изображения необходимо обеспечить восприятие каждым из зрителей только той пары ракурсов в совокупности цветовой и яркостной информации, которая соответствует расположению зрителя перед воспроизводящим экраном.

Вся совокупность этих трудностей и технических противоречий сводится к тому, что система ОТВ должна обеспечивать в реальном времени кодирование, передачу и воспроизведение объема видеоинформации, значительно превышающего таковой для существующих телевизионных стандартов. Все это приводит к усложнению всех звеньев системы ОТВ:
- необходимости использования широкой полосы частот в трактах записи, передачи, и воспроизведения;
- использования кодирующих и декодирующих устройств с высокой производительностью;
- использования устройств отображения с высоким линейным разрешением и высокой геометрической точностью воспроизведения для получения изображения как максимально соответствующего наблюдаемому объекту, так и сознательно деформируемому для обеспечения театральных эффектов.

Отметим, что попытки решения проблем системы ОТВ по частям к успеху не приводят. Для создания системы ОТВ, пригодной для широкого использования, необходим подход интегральной, в целом, ко всем этапам одновременно, ибо эти части взаимосвязаны и взаимообусловлены.

Известны способы ОТВ, в которых формируется, передается и воспроизводится изображение объектов в виде стереопары, состоящей из правого и левого полей, попадающих, соответственно, в правый и левый глаза зрителей при помощи специальных стереоскопических очков [1,2]. Такое решение проблемы ОТВ, (главным образом, за счет этапов наблюдения, кодирования и воспроизведения) приводит к неудобству восприятия из-за необходимости использовать специальные средства - очки.

Известны способы ОТВ без использования стереоскопических очков, заключающиеся в том, что объект, изображение которого надо передать на расстояние, наблюдают из двух разных точек (ракурсов), разнесенных в горизонтальном направлении, и образуют две совокупности электрических сигналов (кадры, или поля стереопары); поля стереопары передают по каналу связи, а на воспроизводящем конце канала связи обеспечивают попадание левого и правого полей в соответствующие глаза зрителя, для чего учитывают азимутальные координаты глаз и дальность зрителя от экрана воспроизводящего устройства, которые определяют, например, методом оптической локации [3], ультразвукового зондирования [4] и иными методами [5].

Устройства воспроизведения системы ОТВ могут использовать воспроизводящий экран с обтюратором, выполненный, например, на основе жидко-кристаллической матрицы [6] , линзового растра [7], линзы "мушиный глаз" [8] или иным образом.

Решение проблемы ОТВ, (в основном, за счет этапов формирования и воспроизведения) приводит к недостатку, заключающему в том, что воспринимается лишь сформированная стереопара, без возможности воспроизведения объемного изображения для многих ракурсов, т.е. без возможности плавного оглядывания изображения зрителем. Общим недостатком всех этих способов [3-8] является низкое качество получаемого объемного изображения и несовместимость со стандартными телевизионными сигналами, что делает практически невозможным широкое бытовое использование названных способов.

Известен способ ОТВ, включающий наблюдение объекта совокупность передающих камер, число которых две и более, размещенных эквидистантно, формирование видеосигналов, содержащих информацию об объемном изображении, посредством тактирования и коммутации сигналов передающих камер, передачу и прием сформированных видеосигналов, преобразование принятых видеосигналов в оптическое изображение с учетом координат зрителя относительно центра экрана [9, прототип]. Конкретно, известное решение заключается в том, что:
- наблюдаемый объект рассматривают с разных точек зрения (ракурсов), число которых два и более, посредством передающих камер, расположенных эквидистантно с постоянной конвергенцией оптических осей соседних передающих камер;
- на этапе формирования образуют две совокупности тактированных видеосигналов, соответствующие двум выбранным ракурсам, а выбор их задается сигналами устройства, определяющего положение глаз зрителя;
- в канал связи передают только указанные две совокупности тактированных видеосигналов, соответствующих выбранным ракурсам;
- на этапе воспроизведения формируют два оптических изображения, в которых каждый элемент (пиксель) смещен по горизонтали экрана на величину, связанную с глубиной его положения в изображении, и осуществляют распределение световой информации в направлении глаз зрителя.

В способе [9], можно считать, наметился правильный подход к комплексному решению проблемы ОТВ, однако в нем еще четко не сформулированы основные требования к системе ОТВ, что, по-видимому, и привело к созданию системы, обладающей низкими потребительскими качествами, в частности:
- система ОТВ, использующая способ [9] не может работать в режиме записи, так как она использует координаты участника системы ОТВ - конкретного зрителя, вводимые в систему на этапе формирования передаваемого видеоизображения;
- система ОТВ, использующая способ [9] позволяет воспроизводить только те поля ракурсов, которым соответствуют направления оптических осей передающих камер, поскольку на этапе воспроизведения никакой обработки видеосигналов не производится;
- требование плавности оглядывания изображения в широком угле обзора приводит к необходимости использования большого числа передающих камер (1000 и более передающих камер), что значительно усложняет и удорожает систему; поэтому представляется целесообразным использовать не более 2 - 3 десятков передающих камер;
- увеличение числа зрителей требует пропорционального изменения полосы пропускания тракта передачи системы и усложняет приемные устройства.

Таким образом, технические решения типа [9] имеют высокую стоимость передающих и приемных устройств и обладают высоким качеством объемного изображения, обусловленного тем, что общее число ракурсов наблюдения и воспроизведения мало, практически не более 20.

Техническим результатом предложенного решения является достижимость свойственного человеку восприятия объемного изображения с возможностью оглядывания объекта в широком (около стерадиана) угле обзора, при плановом оглядывании (с небольшим отличием углов ракурсов, например, 10 угловых минут как по вертикальному, так и по азимутальному измерениям) при отсутствии искажения пропорций и перспективы в изображении наблюдаемого объекта.

Техническим результатом предложенного решения является также обеспечение возможности передачи объемных изображений по обычным моноскопическим телевизионным каналам и каналам связи (например, по каналу, удовлетворяющему стандартам PAL, SECAM, NTSC).

Техническим результатом предложенного решения является также возможность совмещения сформированных сигналов объемного изображения со стандартными сигналами телевизионного вещания (например, с сигналами как в существующих стандартах PAL, SECAM, NTSC).

Техническим результатом предложенного решения является также возможность управления объемным изображением и получения специфических эффектов (наплыв, удаление, регулирование размеров наблюдаемого изображения объекта, различных для разных осей координат и др.), что необходимо для решения задач конструирования, театральных эффектов, а в будущем может обеспечить потенциальную возможность создания интерактивных устройств ОТВ.

Техническим результатом предложенного решения является также возможность записи изображения наблюдаемого объекта независимо от координат и количества будущих зрителей при воспроизведении записанной информации. В частности, для записи объемного изображения возможно использование стандартной записывающей аппаратуры.

Указанный технический результат предложенного решения достигается за счет того, что принципиально по новому осуществляются все четыре этапа: наблюдение, формирование, передача (запись) и воспроизведение объемного изображения.

Технический результат предложенного решения достигается:
- особым размещением передающих камер при наблюдении ракурсов,
- получением специфической структуры тактированных видеосигналов в виде единого базового кадра, в котором учитывается расположение элементов наблюдаемого объекта в пространстве;
- передачей по телекоммуникационным цепям (и записью на носитель) только базового кадра;
- особым воспроизведением изображения, когда положение воспроизводимых пикселей определяется как записанными пространственными координатами элемента в базовом кадре, так и положением глаз зрителя.

А конкретно:
- наблюдение объекта осуществляют группами передающих камер, расположенных с учетом параметров телевизионного сигнала и последующих возможных положений зрителя;
- на этапе формирования формируют базовый кадр, отражающий пространственное расположение элементов наблюдаемого объекта и представляющий собой совокупность тактированных сигналов, состоящих из адресной и информационной частей, где:
- информационная часть отражает яркость и цветность элементов наблюдаемого сигнала;
- адресная часть - порядок следования сигналов в базовом кадре; при этом в адресную часть вводят сигнал о дальности элемента объекта, для чего:
- последовательно, в заданном порядке и на заданный интервал времени периодически, с периодами как кадровой, так и строчной разверток, включают группы передающих камер;
- в каждой группе передающих камер одну из них принимают за основную, а остальные - за дополнительные; во время работы данной группы передающих камер видеосигналы основной передающей камеры задерживают на различные интервалы времени, кратные длительности такта;
- такт задержки равен длительности сигнала, описывающего элемент объекта;
- видеосигналы дополнительных передающих камер, в группе попарно сравнивают с задержанными видеосигналами основной передающей камеры;
- определяют дальность, как параметр, связанный с номером такта задержки видеосигналов основной передающей камеры, на котором произошло совпадение сравниваемых сигналов;
- добавляют сигналы дальности к видеосигналам основной передающей камеры, причем определенной группе сигналов основной передающей камеры присваивается одинаковая дальность;
- передачу сигналов ОТВ сводят к передаче сигналов базового кадра;
- при воспроизведении для каждого зрачка зрителя преобразуют только адресную часть сигналов базового кадра, учитывая при этом положение каждого зрителя и сигналы дальности группы элементов базового кадра;
- оптические изображения соответствующих ракурсов объекта формируют в направлении зрачков каждого зрителя.

Формулировку технического решения, приведенного выше в обобщенном виде, целесообразно детализировать на ряд конкретных направлений.

В первую очередь такую детализацию проведем по отношению к этапу наблюдения, где размещение передающих камер в пространстве желательно связать с периодичностью их включения.

Наиболее оптимально установить такую связь в следующем варианте:
- элементарные телесные углы, соответствующие различным элементам объекта, воспринимаемым каждой из передающих камер, одинаковы;
- передающие камеры находятся на одинаковом расстоянии от центральной точки A, выбранной в пространстве наблюдаемого объекта (сцены);
- входные зрачки всех передающих камер располагают на сферической поверхности с центром в точке A, на линиях, подобных направлению строчной развертки передающих камер; в частности, при линейной строчной развертке оптические оси части групп передающих камер располагают в центральной плоскости, содержащей точку A и направлены в эту точку; их входные зрачки располагают на окружности с центром в точке A;
- передающие камеры располагают группами, число передающих камер в группе выбирают равным 2 или 3, одна из передающих камер - основная, остальные - дополнительные, при этом:
- одну из групп передающих камер, расположенную в центральной плоскости, назовем базовой группой, все остальные группы передающих камер назовем группами ракурсов;
- входные зрачки групп ракурсов передающих камер располагают как в центральной плоскости, так и на основании конусов с вершиной в точке A, образованных сечением сферической поверхности с центром в точке A плоскостями, параллельными центральной плоскости;
- оптические оси передающих камер в одной группе располагают на одной конической поверхности с постоянным наклоном к центральной плоскости и направляют их в точку A; (при небольших углах наклона, конические поверхности можно заменить на наклонные плоскости),
- группы передающих камер располагают на определенных конических поверхностях (плоскостях), образующая которых имеет индивидуальный наклон к центральной плоскости;
- строчные и кадровые развертки передающих камер синхронизированы между собой;
- моменты старта строчных и кадровых разверток всех передающих камер внутри одной группы совпадают во времени;
- последовательность сигналов передающих камер, в том числе обе развертки (строчная и кадровая) в разных группах осуществляют с заданной относительной задержкой, зависящей от пространственного расположения этих групп.

- кроме того, должны быть выполнены следующие условия:
δ = D/L = B/Lo; (1)
а) при небольших углах оглядывания, значительно меньших поля зрения основной передающей камеры базовой группы, когда для передачи сигналов ОТВ используется стандартный телевизионный канал:
(Σε_i)/θ ≤ T_cк/T_рк; (2)
(Σβ_i)/ϕ ≤ T_нc/T_pc; (3)
б) при больших углах оглядывания, соизмеримых с полем видения основной передающей камеры базовой группы, когда для передачи сигналов ОТВ используется дополнительный телевизионный канал:
(Σε_i)/θ ≤ (T_к/T_cл)/T_pк; (4)
(Σβ_i)/ϕ ≤ (T_c/T_cc)/T_pc; (5)
где δ - угол между оптическими осями соседних передающих камер в группе (конвергенция), рад;
Σε_i - угол оглядывания изображения зрителем по вертикали, рад,
ε_i - угол в азимутальном измерении между основными передающими камерами, в соседних группах, рад;
Σβ_i - угол оглядывания изображения зрителем по азимуту, рад;
β_i - угол в вертикальном измерении между основными передающими камерами в соседних группах, рад;
θ - угол, под которым основная передающая камера базовой группы видит объект по вертикали, рад,
ϕ - угол, под которым основная передающая камера базовой группы видит объект по азимуту, рад,
B - расстояние между глазами зрителя, м;
D - расстояние между основной и дополнительными передающими камерами, м;
L - расстояние от передающих камер до точки A, выбранной, как указано ранее, в пространстве наблюдения объекта, м;
L₀ - заданное стандартное расстояние от центра воспроизводящего экрана до базовой точки 0, выбранной в зоне наблюдения объемного изображения, м;
T_рс- часть периода строчной развертки, занятая воспроизводством видеоинформации, с;
T_нс - часть периода строчной развертки, не занятая воспроизводством видеоинформации и служебными сигналами, с;
T_рк - часть периода кадровой развертки, занятая под воспроизводство видеоинформации в стандартном телевизионном кадре, с;
T_ск - часть периода кадровой развертки, свободная от воспроизводства видеоинформации и передачи служебных сигналов в стандартном телевизионном кадре, с;
T_сл - часть периода кадровой развертки, занятая служебными сигналами, с;
T_сс - часть периода строчной развертки, занятая служебными сигналами, с;
T_к - период кадровой развертки, с;
T_с - период строчной развертки, с;
Выражение 1 описывает пространственные соотношения в системе ОТВ при правильной передаче продольной и двух поперечных пропорций наблюдаемого объекта в соответствующие пропорции объемного изображения. При этом поверхность воспроизводящего экрана выполняет роль поверхности, в которой находится точка A при наблюдении объекта; все точки объекта, лежащие между передающими камерами и поверхностью, содержащей точку A, при воспроизведении объемного изображения воспринимаются зрителем, как точки, выступающие из воспроизводящего экрана, а все точки за этой поверхностью воспринимаются как лежащие за экраном.

Для правильной работы системы ОТВ выражение 1 необходимо использовать совместно с выражениями 2 и 3 при малых углах оглядывания и совместно с выражениями 4 и 5 при больших углах оглядывания. Выражения 2 - 5 определяют цикличность включения групп передающих камер. В выражениях 2 - 5 знак ≤ (меньше или равно) указывает условие обеспечения плавности оглядывания зрителем объемного изображения. Если нарушить эти соотношения, то появятся скачки ракурсов при оглядывании, из-за несоответствия угла оглядывания группами ракурсов и времени, которое отведено в телевизионном кадре на передачу информации о дополнительных ракурсах, проявляющихся в углах оглядывания Σε_i и Σβ_i. В частном случае, при Σε_i = Σβ_i = 0 в выражениях 2 и 3 (работает лишь одна базовая группа передающих камер) оглядывания не будет ни по азимуту, ни по вертикали.

При расчетах целесообразно использовать величину B, усредненную для всех зрителей как 64•10^-3 м = 2⁶ мм, что с одной стороны, близко к средней величине расстояния между глаз человека (В=65 мм), а с другой стороны, удобно для всех вычислений в двоичном коде; конкретизация величины B для реального зрителя не внесет существенного уточнения и улучшения способа.

Соотношения 1-3 пригодны для любого телевизионного стандарта. При переходе от одного стандарта к другому изменятся лишь конкретные величины T_ск, T_рк, T_нс и T_рс, соответствующие примененному стандарту. При этом достижимые углы оглядывания объемного изображения не могут быть произвольно широкими. Если, например, угол видения основной камеры базовой группы составляет 60^o по азимуту и по вертикали, и время, свободное от передачи видеоинформации стандартным телевизионным сигналом занимает 10% от периода строки и 10% от периода кадра, то угол оглядывания не превысит 6^o как по азимуту, так и по вертикали. Однако этого вполне достаточно, чтобы зритель, находясь в комфортных условиях, например, сидя перед телевизором объемного изображения, смог, при наклонах корпуса, воспринимать объемное изображение во всем многообразии его ракурсов. Общее количество воспринимаемых им ракурсов может превышать 1000 при обеспечении плавности оглядывания (угол между соседними ракурсами не превышает 10 углю мин).

Для передачи сигналов ОТВ, обеспечивающих оглядывание в большем телесном угле, например, соизмеримом со стерадианом, потребуется использовать дополнительный телевизионный канал, при этом необходимо использовать соотношения 4 и 5, либо использовать телевизионный канал с расширенной полосой пропускания.

Если точку A выбирают в бесконечности (камеры располагают так, что их оптические оси параллельны), то угол конвергенции (угол δ) равен нулю.

Если в группе камер, (как в базовой, так и в группе ракурсов) используют две передающие камеры, то их располагают параллельно направлению строчной развертки.

Если в группе камер, (как в базовой, так и в группе ракурсов) используют более двух передающих камер, то их располагают на линии, подобной траектории строчной развертки передающих камер. (Если строчная развертка прямолинейна, как в существующих стандартных передающих камерах, то расположение передающих камер в группе параллельно направлению строчной развертки; если строчная развертка в каждой камере группы криволинейна, например спиральная, то расположение передающих камер в группе должно быть подобным направлению строчной развертки этих передающих камер в той ее части периода, когда данная группа передающих камер включена).

Подключение каждой группы передающих камер производят периодически: за полное время кадра каждая из групп передающих камер включается на определенный период, составляющий определенную часть периода как строчной, так и кадровой разверток. Базовая группа включается с периодичностью и на время, равное периодичности и времени передачи видеоинформации в стандартном телевизионном сигнале, остальные группы передающих камер включаются в последовательности, соответствующей их пространственному положению. Включение всех передающих камер внутри группы производят одновременно: включение групп передающих камер, расположенных на разных конических поверхностях (или плоскостях), производят синхронно с кадровой разверткой, а включение групп передающих камер, расположенных на одной конической поверхности (или в одной плоскости) производят синхронно со строчной разверткой.

Целесообразно оптимизировать и этап формирования базового кадра. На этом этапе можно разделить поле базового кадра на равные многоугольники с числом сторон b≥3 и каждому i-му многоугольнику поставить в соответствии одно и то же дискретное значение дальности. Для определенности, в дальнейшем будет полагать b= 4 форма многоугольника - прямоугольник, содержащий K•L элементов базового кадра; здесь
K≥1 - число элементов в прямоугольнике вдоль строки,
L≥1 - число строк, занимаемых прямоугольником.

Отметим, что адресное пространство базового кадра значительно превосходит требуемое для воспроизводства обычного телевизионного кадра, поскольку в нем, помимо элементов объекта, видимых из базовой точки 0, должны быть записаны также элементы, хотя и невидимые из базовой точки 0, но видимые из других, боковых ракурсов, необходимых для осуществления оглядывания объемного изображения.

Также отметим, что дополнительная информация о дальности прямоугольников с K•L элементами по объему значительно меньше, чем информация, передаваемая стандартным телевизионным сигналом. Пусть, например, система ОТВ различает 32 плана (что соответствует высокому качеству объемного изображения). Тогда на группу из KxL стандартных элементов базового кадра нужно один раз передать 5 двоичных разрядов, полностью описывающих поле дальностей элементов. Если, например, K=L=4, то дополнительно к каждому элементу стандартного телевизионного изображения необходимо передать 5/32=0,16 бита дополнительной информации. Такую незначительную по объему информацию можно передать, например, методом квадратурной модуляции стандартного сигнала с поднесущей, расположенной в более низкочастотной области спектра (например, на частоте 1,5 МГц), чем поднесущая цветоразностного сигнала.

При воспроизведении осуществляют преобразование адресной части прямоугольников базового кадра, причем производят одно и то же изменение адресов всех KxL элементов внутри i-го прямоугольника без изменения их взаимного расположения. Например, если точки P и Q находятся внутри одного и того же i-го прямоугольника, то после преобразования адресов их взаимное расположение на плоскости воспроизводящего экрана не изменится. Если же другие точки R и S находятся внутри различных (j-го и k-го) прямоугольников, то возможны два варианта:
- если дальности, присвоенные этим прямоугольникам, одинаковы, то их взаимное расположение на плоскости воспроизводящего экрана также сохранится,
- если дальности, присвоенные этим прямоугольникам, отличаются, то их взаимное расположение на плоскости воспроизводящего экрана после пересчета адресов, вообще говоря, изменится.

Преобразование координат для каждого ракурса и образование соответствующих видеостраниц производится по следующим правилам:
- преобразуются координаты прямоугольников базового кадра за исключением тех, которым присвоен нулевой номер плана (прямоугольники, имеющие нулевой номер плана при записи расположены в плоскости, содержащей выбранную точку A, а при воспроизведении они расположены в плоскости изображающего экрана);
- последовательность преобразования координат базового кадра учитывает номер плана, преобразование начинается с самого удаленного и заканчивается самым ближним к зрителю планом;
- в видеостраницу данного ракурса попадают прямоугольники, имеющие адреса, не выходящие за пределы разрешенных адресов изображающего экрана.

Таким образом, преобразование координат прямоугольников базового кадра в соответствии с положением зрителя, осуществляемое на этапе воспроизведения объемного изображения позволяет отделить этап формирования базового кадра от положения зрителя, то есть появляется возможность записи объемного изображения в предлагаемой системе ОТВ, инвариантного к положению зрителя. Возможности такой записи в других, ранее известных системах ОТВ, не существовало.

Дальнейшую конкретизацию и, соответственно, оптимизацию предложенного способа целесообразно проводить, учитывая конкретное устройство изображающего экрана.

Пусть в устройстве воспроизведения используется плоский воспроизводящий экран, выполненный, например, на основе жидких кристаллов [6]. Этот экран можно представить состоящим из MxN прямоугольников, каждый i-прямоугольник содержит KxL элементов и имеет координаты центра X_io и X_io.

При наблюдении из базовой точки O(O,O,Z_o) этот i-прямоугольник отображает определенную выше группу из K•L элементарных сигналов базового кадра. Например, трехмерный элемент объемного изображения W(X_w, Y_w, Z_w) проецируется из базовой точки O в точку C_o(X_wo, Y_wo, O). Базовый кадр в совокупности передаваемой информации содержит координаты передаваемых элементов (точек), в том числе содержит координаты точки C_o(X_wo, Y_w0, O). Рассматриваемый i-прямоугольник при наблюдении его из произвольной точки V(X_v, Y_v, Z_v) проецируется в другое место экрана, а его центр будет иметь координаты X_iv, и Y_iv. Точка C_o(X_wo, Y_wo, O), не меняя своего относительного положения внутри i-го прямоугольника сместится по поверхности экрана в точку C_v(X_wv, Y_wv, O).

Преобразование координат точки C_o при ее перемещении в точку C_v осуществляют в соответствии с выражениями:
X_wv=(Z_vX_wo(Z_o-Z_w) -X_vZ_wZ_o)/(Z_v(Z_o-Z_w)) (6)
Y_wv=(Z_vY_wo(Z_o-Z_w)- Y_vZ_wZ_o)/(Z_v(Z_o-Z_w) (7)
где
X_v, Y_v и Z_v - координаты одного зрачка зрителя (точки V);
X_wo и Y_wo - координаты проекции точки W(X_w, Y_w, Z_w) из базовой точки O на информационный экран;
X_w,Y_w и Z_w - пространственные координаты точки W(X_w,Y_w,Z_w) объекта;
O, O, Z_o - координаты базовой точки O.

Так как все точки внутри, например, i-го прямоугольника получают одинаковое смещение, равное ΔX_i и ΔY_i, то и его центр сместится на ту же величину, т.е.:
X_iv-X_io=X_wv-X_wo= Δ X_i - по горизонтали и
X_iv-Y_io=Y_wv-Y_wo= Δ Y_i - по вертикали.

Величину Z_o, для облегчения последующих вычислений, целесообразно выбрать кратной размерам пикселя (Xⁿ) использованного изображающего экрана вдоль оси OX. Желательно использовать кратность, равную 2048=2¹¹, так как это близко к оптимальной дальности наблюдения зрителем объемного изображения, например, для экрана 21'' (500 мм) и размера пикселя 0,66 мм.

Z_o=Xⁿ•2¹¹ м =1,35 м.

При таком выборе базовой точки для данного изображающего экрана, алгоритм управления изображением ракурсов будет упрощен и инвариантен к размерам экрана.

При наличии нескольких зрителей измеряется положение каждого из них и для каждого зрителя формируют свою индивидуальную пару оптических изображений (полей). Поэтому, в случае N зрителей преобразование координат X_io и Y_io для каждого прямоугольника осуществляется 2N раз. В частном случае, можно координату Y_io не преобразовывать, тогда вертикальный ракурс будет совпадать с базовым для всех зрителей, а оглядывание изображения будет осуществляться только по азимуту.

Если изображающий экран выполнен иным способом (например, [7, 8]), то преобразования для Y_iv производят также 2N раз, но вид выражений (6), (7) будет иным, в соответствии с примененным экраном. Вывод формул, аналогичных (6), (7), не представляет особых затруднений.

Для изображающего экрана, типа указанного выше [6], световые пучки формируют в соответствии с принципом действия этого экрана, (например, посредством обтюратора, образующего M пар прозрачных вертикальных щелей, и перемещающего эти щели синхронно с M•2N светоинформационными столбцами на информационной матрице); при этом должны выполняться условия наблюдения объемного изображения, а именно:
- положение центра щелей (X_jo) определяется из выражения:

- расстояние (Δ) между щелями в паре:
Δ = 2•(Z_v•d-l_o•B)/(Z_v+l_o), (9)
- смещение центра рабочей зоны обтюрационной панели ( δ X_vo) при перемещении зрителей по горизонтали:
δX_v0 = l₀•tgα₀, (10)
где X_j - горизонтальная координата J-го светоинформационного столбца,
l_o - расстояние между информационной матрицей и обтюрационной панелью,
d - шаг развертки информационной матрицы,
X_v и Z_v - азимутальная координата и дальность переносицы зрителя, соответственно,
α_j - горизонтальная компонента текущего пространственного угла между глазом зрителя и j-м светоинформационным столбцом с координатами (X_j,O),
α₀ - горизонтальная компонента пространственного угла между осью Z и прямой, соединяющей переносицу зрителя с центром обтюрационной панели,
Выражения (8) - (10) представляют собой алгоритм связи кадровых разверток информационной матрицы и обтюрационной панели, включая их взаимную первоначальную установку.

Отметим, что если в выражении (9) хотя бы приблизительно выполняется равенство:
Z_v•d=l_o•B
то вершина Δ (расстояние между щелями в паре) равна нулю, то есть пара щелей выражается в одну щель. Это выгодное условие наблюдения и его целесообразно использовать. Для этого предлагается рекомендовать зрителям наилучшую дистанцию наблюдения объемного изображения):
Z_v=Z_o=Xⁿ•2¹¹ м,
а отношение l_o/d выбрать равным:
l_o/d=Xⁿ•2¹¹/B
Отметим также, что если число зрителей более одного, то для этапа воспроизведения изображения возможны два варианта:
вариант 1 - зрители расположены примерно на одной дальности Z_v от изображающего экрана, тогда возможно параллельно воспроизводить все пары (всего 2N) изображений ресурсов);
вариант 2 - зрители расположены на существенно разных дальностях Z_v изображающего экрана, тогда возможно, например, поочередное воспроизведение пар изображений ресурсов, что требует в N раз большего быстродействия воспроизводящего экрана.

Приведенные математические выражения (8) - (10) справедливы для одной конкретной конфигурации воспроизводящей оптической системы [6], которая, по мнению автора, является предпочтительной. Для заключительного этапа предложенного способа возможно использование и других средств формирования оптического изображения (например, [7, 8]). В таком случае, математические выражения (8) - (10) изменятся, но могут быть выведены без особых затруднений, не изменяя сути предложенного технического решения.

Понятно, что предложенное решение позволяет заменить этапы передачи и приема на этап записи и последующего воспроизведения записанной информации, так как координаты зрителя при записи не используются; в отличие от прототипа [9] координаты зрителя учитываются только на этапе воспроизведения.

Предложенное техническое решение возможно выполнить как посредством цифровой техники, так и аналоговой техники без принципиального изменения сути изображения.

Сущность предложенного решения дополнительно иллюстрируется фиг. 1 - 25, на которых изображены:
Фиг. 1 - функциональная схема (последовательность операций) известного технического решения [9].

Фиг. 2 - функциональная схема (последовательность операций) предложенного способа.

Фиг. 3 - вариант расположения передающих камер общий как для предлагаемого, так и для известного технического решения [9], обеспечивающий оглядывание объемного изображения по азимуту.

Фиг. 4 - вариант расположения передающих камер общий как для предлагаемого, так и для известного по азимуту, когда точка A расположена в бесконечности.

Фиг. 5 - обобщенная блок-схема устройства, реализующего предложенный способ.

Фиг. 6 - расположение передающих камер на этапе наблюдения при числе групп передающих камер, равном трем, и числе передающих камер в каждой группе, равном трем (оглядывание объемного изображения только по азимуту).

Фиг. 7 - общий случай расположения передающих на этапе наблюдения, обеспечивающих оглядывание объемного изображения в больших углах как по азимуту, так и по вертикали, при числе групп передающих камер, равном двадцати пяти (число передающих камер в каждой группе не конкретизируется).

Фиг. 8 - допустимое расположение передающих камер на этапе наблюдения, обеспечивающее оглядывание объемного изображения как по азимуту, так и по вертикали в пределах небольших углов (меньших ±0,1 радиана), при числе групп передающих камер, равном девяти, и числе передающих камер в каждой группе, равном трем.

Фиг. 9 - временная диаграмма для последовательности включения передающих камер при равномерном расположении по азимуту девяти передающих камер (по фиг. 3, 4).

Фиг. 10 - временная диаграмма включения девяти передающих камер, объединенных в три группы (по фиг. 3, 4 и 6), обеспечивающая совместимость передаваемых сигналов со стандартными телевизионными сигналами и оглядывание объемного изображения по азимуту; T₁ и T₄ - неиспользуемые для записи базового кадра части периода строчной развертки передающих камер; T₂ и T₃ - используемые для записи базового кадра части периода строчной развертки передающих камер.

Фиг. 11 - временная диаграмма включения двадцати пяти групп передающих камер в течение длительности строки, (по фиг. 7), обеспечивающая оглядывание объемного изображения по азимуту и совместимость сигналов ОТВ со стандартными телевизионными сигналами.

Фиг. 12 - временная диаграмма включения пяти слоев (по пять групп передающих камер в слое) в течение времени кадра, (по фиг. 7), обеспечивающая оглядывание объемного изображения по вертикали и совместимость сигналов ОТВ со стандартными телевизионными сигналами.

Фиг. 13 - временная диаграмма включения двадцати пяти групп передающих камер в течение длительности строки, (по фиг. 7), обеспечивающая оглядывание объемного изображения в больших углах по азимуту и использующая для передачи базового кадра дополнительный стандартный телевизионный канал.

Фиг. 14 - временная диаграмма включения двадцати пяти групп передающих камер в течение длительности кадра, (по фиг. 7), обеспечивающая оглядывание объемного изображения в больших углах по вертикали и использующая для передачи базового кадра дополнительный стандартный телевизионный канал.

Фиг. 15 - поля обзора, передаваемые базовым кадром (A, B, C, D) для передающих камер, расположенных по фиг. 6, базовой группой передающих камер (a, b, c, d) и поля обзора (A, B, b, a) и (d, c, C, D), передаваемые двумя группами ракурсов.

Фиг. 16 - поля обзора, передаваемые базовым кадром (A, B, C, D), стандартным телевизионным кадром (a, b, c, d) и поля обзора, передаваемые двадцатью пятью группами передающих камер в одном из планов; расположение передающих камер по фиг. 7; поле обзора каждой i-группы передающих камер показано соответствующей цифрой; здесь:
a_nr, b_nr,c_nr,d_nr - границы воспроизводимого поля в ближнем плане для левого глаза зрителя;
a_nl, b_nl, c_nl, d_nl - границы воспроизводимого поля в ближнем плане для правого глаза зрителя;
a_fr, b_fr,c_fr,d_fr - границы воспроизводимого поля в дальнем плане для левого глаза зрителя;
a_fl, b_fl, c_fl, d_fl - границы воспроизводимого поля в дальнем плане для правого глаза зрителя;
Фиг. 17 - смещение поперечных границ поля видения в зависимости от номера плана для произвольного положения зрителя V(X_v,Y_v,Z_v), вид сверху, здесь;
- L_oR_o - плоскость изображающего экрана;
- A точка в центре наблюдаемой сцены;
- O базовая точка при наблюдении изображения;
- O_L и O_R левая и правая точки восприятия, соответствующие крайнему левому и крайнему правому расположению зрачков основных передающих камер на этапе записи объемного изображения;
- V точка произвольного положения глаза зрителя в пределах угла оглядывания;
- линии, параллельные L_oR_o - плоскости расположения элементов изображения (планы),
сплошные линии - области плана, видимые из базовой точки, пунктирные линии - области плана, которые можно увидеть из других точек сектора обзора;
- V_iL, V_iR - левая и правая границы i-плана, видимые из точки V, соответственно;
- l_i, r_i - левая и правая границы i-плана, записанные в базовом кадре и воспроизводимые системой ОТВ;
- l_oi, r_oi - левая и правая границы i-плана, видимые из базовой точки O.

Фиг. 18 - поле обзора, передаваемое базовым кадром в ближнем плане
(A_n, B_n, C_n, D_n), в данном плане (A_f, B_f, C_f, D_f) и плоскость экрана устройства воспроизведения (Mo, Ro, Lo, No),
a_nc, b_no, c_no, d_no - границы воспроизводимого поля в ближнем плане для базовой точки O;
a_nv, b_nv, c_nv, d_nv - границы воспроизводимого поля в ближнем плане для произвольной точки V;
a_fo, b_fo, c_fo, d_fo - границы воспроизводимого поля в дальнем плане для базовой точки O;
a_fv, b_fv, c_fv, d_fv - границы воспроизводимого поля в дальнем плане для произвольной точки V.

Фиг. 19 - формат машинного слова, определяющего элемент базового кадра при цифровом способе представления элемента базового кадра.

Фиг. 20 - спектр сигналов базового кадра при аналоговом способе представления элемента базового кадра.

Фиг. 21 - функциональная схема операции формирования базового кадра.

Фиг. 22 - оптическая схема блока воспроизведения в варианте воспроизводящего экрана с обтюрационной панелью и информационной матрицей.

Фиг. 23 - оптическая схема, поясняющая преобразование адресов пикселей с учетом координат зрителя в варианте воспроизводящего экрана с обтюрационной панелью и информационной матрицей (к выводу выражений 6 и 7).

Фиг. 24 - оптическая схема, поясняющая преобразование координат щелей на обтюрационной панели с учетом координат зрителя в варианте воспроизводящего экрана с обтюрационной панелью на жидких кристаллах и информационной матрицей.

Фиг. 25 - пример расположения прямоугольников базового кадра (сплошные контуры), смещение точек P и Q, расположенные внутри одного прямоугольника, после преобразования адресов базового кадра в поле ракурса, а также смещение точек R и S, расположенных в разных прямоугольниках после такого преобразования (пунктирные контуры).

Фиг. 1, 3, 4 и 5 отражают черты технического решения, общие как для известного способа [9], так и для предложенного. Все остальные фигуры относятся только к предложенному решению. Как видно из сравнения функциональных схем операций а также рисунков 3-12 в прототипе (фиг. 1) и в предложенном способе (фиг. 2), даже в общих по названию операциях: "размещение передающих камер", "выделение текущих ракурсов", "передача информации", "воспроизведение ракурсов", сами эти операции проводятся по-разному:
- в операции "размещение передающих камер" в прототипе подразумевается лишь равномерное расположение передающих камер с постоянной конвергенцией соседних передающих камер; в предложенном решении передающие камеры размещаются группами, а величины конвергенции и расстояния между соседними передающими камерами равны только внутри этих групп;
- в операции "выделение текущих ракурсов" в прототипе производится включение только той пары передающих камер, которая соответствует положению зрителя, а при передаче информации в течение длительности кадра переключение передающих камер не производится; в предложенном способе производится периодическое включение каждой из передающих камер в течение длительности кадра, а при формировании передаваемых сигналов не учитываются координаты зрителя, как это имеет место в прототипе;
- операция передачи видеоинформации также осуществляется по-разному; в известном решении передается стереопара, в предложенном - базовый кадр;
- операция воспроизведения видеоинформации (изображения ракурсов) также различается:
- в прототипе воспроизводятся сигналы стереопары, соответствующей положению зрителя;
- в предложенном решении формируются новые адреса пикселей с учетом как переданной информации, так и измеренных координат зрителей; координаты зрителя в прототипе учитываются только лишь для формирования оптических пучков и выделения текущих ракурсов стереопары; в предложенном решении эти координаты используются как для формирования оптических пучков, так и для формирования полей ракурсов из принятых сигналов базового кадра.

Кроме того, в предложенном решении добавлены новые операции:
- задержки сигналов и их сравнения с целью определения дальности участков - операции, необходимые для формирования базового кадра, отсутствующей, как таковой, в прототипе;
- преобразование адресов пикселей базового кадра в зависимости от положения зрителя.

Именно эти черты предложенного решения позволяют, в отличие от прототипа, не только воспроизведение в реальном времени, но и запись объемного изображения.

Как видно из сравнения фиг. 3, 4 и фиг. 6 - 8, отображающих размещение передающих камер (направление их оптических осей на рисунках изображено стрелками) как в известном, так и в предложенном решении, по-разному осуществляют размещение и цикличность работы передающих камер на этапе наблюдения. У прототипа передающие камеры располагают по дуге или в линейку (см. фиг. 3 и 4) на равном расстоянии друг от друга и с одинаковой конвергенцией оптических осей соседних передающих камер. В течение по крайней мере периода кадра работает пара соседних передающих камер; остальные передающие камеры в течение этого кадра отключены, их подключение зависит от положения зрителя.

В предложенном решении передающие камеры располагают либо по дуге, либо в линейку, либо на сферической поверхности, при этом допускают как равномерное (фиг. 3 и 4), так и неравномерное расположение передающих камер (фиг. 6 - 8). Но в любом случае передающие камеры объединяют в группы по две или три штуки в каждой группе. Так, на фиг. 6, 7 и 8, соответственно, показаны три группы по три передающие камеры в группе, двадцать пять групп передающих камер (число передающих камер в группе не конкретизировано) и девять групп по три передающие камеры в группе. Если оптические оси всех передающих камер компланарны (фиг. 6), то это позволяет, в дальнейшем, оглядывать объект только в азимутальной плоскости. Размещение передающих камер по фиг. 7 и 8 позволяет оглядывание как в азимутальной, так и вертикальной плоскостях.

На фиг. 7 одна базовая и двадцать четыре дополнительные группы передающих камер размещены на различных азимутальных и вертикальных положениях, причем положение зрачков и оптических осей всех передающих камер должны удовлетворять вышеназванным условиям (формулы 1-5).

На фиг. 8 показано упрощенное расположение девяти групп передающих камер по три передающие камеры в группе, обеспечивающее оглядывание в небольших углах как в горизонтальной, так и в вертикальной плоскости, для чего шесть дополнительных групп передающих камер размещают вне азимутальной (центральной) плоскости; при этом передающие камеры располагают в наклонных плоскостях, составляющих с центральной плоскостью угол ±ε и разносят по азимуту на равные углы ±β. Отметим, что условия правильного размещения передающих камер в этом случае, вообще говоря, нарушены, такое упрощенное расположение допустимо только в системах ОТВ, обеспечивающих небольшой угол оглядывания (около ± 0,1 радиана).

Во всех рассмотренных случаях, в том числе, и при равномерном расположении передающих камер (фиг. 3 и 4), каждая группа передающих камер в течение периода строки включается на определенный отрезок времени, независимо от положения зрителя.

В отличие от прототипа [9], в предложенном решении для передачи видеосигнала базового кадра используется не только время, отведенное для воспроизведения видеоизображения, но и время, в течение длительности кадра, когда видеоинформация не передается или не воспроизводится, например часть времени, отведенного на обратный ход строчной развертки (около 12 мкс в стандартах PAL, SECAM) не занятого служебными сигналами, а также часть периодов строчной и кадровой развертки, в течение которой не воспроизводится видеоинформация (например, первые 34 строки в каждом полукадре в стандартах PAL, SECAM и невоспроизводимая часть времени прямого хода строчной развертки - около 10% T_nx).

Кроме того, в отличие от прототипа, при котором вид и спектр передаваемых видеосигналов остаются стандартными, а для передачи используются два стандартных видеоканала, в предложенном решении меняется форма сигнала и его спектр (фиг. 18 и 19), и несмотря на увеличение объема передаваемой информации, для осуществления передачи 1000 ракурсов достаточно лишь одного телевизионного канала со стандартной полосой частот (6 МГц), а для передачи 100000 ракурсов достаточно телевизионного канала с двойной полосой частот (до 12 МГц),
На фиг. 9 - 14 представлены варианты циклограмм работы видеокамер при записи базового кадра. На фиг. 9 представлен вариант равномерного и поочередного использования всех девяти передающих камер, расположенных по фиг. 3 и 4, для создания базового кадра. Отметим, что для передачи дополнительной видеоинформации об элементах объекта, невидимых из базовой точки O, используется часть периода строчной развертки (T_нс, см. фиг. 9 и 10) не занятая воспроизводством видеоинформации и служебными сигналами, включая невоспроизводимую часть времени прямого хода строчной развертки - около 10% T_pc. Такое включение передающих камер приемлемо в тех случаях, когда не требуется совместимость передаваемых сигналов со стандартными телевизионными сигналами, поскольку в описываемом случае ракурс наблюдения объекта скачкообразно перемещается в пространство, чего не происходит при передаче изображения в существующих телевизионных системах.

Обеспечить совместимость для такого расположения передающих камер можно, объединяя их в группы и синхронизируя включение передающих камер в группе, как показано на фиг. 10. На рисунке выделен интервал прямого хода строчной развертки каждой передающей камеры (пунктирный прямоугольник), в котором сплошными линиями выделены интервалы времени (t₂ и t₃), когда сигналы данной передающей камеры используются при формировании базового кадра. Такая циклограмма работы передающих камер пригодна и для их неравномерного пространственного расположения, как показано на фиг. 6 и обеспечивает возможность оглядывания изображения в некотором угле ±β в азимутальном направлении.

В такой циклограмме ракурс не меняется в течение интервала времени воспроизводимой части прямого хода строчной развертки и этим обеспечивается совместимость сигналов базового кадра со стандартными телевизионными сигналами.

Циклограмма работы передающих камер, обеспечивающих оглядывание объемного изображения как по азимуту, так и по вертикали (расположение передающих камер показано на фиг. 7) представлена на фиг. 11 - 14. Отметим, что в отличие от рассмотренных ранее циклограмм для отдельных передающих камер, на фиг. 11, 13 представлены циклограммы включения групп передающих камер по периоду строки, а на фиг. 12, 14 - циклограммы включения групп передающих камер по периоду кадра, причем суммарное время включения всех групп передающих камер по строке соответствует выражениям (2) или (4), а суммарное время включения всех групп передающих камер по кадру соответствует выражениям (3) или (5).

Зона, наблюдаемая передающими камерами, и зона видения объемного изображения связаны между собой соотношениями (2)-(5). Эта связь заключается в жестком задании точки A (в зоне наблюдения) и базовой точки O (в зоне видения). Только при наличии этой связи обеспечивается как подобие наблюдаемого изображения реальному объекту, так и соответствие сформированных сигналов между собой по всей цепочке способа ОТВ.

Если зритель расположен так, что, например, его правый глаз находится в базовой точке O (см. фиг. 15), то этим глазом он увидит изображение, соответствующее стандартному телевизионному сигналу (границы горизонтальных и вертикальных углов видения на этапе наблюдения обозначены прямоугольником abcd, заштрихованным на рисунке).

При смещении зрителя по азимуту, например, вправо, при оглядывании, точки, расположенные ближе точки A, в каком-либо j-плане, сместятся влево и займут новое положение, например в границах efgh. Это смещение точек будет тем значительнее, чем больше отличие их дальности от нулевого плана. Точки, лежащие в нулевом плане (напомним, что нулевой план представляет собой поверхность, содержащую точку A при записи и поверхность экрана монитора объемного изображения при воспроизведении) останутся на своих местах (прямоугольник abcd) для любого ракурса. Точки, расположенные дальше точки A, в каком-нибудь k-плане, сместятся вправо и займут новые положения, например положение klmn.

При этом объем и качество видеоинформации, воспринимаемой каждым глазом, будет соответствовать телевизионному стандарту, но по содержанию она будет отличаться от видеоинформации, воспринимаемой в точке O. По сумме двух полей, отличающихся для каждого глаза, зритель увидит объемное изображение, соответствующее его азимутальному положению.

Отметим, что при больших отклонениях зрителя от базовой точки O некоторые элементы объемного изображения, расположенные вне нулевого плана, могут выйти за пределы прямоугольника ABCD. В этом случае они уйдут из поля зрения и станут невидимы для зрителя.

Если передающие камеры расположены так, как показано на фиг. 7, а циклограмма их включения удовлетворяет приведенной на фиг. 11 и 12, то оглядывание возможно при смещении зрителя относительно базовой точки O не только по азимуту, но и по вертикали (см. фиг. 16). Греческими буквами показаны пространственные зоны углов видения объекта (базовая зона β₀ = ϕ, ε₀ = θ и дополнительные зоны β_i и ε_i, где i=1-4).

Фиг. 16 иллюстрирует двумерное смещение полей видения зрителем. Если зритель расположен в произвольной точке V, смещенной влево и вверх при произвольном положении головы (пусть правый глаз зрителя дополнительно смещен вправо и вверх на величину B), то области видения будут занимать положения:
- для нулевого плана - заштрихованный прямоугольник abcd;
- для какого-либо ближнего j-плана - смещение вправо и вниз (площадка a_n1, b_n1, c_n1, d_n1 для левого глаза и площадка a_nr, b_nr, c_nr, d_nr для правого глаза);
- для какого-либо дальнего k-плана - смещение влево и вверх (площадка a_f1, b_f1, c_f1, d_f1 для левого глаза и площадка a_fr, b_fr, c_fr, d_fr для правого глаза).

При перемещении зрителя область видения также будет перемещаться и занимать, соответственно, для левого и правого глаза какие-то новые границы. При этом объем видеоинформации, воспринимаемый каждым глазом, будет соответствовать объему видеоинформации стандартного плоского сигнала, снятого с соответствующего ракурса. По сумме двух плоских отличающихся для каждого глаза полей, зритель получит впечатление объемного изображения и возможность оглядывания как по азимуту, так и по вертикали. Если зритель сместится настолько, что часть элементов объемного изображения, расположенных в далеких или близких планах, выйдет за пределы прямоугольника ABCD, то зритель не увидит эти элементы.

Фиг. 17 иллюстрирует зависимость величины смещения полей зрения для разных планов при произвольном положении зрителя. На этапе формирования базового кадра передающие камеры были расположены так (см. фиг. 6), что перекрывали некоторый дополнительный сектор видения по азимуту. Границы возможного воспроизведения полей ракурсов для разных планов:
l_0i, r_0i - границы, видимые из базовой точки O, сплошные линии;
l_i - левая граница поля обзора, видимая из точки O₁ для i-го плана, пунктирные линии;
r_i - правая граница поля обзора, видимая из точки O_r для i-го плана, пунктирные линии;
V_il, V_ir - границы, видимые из произвольной точки V, сплошные линии;
4, 3, 2, 1, 0, 1', 2' - последовательные номера планов.

Фиг 17 качественно показывает рост величины смещения границ поля ракурса по мере выхода воспроизводимого элемента из нулевого плана (плоскость экрана, линия Lo, Ro).

Фиг. 18 качественно показывает:
двумерное распределение элементов изображения базового кадра:
- M₀, R₀, L₀, N₀ - для нулевого плана;
- A_n, B_n, C_n, D_n - для ближнего плана;
- A_f, B_f, C_f, D_f - для дальнего плана;
двумерное распределение элементов изображения базового ракурса:
- a_no, b_no, c_no, d_no - для ближнего плана;
- a_fo, b_fo, c_fo, d_fo - для дальнего плана;
двумерное распределение элементов изображения из произвольного ракурса:
- a_nv, b_nv, c_nv, d_nv - для ближнего плана;
- a_fn, b_fn, c_fn, d_fn - для дальнего плана.

Отметим, что объем передаваемой видеоинформации в базовом кадре предложенного способа превышает объем информации, содержащейся в стандартном телевизионном кадре по всем трем измерениям:
- по азимутальному углу видения объекта,
- по вертикальному углу видения объекта,
- по объему информации, описывающему элемент наблюдения объекта; например, элементарный тактированный видеосигнал усложнен наличием в нем сигнала дальности этого элемента. При выполнении способа методами цифровой техники машинное слово, описывающее один элемент базового кадра показано на фиг. 19. Это слово отличается от машинного слова, используемого в стандартных цифровых системах, наличием дополнительной информации о номере плана, в котором данный элемент расположен.

Избыточную, по сравнению со стандартным телевизионным кадром, информацию по каждому из измерений можно передавать различным образом:
- для расширения азимутального угла видения объекта использовать часть периода строчной развертки, не занятого воспроизведением видеоинформации и служебными сигналами;
- для расширения вертикального угла видения объекта использовать часть времени кадра, не используемого для воспроизведения видеоинформации.

Для передачи дополнительной информации, описывающей каждый элемент наблюдаемого объекта, в частности, для передачи информации о дальности элемента, использовать широко известный метод квадратурной модуляции, с последующей, расположенной в низкочастотной части спектра стандартного телевизионного сигнала с дальностной поднесущей F_nd = 1,5 МГц. Подобный метод используется в стандартном телевидении для передачи информации о цвете наблюдаемого объекта и для обеспечения совместимости цветного и черно-белого воспроизведения. Спектр передаваемых видеосигналов в предложенном способе показан на фиг. 20.

Подробно операция формирования базового кадра представлена на фиг. 21. Отметим, что в каждый текущий момент времени в формировании базового кадра принимает участие какая-то одна группа передающих камер. Также напомним, то одна из передающих камер является основной. Для определенности полагаем, что в группе 3 передающих камеры, центральная является основной, а остальные две - левая и правая дополнительные.

Видеосигналы с выхода основной передающей камеры потактово задерживаются и на каждом такте задержки попарно сравниваются с видеосигналами дополнительных передающих камер, которые также задержаны, но на постоянное число тактов. Сравнение производится для двух пар видеосигналов: основного с левым дополнительным, а также основного с правым дополнительным. Пусть максимальное число тактов задержки видеосигналов основной передающей камеры равно P. В дальнейшем, это число будет определяться количеством различимых планов в объемном изображении. Целесообразно величину постоянной задержки видеосигналов обеих дополнительных передающих камер сделать близкой к P/2 тактов. Сравнение видеосигналов можно производить, например, отдельно по каждой из выделенных цветовых (красной, зеленой и голубой). При совпадении в обеих парах сравниваемых видеосигналов всех компонент видеосигнала (или хотя бы двух из трех) на каком-либо такте выделяется сигнал, добавляющийся к видеосигналам основной передающей камеры на этом же такте. Величина этого сигнала пропорциональна номеру такт, на котором произошло совпадение.

Реализация предложенного способа
Предыдущими примерами детально описаны возможные пути реализации предложенного способа. Еще раз перечислим эти примеры:
Пример N 1. Девять передающих камер с оптическими осями, расположенными веерообразно или параллельно друг другу (фиг. 3 и 4, соответственно). Циклограмма их работы показана на фиг. 9.

Пример N 3. Три камеры в группе. Все три группы расположены в одной плоскости (фиг. 6). Циклограмма их работы показана на фиг. 10.

Во всех вышеперечисленных примерах обеспечивается оглядыванием изображения только в азимутальной плоскости.

Пример N 4. Двадцать пять групп передающих камер (фиг. 7), по пять групп, расположенных на каждой из пяти конических поверхностях. Циклограмма их работы показана на фиг. 11 и 12.

Пример N 5. Девять групп камер по три камеры в группе (фиг. 8).

В двух последних примерах обеспечивается оглядывание как по азимуту, так и по вертикали.

Фиг. 5 отражает обобщенное устройство, поясняющее предложенный способ, в котором обозначены:
1 - блок наблюдения объекта,
2 - формирователь базового кадра,
3 - блок записи и/или передачи сформированного изображения,
4 - таймер,
5 - тюнер,
6 - декодер,
7 - воспроизводящий экран,
8 - координатор.

Реализуя предложенный способ, устройство работает следующим образом. Блок наблюдения (1) обеспечивает необходимое расположение передающих камер, цикличность из работы, а также выбор текущего базового ракурса. Формирователь базового кадра (2) преобразовывает сигналы, поступающие от выделенной группы передающих камер, в форму, показанную на фиг. 18 - 19. Эти сигналы в цифровой или аналоговой форме записываются или передаются по соответствующему каналу передачи с помощью блока записи и/или передачи (3). Работа передающей части системы ОТВ тактируется таймером (4).

Переданные сигналы восприниматься тюнером (5) в приемной части системы ОТВ, декодируются в декодере (6) с учетом координат зрителей, определяемых координатором (8) и воспроизводятся на экране (7).

Возможны различные варианты выполнения устройств, но как бы они не были выполнены, они обязательно будут содержать блоки, указанные на фиг. 5. Конкретная реализация отдельных блоков в настоящем описании не рассматривается.

На фиг. 20 показан воспроизводящий экран 7, выбранный автором как наиболее предпочтительный для реализации заявляемого способа. Экран 7 состоит из двух частей - светоинформационной матрицы 10 и обтюратора 11. В качестве светоинформационной матрицы 10 могут быть использованы обычные двумерные дисплеи: кинескоп, жидкокристаллическая панель, воспроизводимая панель на основе автоэмиссии, газодинамическая панель и т.д.. В качестве обтюратора 11 могут быть использованы: механический экран с движущимися вертикальными щелями, жидкокристаллическая или иная панель, выполненная с возможностью управления положением прозрачных вертикальных щелей на непрозрачном фоне.

В таком экране 7 каждый глаз зрителя (правый глаз 12 и левый глаз 13) будет видеть свой индивидуальный набор светоинформационных столбцов, на поверхности светоинформационной матрицы 10 сквозь щели обтюратора 11. Правый глаз 12 будет сквозь щели 17 (пунктирные линии на поверхности обтюратора 11) набор светоинформационных столбцов 15, а левый глаз 13 будет видеть сквозь щели 16 (сплошные линии 16 на поверхности обтюратора 11) набор светоинформационных столбцов 14. За время кадра светоинформационные столбцы 14 для левого глаза 13 зрителя и щели 16 обтюратора 11 пробегают все положения от первоначального до положения своего соседнего столбца (с теми же номерами 14 и 16, соответственно). За это же время светоинформационные столбцы 15 для правого глаза 12 зрителя и щели 17 обтюратора 11 пробегают все положения от первоначального до положения своего столбца (с теми же номерами 15 и 17, соответственно). При этом каждый глаз зрителя получит свою индивидуальную информацию, соответствующую своему местоположению.

При равномерном чередовании столбцов для левого 13 и правого 12 глаз зрителя, что удобно для осуществления кадровой развертки, на фиг. 27 показано взаимное расположение элементов воспроизводящего экрана 7, при его сечении горизонтальной плоскостью для пояснения преобразований по формулам 6 - 8.

Пусть в устройстве воспроизведения используется плоский воспроизводящий экран 7, выполненный, например, на основе жидких кристаллов [6]. Как уже упоминалось выше, этот экран можно представить состоящим из MxN прямоугольников. Пусть внутрь этого i-прямоугольника в точку C_o(X_wo, Y_wo, O) проецируется из базовой точки O (O, O, Z_o) трехмерный элемент объемного изображения - точка W (X_w, Y_w, Z_w) (см. фиг. 24). Базовый кадр в совокупности передаваемый информации содержит координаты передаваемых элементов (точек), в том числе содержит координаты точки C_o(X_wo, Y_wo, O). Эта же точка W(X_w, Y_w, Z_w) при наблюдении ее из произвольной точки V(X_v, Y_v, Z_v) должна проецироваться в другое место экрана, в точку C_v(X_wv, Y_wv, O). Ее смещение будет происходить вместе с другими точками i-го прямоугольника без изменения их взаимного расположения внутри i-го прямоугольника.

Преобразование координат точки C_o в точку C_v осуществляют в соответствии с формулами 11 и 12.

X_wv = (Z_vX_wo(Z_o-Z_w) - X_vZ_wZ_o/(Z_o(Z_v-Z_w)) (11)
Y_wv = (Z_vX_wo(Z_o-Z_w) - Y_vZ_wZ_o/(Z_o(Z_v-Z_w)), (12)
где X_v, Y_v и Z_v - координаты одного зрачка зрителя (точки V);
X_wo и Y_wo - координаты проекции точки W(X_w, Y_w, Z_w) из базовой точки O на информационный экран;
X_w, Y_w, Z_w - пространственные координаты точки W(X_w, Y_w, Z_w) объекта;
O, O, Z_o - координаты базовой точки O.

Как указывалось выше, все точки внутри этого прямоугольника, включая точку W, получают одинаковое смещение, не меняя взаимного расположения внутри i-го прямоугольника, следовательно, точка W сместится на ту же величину, что и центр i-го прямоугольника, т.е. на величину X_wv - X_wo по горизонтальной оси и на величину Y_wv - Y_wo по вертикальной оси.

Отметим, что при преобразовании координат возможно экранирование i-м прямоугольником другого j-го прямоугольника, расположенного дальше от зрителя. На фиг. 28 этот факт отражен экранированием точки T (X_t, Y_t, Z_t), находящейся внутри j-го прямоугольника, которая была видна из базовой точки O и проецировалась в точку C_to.

Фиг. 25 поясняет процесс переноса точек как находящихся в пределах одного прямоугольника (точки P и Q не меняет своего взаимного расположения), так и находящихся в разных прямоугольниках (точки R и S меняют свое взаимное расположение после преобразования координат).

Нами был опробован ряд вариантов, в частности, изображенный в последовательности операций по фиг. 2. Размещение передающих камер было осуществлено в соответствии с фиг. 6 и 7. В качестве устройства воспроизведения 3 использовались кинескоп 10 с размером 51 см и обтюрационная панель на жидких кристаллах 11. Для этого случая были получены следующие результаты:
- процент правильного определения номера плана пикселей - 95%;
- обеспечена совместимость изображения с существующим стандартом PAL;
- угол оглядывания составил ± 5^o как в азимутальном, так и вертикальном направлениях;
- искажения пропорций объекта при его воспроизведении не наблюдалось;
- изображения пейзажа записывались как на стандартную видеокассету (типа VHS), так и непосредственно в память компьютера типа IBM 486.

Таким образом, в результате предложенного технического решения достигается свойственное человеку восприятие объемного изображения с возможностью оглядывания объекта в широком угле обзора при плавном оглядывании и при отсутствии искажения пропорций и перспективы в изображении наблюдаемого объекта.

Кроме того, обеспечивается возможность записи объемных изображений и передачи их по обычным моноскопическим телевизионным каналам в том числе, по каналам стандартного телевизионного вещания.

В принципе, возможно управление объемным изображением и получение специфических эффектов, необходимых для решения задач конструирования, театра, а в будущем для создания интерактивных устройств в системе ОТВ.

По предварительным оценкам стоимость воспроизводящего устройства реализующего предложенный способ не должна превышать стандартного телевизионного приемника больше чем в 2 - 2,5 раза.

Источники информации
1. Robinson Ph. Stereo 3D Systems Computer Graphics World, 1990, v. 13, N 6, p. 68-70, p. 73 - 74.

2. Китамура Хироюки, Инадзаки Кэндзо; Сяпу К.К. - Заявка 6473891, Япония, МКИ G 03 B 35/16; Заявл 87.09.14; N 62-230351.

3. Omura K. , Tetsutany N., Kisino F. Lenticular stereoscopic display sistem with eye-position tracking and without special-equipment needs. SID 94 Digest, p. 187-190, 1994.

4. T. Kanai. Head-Driven Pointing Device, Fujitsu LTD, патент Японии N 6-187092 (A) 8.7.1994, Int. Cl. G 06 F 3/033.

5. Tetsutany N. Nagashima Y., Tomono A., Kisino F. Stereoscopic display method employing eye-position tracking. Proc. of International Symp. on 3D Techs and Arts (Totyo), p. 101-107, 1992.

6. J.Eichenlaub at all "DTI's Autostereoscopic Display Technology" SPIE, v. 1915, Stereoscopic Display & Application IV (1993), p. 178.

7. Travis D.S. Three dimention display apparatus, Патент Великобритании, N 2206763, Кл. МКИ H 04 N 13/04, Кл. НКИ H 4 F.

8. Otsubo M. Прибор для воспроизведения объемного изображения, патент Японии, N 4-339599, МКИ H 04 N 13/04, публ. 07.06.94.

9. Y. Takahashi. Трехмерный дисплей, Nippon Telegr. & Teleph. Corp. (NTT), патент Японии N 5-83746 (A), 02.04.93, Int Cl. H 04 N 13/00. Ка

Изобретение относится к области телевизионной техники, а именно к телевизионным системам, в которых формируется, передается и воспроизводится объемное изображение объектов. Техническим результатом предложенного решения является достижимость свойственного человеку восприятия объемного изображения при воспроизведении, обеспечение возможности передачи объемных изображений по обычным телевизионным каналам и каналам связи, совместимость сформированных сигналов объемного изображения со стандартными сигналами телевизионного вещания, возможность записи объемного изображения. Указанный технический результат достигается особым размещением передающих камер при наблюдении ракурсов, получением специфической структуры тактированных видеосигналов в виде единого базового кадра, в котором учитывается расположение элементов наблюдаемого объекта в пространстве; особым воспроизведением изображения, когда положение каждого воспроизводимого пикселя определяется как записанной дальностью элемента в базовом кадре, так и положением глаз зрителя. Рассмотрены варианты размещения передающих камер, связь между их размещением и параметрами телевизионных разверток, алгоритм преобразования изображений ракурсов из базового кадра и связь преобразованных сигналов изображений ракурсов с развертками экрана, воспроизводящего объемное оптическое изображение. Состояние современной техники позволяет реализовать предложенный способ. 8 з.п. ф-лы, 25 ил.

1. Способ объемного телевидения (ОТВ), включающий наблюдение объекта совокупностью передающих камер, число которых две и более, формирование ракурсов посредством тактирования и коммутации сигналов передающих камер, передачу и прием видеосигналов, преобразование принятых видеосигналов в оптическое изображение полей ракурсов с учетом пространственного положения глаз зрителя путем измерения их координат относительно центра воспроизводящего экрана, отличающийся тем, что наблюдение объекта осуществляют группами передающих камер, располагаемых на сферической поверхности, при этом допускается как равномерное, так и неравномерное расположение передающих камер, на этапе формирования формируют базовый кадр, состоящий из совокупности полей передающих камер и отражающий пространственное расположение элементов наблюдаемого объекта и представляющий собой совокупность тактированных сигналов, состоящих из адресной и информационной частей, где информационная часть отражает яркость и цветность элементов наблюдаемого сигнала, адресная часть - порядок следования сигналов в базовом кадре, при этом в адресную часть вводят сигнал о дальности элемента объекта, для чего последовательно, в заданном порядке и на заданный интервал времени периодически, с периодами как кадровой, так и строчной разверток коммутируют видеосигнальные группы передающих камер, в каждой группе передающих камер одну из них принимают за основную, а остальные - за дополнительные, видеосигналы основной передающей камеры задерживают на время, кратное длительности сигнала, описывающего элемент объекта, при этом задают кратность исходя из условий наблюдения, тактируемую задержку видеосигналов основной передающей камеры осуществляют во время работы данной группы, видеосигналы дополнительных передающих камер в группе попарно сравнивают с задержанными видеосигналами основной передающей камеры и выделяют такты, на которых происходит совпадение цветояркостных параметров видеосигналов, определяют дальность, как параметр, связанный с номером такта задержки видеосигналов основной передающей камеры, при котором произошло совпадение параметров сравниваемых видеосигналов, передачу и/или запись сигналов ОТВ осуществляют передачей и/или записью сигналов базового кадра, при воспроизведении преобразуют только адресную часть базового кадра, с учетом сигналов дальности, учитывая при этом пространственные координаты глаз каждого зрителя, при отсутствии преобразования координат адресная часть базового кадра позволяет наблюдать изображение только из определенной базовой точки 0. 2. Способ объемного телевидения по п.1, отличающийся тем, что на этапе наблюдения используют не менее одной группы передающих камер и двух передающих камер в группе, располагают передающие камеры эквидистантно от объекта, а их оптические оси устанавливают пересекающимися в одной точке А, выбранной в зоне наблюдения объекта, при этом в каждой группе камер выполняются следующие условия:
δ = (B/L_o= D/h (радиан),
ε/θ = t₁/t_вк,
β/ϕ = (t_ox-T)/t_пx
где B - расстояние между глазами зрителя, м;
L₀ - заданное стандартное расстояние от центра экрана воспроизводящего устройства до базовой точки 0, выбранной в зоне наблюдения изображения, м;
D - расстояние между центрами зрачков передающих камер, м;
L - расстояние от передающих камер до точки А, м;
δ - угол конвергенции (угол между оптическими осями соседних камер), рад;
ε - угол оглядывания по вертикали, рад;
θ - угол обзора камеры по вертикали, рад;
β - угол оглядывания по азимуту, рад;
ϕ - угол, под которым камера видит объект по азимуту, рад;
T - часть времени обратного хода строчной развертки, занятой служебными сигналами, с;
t₁ - время кадровой развертки, не занятое видеоинформацией в стандартном телевизионном кадре, с;
t_вк - время кадровой развертки, занятое воспроизводством в стандартном телевизионном кадре, с;
t_ох - время обратного хода строчной развертки, с;
t_пх - время прямого хода строчной развертки, с. 3. Способ объемного телевидения по п.2, отличающийся тем, что при наличии в группе двух передающих камер центры их зрачков располагаются на линии, параллельной направлению строчной развертки. 4. Способ объемного телевидения по п.2, отличающийся тем, что при наличии в группе более двух передающих камер центры их зрачков располагаются на линии, подобной направлению той части строчной развертки, на которую включают данную группу передающих камер. 5. Способ объемного телевидения по п.2, отличающийся тем, что переключение сигналов групп камер по вертикали производят с частотой кадровой развертки, а по азимуту с частотой строчной развертки. 6. Способ объемного телевидения по п.1, отличающийся тем, что базовый кадр записывают на носитель видеоинформации с последующим воспроизведением объемного изображения с этого носителя. 7. Способ объемного телевидения по п.1, отличающийся тем, что поле базового кадра разделяют на равные прямоугольники, содержащие K x h элементов, и каждому прямоугольнику ставят в соответствие одно и то же значение дальности, где K ≥ 1 - число элементов в прямоугольнике вдоль строки, а L ≥ 1 - число строк, занимаемых прямоугольником, и пересчет координат прямоугольников базового кадра при воспроизведении производят без изменения расположения элементов внутри прямоугольников. 8. Способ объемного телевидения по п.1, отличающийся тем, что в случае использования в качестве воспроизводящего экрана сочетания светоинформационной матрицы и жидкокристаллической панели с бегущей щелью, расположенной между зрителем и информационной матрицей, световые пучки формируются посредством пространственной оптической обтюрации светоинформационных потоков парами прозрачных вертикальных щелей на непрозрачном экране, и перемещением этих щелей синхронно со светоинформационными столбцами кадровой развертки, причем положение центра пары щелей (X_j0) определяется из выражения

расстояние между щелями в паре
Δ = 2•(Z_v•d-lo•B)/(Z_v+lo),
смещение центра рабочей зоны обтюрационной панели (X_V0) при перемещении зрителя по горизонтали
X_vo= lo•tgα_o,
где X_j - горизонтальная координата j-го светоинформационного столбца, м;
l₀ - расстояние между информационной матрицей и обтюрационной панелью, м;
d - шаг развертки информационной матрицы, м;
X_V, Z_V - азимутальная координата и дальность зрителя, соответственно, м;
2B = 64 мм - расстояние между глазами зрителя;
α_j - горизонтальная компонента текущего пространственного угла между глазом зрителя и j-й вертикальной бегущей щелью, имеющей на обтюрационной панели координаты (X_j, l₀), рад;
α_o - горизонтальная компонента пространственного угла между осью Z и прямой, соединяющей переносицу зрителя с центром обтюрационной панели, рад. 9. Способ объемного телевидения по п.1, отличающийся тем, что преобразование координат адресной части базового кадра для воспроизводимой точки W(X_W, Y_W, Z_W) объекта осуществляют в соответствии с выражением
X_WV = (Z_VX_W0(Z₀ - Z_W) - X_VZ_WZ₀) / (Z₀(Z_V - Z_W))
Y_WV = (Z_VY_W0(Z₀ - Z_W) - Y_VZ_WZ₀) / (Z₀(Z_V - Z_W))
где X_V, Y_V, Z_V - координаты одного зрачка зрителя (точки V);
X_W0, Y_W0 - координаты проекции точки W(X_W, Y_W, Z_W) из базовой точки 0 на информационный экран;
0, 0, Z₀ - координаты базовой точки 0.