СПОСОБ ВОСПРОИЗВЕДЕНИЯ СТЕРЕОСКОПИЧЕСКОГО ИЗОБРАЖЕНИЯ ОТ ВИДЕОКАМЕР СО СХОДЯЩИМИСЯ ОСЯМИ Российский патент 2008 года по МПК H04N13/04 G02B27/22 

Описание патента на изобретение RU2340116C1

Изобретение относится к способам воспроизведения стереоскопических телевизионных и видеоизображений (далее - стереоскопических изображений) и может быть использовано в таких областях, как наука, образование, медицина, производство, включая микроскопию, эндоскопию, телемедицину, подводное телевидение, где требуется получение в реальном времени качественных объемных изображений объектов.

В стереоскопических системах объемность наблюдаемого изображения достигается благодаря предъявлению зрителю двух плоских изображений (стереопары), соответствующих левому и правому ракурсам наблюдения трехмерной сцены, при которых каждый глаз зрителя видит только изображение соответствующего ракурса. Стереопару получают с помощью двух видеокамер, оптические оси объективов которых либо параллельны друг другу, либо сходятся в центре исследуемой сцены.

Схема со сходящимися осями имеет ряд преимуществ, однако в известных способах воспроизведения стереоскопических изображений при использовании стереопары от видеокамер со сходящимися осями качество воспроизводимого стереоскопического изображения оказывается недостаточно высоким (см. Валюс Н.А. Стереоскопия. М.: Изд-во Акад. Наук СССР, 1962. 379 с. Woods A., Docherty Т., Koch R. Image Distortions in Stereoscopic Video Systems // SPIE Proc., Stereoscopic Displays and Applications IV. 1993. V. 1915. P.36-48):

1) во-первых, возникает искажение стереоскопического изображения, называемое искривлением плоскости экрана; при таком искажении объекты, находящиеся в центре экрана, кажутся находящимися ближе к наблюдателю, чем объекты по краям экрана;

2) во-вторых, вертикальный параллакс, присутствующий в стереопаре, полученной от видеокамер со сходящимися осями, препятствует восприятию стереоскопического изображения за пределами центральной части экрана.

Указанные недостатки могут приводить к неверному впечатлению о пространственном расположении объектов в наблюдаемой сцене и к утомлению зрения, а при больших величинах вертикального параллакса - к исчезновению стереоэффекта.

Известен способ воспроизведения стереоскопических изображений, в котором видеосигнал, содержащий стереопары изображений, обрабатывают с помощью специального устройства и выводят на экран дисплея фрагменты изображений для левого и правого глаз (далее - левого и правого изображений) так, что эти фрагменты чередуются друг с другом на экране. Обеспечивают ортогональные линейные поляризации световых потоков, идущих от левого и правого изображений, помещая перед экраном матрицу микрополяризаторов, и наблюдают изображение на экране через очки с анализаторами (см. патент на изобретение US №6593959, МПК H04N 15/00).

Данный способ характеризуется недостаточным качеством воспроизводимого стереоскопического изображения, обусловленным двукратным снижением разрешения, а также искривлением плоскости экрана и затрудненным восприятием стереоскопического изображения за пределами центральной части экрана при воспроизведении стереопар, полученных съемкой со сходящимися осями.

Известен способ воспроизведения стереоскопических изображений, при котором левое и правое изображения поочередно выводят на экран дисплея, перед экраном располагают жидкокристаллический модулятор, переключают модулятор между первым и вторым состояниями поляризации синхронно с выводом левого и правого изображений, наблюдают изображение на экране через очки с анализаторами (см. патент на изобретение US №6975345, МПК H04N 13/04).

Данный способ позволяет получать стереоскопическое изображение без снижения разрешения, однако предъявляет повышенные требования к дисплею, который должен отображать кадры с удвоенной частотой. Кроме того, при воспроизведении стереопар, полученных съемкой со сходящимися осями, получаемое стереоскопическое изображение характеризуется недостаточным качеством, обусловленным искривлением плоскости экрана и затрудненным восприятием стереоэффекта за пределами центральной части экрана.

Наиболее близким к заявляемому способу является способ воспроизведения стереоскопических изображений, в котором изображения левого и правого ракурсов объемной сцены воспроизводят на двух экранах, установленных под углом 90° друг к другу и оптически связанных между собой с помощью полупрозрачного зеркала, которое располагают под углом 45° к каждому из экранов. Перед каждым из экранов помещают поляризатор и наблюдают левое и правое изображения в плоскости одного из экранов через очки с анализаторами (см. патент на изобретение US №2845618, НКИ: 340-369).

Данный способ позволяет наблюдать изображение без снижения разрешения и не предъявляют к дисплеям повышенных требований, связанных с необходимостью работы с удвоенной кадровой частотой. Однако при воспроизведении стереопар, полученных съемкой со сходящимися осями, наблюдаемое стереоскопическое изображение характеризуется недостаточным качеством, обусловленным искривлением плоскости экрана и затрудненным восприятием стереоэффекта за пределами центральной части экрана.

Задачей заявляемого изобретения является разработка способа воспроизведения стереоскопического изображения, позволяющего воспроизводить стереопару, полученную от видеокамер со сходящимися оптическими осями, как стереоскопическое изображение с неискаженным воспроизведением плоскостей, свободно наблюдаемое как в центре, так и за пределами центральной части экрана.

Технический результат заявляемого изобретения заключается в повышении качества стереоскопического изображения, получаемого в стереоскопических теле- и видеосистемах, использующих съемку со сходящимися оптическими осями объективов видеокамер.

Поставленная задача достигается тем, что при воспроизведении стереоскопического изображения от видеокамер со сходящимися оптическими осями, изображение с которых воспроизводят на первом и втором экранах, установленных в вертикальных плоскостях и оптически связанных между собой с помощью светоделительной пластины, причем первый и второй экраны располагают симметрично относительно светоделительной пластины, согласно предлагаемому решению поворачивают, по крайней мере, один из экранов вокруг вертикальной оси, проходящей через центр экрана, обеспечивая наблюдение изображений от первого и второго экранов в разных плоскостях, пересекающихся под углом 2α, причем угол α определяют из соотношения

где V - расстояние от центра первого экрана до наблюдателя;

M - увеличение кадра, с которым воспроизводят изображение на экранах;

f - фокусное расстояние объективов видеокамер;

β - угол конвергенции оптических осей объективов видеокамер.

В первом варианте реализации способа один из экранов поворачивают на угол 2α, a во втором варианте реализации способа поворачивают первый и второй экраны в одном и том же направлении на угол α.

В качестве экранов используют, например, экраны дисплеев с электронно-лучевыми трубками, или жидкокристаллических дисплеев, или плазменных дисплеев, или дисплеев на светоизлучающих диодах.

В известных стереоскопических системах изображения для обоих глаз предъявляются зрителю в одной общей плоскости, что соответствует только геометрии съемки с параллельными осями видеокамер, где сенсоры видеокамер также находятся в одной плоскости. При съемке со сходящимися осями сенсоры видеокамер находятся в разных плоскостях и при воспроизведении изображений от обеих видеокамер в одной плоскости наблюдаемое стереоскопическое изображение оказывается искаженным. В заявляемом способе предлагается воспроизводить изображения от видеокамер со сходящимися осями в разных плоскостях, что соответствовало бы геометрии съемки со сходящимися осями. При определенном значении угла 2α между этими плоскостями, устанавливаемом согласно предложенному способу, качество получаемого стереоскопического изображения возрастает, а именно устраняется искривление плоскости экрана в стереоскопическом изображении и устраняется негативное влияние вертикального параллакса на восприятие стереоэффекта за пределами центральной части экрана.

Изобретение поясняется чертежами, где на фиг.1 показана схема получения стереопары от видеокамер со сходящимися осями, на фиг.2 - схема воспроизведения стереоскопического изображения согласно заявляемому способу; на фиг.3 - схема получения стереопары прямоугольной решетки от видеокамер со сходящимися осями; на фиг.4 - представление левого и правого изображений решетки в общей плоскости наблюдения.

Позициями на чертежах обозначены: 1 - объект; 2, 3 - видеокамеры; 4 - светоделительная пластина; 5, 6 - положения первого и второго экранов до поворота; 7, 8 - центры первого и второго экранов; 9, 10 - положения первого и второго экранов после поворота; 11 - зритель; 12, 13 - объективы видеокамер; 14 - изображение экрана, помещенного в положение 10, наблюдаемое зрителем в отраженном от светоделительной пластины свете; 15 - плоскость конвергенции видеокамер; 16, 17 - сенсоры видеокамер; 18, 19 - левое и правое изображения, получаемые видеокамерами; 20 - общая плоскость наблюдения левого и правого изображений.

Для повышения качества воспроизводимого стереоскопического изображения согласно предлагаемому способу левое и правое изображения объекта 1, полученные от видеокамер 2 и 3 со сходящимися осями, воспроизводят на первом и втором экранах, установленных в вертикальных плоскостях и оптически связанных между собой с помощью светоделительной пластины 4. При этом левое изображение воспроизводят, например, на первом экране, а правое изображение воспроизводят, например, на втором экране. Первый и второй экраны размещают симметрично относительно светоделительной пластины 4, например, первый экран - в положении 5, а второй экран - в положении 6. Затем первый экран поворачивают вокруг вертикальной оси, проходящей через его центр 7 на угол α, в результате первый экран оказывается в положении 9. Второй экран поворачивают вокруг вертикальной оси, проходящей через его центр 8 на угол α, в результате второй экран оказывается в положении 10. При этом и первый, и второй экраны поворачивают в одном и том же направлении, а угол поворота α определяют из соотношения (1):

где V - расстояние от центра 7 первого экрана до зрителя 11;

М - увеличение кадра, с которым воспроизводят изображение на экранах;

f - фокусное расстояние объективов 12 и 13 видеокамер 2 и 3;

β - угол конвергенции оптических осей объективов 12 и 13 видеокамер 2 и 3.

Зритель 11 наблюдает изображение от первого экрана в положении 9 в прошедшем через делитель 4 свете, а изображение от второго экрана - в положении 14 в отраженном от делителя 4 свете, при этом сепарацию изображений от первого и второго экранов осуществляют любым известным способом. Таким образом, зритель наблюдает левое и правое изображения объекта в разных плоскостях, пересекающихся под углом 2α, из-за чего в наблюдаемом стереоскопическом изображении устраняется искривление плоскости экрана, а стереоэффект свободно воспринимается во всей области экрана.

Поясним более подробно, каким образом осуществление заявляемого способа приводит к устранению искажений в стереоскопическом изображении. Для этого сначала рассмотрим причины возникновения искажений в стереоскопическом изображении от видеокамер со сходящимися осями при наблюдении левого и правого изображений объекта в одной плоскости. Пусть в плоскости конвергенции 15 видеокамер 2 и 3 расположена прямоугольная решетка, причем оптические оси объективов 12 и 13 видеокамер сходятся в центре решетки. Так как сенсоры 16 и 17 видеокамер 2 и 3 не сопряжены с плоскостью конвергенции 15 в оптических системах объективов 12 и 13, то левое 18 и правое 19 изображения решетки получаются с переменным линейным увеличением. При совмещении таких изображений в общей плоскости наблюдения 20 их сопряженные точки характеризуются переменным горизонтальным параллаксом РH и ненулевым вертикальным параллаксом PV. При раздельном бинокулярном наблюдении изображений 18 и 19 в общей плоскости 20 наличие параллаксов РH и PV приводит к возникновению переменной горизонтальной и ненулевой вертикальной диспаратностей в изображениях, получаемых на сетчатках левого и правого глаз зрителя. Данная горизонтальная диспаратность не соответствует распределению точек решетки по глубине и поэтому приводит к искривлению наблюдаемого стереоскопического изображения решетки. Ненулевая вертикальная диспаратность затрудняет слитное восприятие левого и правого изображений решетки как единого объемного изображения. Подобные искажения имеют место не только для плоскости конвергенции, но и для других плоскостей по всей глубине воспроизводимого стереоскопического изображения.

При наблюдении левого и правого изображений в различных плоскостях, обеспечиваемом согласно заявляемому способу, в изображениях, получаемых на сетчатках левого и правого глаз зрителя, происходит компенсация геометрических искажений, возникших при съемке из-за несопряженности сенсоров видеокамер. В результате горизонтальная диспаратность сетчаточных изображений приводится в соответствие с распределением точек объекта по глубине, а вертикальная диспаратность устраняется. Таким образом, осуществление заявляемого способа обеспечивает устранение обеих причин, по которым в известных способах возникают искажения при воспроизведении стереоскопического изображения от видеокамер со сходящимися осями.

Заявляемый способ может быть осуществлен, например, следующим образом. Пусть необходимо воспроизвести качественное стереоскопическое изображение для наблюдения с дистанции V=60 см, имея левое и правое изображения объекта, получаемые от видеокамер с фокусным расстоянием о6ъективов f=0,35 см и углом конвергенции β=5°. Для этого левое и правое изображения объекта воспроизводят с увеличением кадра М=50 на первом и втором экранах, установленных под прямым углом друг к другу и оптически связанных между собой с помощью светоделительной пластины, расположенной под углом 45° к каждому из экранов. Затем первый и второй экраны поворачивают по часовой стрелке вокруг вертикальных осей, проходящих через их центры, причем угол поворота α определяют из соотношения (1)

Изображение от первого экрана наблюдают в прошедшем через делитель свете, а изображение от второго экрана - в отраженном от делителя свете, при этом любым известным способом обеспечивают сепарацию левого и правого изображений. Таким образом, зритель видит левое и правое изображения в разных плоскостях, пересекающихся под углом 2α, что согласно предлагаемому изобретению позволяет ему наблюдать стереоскопическое изображение объекта без искривления плоскостей, причем стереоэффект воспринимается как в центре, так и за пределами центральной части экрана.

Похожие патенты RU2340116C1

название год авторы номер документа
СПОСОБ И УСТРОЙСТВО ДЛЯ ПОЛУЧЕНИЯ СТЕРЕОСКОПИЧЕСКИХ ВИДЕОИЗОБРАЖЕНИЙ 2006
  • Гребенюк Константин Александрович
  • Петров Владимир Владимирович
RU2350042C2
СТЕРЕОПРОЕКЦИОННАЯ СИСТЕМА 2005
  • Арсенич Святослав Иванович
RU2322771C2
СТЕРЕОСКОПИЧЕСКАЯ СИСТЕМА 1999
  • Арсенич С.И.
RU2221350C2
СПОСОБ ПОЛУЧЕНИЯ СТЕРЕОСКОПИЧЕСКИХ ТЕЛЕВИЗИОННЫХ ИЗОБРАЖЕНИЙ С АВТОМАТИЧЕСКИМ ИЗМЕРЕНИЕМ ПРЕДМЕТНОГО ПРОСТРАНСТВА В РЕАЛЬНОМ ВРЕМЕНИ 2012
  • Соболев Сергей Александрович
RU2490819C1
УСТРОЙСТВО СТЕРЕОВИДЕНИЯ В РЕАЛЬНОМ ВРЕМЕНИ 2011
  • Ежов Василий Александрович
  • Компанец Игорь Николаевич
RU2474973C2
Стереодисплей (варианты), видеокамера для стереосъёмки и способ компьютерного формирования стереоизображений для этого стереодисплея 2017
  • Арсенич Святослав Иванович
RU2698919C2
ТЕЛЕВИЗИОННЫЙ МНОГОРАКУРСНЫЙ СПОСОБ ПОЛУЧЕНИЯ, ПЕРЕДАЧИ И ПРИЕМА СТЕРЕОИНФОРМАЦИИ О НАБЛЮДАЕМОМ ПРОСТРАНСТВЕ С ЕГО АВТОМАТИЧЕСКИМ ИЗМЕРЕНИЕМ. СИСТЕМА "ТРЕТИЙ ГЛАЗ" 2013
  • Соболев Сергей Александрович
RU2543549C2
Устройство для воспроизведения стереоскопических изображений 1986
  • Лупанов Олег Иванович
SU1515133A1
Устройство формирования сигналов стереопары 1989
  • Волков Сергей Николаевич
SU1684936A1
МУЛЬТИФОКАЛЬНЫЙ СТЕРЕОДИСПЛЕЙ 2001
  • Ковалев А.М.
RU2201610C2

Иллюстрации к изобретению RU 2 340 116 C1

Реферат патента 2008 года СПОСОБ ВОСПРОИЗВЕДЕНИЯ СТЕРЕОСКОПИЧЕСКОГО ИЗОБРАЖЕНИЯ ОТ ВИДЕОКАМЕР СО СХОДЯЩИМИСЯ ОСЯМИ

Изобретение относится к способам воспроизведения стереоскопических телевизионных и видеоизображений и может быть использовано в таких областях, как наука, образование, медицина, производство, включая микроскопию, эндоскопию, телемедицину, подводное телевидение, где требуется получение в реальном времени качественных объемных изображений объектов. Технический результат заключается в повышении качества стереоскопического изображения. Способ заключается в том, что изображение с видеокамер воспроизводят на первом и втором экранах, установленных в вертикальных плоскостях и оптически связанных между собой с помощью светоделительной пластины, причем первый и второй экраны располагают симметрично относительно светоделительной пластины, поворачивают, по крайней мере, один из экранов вокруг вертикальной оси, проходящей через центр экрана, обеспечивая наблюдение изображений от первого и второго экранов в разных плоскостях, пересекающихся под углом 2α, причем угол α определяют из соотношения где V - расстояние от центра первого экрана до наблюдателя; М - увеличение кадра, с которым воспроизводят изображение на экранах; f - фокусное расстояние объективов видеокамер; β - угол конвергенции оптических осей объективов видеокамер. 2 з.п. ф-лы, 4 ил.

Формула изобретения RU 2 340 116 C1

1. Способ воспроизведения стереоскопического изображения от двух видеокамер со сходящимися оптическими осями, изображение с которых воспроизводят на первом и втором экранах, установленных в вертикальных плоскостях и оптически связанных между собой с помощью светоделительной пластины, причем первый и второй экраны располагают симметрично относительно светоделительной пластины, отличающийся тем, что поворачивают, по крайней мере, один из экранов вокруг вертикальной оси, проходящей через центр экрана, обеспечивая наблюдение изображений от первого и второго экранов в разных плоскостях, пересекающихся под углом 2α, причем угол α определяют из соотношения:

где V - расстояние от центра первого экрана до наблюдателя; М - увеличение кадра, с которым воспроизводят изображение на экранах; f - фокусное расстояние объективов видеокамер; β - угол конвергенции оптических осей объективов видеокамер.

2. Способ по п.1, отличающийся тем, что экран поворачивают на угол 2α.3. Способ по п.1, отличающийся тем, что поворачивают первый и второй экраны в одном и том же направлении на угол α.

Документы, цитированные в отчете о поиске Патент 2008 года RU2340116C1

US 2845618, 29.07.1958
УСТРОЙСТВО ДЛЯ ПРОСМОТРА СТЕРЕОСКОПИЧЕСКОГО ИЗОБРАЖЕНИЯ, ОТОБРАЖАЕМОГО ВИДЕОДИСПЛЕЙНЫМ СРЕДСТВОМ (ВАРИАНТЫ) 2004
  • Маркович Александр Викторович
  • Никифоров Олег Кимович
RU2275754C2
Пломбировальные щипцы 1923
  • Громов И.С.
SU2006A1
US 6975345 B1, 13.12.2005
US 6593959 B1, 15.07.2003
KR 20040071638, 12.08.2004.

RU 2 340 116 C1

Авторы

Гребенюк Константин Александрович

Петров Владимир Владимирович

Даты

2008-11-27Публикация

2007-05-15Подача