СПОСОБ ФОРМИРОВАНИЯ ИЗОБРАЖЕНИЯ ДОПОЛНЕННОЙ РЕАЛЬНОСТИ, ОБЕСПЕЧИВАЮЩИЙ КОРРЕКТНОЕ ВОСПРИЯТИЕ УДАЛЕНИЯ ВИРТУАЛЬНЫХ ОБЪЕКТОВ Российский патент 2016 года по МПК G06T15/60 

Описание патента на изобретение RU2592458C2

Изобретение относится к технологиям дополненной реальности (augmented reality), позволяющим совмещать в одном пространстве реальный мир и виртуальные, созданные компьютером объекты.

Уровень техники.

Известны системы дополненной реальности, где стереокартина реального мира формируется с помощью двух видеокамер, размещаемых перед глазами пользователя. Примером могут служить системы с применением устройства VideiVision компании WorldViz http://www.worldviz.corn/products/augmented-reality/videovision. При этом стереопары виртуальных объектов формируются управляющим компьютером и накладываются в соответствии с данными подсистемы позиционирования на видеопотоки от видеокамер с последующим воспроизведении полученного стереоскопического изображения дополненной реальности на микродисплеях шлема виртуальной реальности.

При этом в случае воспроизведения виртуальных объектов, находящихся достаточно далеко от наблюдателя, возникает проблема неправильного восприятия удаления виртуальных объектов. Так как элементы виртуальной картинки выглядят заметно четче и ярче наблюдаемых на большом удалении элементов реального мира в силу наблюдения последних через слой воздуха и из-за искажений, вносимых оптикой видеокамер, то виртуальные объекты воспринимаются человеком как находящиеся ближе, чем на самом деле. Этот эффект не проявляется для виртуальных объектов, находящихся вблизи от наблюдателя, поскольку при этом расстояние до виртуального объекта соответствует расстоянию, представление о котором формируется у наблюдателя по внешним признакам изображений виртуальных объектов - яркости, цветовой гамме, четкости, отчетливости тени, которые мозг наблюдателя соотносит с признаками изображения реального мира.

Технической задачей предлагаемого изобретения является создание способа формирования изображения дополненной реальности с использованием видеокамер обеспечивающего корректное восприятие удаления виртуальных объектов.

Раскрытие изобретения

Технический результат предлагаемого изобретения состоит в устранении эффекта неправильной оценки расстояния до виртуальных объектов, которые находятся на значительном удалении от наблюдателя, в картинке дополненной реальности, формируемой системой с использованием видеокамер для воспроизведения реального мира.

Указанный технический результат достигается тем, что в состав системы дополненной реальности, где картина реального мира формируется с помощью видеокамер, размещаемых перед глазами пользователя, вводится блок адаптации характера воспроизведения виртуальных объектов к характеру воспроизведения видимого реального мира.

Функциями блока являются:

1) анализ текущей яркости и цветовой гаммы фрагментов получаемой от видеокамер картинки реального мира, на которые предполагается накладывать изображения виртуальных объектов;

2) регистрация текущего времени, получаемого из управляющего системой компьютера;

3) регистрация текущего направления наблюдения, получаемого из подсистемы позиционирования системы дополненной реальности;

4) формирование параметров изображения виртуальных объектов, адаптированных к параметрам фрагментов видеокартинки реального мира, на которые предполагается накладывать изображения виртуальных объектов, в том числе а) яркости, б) зависящей от условий освещенности цветовой гаммы, в) четкости, г) направления и размера теней.

Управляющий компьютер получает от блока адаптации адаптированные параметры изображения виртуальных объектов и использует их для формирования этих изображений. Как результат устраняется эффект неправильной оценки удаления виртуальных объектов.

Краткое описание иллюстраций.

Фиг. 1 - техническая реализация способа формирования изображения дополненной реальности, обеспечивающей корректное восприятие удаления виртуальных объектов.

Осуществление изобретения.

Осуществление предлагаемого способа формирования изображения дополненной реальности, обеспечивающей корректное восприятие удаления виртуальных объектов заключается в следующем.

Способ подразумевает использование системы (см. фиг. 1), которая включает шлем виртуальной реальности, снабженный двумя микродисплеями и двумя видеокамерами, подсистему локального позиционирования, содержащую средство определения трех линейных и трех угловых координат положения шлема виртуальной реальности в пространстве и приемник глобальной спутниковой навигационной системы, управляющий компьютер, генерирующий пару стереоизображений для микродисплеев шлема виртуальной реальности, причем датчик локальной подсистемы позиционирования размещен на шлеме виртуальной реальности и блок адаптации характера воспроизведения виртуальных объектов к характеру воспроизведения видимого реального мира. Входы блока адаптации подключены к управляющему компьютеру, к подсистеме локального позиционирования, к системе спутниковой навигации и к видеопотоку, поступающему от любой из видеокамер. Получая от управляющего компьютера данные о текущем времени, а от подсистемы локального позиционирования и спутниковой системы позиционирования данные о положении наблюдателя и направлении его взгляда, блок адаптации вырабатывает параметры тени виртуального объекта, которую должен видеть наблюдатель в текущих обстоятельствах места и времени. Получая от управляющего компьютера данные о положении изображения виртуальных объектов относительно картинки от видеокамеры, на которую накладывается изображение виртуальных объектов, блок адаптации анализирует яркость, цветовую гамму и четкость соответствующих фрагментов картинки от видеокамеры и вырабатывает адаптированные параметры для виртуальных объектов. Выработанные блоком адаптации параметры передаются управляющему компьютеру для формирования изображения виртуальных объектов.

Блок адаптации реализуется как отдельное вычислительное устройство, содержащее собственный процессор для выработки адаптированных параметров виртуальных объектов. В качестве подсистемы локального позиционирования, спутниковой навигационной системы и шлема виртуальной реальности можно использовать серийно выпускаемые промышленностью изделия, например Polhemus G4, GlobalSat BU-353, Sony HMZ.

Похожие патенты RU2592458C2

название год авторы номер документа
СПОСОБ ОБУЧЕНИЯ АВИАДИСПЕТЧЕРОВ ДИСПЕТЧЕРСКИХ ПУНКТОВ РУЛЕНИЯ, СТАРТА И ПОСАДКИ НА РЕАЛЬНОМ ЛЕТНОМ ПОЛЕ 2011
  • Горбунов Андрей Леонидович
  • Елисеев Борис Петрович
  • Нечаев Евгений Евгеньевич
RU2493606C2
СПОСОБ КОРРЕКЦИИ ДРЕЙФА МИКРОМЕХАНИЧЕСКОГО ГИРОСКОПА, ИСПОЛЬЗУЕМОГО В СИСТЕМЕ ДОПОЛНЕННОЙ РЕАЛЬНОСТИ НА ДВИЖУЩЕМСЯ ОБЪЕКТЕ 2013
  • Горбунов Андрей Леонидович
  • Зелинский Андрей Юрьевич
  • Кауров Андрей Иванович
RU2527132C1
СПОСОБ ОБУЧЕНИЯ СОТРУДНИКОВ СЛУЖБЫ АВИАЦИОННОЙ БЕЗОПАСНОСТИ С ПРИМЕНЕНИЕМ СИСТЕМЫ ДОПОЛНЕННОЙ РЕАЛЬНОСТИ 2012
  • Горбунов Андрей Леонидович
  • Зелинский Андрей Юрьевич
  • Кауров Андрей Иванович
RU2528457C2
МОДУЛЬНАЯ ИНФОРМАЦИОННАЯ СИСТЕМА ПАРАШЮТИСТА 2018
  • Каплин Александр Юрьевич
  • Попов Сергей Николаевич
  • Степанов Михаил Георгиевич
  • Тепляков Дмитрий Владимирович
RU2681241C1
СПОСОБ ФОРМИРОВАНИЯ СРЕДЫ ДОПОЛНЕННОЙ РЕАЛЬНОСТИ 2017
  • Аверьянов Виталий Витальевич
  • Комиссаров Андрей Валерьевич
RU2736008C1
НАШЛЕМНОЕ УСТРОЙСТВО ДЛЯ ОТОБРАЖЕНИЯ ОПЕРАТИВНОЙ ИНФОРМАЦИИ И ОКРУЖАЮЩЕЙ ОБСТАНОВКИ С ЗАЩИТОЙ ОТ ВЫСОКОЙ ВНЕШНЕЙ ЗАСВЕТКИ 2012
  • Куклев Владимир Петрович
RU2494443C1
Гибкий складной телевизор 2021
  • Аль-Зубейди Хальдун Саид
  • Аль-Зубейди Саина Геннадьевна
RU2775153C1
СПОСОБ ПРОСТРАНСТВЕННОЙ ОРИЕНТАЦИИ ПИЛОТОВ ВОЗДУШНЫХ СУДОВ ПРИ ПОСАДКЕ 2011
  • Горбунов Андрей Леонидович
  • Елисеев Борис Петрович
  • Нечаев Евгений Евгеньевич
RU2585260C2
НЕОГРАНИЧЕННОЕ ПРОСТРАНСТВО ОТСЛЕЖИВАНИЯ ВИРТУАЛЬНОЙ РЕАЛЬНОСТИ ДЛЯ НЕСКОЛЬКИХ ИГРОКОВ 2022
  • Тюлин Евгений Андреевич
RU2803453C1
ВИРТУАЛЬНЫЙ ШЛЕМ С ИСПОЛЬЗОВАНИЕМ ФОКУСНЫХ И КОНТЕКСТНЫХ ДИСПЛЕЕВ 2020
  • Головков Олег Леонидович
RU2741256C1

Иллюстрации к изобретению RU 2 592 458 C2

Реферат патента 2016 года СПОСОБ ФОРМИРОВАНИЯ ИЗОБРАЖЕНИЯ ДОПОЛНЕННОЙ РЕАЛЬНОСТИ, ОБЕСПЕЧИВАЮЩИЙ КОРРЕКТНОЕ ВОСПРИЯТИЕ УДАЛЕНИЯ ВИРТУАЛЬНЫХ ОБЪЕКТОВ

Изобретение относится к вычислительной технике. Технический результат заключается в устранении эффекта неправильной оценки расстояния до виртуальных объектов, которые находятся на значительном удалении от наблюдателя. Способ формирования изображения дополненной реальности, обеспечивающий корректное восприятие удаления виртуальных объектов, с использованием системы дополненной реальности, в котором при формировании изображения дополненной реальности используются шлем виртуальной реальности с размещенным на нем датчиком локальной подсистемы позиционирования; блок адаптации, получая от управляющего компьютера данные о текущем времени, а от подсистемы локального позиционирования и спутниковой системы позиционирования данные о положении наблюдателя и направлении его взгляда, вырабатывает параметры тени виртуального объекта, которую должен видеть наблюдатель в текущих обстоятельствах места и времени; получая от управляющего компьютера данные о положении изображения виртуальных объектов относительно картинки от видеокамеры, анализирует яркость, цветовую гамму и четкость соответствующих фрагментов картинки от видеокамеры и вырабатывает адаптированные параметры для виртуальных объектов, которые передаются управляющему компьютеру для формирования стереоизображения виртуальных объектов. 1 ил.

Формула изобретения RU 2 592 458 C2

Способ формирования изображения дополненной реальности, обеспечивающий корректное восприятие удаления виртуальных объектов, включающий подсистему локального позиционирования, приемник глобальной спутниковой навигационной системы, управляющий компьютер, генерирующий пару стереоизображений, отличающийся тем, что при формировании изображения дополненной реальности используются шлем виртуальной реальности, снабженный двумя микродисплеями и двумя видеокамерами, причем датчик локальной подсистемы позиционирования размещен на шлеме виртуальной реальности, блок адаптации характера воспроизведения виртуальных объектов к характеру воспроизведения видимого реального мира, входы блока адаптации подключены к управляющему компьютеру, к подсистеме локального позиционирования и системе спутниковой навигации, к видеопотоку, поступающему от любой из видеокамер, при этом блок адаптации, получая от управляющего компьютера данные о текущем времени, а от подсистемы локального позиционирования и спутниковой системы позиционирования данные о положении наблюдателя и направлении его взгляда, вырабатывает параметры тени виртуального объекта, которую должен видеть наблюдатель в текущих обстоятельствах места и времени; получая от управляющего компьютера данные о положении изображения виртуальных объектов относительно картинки от видеокамеры, на которую накладывается изображение виртуальных объектов, анализирует яркость, цветовую гамму и четкость соответствующих фрагментов картинки от видеокамеры и вырабатывает адаптированные параметры для виртуальных объектов, а выработанные блоком адаптации параметры передаются управляющему компьютеру для формирования стереоизображения виртуальных объектов, выводимого на микродисплеи шлема виртуальной реальности.

Документы, цитированные в отчете о поиске Патент 2016 года RU2592458C2

Способ приготовления лака 1924
  • Петров Г.С.
SU2011A1
СПОСОБ ОБУЧЕНИЯ АВИАДИСПЕТЧЕРОВ ДИСПЕТЧЕРСКИХ ПУНКТОВ РУЛЕНИЯ, СТАРТА И ПОСАДКИ НА РЕАЛЬНОМ ЛЕТНОМ ПОЛЕ 2011
  • Горбунов Андрей Леонидович
  • Елисеев Борис Петрович
  • Нечаев Евгений Евгеньевич
RU2493606C2
Топчак-трактор для канатной вспашки 1923
  • Берман С.Л.
SU2002A1
Способ приготовления лака 1924
  • Петров Г.С.
SU2011A1
Многоступенчатая активно-реактивная турбина 1924
  • Ф. Лезель
SU2013A1

RU 2 592 458 C2

Авторы

Горбунов Андрей Леонидович

Зелинский Андрей Юрьевич

Кауров Андрей Иванович

Даты

2016-07-20Публикация

2014-06-26Подача