ДИСПЛЕЙ И СПОСОБ УПРАВЛЕНИЯ Российский патент 2014 года по МПК H04N5/66 

Область техники, к которой относится изобретение

Настоящее изобретение относится к дисплею и к способу управления.

Уровень техники

В соответствии с обзором Японской ассоциации отраслей электроники и информационной технологии (JEITA), среднее время просмотра телевизора в день составляет 4,5 часа. Однако при этом определили, что люди не смотрят телевизор непрерывно в течение этих 4,5 часов, из-за последних изменений в образе жизни.

Например, когда телевизор смотрят перед тем, как идти на работу или в школу утром, или во время приема пищи, за экраном телевизора не наблюдают постоянно. Кроме того, в случае передачи программы, которую можно воспринимать по голосу, такую как прогноз погоды, зритель может вообще не смотреть на экран, или может разговаривать с другим человеком. Затем часто зритель снова начинает смотреть на экран телевизора, когда слышит интересное слово в актуальных новостях или спортивных новостях.

То есть в последнее время все чаще наблюдается такая представительная форма просмотра телевизора, при которой телевизор включают вместо часов по утрам, и "одновременно просматривают", прослушивая звук телевизора, работая за персональным компьютером (ПК) по ночам. Когда выполняют "одновременный просмотр", потребляется излишняя энергия в состоянии, в котором экран телевизора включен. По этой причине были предложены дисплеи, в которые установлено устройство формирования изображения на экране телевизора, и управление сохранением энергии, оптимальное для состояния просмотра, выполняют путем выполнения детектирования лица через устройство формирования изображения, и анализа состояния просмотра пользователя.

Сущность изобретения

Техническая задача

Однако при управлении сохранением энергии, используя только детектирование лица, возникает проблема, состоящая в том, что, даже когда желательно непрерывно просматривать дисплей, например, когда трудно детектировать лицо пользователя из-за окружающей среды установки телевизора, или когда пользователь отводит взгляд в течение определенного периода времени, в конечном итоге определяют, что просмотр, то есть, лицо не присутствует, и, таким образом, дисплей отключают. Кроме того, поскольку процесс детектирования лица требует относительно долгого времени обработки изображения по сравнению с детектированием движущегося тела в среде, в которой скорость расчетов или ресурс ограничены, возникает проблема, состоящая в том, что задерживается реакция, в случае, когда пользователь снова появляется перед дисплеем для просмотра, с переключением на отображение изображения.

Кроме того, существует дисплей, в котором управление сохранением энергии выполняют путем детектирования движущегося тела или действия пользователя через устройство формирования изображения или пироэлектрический инфракрасный элемент, и анализируют состояние просмотра пользователя. Однако возникает проблема, состоящая в том, что, когда пользователь продолжает просматривать без движения, при этом ошибочно определяют, что пользователь отсутствует, и экран дисплея отключают. Для исключения такой неправильной работы необходимо увеличить период времени, через который включается управление сохранением энергии, что, в свою очередь, ухудшает эффект экономии энергии.

Настоящее изобретение выполнено с учетом описанных выше задач и направлено на предоставление дисплея и способа управления, которые являются новыми и улучшенными, и которые выполнены с возможностью эффективного осуществления управления сохранением энергии с высокой степенью точности в результате комбинирования детектирования движущегося тела пользователя и детектирования лица.

Решение задачи

В соответствии с аспектом настоящего изобретения, для достижения описанной выше цели, предусмотрен дисплей, включающий в себя модуль формирования изображения, который снимает движущееся изображение в заданном диапазоне, в направлении отображения изображения, модуль детектирования движущегося тела, который детектирует, присутствует или нет движущееся тело в заданном диапазоне, в направлении отображения изображения, модуль анализа изображения, который анализирует движущееся изображение, снятое модулем формирования изображения, для детектирования, присутствует или нет лицо, и модуль управления питанием, который управляет потреблением энергии питания с разными профилями, в соответствии с множеством режимов, которые установлены путем комбинирования, присутствует или нет лицо, детектируемое модулем анализа изображения, и присутствует или нет движущееся тело, детектируемое модулем детектирования.

Модуль управления питанием может иметь первый режим, в котором потреблением энергии питания дисплея управляют только в соответствии с тем, присутствует или нет лицо, детектируемое модулем анализа изображения, и когда модуль анализа изображения не имеет возможности детектировать присутствие лица в течение заданного времени, потребление энергии питания уменьшается.

Модуль управления питанием может иметь второй режим, в котором потреблением энергии питания дисплея управляют, используя, присутствует или нет лицо, детектируемое модулем анализа изображения, и присутствует или нет движущееся тело, детектируемое модулем детектирования движущегося тела, при этом потребление энергии питания уменьшается до заданного уровня, когда модуль анализа изображения не имеет возможности детектировать присутствие лица в течение первого заданного времени, и, после этого дополнительно уменьшают потребление энергии питания, когда модуль детектирования движущегося тела не имеет возможности детектировать присутствие движущегося тела в течение второго заданного периода времени.

Модуль управления питанием может иметь третий режим, в котором потреблением энергии питания управляют, используя, присутствует или нет лицо, детектируемое модулем анализа изображения, и присутствует или нет движущееся тело, детектируемое модулем детектирования движущегося тела, и когда модуль анализа изображения не имеет возможности детектировать присутствие лица в течение заданного периода времени, и модуль детектирования движущегося тела не имеет возможности детектировать присутствие движущегося тела в течение заданного периода времени, потребление энергии питания уменьшают.

Модуль управления питанием может управлять потреблением энергии питания дисплея путем увеличения или уменьшения яркости панели дисплея, на которой отображают изображение.

Модуль управления питанием может управлять потреблением энергии питания дисплея путем увеличения или уменьшения громкости звука громкоговорителя, который воспроизводит голос.

Модуль управления питанием может управлять потреблением энергии питания дисплея путем управления работой схемы, выполненный с возможностью повышения качества изображения отображаемого изображения.

Дисплей может дополнительно включать в себя модуль уведомления, который уведомляет о том, что управление потреблением энергии питания остановлено, когда модуль управления питанием останавливает управление потреблением энергии питания дисплея.

Модуль анализа изображения может устанавливать личность человека на основе анализа движущегося изображения, снимаемого модулем формирования изображения, и модуль управления питанием может автоматически выбирать режим, соответствующий данному человеку, установленному модулем анализа изображения.

Модуль управления питанием может автоматически выбрать режим, соответствующий деталям отображаемого содержания.

Модуль управления питанием может не начинать управление потреблением энергии питания дисплея до тех пор, пока лицо или движущееся тело не будет впервые детектировано после включения питания.

В соответствии с другим аспектом настоящего изобретения, для достижения описанной выше цели предусмотрен способ управления, включающий в себя этап формирования изображения, состоящий в съемке движущегося изображения в заданном диапазоне, в направлении отображения изображения, этап детектирования движущегося тела, состоящий в детектировании присутствует или нет движущееся тело в заданном диапазоне, в направлении отображения изображения, этап детектирования лица, состоящий в анализе снятого движущегося изображения, для детектирования, присутствует или нет лицо, и этап управления энергией питания, состоящий в управлении потреблением энергии питания с разными профилями в соответствии с множеством режимов, путем комбинирования присутствия или отсутствия лица и присутствия или отсутствия движущегося тела.

Предпочтительные эффекты изобретения

Как описано выше, в соответствии с настоящим изобретением, могут быть предусмотрены дисплей и способ управления, которые являются новыми и улучшенными, и которые позволяют эффективно выполнять управление по экономии питания, с высокой степенью точностью, путем комбинирования детектирования движущегося тела пользователя и детектирования лица.

Краткое описание чертежей

На фиг.1 показана пояснительная схема, предназначенная для пояснения внешнего вида устройства отображения изображения в соответствии с вариантом осуществления настоящего изобретения.

На фиг.2 показана пояснительная схема, иллюстрирующая конфигурацию устройства 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения.

На фиг.3 показана пояснительная схема, предназначенная для пояснения конфигурации модуля 110 управления.

На фиг.4 показана блок-схема последовательности операций, иллюстрирующая пример процесса сохранения энергии питания, выполняемого устройством 100 отображения изображения, в соответствии с вариантом осуществления настоящего изобретения.

На фиг.5 показана пояснительная схема, предназначенная для пояснения операции экономии энергии в соответствующих режимах сохранения энергии питания в устройстве 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения.

На фиг.6 показана блок-схема последовательности операций, иллюстрирующая операцию сохранения энергии питания устройства 100 отображения изображения.

На фиг.7 показана блок-схема последовательности операций, иллюстрирующая операцию по сохранению энергии питания устройства 100 отображения изображения.

На фиг.8 показана блок-схема последовательности операций, иллюстрирующая операцию по сохранению энергии питания устройства 100 отображения изображения.

На фиг.9 показана пояснительная схема, иллюстрирующая пример работы устройства 100 отображения изображения, когда режим потребления энергии преднамеренно подавляют.

На фиг.10 показана пояснительная схема, иллюстрирующая пример работы устройства 100 отображения изображения, когда режим сохранения энергии преднамеренно подавляют.

Подробное описание изобретения

Ниже будут подробно описаны предпочтительные варианты осуществления настоящего изобретения со ссылкой на приложенные чертежи. Следует отметить, что в данном описании и на чертежах элементы, которые имеют, по существу, одинаковую функцию и структуру, обозначены одинаковыми номерами ссылочных позиций, и повторное их пояснение исключено.

Далее описание будет приведено в следующем порядке:

<1. Вариант осуществления настоящего изобретения>

[1-1. Конфигурация устройства отображения изображения]

[1-2. Конфигурация модуля управления]

[1-3. Процесс сохранения энергии]

<2. Краткие выводы>

<1. Вариант осуществления настоящего изобретения>

[1-1. Конфигурация устройства отображения изображения]

Вначале будет описана конфигурация устройства отображения изображения в соответствии с вариантом осуществления настоящего изобретения. На фиг.1 показана пояснительная схема, предназначенная для пояснения внешнего вида устройства 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения. На фиг.1 показан вид спереди, на котором устройство 100 отображения изображения показано спереди. Внешний вид устройства 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения будет описан ниже со ссылкой на фиг.1.

Как показано на фиг.1, устройство 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения включает в себя модуль 104 формирования изображения, который снимает движущееся изображение, расположенное в верхней центральной части и в левой и в правой центральных частях панели 102 дисплея, который отображает неподвижное изображение или движущееся изображение. Модуль 104 формирования изображения снимает движущееся изображение в направлении, в котором устройство 100 отображения изображения отображает неподвижное изображение или движущееся изображение через панель 102 дисплея. Устройство 100 отображения изображения в соответствии с настоящим вариантом осуществления анализирует изображение, снятое модулем 104 формирования изображения, и детектирует лицо пользователя, отраженное на изображении. Устройство 100 отображения изображения, отличающееся тем, что его внутренние рабочие состояния изменяются в зависимости от того, включено или нет лицо пользователя в изображение, снятое модулем 104 формирования изображения.

Кроме того, устройство 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения включает в себя датчик 106, расположенный в нижней центральной части панели 102 дисплея. Датчик 106 детектирует, присутствует или нет человек перед устройством 100 отображения изображения. Устройство 100 отображения изображения также характеризуется тем, что состояние его внутренней работы изменяется в зависимости от того, присутствует или нет человек перед устройством 100 отображения изображения.

Кроме того, устройство 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения включает в себя светодиод (LED) 109. LED 109 уведомляет пользователя о состоянии устройства 100 отображения изображения через состояние освещения или цвет излучения.

Кроме того, в устройстве 100 отображения изображения, показанном на фиг.1, модуль 104 формирования изображения, который снимает движущееся изображение, расположен в трех положениях вокруг панели 102 дисплея изображения. Следует понимать, что в настоящем изобретении, положение ввода изображения, в котором снимают движущееся изображение, не ограничено этим примером. Например, устройство, отдельное от устройства 100 отображения изображения, может быть представлено, соответствующее устройство может быть подключено к устройству 100 отображения изображения, и движущееся изображение может быть снято соответствующим устройством. Кроме того, следует понимать, что количество модулей ввода изображения не ограничено тремя, и два или меньше, или четыре, или больше модуля ввода изображения могут быть установлены для съемки изображения. Кроме того, следует понимать, что количество датчиков 106 не ограничено одним, и два или больше датчика могут быть установлены для детектирования присутствия человека.

Кроме того, хотя это не показано на фиг.1, устройство 100 отображения изображения может дополнительно включать в себя модуль приема сигнала, который может принимать сигнал управления из удаленного контроллера (не показан) по инфракрасным лучам, по беспроводному каналу или тому подобное.

Внешний вид устройства 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения был описан выше со ссылкой на фиг.1. Далее будет описана конфигурация устройства 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения.

На фиг.2 показан пояснительный вид, иллюстрирующий конфигурацию устройства 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения. Конфигурация устройства 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения будет описана ниже со ссылкой на фиг.2.

Как показано на фиг.2, устройство 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения включает в себя панель 102 дисплея, модуль 104 формирования изображения, датчик 106, громкоговоритель 108 и модуль 110 управления.

Модуль 110 управления включает в себя модуль 112 ввода изображения, модуль 114 обработки изображения, модуль 116 анализа состояния просмотра, модуль 118 записи состояния просмотра, модуль 120 обработки оптимизации системы, и модуль 122 управления системой,

Панель 102 дисплея отображает неподвижное изображение или движущееся изображение на основе сигнала управления панелью. В настоящем варианте осуществления, панель 102 дисплея отображает неподвижное изображение или движущееся изображение через жидкий кристалл. Конечно, следует понимать, что настоящее изобретение не ограничено этим примером. Панель 102 дисплея может отображать неподвижное изображение или движущееся изображение с помощью дисплея излучающего свет типа, такого как устройство органической электролюминесценции (EL).

Модуль 104 формирования изображения расположен в верхней центральной части и в левой и правой центральных частях панели 102 дисплея, который отображает неподвижное изображение или движущееся изображение, как описано выше. Когда сигнал управления панелью подают в панель 102 дисплея, и движущееся изображение отображают на панели 102 дисплея, модуль 104 формирования изображения получает движущееся изображение в направлении, в котором устройство 100 отображения изображения отображает движущееся изображение через панель 102 дисплея. Модуль 104 формирования изображения может снимать движущееся изображение с помощью датчика с зарядовой связью (CCD) или датчика на основе комплементарного металлооксидного полупроводника (CMOS). Движущееся изображение, снимаемое модулем 104 формирования изображения, передают в модуль 110 управления.

Датчик 106 отображается в нижней центральной части панели 102 дисплея, которая отображает неподвижное изображение или движущееся изображение, как описано выше. Датчик 106 детектирует, присутствует или нет человек перед устройством 100 отображения изображения. Кроме того, когда человек присутствует перед устройством 100 отображения изображения, датчик 106 может детектировать расстояние между устройством 100 отображения изображения и человеком. Результат детектирования и информацию расстояния, получаемую с помощью датчика 106, передают в модуль 110 управления. Громкоговоритель 108 выводит голос на основе сигнала вывода голоса.

Модуль 110 управления управляет работой соответствующих компонентов устройства 100 отображения изображения. Соответствующие компоненты модуля 110 управления будут описаны ниже.

Модуль 112 ввода изображения принимает движущееся изображение, снятое модулем 104 формирования изображения. Движущееся изображение, принятое через модуль 112 ввода изображения, передают в модуль 114 обработки изображения и используют для обработки изображения, выполняемой модулем 114 обработки изображения.

Модуль 114 обработки изображения представляет собой пример модуля анализа изображения в соответствии с настоящим изобретением и выполняет различную обработку изображения для движущегося изображения, которое снимают с помощью модуля 104 формирования изображения, принятого из модуля 112 ввода изображения.

Обработка изображения, выполняемая модулем 114 обработки изображения, включает в себя процесс детектирования движущегося тела, включенного в движущееся изображение, снятое модулем 104 формирования изображения, процесс детектирования количества людей, включенный в движущееся изображение, и процесс детектирования лица и выражения лица, включенного в движущееся изображение. Результат различной обработки изображения, выполняемой модулем 114 обработки изображения, передают в модуль 116 анализа состояния просмотра и используют для анализа присутствия человека, который просматривает устройство 100 отображения изображения, или состояния человека, который просматривает устройство 100 отображения изображения.

Например, модуль 114 обработки изображения может использовать технологию, раскрытую в выложенных заявках на японский патент (JP-A) №№2007-65766 и 2005-44330 для процесса детектирования лица, состоящего в детектировании лица, включенного в изображение. Процесс детектирования будет просто описан ниже.

Для того чтобы детектировать лицо пользователя из изображения, положение лица, размер лица и направление лица в передаваемом изображении детектируют, соответственно. Когда положение и размер лица детектированы, часть изображения лица может быть вырезана из изображения. Части особенностей (положения особенности лица) для лица, такие как бровь, глаз, горло, нос и рот, детектируют на основе вырезанного изображения лица и информации о направлении лица. Положения особенностей лица могут быть детектированы путем детектирования положений особенности, например, используя технологию, называемую активными моделями внешнего вида (ААМ).

Когда положения особенности лица детектированы, рассчитывают количественную характеристику локальной особенности для каждого из детектируемых положений особенностей лица. Количественную характеристику локальной особенности рассчитывают, и рассчитанные количественные характеристики локальной особенности сохраняют совместно с изображением лица, и, таким образом, лицо можно отличать от изображения, снятого модулем 104 формирования изображения. В качестве способа распознавания лица, например, можно использовать технологию, раскрытую в JP-A №№2007-65766 и 2005-44330, и, таким образом, ее подробное описание будет исключено. Кроме того, можно определять на основе изображения лица или положений особенности лица, представляет ли лицо, появляющееся в подаваемом изображении, лицо мужчины или женщины, или представляет ли лицо, появляющееся в подаваемом изображении, взрослого или ребенка. Кроме того, поскольку информация лица была заранее записана, становится возможным выполнять поиск человека, появляющегося в подаваемом изображении среди записанных лиц и установления его индивидуальности.

Модуль 116 анализа состояния просмотра принимает результат различной обработки изображения, выполняемой модулем 114 обработки изображения, и результат детектирования, и информацию расстояния, получаемую в результате детектирования, выполняемого датчика 106. Модуль 116 анализа состояния просмотра анализирует присутствие или состояние человека, который просматривает изображение, отображаемое устройством 100 отображения изображения, используя результат различной обработки изображения, выполняемой модулем 114 обработки изображения, и результат детектирования и информацию о расстоянии, полученную в результате детектирования датчика 106. Поскольку модуль 116 анализа состояния просмотра анализирует присутствие человека или состояние зрителя, устройство 100 отображения изображения может уменьшить яркость панели 102 дисплея или может управлять направлением панели 102 дисплея в зависимости от того, присутствует или нет человек, который просматривает устройство 100 отображения изображения. Результат анализа, получаемый в процессе анализа, выполняемом модулем 116 анализа состояния просмотра, передают в модуль 118 записи состояния просмотра и в модуль 120 обработки оптимизации системы.

Кроме того, модуль 116 анализа состояния просмотра может детектировать движущееся тело на основе результата детектирования и информации расстояния, полученной путем детектирования, выполняемого с помощью датчика 106, но когда расстояние между датчиком 106 и движущимся телом равно или больше чем заданное расстояние, движущееся тело может быть исключено из цели детектирования.

Модуль 118 записи состояния просмотра записывает результат анализа, полученный в результате процесса анализа, выполняемого модулем 116 анализа состояния просмотра. Результат анализа модуля 116 анализа состояния просмотра, записанный в модуле 118 записи состояния просмотра, используется для процесса оптимизации системы в модуле 120 обработки оптимизации системы. Кроме того, результат анализа модуля 116 анализа состояния просмотра, записанный в модуле 118 записи состояния просмотра, может быть передан во внешний сервер 200 сбора информации.

Модуль 120 обработки оптимизации системы представляет собой пример модуля управления питанием в соответствии с настоящим изобретением. Модуль 120 обработки оптимизации системы рассчитывает информацию управления системой, для выполнения процесса оптимизации системы по соответствующим компонентам устройства 100 отображения изображения, используя результат анализа, полученный с помощью процесса анализа, выполняемого модулем 116 анализа состояния просмотра. Процесс оптимизации системы для соответствующих компонентов устройства 100 отображения изображения включает в себя управление питанием устройства 100 отображения изображения, управление яркостью панели 102 дисплея, управление направлением панели 102 дисплея, управление содержанием дисплея панели 102 дисплея, управление громкостью звука при выводе звука из громкоговорителя 108, и управление работой схемы (не показана), выполненный с возможностью повышения качества изображения движущегося изображения, отображаемого на панели 102 дисплея.

Поскольку схема выполнена с возможностью повышения качества изображения движущегося изображения, отображаемого на панели 102 дисплея, например, может использоваться схема увеличения скорости, которая увеличивает частоту следования кадров вдвое, в три раза или тому подобное. Потреблением энергии питания устройства 100 отображения изображения можно управлять путем остановки работы части или всех цепей в схеме, выполненной с возможностью повышения качества изображения движущегося изображения, такой как схема увеличения скорости.

Устройство 100 отображения изображения может выполнять процесс сохранения энергии питания на основе информации управления системой, рассчитанной модулем 120 обработки оптимизации системы. Информацию управления системой, рассчитанную модулем 120 обработки оптимизации системы, передают в модуль 122 управления системой.

Кроме того, устройство 100 отображения изображения в соответствии с настоящим вариантом осуществления выполняет операцию сохранения энергии питания в соответствии с множеством режимов сохранения энергии питания, которые будут описаны ниже. В каждом из режиме сохранения энергии питания выполняют операцию сохранения энергии питания на основе информации управления системой, которую создают с помощью модуля 120 обработки оптимизации системы так, чтобы она имела другую структуру в соответствии с результатом анализа модуля 116 анализа состояния просмотра.

Модуль 122 управления системой выполняет процесс оптимизации системы для соответствующих компонентов устройства 100 отображения изображения на основе информации управления системой, рассчитанной модулем 120 обработки оптимизации системы. В частности, модуль 122 управления системой выполняет управление яркостью панели 102 дисплея, управление направлением панели 102 дисплея, управление содержанием отображения панели 102 дисплея, и управление громкостью звука для звука, выводимого из громкоговорителя 108, на основе информации управления системой, рассчитанной в модуле 120 обработки оптимизации системы.

Конфигурация устройства 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения была описана выше со ссылкой на фиг.2. Как описано выше, устройство 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения анализирует состояние просмотра пользователя через модуль 104 формирования изображения и датчик 106. В обычном уровне техники процесс формирования изображения выполняют с помощью модуля 104 формирования изображения, и состояние просмотра пользователя анализируют только через процесс детектирования лица, который определяет, включено или нет лицо в изображение, снятое модулем 104 формирования изображения. Однако когда состояние просмотра пользователя анализируют только через процесс детектирования лица, возникает проблема, состоящая в том, что даже когда желательно непрерывно просматривать дисплей, например, когда трудно детектировать лицо пользователя или, когда пользователь отводит взгляд в течение определенного периода времени, в конечном итоге, определяют, что просмотр отсутствует, и, таким образом, дисплей выключают. Кроме того, поскольку процесс детектирования лица требует относительно длительного времени обработки изображения по сравнению с процессом детектирования движущегося тела, используя датчик или тому подобное, в окружающей среде, в которой скорость расчетов или ресурсы ограничены, отклик, из которого следует, что пользователь появляется перед устройством дисплея для просмотра, когда отображают изображение, получают с задержкой.

В то же время, существует дисплей, в котором управление сохранением энергии выполняют путем детектирования движущегося тела или действия пользователя через пироэлектрический инфракрасный элемент или другие датчики и анализируют состояния просмотра пользователя. Однако при этом возникала проблема, состоящая в том, что, когда пользователь продолжает смотреть без движения, предполагают, что пользователь отсутствует, и, таким образом, экран дисплея отключают. Для исключения такой неправильной работы, необходимо увеличить время, по истечению которого начинается управление сохранением энергии, что, в свою очередь, ухудшает эффект сохранения энергии.

Устройство 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения комбинирует процесс детектирования лица на изображении, снятом модулем 104 формирования изображения, и процесс детектирования движущегося тела, выполняемый датчиком 106. Таким образом, состояние просмотра пользователя может быть более эффективно проанализировано.

Далее будет подробно описана конфигурация модуля 110 управления, включенного в устройство 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения.

[1-2. Конфигурация модуля управления]

На фиг.3 показан пояснительный вид, предназначенный для пояснения конфигурации модуля 110 управления, включенного в устройство 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения. В частности, на фиг.3 иллюстрируется конфигурация модуля 116 анализа состояния просмотра и модуля 120 обработки оптимизации системы среди компонентов, включенных в модуль 110 управления. Конфигурации модуля 116 анализа состояния просмотра и модуля 120 обработки оптимизации системы будут описаны ниже со ссылкой на фиг.3.

Как показано на фиг.3, модуль 116 анализа состояния просмотра включает в себя модуль 132 анализа состояния просмотра пользователя и модуль 134 анализа движения пользователя. Модуль 120 обработки оптимизации системы включает в себя модуль 142 расчета обработки оптимизации панели и модуль 144 расчета обработки оптимизации громкоговорителя.

Модуль 132 анализа состояния просмотра пользователя принимает результат различной обработки изображения, выполняемой модулем 114 обработки изображения, и результат детектирования и информацию расстояния, получаемые путем детектирования датчика 106. Модуль 132 анализа состояния просмотра пользователь детектирует, присутствует или нет человек, который просматривает устройство 100 отображения изображения, и направление или размер лица человека, который просматривает устройство 100 отображения изображения, используя результат различной обработки изображения, выполняемой модулем 114 обработки изображения, и результат детектирования, и информацию о расстоянии, получаемую путем детектирования датчиком 106.

Модуль 134 анализа движения пользователя принимает результат различной обработки изображения, выполняемой модулем 114 обработки изображения, и результат детектирования, и информацию расстояния, получаемую путем детектирования датчика 106. Модуль 134 анализа движения пользователя анализирует, присутствует или нет человек, который просматривает устройство 100 отображения изображения, на основе временной последовательности или специального состояния, или записи движения пользователя, используя результат различной обработки изображения, выполняемой модулем 114 обработки изображения, и результата детектирования, и информации расстояния, получаемой при детектировании, выполняемом датчиком 106.

Здесь модуль 114 обработки изображения передает снятое изображение, информацию детектирования лица (например, информацию, такую как координаты центра [a1, b1], размер лица [w1, h1], и направление лица [i1]) каждого пользователя, который использует устройство 100 отображения изображения в снятом изображении, и информацию движущегося тела (например, информацию, такую как координаты центра [c1, d1], размер области [s1] лица) в модуль 116 анализа состояния просмотра. Модуль 116 анализа состояния просмотра выполняет процесс анализа, состоящий в том, что он определяет, присутствует или нет человек, который просматривает устройство 100 отображения изображения, используя информацию, принятую из модуля 114 обработки изображения через модуль 132 анализа состояния просмотра пользователя, и модуль 134 анализа движения пользователя.

Модуль 142 расчета обработки оптимизации панели рассчитывает процесс (процесс воплощения сохранения энергии питания), позволяющий воплотить оптимальное сохранение энергии питания в панели 102 дисплея, используя результат процесса анализа, выполняемый модулем 132 анализа состояния просмотра пользователя, и модулем 134 анализа движения пользователя. Например, процесс, выполненный с возможностью воплощения оптимального сохранения энергии питания в панели 102 дисплея, может включать в себя процесс управления потреблением энергии питания путем увеличения или уменьшения яркости панели 102 дисплея в соответствии с тем, присутствует или нет человек, который просматривает устройство 100 отображения изображения, и временем, в течение которого человек, который просматривает устройство 100 отображения изображения, не присутствует, или управление потреблением энергии питания путем увеличения или уменьшения громкости звука голосового выхода через громкоговоритель 106. Процесс воплощения сохранения энергии, рассчитанный модулем 142 расчета обработки оптимизации панели, передают в модуль 122 управления системой и используют в процессе сохранения энергии питания панели 102 дисплея.

Модуль 144 расчета обработки оптимизации громкоговорителя рассчитывает процесс (процесс воплощения сохранения энергии питания), позволяющий воплотить оптимальное сохранение энергии питания в громкоговорителе 108, используя результат процесса анализа, выполняемый модулем 132 анализа состояния просмотра пользователем, и модулем 134 анализа движения пользователя. Например, процесс, позволяющий воплотить оптимальное сохранение энергии питания в громкоговорителе 108, может включать в себя процесс управления громкостью звука громкоговорителя 108 в соответствии с тем, присутствует или нет лицо, которое просматривает устройство 100 отображения изображения, и временем, в течение которого лицо, которое просматривает устройство 100 отображения изображения, не присутствует. Процесс воплощения сохранении энергии, рассчитанный модулем расчета 144 обработки оптимизации громкоговорителя, передают в модуль 122 управления системой и используют в процессе сохранения энергии в громкоговорителе 108.

Кроме того, для расчета процесса воплощения волнообразной кривой потребления энергии питания в модуле 120 обработки оптимизации системы можно использовать модуль 152 расчета эффекта обработки оптимизации. Модуль 152 расчета эффекта обработки оптимизации рассчитывает информацию управления для оптимального процесса сохранения энергии питания, соответствующего состоянию просмотра пользователя, используя результат анализа модуля 116 анализа состояния просмотра и результат расчета процесса воплощения сохранения энергии, выполняемого модулем 120 обработки оптимизации системы.

Конфигурация модуля 110 управления, включенного в устройство 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения, была описана со ссылкой на фиг.3. Далее будет описан процесс сохранения энергии, выполняемый устройством 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения.

[1-3. Процесс сохранения энергии питания]

На фиг.4 показана блок-схема последовательности операций, иллюстрирующая процесс сохранения энергии питания, выполняемый устройством 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения. Процесс сохранения энергии питания, выполняемый устройством 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения, будет описан ниже со ссылкой на фиг.4.

Блок-схема последовательности операций, иллюстрируемая на фиг.4, иллюстрирует пример процесса перехода в режим (режим сохранения энергии питания) подавления потребляемой энергии питания устройства 100 отображения изображения. Процесс перехода в режим сохранения энергии питания устройством 100 отображения изображения в соответствии с примером настоящего изобретения будет подробно описан ниже. Когда устройство 100 отображения изображения включено, модуль 120 обработки оптимизации системы устанавливает флаг управления в единицу (1) (этап S101). Флаг управления представляет собой флаг для определения, следует или нет выполнить режим сохранения энергии питания в устройстве 100 отображения изображения. Режим сохранения энергии питания не выполняют, когда флаг равен 1, но когда флаг равен нулю (0), выполняют режим сохранения энергии питания. Модуль 116 анализа состояния просмотра выполняет процесс детектирования лица и процесс детектирования движущегося тела для определения, присутствует или нет человек, который просматривает устройство 100 отображения изображения (этап S102).

Модуль 116 анализа состояния просмотра определяет, было или нет детектировано присутствие человека, который просматривает устройство 100 отображения изображения, как результат процесса детектирования лица и процесса детектирования движущегося тела на этапе S102 (этап S103). Когда на этапе S103 определяют, что модуль 116 анализа состояния просмотра детектировал присутствие человека, который просматривает устройство 100 отображения изображения, модуль 120 обработки оптимизации системы устанавливает флаг управления в 0 (этап S104). Однако, когда на этапе S103 определяют, что модуль 116 анализа состояния просмотра не детектировал присутствие человека, который просматривает устройство 100 отображения изображения, флаг управления остается равным 1.

Затем определяют, выполнил ли пользователь или нет операцию с устройством 100 отображения изображения через пульт дистанционного управления, для включения в работу устройства 100 отображения изображения (этап S105).Определение операции может быть выполнено с помощью модуля 116 анализа состояния просмотра.

Когда на этапе S105 определяют, что пользователь выполнил операцию с устройством 100 отображения изображения через пульт дистанционного управления, информацию о конечном времени операции, содержащуюся в устройстве 100 отображения изображения, устанавливают на текущее время (этап S106). Установка информации о конечном времени операции на текущее время может быть выполнена, например, с помощью модуля 116 анализа состояния просмотра.

Когда информацию о конечном времени операции, содержащемся в устройстве 100 отображения изображения, устанавливают на текущее время на этапе S106, модуль 120 обработки оптимизации системы отключает режим сохранения энергии питания (этап S107).

Однако когда на этапе S105 определяют, что пользователь не выполнил операцию с устройством 100 отображения изображения с использованием пульта дистанционного управления, этап S106 и этап S107 пропускают.

После этого, модуль 120 обработки оптимизации системы определяет, удовлетворяется или нет условие начала режима сохранения энергии питания (этап S108). Условие начала режима сохранения энергии питания зависит от режима сохранения энергии питания, обозначенного пользователем. Пример условия начала режима сохранения энергии питания в устройстве 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения будет описан ниже, но следует понимать, что количество режимов сохранения энергии питания и условия начала режима сохранения энергии питания для каждого режима сохранения энергии питания не ограничены этим примером.

Устройство 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения имеет три вида режимов сохранения энергии питания, включающие в себя "Высокий", "Средний" и "Низкий". Модуль 120 обработки оптимизации системы рассчитывает информацию управления системой, соответствующую каждому режиму сохранения энергии питания, и модуль 122 управления системой выполняет различное управление на основе рассчитанной информации управления системой. Таким образом, потреблением энергии питания соответствующих компонентов устройства 100 отображения изображения можно управлять с разными профилями.

"Высокий" представляет собой режим сохранения энергии питания, в котором, когда модуль 116 анализа состояния просмотра не распознает лицо в течение определенного периода времени, при этом выполняет переход к операции сохранения энергии питания, состоящей в подавлении потребления энергии.

"Средний" представляет собой режим сохранения энергии питания, в котором, когда модуль 116 анализа состояния просмотра не распознал лицо в течение определенного периода времени, выполняют операцию сохранения энергии питания, состоящую в подавлении потребления питания, и когда модуль 116 анализа состояния просмотра не распознал лицо и движущееся тело в течение определенного периода времени, дополнительно выполняют переход к операции сохранения энергии питания, состоящей в подавлении потребления энергии питания.

"Низкий" представляет собой режим сохранения энергии питания, в котором, когда модуль 116 анализа состояния просмотра не распознал лицо и движущееся тело в течение определенного периода времени, при этом выполняют переход к режиму сохранения энергии питания, состоящего в подавлении потребления энергии.

На фиг.5 показана пояснительная схема, предназначенная для пояснения операции сохранения энергии питания в соответствующих режимах сохранения энергии питания, в устройстве 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения. График, показанный в верхнем ряду на фиг.5, хронологически представляет структуры детектирования лица и детектирования движущегося тела. На других графиках на фиг.5, по горизонтальной оси обозначено время, и на вертикальной оси обозначено потребление энергии питания.

Как показано на фиг.5, когда режим сохранения энергии питания является "Высоким", если модуль 116 анализа состояния просмотра не может распознать лицо в течение определенного периода времени (например, от 3 секунд до 10 секунд), потребление энергии питания последовательно подавляют, например, путем уменьшения яркости панели 102 дисплея или путем уменьшения громкости звука громкоговорителя 108. Однако, когда модуль 116 анализа состояния просмотра может распознать лицо или когда была выполнена операция с устройством 100 отображения изображения с помощью пульта дистанционного управления, режим сохранения энергии питания отключают.

Кроме того, когда режим сохранения энергии питания является "Средним", если модуль 116 анализа состояния просмотра не может распознать лицо в течение определенного времени (например, от 10 секунд до 30 секунд), потребление энергии питания последовательно подавляют до приблизительно половины, например, путем уменьшения яркости панели 102 дисплея или путем понижения громкости звука громкоговорителя 108. Кроме того, если модуль 116 анализа состояния просмотра не может распознать лицо и движущееся тело в течение определенного периода времени (например, от 1 минуты до 3 минут), потребление энергии питания дополнительно подавляют, например, путем уменьшения яркости панели 102 дисплея или путем уменьшения громкости звука громкоговорителя 108. Однако, когда модуль 116 анализа состояния просмотра может распознать лицо или когда операция в устройстве 100 отображения изображения была выполнена с использованием пульта дистанционного управления, режим сохранения энергии питания отключают.

Кроме того, когда режим сохранения энергии питания является "Низким", если модуль 116 анализа состояния просмотра не может распознать лицо и движущееся тело в течение определенного времени (например, от 3 минут до 10 минут), потребление энергии питания постоянно подавляют, например, путем уменьшения яркости панели 102 дисплея или путем уменьшения громкости звука громкоговорителя 108. Однако, когда модуль 116 анализа состояния просмотра может распознать лицо или когда операция в устройстве 100 отображения изображения была выполнена с помощью пульта дистанционного управления, режим сохранения энергии питания отключают.

На фиг.5 иллюстрируется операция сохранения энергии питания в соответствующих режимах сохранения энергии питания с использованием двух структур детектирования лица и детектирования движущегося тела. Профиль, показанный в среднем столбце на фиг.5, иллюстрирует случай, в котором движущееся тело не детектируют после того, как лицо не было детектировано, движущееся тело детектируют, и лицо детектируют после детектирования. Этот профиль называется "профилем 1". Кроме того, профиль, показанный справа на фиг.5, иллюстрирует случай, в котором лицо детектируют снова после того, как лицо не было детектировано, лицо не было детектировано снова, движущееся тело не было детектировано снова, вначале было детектировано лицо, и затем было детектировано движущееся тело. Профиль называется "профилем 2".

Если режим сохранения энергии питания является "Высоким", поскольку переход в режим сохранения энергии питания выполняют только в соответствии с наличием или отсутствием лица, операцию сохранения энергии питания, показанную на графике второго этапа сверху на фиг.5, выполняют для каждого из случая профиля 1 и случая профиля 2. Если режим сохранения энергии питания является "Средним", поскольку потребление энергии питания подавляется тем, что вначале выполняют переход в режим сохранения энергии питания в соответствии с наличием или отсутствием лица, и затем дополнительно подавляют потребление энергии питания в соответствии с присутствием или отсутствием движущегося тела, операцию сохранения энергии питания, показанную на графике третьего этапа сверху на фиг.5, выполняют для каждого из случая профиля 1 и случая профиля 2. Если режим сохранения энергии питания "Низкий", поскольку потребление энергии питания подавляется тем, что в вначале выполняют переход к режиму сохранения энергии питания в соответствии с присутствием или отсутствием лица и движущегося тела, операцию сохранения энергии питания, показанную на графике четвертого этапа сверху фиг.5, выполняют для каждого случая профиля 1 и случая профиля 2.

Когда модуль 120 обработки оптимизации системы определяет, что удовлетворяется состояние начала режима сохранения энергии питания на этапе S108, модуль 120 обработки оптимизации системы определяет, равен или не флаг управления 0 (этап S109).

Когда модуль 120 обработки оптимизации системы определяет, что флаг управления равен 0 на этапе S109, модуль 120 обработки оптимизации системы определяет, превысил ли период времени, полученный путем вычитания конечного времени операции, установленного на этапе S106 из текущего времени, определенное время (этап S110). Например, в случае, в котором режим сохранения энергии питания устройства 100 отображения изображения установлен как "Высокий", модуль 120 обработки оптимизации системы определяет, превысило или нет 10 секунд время, полученное путем вычитания конечного времени операции, установленного на этапе S106 из текущего времени.

Когда модуль 120 обработки оптимизации системы определяет, что время, полученное в результате вычитания конечного времени операции, установленного на этапе S106 из текущего времени, превысило определенное время на этапе S110, устройство 100 отображения изображения начинает режим сохранения энергии питания (этап S111). Например, в случае, в котором режим сохранения энергии питания устройства 100 отображения изображения установлен как "Высокий", если время, полученное путем вычитания конечного времени операции, установленного на этапе S106, из текущего времени превысило 10 секунд, устройство 100 отображения изображения начинает режим сохранения энергии питания, и уменьшает яркость панели 102 дисплея или уменьшает громкость звука громкоговорителя 108, для того, чтобы неизменно подавлять потребление питания.

После того как переход в режим сохранения питания будет выполнен на этапе S111, когда модуль 120 обработки оптимизации системы определяет, что условие начала режима сохранения питания не удовлетворяется на этапе S108, когда модуль 120 обработки оптимизации системы определяет, что флаг управления не равен 0 на этапе S109, или когда модуль 120 обработки оптимизации системы определяет, что время, полученное путем вычитания конечного времени операции из текущего времени, не превысило определенное время на этапе S110, определяют, была ли закончена операция устройства 100 отображения изображения, например, поскольку питание отключено (этап S112). Если операция устройства 100 отображения изображения была закончена, процесс заканчивается, как есть. Однако, если операция устройства 100 отображения изображения не была закончена, процесс возвращается на этап S102, и выполнение процесса детектирования лица и процесса детектирования движущегося тела продолжается с помощью модуля 116 анализа состояния просмотра.

Процесс сохранения энергии питания, выполняемый устройством 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения, был описан выше со ссылкой на фиг.4. Далее будет описана работа операции сохранения энергии питания в каждом режиме сохранения энергии питания в устройстве 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения.

На фиг.6 показана блок-схема последовательности операций, иллюстрирующая операцию сохранения энергии питания, когда режим сохранения энергии питания в устройстве 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения является "Высоким". Операция по сохранению энергии питания, когда режим сохранения энергии питания в устройстве 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения является "Высоким", будет описана ниже со ссылкой на фиг.6.

Вначале таймер, относящийся к устройству 100 отображения изображения, заранее сбрасывают перед началом операции сохранения энергии питания (этап S121). Например, сброс таймера на этапе S121 может быть выполнен с помощью модуля 116 анализа состояния просмотра.

Затем модуль 116 анализа состояния просмотра выполняет процесс детектирования лица (этап S122). Модуль 116 анализа состояния просмотра определяет, включено или нет лицо человека в изображение, передаваемое в модуль 112 ввода изображения, как результат выполнения процесса детектирования через модуль 116 анализа состояния просмотра (этап S123).

Когда модуль 116 анализа состояния просмотра определяет, что лицо человека включено в изображение, переданное в модуль 112 ввода изображения на этапе S123, таймер, относящийся к устройству 100 отображения изображения, снова сбрасывают (этап S124). Например, сброс таймера на этапе S124 может быть выполнен с помощью модуля 116 анализа состояния просмотра, аналогично сбросу таймера на этапе S121.

Когда таймер сбрасывают на этапе S124, модуль 120 обработки оптимизации системы устанавливает яркость панели 102 дисплея как стандартную яркость (яркость во время обычного использования) (этап S125).

Однако когда модуль 116 анализа состояния просмотра определяет, что лицо человека не включено в изображение, передаваемое модулем 112 ввода изображения на этапе S123, модуль 120 обработки оптимизации системы определяет, прошли или нет Т1 секунд (например, 10 секунд) в таймере (этап S126).

Когда модуль 120 обработки оптимизации системы определяет, что Т1 секунд прошли в таймере на этапе S126, модуль 120 обработки оптимизации системы устанавливает яркость панели 102 дисплея, как темную или нулевую (0) (этап S127).

Когда модуль 120 обработки оптимизации системы устанавливает яркость панели 102 дисплея, как нулевую или самую темную на этапе S127 или когда модуль 120 обработки оптимизации системы определяет, что Т1 секунд еще не прошли в таймере на этапе S126, модуль 120 обработки оптимизации системы определяет, прошли или нет Т2 секунд в таймере (здесь, Т2>Т1) (этап S128).

Когда модуль 120 обработки оптимизации системы определяет, что Т2 секунд прошли в таймере на этапе S128, модуль 120 обработки оптимизации системы выполняет процесс отключения основного питания устройства 100 отображения изображения (этап S129). Однако когда модуль 120 обработки оптимизации системы определяет, что Т2 секунд не прошли в таймере на этапе S128, процесс возвращается на этап S122, и процесс детектирования лица продолжается с помощью модуля 116 анализа состояния просмотра.

Операция по сохранению энергии питания, когда установлен "Высокий" режим сохранения энергии питания в устройстве 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения, был описан выше со ссылкой на фиг.6. Далее будет описана операция сохранения энергии питания, когда установлен "Средний" режим сохранения энергии питания в устройстве 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения является.

На фиг.7 показана блок-схема последовательности операций, иллюстрирующая операцию сохранения энергии питания, когда режим сохранения энергии питания в устройстве 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения является "Средним". Операция сохранения энергии питания, когда режим сохранения энергии питания в устройстве 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения является "Средним", будет описана ниже со ссылкой на фиг.7.

Вначале два таймера (ниже, для удобства описания, эти два таймера называются как таймеры 1 и 2, соответственно), содержащиеся в устройстве 100 отображения изображения, заранее сбрасывают перед началом операции сохранения энергии питания (этап S131). Например, сброс таймеров 1 и 2 на этапе S121 может быть выполнен с помощью модуля 116 анализа состояния просмотра. Таймер 1 измеряет время, в течение которого модуль анализа 116 состояния просмотра не детектирует лицо, и таймер 2 измеряет время, в течение которого модуль 116 анализа состояния просмотра не детектирует присутствие движущегося тела.

Затем модуль 116 анализа состояния просмотра выполняет процесс детектирования и процесс детектирования движущегося тела (этап S132). Модуль 116 анализа состояния просмотра определяет, включено или нет лицо человека в изображение, передаваемое в модуль 112 входного изображения, как результат выполнения процесса детектирования лица, через модуль 116 анализа состояния просмотра (этап S133).

Когда модуль 116 анализа состояния просмотра определяет, что лицо человека включено в изображение, передаваемое в модуль 112 ввода изображения на этапе S133, таймеры 1 и 2, содержащиеся в устройстве 100 отображения изображения, снова сбрасывают (этап S134). Например, сброс таймеров на этапе S134 может быть выполнен с помощью модуля 116 анализа состояния просмотра аналогично сбросу таймеров на этапе S131.

Когда таймеры сбрасывают на этапе S134, модуль 120 обработки оптимизации системы устанавливает яркость панели 102 дисплея, как стандартную яркость (яркость во время обычного использования) (этап S135).

Однако когда модуль 116 анализа состояния просмотра определяет, что лицо человека не включено в изображение, переданное в модуль 112 ввода изображения на этапе S133, модуль 116 анализа состояния просмотра определяет, детектировал или нет датчик 106 движущееся тело (этап S136).

Когда модуль 116 анализа состояния просмотра определяет, что датчик 106 детектировал движущееся тело на этапе S136, таймер 2 сбрасывают (этап S137). Например, сброс таймера 2 на этапе S137 может быть выполнен с помощью модуля 116 анализа состояния просмотра, аналогично сбросу таймеров на этапе S131 и этапе S134.

Когда таймер 2 сбрасывают на этапе S137, определяют, равна или нет яркость панели 102 дисплея нулю (0) (этап S138). Например, определение яркости на панели 102 дисплея может быть выполнено с помощью модуля 120 обработки оптимизации системы.

Когда модуль 120 обработки оптимизации системы определяет, что яркость панели 102 дисплея равна нулю на этапе S138, модуль 120 обработки оптимизации системы считает, что пользователь находится перед устройством 100 отображения изображения, но лицо пользователя не обращено в направлении панели дисплея. Таким образом, модуль 120 обработки оптимизации системы рассчитывает информацию управления системой для выполнения управления по снижению яркости панели 102 дисплея и снижает яркость панели 102 дисплея (этап S139).

Затем, модуль 120 обработки оптимизации системы определяет, прошли или нет Т3 секунд (например, 30 секунд) в таймере 1, и Т4 секунд (например, 180 секунд), которые больше, чем Т3 секунд, еще не прошли в таймере 2 (этап S140).

Когда модуль 120 обработки оптимизации системы определяет, прошли или нет Т3 секунд в таймере 1, и Т4 секунд еще не прошли в таймере 2, на этапе S140, модуль 120 обработки оптимизации системы считает, что пользователь находится перед устройством 100 отображения изображения, но лицо пользователя не обращено в направлении панели отображения. Таким образом, модуль 120 обработки оптимизации системы рассчитывает информацию управления системой для выполнения управления по снижению яркости панели 102 дисплея и снижает яркость панели 102 дисплея (этап S141).

Однако когда модуль 120 обработки оптимизации системы определяет, что Т3 секунд еще не прошли в таймере 1 на этапе S140, модуль 120 обработки оптимизации системы пропускает этап S141.

Затем модуль 120 обработки оптимизации системы определяет, прошли или нет Т4 секунд в таймере 2 (этап S142). Когда модуль 120 обработки оптимизации системы определяет, что Т4 секунд прошли в таймере 2 на этапе S142, модуль 120 обработки оптимизации системы считает, что пользователь не находится перед устройством 100 отображения изображения. Таким образом, модуль 120 обработки оптимизации системы рассчитывает информацию управления системой для выполнения управления, для перевода яркости панели 102 дисплея в ноль, и переводит яркость панели 102 дисплея в ноль (этап S143).

Однако когда модуль 120 обработки оптимизации системы определяет, что Т4 секунд еще не прошли на таймере 2 на этапе S142, модуль 120 обработки оптимизации системы пропускает этап S142.

После этого модуль 120 обработки оптимизации системы определяет, прошел ли период Т5 секунд, который длиннее, чем Т4 секунд, в таймере 2 (этап S144). Когда модуль 120 обработки оптимизации системы определяет, что Т5 секунд, которые длиннее, чем Т4 секунд, прошли в таймере 2 на этапе S144, модуль 120 обработки оптимизации системы считает, что пользователь не находится перед устройством 100 отображения изображения. Таким образом, модуль 120 обработки оптимизации системы выполняет процесс выключения основного питания устройства 100 отображения изображения (этап S145). Однако когда модуль 120 обработки оптимизации системы определяет, что Т5 секунд, которые длиннее, чем Т4 секунд, еще не прошли в таймере 2 на этапе S144, процесс возвращается на этап S132, и процесс детектирования лица и процесс детектирования движущегося тела продолжают с помощью модуля 116 анализа состояния просмотра.

Операция сохранения энергии питания, когда режим сохранения питания в устройстве 100 отображения изображения, в соответствии с вариантом осуществления настоящего изобретения, является "Средним", была описана выше со ссылкой на фиг.7. Далее будет описана операция сохранения питания, когда режим сохранения энергии питания в устройстве 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения является "Низким".

На фиг.8 показана блок-схема последовательности операций, иллюстрирующая операцию сохранения энергии питания, когда режим сохранения энергии питания в устройстве 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения является "Низким". Операция по сохранению энергии питания, когда режим сохранения энергии питания в устройстве 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретение является "Низким", будет описана ниже со ссылкой на фиг.8.

Вначале таймер, содержащийся в устройстве 100 отображения изображения, заранее сбрасывают перед началом операции сохранения энергии питания (этап S151). Например, сброс таймера на этапе S151 может быть выполнен модулем 116 анализа состояния просмотра.

Затем модуль 116 анализа состояния просмотра выполняет обработку детектирования лица и процесс детектирования движущегося тела (этап S152). Модуль 116 анализа состояния просмотра определяет, было или нет детектировано лицо или движущееся тело, то есть человек перед устройством 100 отображения изображения в результате выполнения процесса детектирования лица и процесса детектирования движущегося тела в модуле 116 анализа состояния просмотра (этап S153).

Когда модуль 116 анализа состояния просмотра определяет, что лицо или движущееся тело были детектированы на этапе S153, таймер, содержащийся в устройстве 100 отображения изображения, снова сбрасывают (этап S154). Например, сброс таймера на этапе S154 может быть выполнен модулем 116 анализа состояния просмотра аналогично сбросу таймера на этапе S151.

Когда таймер, содержащийся в устройстве 100 отображения изображения, сбрасывают на этапе S154, модуль 120 обработки оптимизации системы устанавливает яркость панели 102 дисплея, как стандартную яркость (яркость во время обычного использования) (этап S155).

Однако когда модуль 116 анализа состояния просмотра определяет, что ни лицо, ни движущееся тело не были детектированы на этапе S153, модуль 120 обработки оптимизации системы определяет, истекли или нет Т6 секунд (например, 600 секунд) в таймере (этап S156).

Когда модуль 120 обработки оптимизации системы определяет, что Т6 секунд прошли в таймере на этапе S156, модуль 120 обработки оптимизации системы устанавливает яркость панели 102 дисплея, как темную или нулевую (0) (этап S157).

Когда модуль 120 обработки оптимизации системы устанавливает яркость панели 102 дисплея, как равную нулю, или самую темную на этапе S157, или когда модуль 120 обработки оптимизации системы определяет, что Т7 секунд не прошли еще в таймере на этапе S156, модуль 120 обработки оптимизации системы определяет, прошли или нет Т7 секунд в таймере (здесь, Т7>Т6) (этап S158).

Когда модуль 120 обработки оптимизации системы определяет, что Т7 секунд прошли в таймере на этапе S158, модуль 120 обработки оптимизации системы выполняет процесс отключения основного питания устройства 100 отображения изображения (этап S159). Однако когда модуль 120 обработки оптимизации системы определяет, что Т7 секунд не истекли в таймере на этапе S158, процесс возвращается на этап S152, и модуль 116 анализа состояния просмотра продолжает выполнять процесс детектирования лица и процесс детектирования движущегося тела.

Операция по сохранению энергии питания, когда режим сохранения энергии питания в устройстве 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения является "Низким", была описан выше со ссылкой на фиг.8.

<2. Краткие выводы>

Как описано выше, в соответствии с устройством 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения, определяют, находится ли пользователь перед устройством 100 отображения изображения в соответствии с тем, включено или нет изображение лица человека в изображение, снятое модулем 104 формирования изображения, и было ли детектировано движущееся тело датчиком 106. Поскольку процесс детектирования лица и процесс детектирования движущегося тела комбинируют, как описано выше, присутствие пользователя, который находится перед устройством 100 отображения изображения, может быть детектировано с высокой степенью точности.

Кроме того, в соответствии с устройством 100 отображения изображения, в соответствии с вариантом осуществления настоящего изобретения, множество режимов сохранения энергии питания может быть воплощено путем комбинирования процесса детектирования и процесса детектирования движущегося тела. Таким образом, устройство 100 отображения изображения в соответствии с вариантом осуществления настоящего изобретения может выполнять режим сохранения энергии питания, используя только процесс детектирования лица, и может выполнять режим сохранения энергии питания, в котором процесс детектирования лица и процесс детектирования движущегося тела скомбинированы. Поскольку множество режимов сохранения энергии питания может быть воплощено, становится возможным выполнять режим сохранения энергии питания, пригодный для состояния использования пользователем устройства 100 отображения изображения.

Кроме того, последовательность процессов, описанная выше, может быть воплощена с использованием аппаратных или программных средств. Когда последовательность процессов воплощается с использованием программных средств, программу, которая составляет программное обеспечение, устанавливают в компьютер, интегрированный в специализированное аппаратное средство или в персональный компьютер общего назначения, в котором различные функции могут быть выполнены путем установки различных программ с носителя записи программы.

В то время как предпочтительные варианты осуществления настоящего изобретения были описаны выше со ссылкой на приложенные чертежи, настоящее изобретение, конечно, не ограничено описанными выше примерами. Специалист в данной области техники может найти различные изменения и модификации в пределах объема приложенной формулы изобретения, и следует понимать, что они, естественно, будут находиться в пределах технического объема настоящего изобретения.

Например, состояние использования пользователем может быть записано в устройстве 100 отображения изображения по порядку, и, используя результат обучения записанному состоянию использования пользователем, модуль 120 обработки оптимизации системы может автоматически выбирать режим сохранения электроэнергии среди множества режимов сохранения энергии питания. Пример процесса автоматического выбора режима сохранения энергии питания будет описан ниже.

Например, пользователь может быть установлен путем выполнения процесса распознавания лица в изображении, снятом модулем 104 формирования изображения, и модуль 120 обработки оптимизации системы может автоматически выбирать режим сохранения энергии питания для каждого из установленных пользователей. Например, режим сохранения энергии питания, в котором в меньшей степени выполняют стирание изображения, и эффект сохранения энергии питания будет низким, может быть заранее установлен в устройстве 100 отображения изображения для отца, и режим сохранения энергии питания, в котором стирание изображения выполняют часто, и эффект сохранении энергии будет низким, может быть заранее установлен для устройства 100 отображения изображения для матери. В зависимости от человека, является ли человек, включенный в изображение, снятое модулем 104 формирования изображения, отцом или матерью, модуль 120 обработки оптимизации системы может автоматически выбирать режим сохранения энергии питания.

Например, модуль 120 процесса оптимизации системы может автоматически выбирать оптимальный режим сохранения энергии питания путем анализа стиля просмотра конкретного человека. Например, в случае пользователя, который более вероятно включает телевизор на длительное время, но в меньшей степени смотрит телевизор, переход к стиранию изображения выполняют легко. Однако, в случае пользователя, который, более вероятно смотрит программу в течение короткого времени, переход к стиранию изображения становится выполнить более трудно. Поскольку необходимо записывать стиль просмотра пользователя в течение определенного периода времени для анализа стиля просмотра, автоматическая установка не может использоваться с самого начала, но после получения необходимых данных, варианты автоматических установок можно эффективно использовать.

Кроме того, например, режим может быть автоматически выбран в соответствии с содержанием, которое просматривают через устройство 100 отображения изображения. Например, когда такое содержание, как кинофильм, просматривают через устройство 100 отображения изображения, непрерывный просмотр может рассматриваться, как приоритет, и время до стирания изображения не может быть увеличено. Когда информацию, отличающуюся от содержания, такую как реклама, предоставляют через регулярный интервал, время до стирания изображения может быть увеличено или уменьшено в части содержания и в других частях. Кроме того, информация о содержании, которое просматривают через устройство 100 отображения изображения, может быть получена, например, из данных электронной телевизионной программы передач (EPG) или может быть получена из жанра содержания, отображаемого в данный момент времени, и установлена в устройстве 100 отображения изображения пользователем устройства 100 отображения изображения.

Кроме того, например, с учетом ситуации, в которой нормальная обработка изображения не может быть выполнена из-за задней подсветки или экранирования, или в ситуации, в которой неисправность, при которой режим сохранения энергии питания начинается, независимо от того, смотрит ли пользователь устройство или нет, возникает, например, в среде, в которой пользователь просматривает устройство за пределами угла обзора, модуль 120 обработки оптимизации системы может не начать режим сохранения энергии питания, даже если лицо или движущееся тело не будут детектированы, пока, по меньшей мере, одно лицо не будет вначале детектировано после того, начнется процесс сохранения энергии питания.

Для исключения неправильной работы во время периода времени (или определенного периода времени после этого) после того, как лицо будет детектировано, по меньшей мере, один раз, и устройство 100 отображения изображения начнет режим сохранения энергии питания, и пользователь рассматривается, как выполняющий активную операцию с помощью пульта дистанционного управления, например, включает устройство 100 отображения изображения или изменяет отображаемое содержание на панели 102 дисплея, модуль 120 обработки оптимизации системы может не начать режим сохранения энергии питания, даже если лицо или движущееся тело не будут детектированы.

Кроме того, в случае, в котором режим сохранения энергии питания преднамеренно подавлен, устройство 100 отображения изображения может уведомить пользователя о состоянии подавления режима сохранения энергии питания с помощью средства уведомления о состоянии (например, светодиода или интерфейса пользователя (UI) внутри экрана), включенного в него. На фиг.9 и 10 показаны пояснительные схемы, иллюстрирующие примеры операции устройства 100 отображения изображения, когда режим сохранения энергии питания преднамеренно подавляют. На фиг.9 иллюстрируется пример, в котором LED 109 излучает свет заданного цвета, как индикатор, представляющий, что режим сохранения энергии питания подавляют, когда режим сохранения энергии питания преднамеренно подавляют. На фиг.10 показан пример, в котором индикатор 103 графического интерфейса пользователя (GUI), представляющий, что режим сохранения энергии питания подавляют, отображают на панели 102 дисплея, когда режим сохранения энергии питания преднамеренно подавляют.

Список номеров ссылочных позиций

100 устройство отображения изображения

102 панель дисплея

104 модуль формирования изображения

106 датчик

108 громкоговоритель

109 светодиод

110 модуль управления

112 модуль ввода изображения

114 модуль обработки изображения

116 модуль анализа состояния просмотра

118 модуль записи состояния просмотра

120 модуль обработки оптимизации системы

122 модуль управления системой

132 модуль анализа состояния просмотра пользователя

134 модуль анализа движения пользователя

142 модуль расчета обработки оптимизации панели

144 модуль расчета обработки оптимизации громкоговорителя

152 модуль расчета эффекта обработки оптимизации.

Изобретение относится к средствам отображения изображений. Техническим результатом является повышение эффективности управления сохранением энергии. Результат достигается тем, что дисплей включает в себя модуль формирования изображения, который снимает движущееся изображение в заданном диапазоне, в направлении отображения изображения, модуль детектирования движущегося тела, который детектирует, присутствует или нет движущееся тело в заданном диапазоне, в направлении отображения изображения, модуль анализа изображения, который анализирует движущееся изображение, снятое модулем формирования изображения, для детектирования, присутствует или нет лицо, и модуль управления питанием, который управляет потреблением энергии питания с разными профилями в соответствии с множеством режимов, которые установлены путем комбинирования, присутствует или нет лицо, детектируемое модулем анализа изображения, и присутствует или нет движущееся тело, детектируемое модулем детектирования. 2 н. и 10 з.п. ф-лы, 10 ил.

1. Дисплей, содержащий:
модуль формирования изображения, который снимает движущееся изображение в заданном диапазоне, в направлении отображения изображения;
модуль детектирования движущегося тела, который детектирует, присутствует или нет движущееся тело в заданном диапазоне, в направлении отображения изображения;
модуль анализа изображения, который анализирует движущееся изображение, снятое модулем формирования изображения, для детектирования, присутствует или нет лицо; и
модуль управления питанием, который управляет потреблением энергии питания с разными профилями, в соответствии с множеством режимов, которые установлены путем комбинирования, присутствует или нет лицо, детектированное модулем анализа изображения, и присутствует или нет движущееся тело, детектируемое модулем детектирования.

2. Дисплей по п.1, в котором модуль управления питанием имеет первый режим, в котором потреблением энергии питания управляют только в соответствии с тем, присутствует или нет лицо, детектируемое модулем анализа изображения, и когда модуль анализа изображения не имеет возможности детектировать присутствие лица в течение заданного времени, потребление энергии питания уменьшается.

3. Дисплей по п.1, в котором модуль управления питанием имеет второй режим, в котором потреблением энергии питания управляют, используя, присутствует или нет лицо, детектируемое модулем анализа изображения, и присутствует или нет движущееся тело, детектируемое модулем детектирования движущегося тела, при этом потребление энергии питания уменьшают до заданного уровня, когда модуль анализа изображения не имеет возможности детектировать присутствие лица в течение первого заданного времени, и, после этого дополнительно уменьшают потребление энергии питания, когда модуль детектирования движущегося тела не имеет возможности детектировать присутствие движущегося тела в течение второго заданного времени.

4. Дисплей по п.1, в котором модуль управления питанием имеет третий режим, в котором потреблением энергии питания управляют, используя, присутствует или нет лицо, детектируемое модулем анализа изображения, и присутствует или нет движущееся тело, детектируемое модулем детектирования движущегося тела, и когда модуль анализа изображения не имеет возможности детектировать присутствие лица в течение заданного периода времени, и модуль детектирования движущегося тела не имеет возможности детектировать присутствие движущегося тела в течение заданного периода времени, потребление энергии питания уменьшают.

5. Дисплей по п.1, в котором модуль управления питанием управляет потреблением энергии питания путем увеличения или уменьшения яркости панели дисплея, на которой отображают изображение.

6. Дисплей по п.1, в котором модуль управления питанием управляет потреблением энергии питания путем увеличения или уменьшения громкости звука громкоговорителя, который воспроизводит голос.

7. Дисплей по п.1, в котором модуль управления питанием управляет потреблением энергии питания путем управления работой схемы, выполненной с возможностью повышения качества изображения отображаемого изображения.

8. Дисплей по п.1, дополнительно содержащий модуль уведомления, который уведомляет о том, что управление потреблением энергии питания остановлено, когда модуль управления питанием останавливает управление потреблением энергии питания.

9. Дисплей по п.1, в котором модуль анализа изображения устанавливает личность человека на основе анализа движущегося изображения, снимаемого модулем формирования изображения, и модуль управления питанием автоматически выбирает режим, соответствующий данному человеку, установленному модулем анализа изображения.

10. Дисплей по п.1, в котором модуль управления питанием автоматически выбирает режим, соответствующий деталям отображаемого содержания.

11. Дисплей по п.1, в котором модуль управления питанием не начинает управление потреблением энергии питания до тех пор, пока лицо или движущееся тело не будет впервые детектировано после включения питания.

12. Способ управления, содержащий:
этап формирования изображения, состоящий в съемке движущегося изображения в заданном диапазоне, в направлении отображения изображения;
этап детектирования движущегося тела, состоящий в детектировании, присутствует или нет движущееся тело в заданном диапазоне, в направлении отображения изображения;
этап детектирования лица, состоящий в анализе снятого движущегося изображения, для детектирования, присутствует или нет лицо; и
этап управления энергией питания, состоящий в управлении потреблением энергии питания с разными профилями в соответствии с множеством режимов путем комбинирования присутствия или отсутствия лица и присутствия или отсутствия движущегося тела.