Область техники, к которой относится изобретение
Настоящее изобретение относится к устройству формирования изображения и его способу управления дисплеем и, в частности, относится к работе дисплея устройства формирования изображения, в котором множество модулей панели дисплея предусмотрены на его кожухе.
Уровень техники
Устройства формирования изображения, такие как цифровые фотокамеры, цифровые видеокамеры и т.д., получили широкое распространение, и во многих из них сформирована панель дисплея, выполненная как жидкокристаллическая панель или тому подобное.
Например, как раскрыто в публикации находящейся на экспертизе заявки на японский патент №2007-158799, выполнена компоновка, в которой панель дисплея предусмотрена на кожухе камеры с относительно большой площадью, выполняют отслеживание изображения субъекта во время формирования изображения и выполняют отображение воспроизведения во время воспроизведения снимаемого изображения.
Сущность изобретения
Согласно настоящему изобретению предлагается компоновка, в которой на кожухе устройства формирования изображения выполнены два модуля панели дисплея. В частности, аналогично предшествующему уровню техники в дополнение к модулю панели дисплея, выполненному с возможностью отображения изображения в направлении пользователя (человека, использующего устройство формирования изображения) на кожухе устройства формирования изображения, модуль панели дисплея, выполненный с возможностью отображения изображения в направлении стороны субъекта, предусмотрен на передней стороне (стороне, используемой как сторона субъекта) или тому подобное на кожухе устройства.
В случае когда предусмотрены два модуля панели дисплея, соответствующее отображение должно быть выполнено для каждой панели дисплея, то есть эффективное отображение, используя две панели дисплея, отображение, представляемое для зрителя, который рассматривает дисплей, и дополнительные операции отображения, позволяющие исключить ненужное потребление электроэнергии, в соответствии с состоянием работы или ситуацией, относящейся к формированию изображения.
Таким образом, желательно реализовать соответствующее отображение в устройстве формирования изображения, включающем два модуля панели дисплея.
В соответствии с вариантом выполнения настоящего изобретения устройство формирования изображения включает в себя: первый модуль панели дисплея, расположенный на кожухе устройства, выполненный с возможностью отображения в направлении стороны пользователя; второй модуль панели дисплея, расположенный на упомянутом кожухе устройства, выполненный с возможностью отображения в направлении стороны субъекта; модуль обработки формирования изображения, выполненный с возможностью подвергать свет, падающий со стороны субъекта, фотоэлектрическому преобразованию для получения сигнала снятого изображения; модуль обработки записи, выполненный с возможностью обработки записи на носитель записи сигнала снятого изображения, полученного в модуле обработки формирования изображения; и модуль управления, выполненный с возможностью управления состояниями отображения первого модуля панели дисплея и второго модуля панели дисплея для каждого из множества различных типов периодов работы, изменяющихся в ходе работы модуля обработки формирования изображения или модуля обработки записи, и выполнения управления отображением, в котором первый модуль панели дисплея и второй модуля панели дисплея могут иметь разное содержание отображения в течение, по меньшей мере, одного периода работы.
Периоды работы, которые изменяются, могут включать в себя: период мониторинга, скомпонованный так, чтобы выполнять отображение мониторинга сигнала снятого изображения, полученного в модуле обработки формирования изображения, без выполнения обработки записи в модуле обработки записи; период записи, скомпонованный так, чтобы подвергать сигнал снимаемого изображения, полученный в модуле обработки формирования изображения, обработке записи в модуле обработки записи, в качестве данных неподвижного изображения; и период предварительного просмотра, скомпонованный для отображения данных неподвижного изображения в соответствии с обработкой записи, выполняемой в период записи.
Модуль управления может управлять первым модулем панели дисплея для отображения сигнала снятого изображения, полученного в модуле обработки формирования изображения, в качестве изображения мониторинга, и управлять выполнением/невыполнением отображения изображения мониторинга во втором модуле панели дисплея на основе результатов процесса определения условий возможности визуального распознавания для второй панели дисплея во время периода мониторинга.
В этом случае обработка определения условий возможности визуального распознавания представляет собой обработку определения, относящуюся к тому, присутствует или нет человек на стороне субъекта, обработку определения режима формирования изображения, обработку определения, относящуюся к информации внутреннего детектирования, или процесс определения, относящийся к результатам обработки анализа изображения сигнала снятого изображения.
Кроме того, модуль управления может управлять первым модулем панели дисплея для отображения сигнала снятого изображения, полученного в модуле обработки формирования изображения, в качестве изображения мониторинга, и управлять вторым модулем панели дисплея так, чтобы не выполнять отображение изображения мониторинга в течение периода мониторинга.
Кроме того, модуль управления может управлять только одним из первого модуля панели дисплея и второго модуля панели дисплея для выполнения отображения данных неподвижного изображения в соответствии с обработкой записи в модуле обработки записи во время периода записи.
Кроме того, модуль управления может управлять обоими или ни одним из первого модуля панели дисплея и второго модуля панели дисплея для выполнения отображения данных неподвижного изображения в соответствии с обработкой записи в модуле обработки записи во время периода записи.
Кроме того, модуль управления может управлять только одним из первого модуля панели дисплея и второго модуля панели дисплея для выполнения отображения данных неподвижного изображения в соответствии с обработкой записи в модуле обработки записи во время периода предварительного просмотра.
Кроме того, модуль управления может управлять обоими из первого модуля панели дисплея и второго модуля панели дисплея для выполнения отображения данных неподвижного изображения в соответствии с обработкой записи в модуле обработки записи и дополнительно управляет вторым модулем панели дисплея для выполнения отображения данных неподвижного изображения в течение более длительного периода по сравнению с первым модулем панели дисплея в течение периода предварительного просмотра.
Кроме того, периоды работы могут дополнительно включать в себя период воспроизведения, скомпонованный так, чтобы воспроизвести и отобразить данные изображения, записанные на носителе записи, с помощью модуля управления, который управляет только одним из первого модуля панели дисплея и второго модуля панели дисплея для выполнения отображения воспроизведения в течение периода воспроизведения.
Кроме того, периоды работы могут дополнительно включать в себя период воспроизведения, скомпонованный для воспроизведения и отображения данных изображения, записанных на носителе записи, используя модуль управления, управляющий первым модулем панели дисплея для выполнения отображения воспроизведения, и управляющий выполнением/невыполнением отображения воспроизведения во втором модуле панели дисплея на основе результатов обработки определения условий возможности визуального распознавания второй панели дисплея в течение периода воспроизведения.
Кроме того, периоды работы могут дополнительно включать в себя период воспроизведения, скомпонованный для воспроизведения и отображения данных изображения, записанных на носителе записи, с помощью модуля управления, управляющего первым модулем панели дисплея для избирательного выполнения отображения списка и отображения одиночного изображения, используемого как отображение воспроизведения, и управляющего вторым модулем панели дисплея для выполнения отображения только одиночного изображения в течение периода воспроизведения.
Кроме того, периоды работы могут дополнительно включать в себя период записи движущегося изображения, выполненный с возможностью подвергать сигнал снятого изображения, полученный в модуле обработки формирования изображения, обработке записи в модуле обработки записи, в качестве данных движущегося изображения, при этом модуль управления управляет первым модулем панели дисплея для выполнения отображения движущегося изображения в соответствии с обработкой записи и управляет выполнением/невыполнением отображения движущегося изображения во втором модуле панели дисплея на основе результатов процесса определения условий возможности визуального распознавания для второй панели дисплея.
В соответствии с вариантом выполнения настоящего изобретения способ управления отображением для устройства формирования изображения, включающего в себя, как периоды работы устройства формирования изображения, по меньшей мере, период мониторинга, скомпонованный для выполнения отображения мониторинга сигнала снятого изображения, полученного при обработке формирования изображения, без выполнения обработки записи, период записи, скомпонованный так, чтобы подвергать сигнал снятого изображения, полученный в процессе формирования изображения, обработке записи, как данные неподвижного изображения, и период предварительного просмотра, скомпонованный для отображения данных неподвижного изображения в соответствии с обработкой записи, причем способ управления отображением включает в себя следующие этапы: управляют состояниями отображения первого модуля панели дисплея, расположенного на кожухе устройства и выполненного с возможностью отображения в направлении стороны пользователя, и второго модуля панели дисплея, расположенного на кожухе устройства и выполненного с возможностью отображения в направлении стороны субъекта, для каждого из периодов работы; и выполняют управление отображением таким образом, что первый модуль панели дисплея и второй модуль панели дисплея могут иметь разное содержание отображения в течение, по меньшей мере, одного или больше периодов работы.
То есть, используя описанные выше конфигурации, состояниями отображения первого модуля панели дисплея и второго модуля панели дисплея управляют в течение каждого из различных периодов работы, которые изменяются в течение этапа работы устройства формирования изображения. В частности, выполняют управление отображением, в результате чего первый модуль панели дисплея и второй модуль панели дисплея могут иметь разное отображаемое содержание в течение, по меньшей мере, одного или больше периодов работы. Различное содержание отображения здесь означает состояние, в котором отображают разные изображения, или состояние, в котором один из модулей панели установлен с выключенным отображением. Кроме того, то, что они могут иметь разное содержания отображения, означает, что они могут иметь разное содержание отображения, например, в зависимости от определения условий возможности визуального распознавания.
В соответствии с таким управлением соответствующее отображение, эффективное отображение, предотвращение ненужного отображения или тому подобное реализуют в каждом из модулей панели дисплея в течение каждого из различных периодов отображения.
Например, при переходе к периоду мониторинга, периоду записи неподвижного изображения, периоду предварительного просмотра, периоду воспроизведения, периоду записи движущегося изображения или тому подобное соответствующим состоянием отображения управляют в соответствии с назначением отображения, присутствует или нет человек, рассматривающий отображение, или тому подобное.
Также, например, что касается второго модуля панели дисплея, во время периода мониторинга или тому подобное, возможность присутствия или отсутствия человека на стороне субъекта определяют таким образом, чтобы выполнять соответствующее управление отображением.
Кроме того, например, во время периода мониторинга при формировании изображения, такого как неподвижное изображение (ожидая соответствующий момент времени для съемки изображения с помощью фотокамеры), пользователь устройства формирования изображения (то есть пользователь, который пытается выполнить съемку неподвижного изображения с помощью устройства формирования изображения) выполняет мониторинг изображения субъекта, используя первый модуль панели дисплея. Такое изображение мониторинга представляет собой сигнал снятого изображения, получаемый в модуле устройства формирования изображения во время этого периода, которое также называется "прямым изображением" и представляет собой движущееся изображение, снимаемое в режиме реального времени, сцены субъекта. Пользователь проверяет изображение субъекта, формируемое таким образом, для выполнения операции съемки (операции спуска затвора) в требуемый момент времени. Это выполняется так же, как и в обычном устройстве формирования изображения.
Во время такого периода мониторинга с помощью второго модуля панели дисплея возможно выполнять отображение на основе снимаемого сигнала изображения, то есть отображать изображение мониторинга, используемое как прямое изображение. Например, в случае когда субъект представляет собой человека, этот человек может проверять свое снимаемое выражение лица, позу или тому подобное через дисплей второго модуля панели дисплея.
Однако такой подход эффективен только, когда человек находится на стороне субъекта. Например, когда пользователь выбирает режим сцены, который используется как режим формирования изображения, и пытается получить сцену изображения, в которой отсутствует человек, можно предположить, что отсутствует какой-либо человек, который мог бы просматривать отображение во втором модуле панели дисплея. Поэтому в таком случае отсутствует какая-либо причина отображения изображения мониторинга во втором модуле панели дисплея. Следовательно, в таком случае целесообразно попытаться сэкономить энергию путем подключения второго модуля панели дисплея.
Таким образом, операциями отображения первого и второго модулей панели дисплея управляют соответствующим образом в соответствии с периодом работы, выполняемым в это время, в результате чего можно реализовать полезное отображение или более приятное отображение, используя два модуля панели дисплея, исключить повышенное потребление энергии, даже если предусмотрены два модуля панели дисплея, или тому подобное.
В соответствии с описанными выше конфигурациями, используя устройство формирования изображения, предусмотрены два модуля панели дисплея, в результате чего сторона пользователя и сторона субъекта могут визуально распознавать свои стороны, соответственно, и каждая панель дисплея может выполнять соответствующее отображение для каждого из периодов работы. То есть можно реализовать полезное отображение, эффективно используя две панели дисплея, отображение, доставляющее большое удовольствие, исключение ненужного отображения или тому подобное, и, соответственно, может быть предусмотрено новое и полезное устройство формирования изображения
В частности, определяют, присутствует или нет человек на стороне субъекта, который может просматривать вторую панель дисплея и отображение на ней, и работой отображения второго модуля панели дисплея управляют соответствующим образом, обеспечивая, таким образом, указанные выше преимущества.
Краткое описание чертежей
На фиг.1А и 1В представлены пояснительные схемы примера внешнего вида устройства формирования изображения в соответствии с вариантом выполнения настоящего изобретения;
на фиг.2 показана блок-схема устройства формирования изображения в соответствии с вариантом выполнения;
на фиг.3 показана пояснительная схема перехода операции устройства формирования изображения в соответствии с вариантом выполнения;
на фиг.4А-4С показаны пояснительные схемы примера отображения изображения устройства формирования изображения в соответствии с вариантом выполнения;
на фиг.5А-5С показаны пояснительные схемы примера отображения изображения устройства формирования изображения в соответствии с вариантом выполнения;
на фиг.6 показана блок-схема последовательности операций примера обработки управления для выполнения перехода каждого из периодов работы в соответствии с вариантом выполнения;
на фиг.7А и 7В показаны блок-схемы последовательности операций примера обработки периода мониторинга в соответствии с вариантом выполнения;
на фиг.8А-8D показаны блок-схемы последовательности операций примера обработки периода записи в соответствии с вариантом выполнения;
на фиг.9 показана блок-схема последовательности операций примера обработки периода записи в соответствии с вариантом выполнения;
на фиг.10 показана блок-схема последовательности операций примера обработки периода предварительного просмотра в соответствии с вариантом выполнения;
на фиг.11 показана блок-схема последовательности операций примера обработки периода предварительного просмотра в соответствии с вариантом выполнения;
на фиг.12 показана блок-схема последовательности операций примера обработки периода предварительного просмотра в соответствии с вариантом выполнения;
на фиг.13 показана блок-схема последовательности операций примера обработки периода предварительного просмотра в соответствии с вариантом выполнения;
на фиг.14А и 14В показаны блок-схемы последовательности операций примера обработки периода воспроизведения в соответствии с вариантом выполнения;
на фиг.15 показана блок-схема последовательности операций примера обработки периода воспроизведения в соответствии с вариантом выполнения;
на фиг.16 показана блок-схема последовательности операций примера обработки управления, включающей в себя период записи движущегося изображения, в соответствии с вариантом выполнения;
на фиг.17А-17С показаны блок-схемы последовательности операций примера обработки периода записи движущегося изображения в соответствии с вариантом выполнения;
на фиг.18 показана пояснительная схема примера перехода состояния отображения в соответствии с вариантом выполнения; и
на фиг.19 показана пояснительная схема примера перехода состояния отображения в соответствии с вариантом выполнения.
Подробное описание изобретения
Ниже приведено описание вариантов выполнения настоящего изобретения в соответствии со следующей последовательностью.
1. Конфигурация устройства формирования изображения
2. Переход операции
3. Примеры отображения экрана обоих модулей панели дисплея
4. Примеры управления отображением
4-1. Примеры обработки выполнения перехода периода работы
4-2. Примеры обработки во время периода мониторинга
4-3. Примеры обработки во время периода записи
4-4. Примеры обработки в течение периода предварительного просмотра
4-5. Примеры обработки в течение периода воспроизведения
4-6. Примеры обработки во время периода записи движущегося изображения
5. Пример перехода состояния отображения
6. Примеры модификации
1. Конфигурация устройства формирования изображения
В качестве варианта выполнения настоящего изобретения со ссылкой на фиг.1А, 1В и 2 будет описана конфигурация устройства формирования изображения, используемого, например, как цифровая камера
На фиг.1А и 1В представлен внешний вид устройства 1 формирования изображения в соответствии с настоящим примером, который представлен с его задней стороны (сторона пользователя) и передней стороны (сторона субъекта). В устройстве 1 формирования изображения на передней стороне предусмотрен модуль 20 объектива формирования изображения и модуль 15 излучения фотовспышки и т.д.
Кроме того, органы управления, используемые для выполнения операций пользователя, сформированы на различных участках, таких как верхняя сторона кожуха, задняя сторона и т.д. Например, предусмотрена кнопка 5а элемента управления съемкой, участок 5b элемента управления с круглой шкалой, кнопка 5с управления широкоугольной/телефотосъемкой, различные типы кнопок 5d управления, D-площадка 5е и т.д. Участок 5b операции элемента управления с круглой шкалой используется, например, для выбора режима изображения или тому подобного. Такие элементы управления, как инструкция меню, инструкция воспроизведения, инструкция коррекции экспозиции и т.д., доступны через кнопки 5d управления. D-площадка 5е используется для различных типов операций, включающих в себя, например, выбор/определение элемента меню управления, отображаемого на панели 6 дисплея.
В устройстве 1 формирования изображения, как показано на фиг.1А, панель 6М основного дисплея, состоящая из жидкокристаллической панели, панели органической электролюминесценции (EL, ЭЛ), или тому подобное предусмотрена на задней стороне, и, как показано на фиг.1В, передняя панель 6F дисплея, аналогично состоящая из жидкокристаллической панели, органической ЭЛ панели или тому подобного, предусмотрена на передней стороне.
Панель 6М основного дисплея и передняя панель 6F дисплея имеют, например, одинаковый размер экрана и предусмотрены так, что они занимают относительно широкую область на задней стороне кожуха и на передней стороне кожуха соответственно. На панели 6М основного дисплея в основном выполняют, во время периода мониторинга (во время ожидания соответствующего момента в режиме формирования изображения), отображение изображения мониторинга (прямое изображение), где пользователь представляет собой субъект, в результате чего пользователь может подтверждать сцену субъекта, используемую как цель формирования изображения. Кроме того, в режиме воспроизведения выполняют отображение воспроизводимого изображения или миниатюрных изображений в соответствии с операцией пользователя.
С другой стороны, передняя панель 6F дисплея направлена в сторону субъекта для выполнения отображения. На передней панели 6F дисплея также выполнена компоновка, в которой выполняют отображение отслеживаемого изображения или тому подобное, в результате чего человек, используемый, как сторона субъекта, может просматривать содержание своего отображения, как будет описано ниже.
Пример конфигурации такого устройства 1 формирования изображения будет описан со ссылкой на фиг.2. Как показано на фиг.2, устройство 1 формирования изображения включает в себя систему 2 формирования изображения, систему 3 управления, цифровой сигнальный процессор 4 (DSP, ЦСП) камеры, модуль 5 операций, панель 6М основного дисплея, переднюю панель 6F дисплея, контроллер 7 дисплея, внешний интерфейс 8, SDRAM (СДОЗУ, синхронное динамическое оперативное запоминающее устройство) 9 и интерфейс 10 подключения.
Система 2 формирования изображения представляет собой участок, предназначенный для выполнения операции формирования изображения, и включает в себя механический модуль 21 объектива, механизм 22 диафрагмы/фильтра ND (НП, нейтральной плотности), модуль 23 устройства формирования изображения, модуль 24 обработки аналогового сигнала, модуль 25 A/D (А/Ц, аналого-цифрового) преобразования, модуль 26 привода объектива, модуль 27 детектирования положения объектива, схему 28 генерирования тактовой частоты, модуль 13 детектирования смазанного изображения, модуль 14 управления излучением света, модуль 15 излучения фотовспышки, модуль 17 привода объектива, модуль 18 привода диафрагмы/привода НП и модуль 19 привода устройства формирования изображения.
Падающий свет от субъекта направляют в модуль 23 устройства формирования изображения через механический модуль 21 объектива и механизм 22 диафрагмы/фильтра НП. Механический модуль 21 объектива имеет внутреннюю конфигурацию модуля 20 объектива формирования изображения на фиг.1В и включает в себя множество групп оптических линз, таких как закрывающая линза, фокусирующая линза, линза степени увеличения и т.д. Кроме того, модуль 26 привода объектива представляет собой механизм перемещения, предназначенный для перемещения линзы фокусирования или линзы степени увеличения в направлении оптической оси. Модуль 26 привода объектива, в который подают энергию привода от модуля 17 привода объектива, перемещает линзу фокусирования или линзу степени увеличения. Описанное ниже CPU (ЦПУ, центральное процессорное устройство) 31 управляет модулем 17 привода объектива, выполняя таким образом управление фокусированием или операцией изменения степени увеличения.
Механизм 22 диафрагмы/фильтра НП включает в себя механизм диафрагмы и механизм фильтра НП, который предназначен для аттенюации количества падающего света при его вставке в оптическую систему объектива и выполняет количественную регулировку оптического потока. Механизм 22 диафрагмы/фильтра НП выполняет оптическую количественную регулировку, открывая/закрывая механизм диафрагмы. Кроме того, модуль 18 привода диафрагмы/привода НП перемещает фильтр НП внутрь и наружу относительно оптической оси падающего света, регулируя таким образом количество падающего света. ЦПУ 31 управляет модулем 18 привода диафрагмы/привода НП для управления механизмом диафрагмы или фильтром НП, в результате чего можно выполнять управление количеством падающего света (управление регулировкой экспозиции).
Световой поток от субъекта проходит через механический модуль 21 объектива и механизм 22 диафрагмы/НП фильтра, в результате чего изображение субъекта формируется в модуле 23 устройства формирования изображения. Модуль 23 устройства формирования изображения подвергает сформированное изображение субъекта фотоэлектрическому преобразованию для вывода сигнала снятого изображения, соответствующего изображению субъекта. Модуль 23 устройства формирования изображения включает в себя прямоугольную область формирования изображения, состоящую из множества пикселей, и последовательно выводит в модуль 24 обработки аналогового сигнала сигнал изображения, который представляет собой аналоговый сигнал, соответствующий заряду, накопленному в каждом пикселе с последовательным приращением пикселей. Например, массив датчиков CCD (ПЗС, прибор с зарядовой связью), массив датчиков CMOS (КМОП, комплементарный металлоокисидый полупроводник) или тому подобное используют в качестве модуля 23 устройства формирования изображения.
Модуль 24 обработки аналогового сигнала внутри себя включает в себя схему CDS (ДВК, двойная выборка корреляции), схему AGC (АРУ, автоматическая регулировка усиления) и т.д. и подвергает сигнал изображения, вводимый из модуля 23 устройства формирования изображения, заданной аналоговой обработке. Модуль 25 А/Ц преобразования преобразует аналоговый сигнал, обработанный в модуле 24 обработки аналогового сигнала в цифровой сигнал, и передает его в ЦСП 4 камеры.
Схема 28 генерирования тактовой частоты, которой управляют с помощью ЦПУ 31, управляет синхронизацией различных операций модуля 23 устройства формирования изображения, модуля 24 обработки аналогового сигнала и модуля 25 А/Ц преобразования.
В частности, схема 28 генерирования тактовой частоты передает для управления моментами времени выполнения операции формирования изображения модуля 23 устройства формирования изображения сигнал синхронизации для формирования выдержки/считывания заряда, сигнал синхронизации, используемый в качестве функции электрического затвора, сигнал синхронизации для передачи, сигнал синхронизации в соответствии с частотой кадров и т.д. в модуль 23 устройства формирования изображения через модуль 19 привода устройства формирования изображения. Кроме того, схема 28 генерирования тактовой частоты также передает описанные выше различные сигналы синхронизации в модуль 24 обработки аналогового сигнала таким образом, что модуль 24 обработки аналогового сигнала может выполнять обработку синхронно с передачей сигнала изображения в модуль 23 устройства формирования изображения.
ЦПУ 31 выполняет управление каждым из сигналов синхронизации, генерируемых схемой 28 генерирования тактовой частоты, в результате чего можно выполнять изменение частоты кадров снятого изображения и управление электрическим затвором (управление переменным временем выдержки в пределах кадра). Кроме того, ЦПУ 31 вырабатывает сигнал регулирования коэффициента усиления и передает его в модуль 24 обработки аналогового сигнала через схему 28 генерирования тактовой частоты, в результате чего можно выполнять переменное управление коэффициентом усиления сигнала снятого изображения.
Модуль 13 детектирования степени смазанности детектирует количество сотрясений и величину движения самого устройства 1 формирования изображения. Модуль 13 детектирования степени смазанности выполнен, например, на основе датчика ускорения, датчика вибрации или тому подобного и передает информацию детектирования, используемую как величину степени смазанности, в ЦПУ 31.
Модуль 15 излучения света фотовспышки работает под управлением модуля 14 управления излучением света для излучения света фотовспышки. ЦПУ 31 передает инструкцию в модуль 14 управления излучением света фотовспышки для излучения фотовспышки в заданный момент времени, например, во время операции пользователя или тому подобного, в результате чего модуль 15 излучения света фотовспышки может излучать свет.
ЦСП 4 камеры подвергает сигнал снятого изображения, который поступает из модуля 25 А/Ц преобразования системы 2 формирования изображения, различным типам обработки цифрового сигнала. С помощью ЦСП 4 камеры реализуют такие функции обработки, например, как показано на чертеже, как функции модуля 41 обработки сигнала изображения, модуля 42 обработки сжатия/расширения, контроллера 43 СДОЗУ, модуля 44 анализа изображения и т.д., с использованием внутренних аппаратных и программных средств.
Модуль 41 обработки сигнала изображения выполняет обработку для входного сигнала снятого изображения. Например, модуль 41 обработки сигнала изображения выполняет обработку автофокусирования (AF, АФ), обработку автоматической экспозиции (АЕ, АЭ) или тому подобное как обработку операции, используемой для управления приводом системы 2 формирования изображения, используя сигнал снятого изображения, и также выполняет обработку автоматической балансировки белого (AWB, АББ) или тому подобное как обработку, применяемую для самого сигнала снятого изображения, предназначенного для ввода.
Например, в качестве обработки автофокуса модуль 41 обработки сигнала изображения выполняет детектирование контраста входного сигнала снятого изображения и передает информацию детектирования в ЦПУ 31. Различные типы способов управления используются как способы управления автофокусом, но с помощью технологии, называемой "автофокус на основе контраста", выполняют детектирование контраста в отношении сигнала снятого изображения в каждый момент времени, принудительно перемещая линзу фокусирования, в результате чего определяют положение линзы фокусирования с оптимальным состоянием контраста. То есть ЦПУ 31 выполняет управление для подтверждения детектируемой величины детектирования контраста, детектируемой в модуле 41 обработки сигнала изображения, при выполнении управления движением линзы фокусирования перед операцией съемки изображения и для определения положения оптимального состояния контраста в качестве положения оптимального фокуса.
Кроме того, в качестве управления фокусом во время формирования изображения можно выполнять способ детектирования формирования изображения, который называется здесь как автофокусирование с качанием. ЦПУ 31 проверяет значение детектирования контраста, детектируемое в модуле 41 обработки сигнала изображения, перемещая положение линзы фокусирования, постоянно качая линзу фокусирования на незначительное расстояние вперед и назад время операции формирования изображения. Оптимальное положение линзы фокусирования изменяется в зависимости от состояния субъекта, но детектирование контраста выполняют при малых перемещениях линзы фокусирования вперед и назад, в результате чего можно определять изменения направления управления формата в соответствии с изменением субъекта. Таким образом, автофокусирование может быть выполнено в состоянии отслеживания субъекта.
Следует отметить, что для механизма перемещения модуля 26 привода объектива назначают адрес для каждого из положений перемещения и положение линзы определяют по его адресу положения перемещения.
Модуль 27 детектирования положения объектива определяет адрес линзы фокусирования, используемый как текущее положение линзы для линзы фокусирования, рассчитывая таким образом расстояние до субъекта в сфокусированном состоянии, и соответственно оно может быть передано в ЦПУ 31 как информация расстояния. Таким образом, ЦПУ 31 может различать расстояние до основного субъекта в сфокусированном состоянии.
Обработка автоматической экспозиции, выполняемая модулем 41 обработки сигнала ЦСП 4 камеры, например, выполняет расчет яркости субъекта. Например, рассчитывают среднюю яркость входных снятых сигналов изображения и передают ее в ЦПУ 31 как информацию яркости субъекта, то есть информацию о величине экспозиции. В качестве расчета среднего значения яркости можно рассмотреть различные типы способов, например, такой как расчет среднего значения в отношении значений сигнала яркости для всех пикселей данных снятого изображения, для одного кадра, расчет среднего значения величины сигнала яркости, в котором вес передан в участок центра изображения или тому подобное.
ЦПУ 31 может выполнять автоматическое управление экспозицией на основе такой информации величины экспозиции, то есть может выполнять регулировку экспозиции в соответствии с управлением электронным затвором в механизме диафрагмы, фильтре НП или в модуле 23 устройства формирования изображения, или может осуществлять управление усилением модуля 24 аналоговой обработки сигнала.
Модуль 41 обработки сигнала изображения ЦСП 4 камеры выполняет автоматическую балансировку белого, гамма-коррекцию, обработку улучшения кромки, обработку коррекции сотрясений или тому подобное как обработку сигнала самого сигнала снятого изображения, в дополнение к обработке генерирования сигнала, используемой для операции автофокуса или операции автоматического определения экспозиции.
Модуль 42 обработки сжатия/расширения ЦСП 4 камеры выполняет обработку сжатия сигнала снятого изображения, или обработку расширения сжатых данных изображения. Например, модуль 42 обработки сжатия/расширения выполняет обработку сжатия/расширения, используя такой способ, как JPEG (Объединенная группа экспертов по машинной обработке фотографических изображений), MPEG (Экспертная группа по вопросам движущегося изображения) или тому подобное.
Контроллер 43 СДОЗУ выполняет запись/считывание СДОЗУ 9. СДОЗУ 9 используют для временного сохранения сигнала снятого изображения, введенного через систему 2 формирования изображения, сохраняемого на этапе обработки в модуле 41 обработки изображения или в модуле 42 обработки сжатия/расширения, обеспечивая рабочую область, сохраняя информацию, полученную в модуле 44 анализа информации или тому подобное, и контроллер 43 СДОЗУ выполняет запись/считывание таких данных для СДОЗУ 9.
Модуль 44 анализа изображения выполняет анализ изображения, например, в отношении данных снятого изображения, обработанных в модуле 41 обработки сигнала изображения, и выполняет различные типы распознавания изображения. В случае настоящего примера модуль 44 анализа изображения выполняет обработку распознавания человека или лица, включенного в изображение субъекта. Кроме того, в случае распознавания лица человека модуль 44 анализа изображения в некоторых случаях выполняет обработку распознавания для ориентации лица, направления взгляда или тому подобное. Кроме того, модуль 44 анализа изображения в некоторых случаях детектирует информацию различных типов, которая может быть распознана с помощью анализа изображения, такую как величина относительного движения между устройством 1 формирования изображения и субъектом, или тому подобное.
Система 3 управления включает в себя ЦПУ 31, ОЗУ 32, ПЗУ 33 типа флэш и схему 34 часов. Каждый модуль системы 3 управления, ЦСП 4 камеры и каждый модуль системы 2 формирования изображения, контроллер 7 дисплея, внешний интерфейс 8 и интерфейс 10 подключения могут передавать данные изображения и могут взаимно управлять информацией через системную шину.
ЦПУ 31 управляет всем устройством 1 формирования изображения. В частности, ЦПУ 31 выполняет различные типы операций обработки и изменяет сигнал управления или тому подобное для каждого модуля на основе программы, сохраненной во внутреннем ПЗУ или тому подобное, и операцией пользователя с помощью модуля 5 операций, обеспечивая таким образом выполнение каждым модулем заданной операции. В частности, ЦПУ 31 выполняет управление отображением в панели 6М основного дисплея и обработку управления, используемую для операции дисплея описанной ниже передней панели 6F дисплея или тому подобное.
ОЗУ (оперативное запоминающее устройство) 32 используют для временного сохранения сигнала снятого изображения (данных изображения каждого кадра), обрабатываемого ЦСП 4 камеры, и сохранения этой информации в соответствии с каждым типом обработки ЦПУ 31.
Запоминающее устройство 33 типа флэш используется для сохранения данных изображения (снятых пользователем как неподвижное изображение или движущееся изображение), которые используются как снятое изображение, или сохранения информации, запрашиваемой для сохранения в энергонезависимом запоминающем устройстве. ПЗУ 33 типа флэш может сохранять программы управления устройством 1 формирования изображения, данные установки камеры и т.д.
Схема 34 часов подсчитывает текущую информацию даты и времени (год, месяц, день, час, минута, секунда).
Модуль 5 операций составлен из различных типов элементов управления (5а-5е и т.д.), показанных на фиг.1А и 1В, и модуля генерирования сигнала, основанного на его операции. Информацию операции пользователя с использованием различных типов элементов управления передают из модуля 5 операций в ЦПУ 31. Следует отметить, что модуль 5 операций может быть выполнен так, что он обеспечивает для пользователя возможность выполнения операции с сенсорной панелью в дополнение к операциям, выполняемым операторами. Например, может быть выполнена компоновка, в которой сенсорный датчик предусмотрен на панели 6М основного дисплея, и ввод операции выполняют с использованием операции прикосновения пользователя к экрану дисплея.
Контроллер 7 дисплея управляет панелью 6М основного дисплея и передней панелью 6F дисплея для выполнения заданной операции дисплея на основе управления, выполняемого ЦПУ 31.
В качестве операции отображения дисплея в панели 6М основного дисплея выполняют отображение мониторинга (так называемое отображение прямого изображения), отображение воспроизводимого изображения, считываемого с носителя 90 записи или из ПЗУ типа флэш, отображение меню операции, различные типы отображения пиктограмм, отображение точки во времени или тому подобное. Кроме того, выполняют операцию отображения на передней панели 6F дисплея отображения мониторинга или отображения изображения воспроизведения.
Интерфейс 10 носителя записи выполняет считывание/запись данных с носителя 90 записи, такого как карта памяти (съемное запоминающее устройство в форме карты), установленного в устройство 1 формирования изображения, или тому подобное, на основе управления ЦПУ 31. Например, интерфейс 10 носителя записи выполняет операцию записи данных неподвижного изображения или данных движущегося изображения, используемых как результат формирования изображения, на носитель 90 записи. Кроме того, интерфейс 10 носителя записи выполняет операцию считывания данных изображения с носителя 90 записи во время режима воспроизведения.
Следует отметить, что портативная карта памяти представлена здесь в качестве примера носителя 90 записи, но другие типы носителя записи можно использовать, если только этот носитель можно использовать для записи данных изображения, используемых как неподвижное изображение или движущееся изображение, которое требуется сохранить как результат формирования изображения. Например, можно использовать носитель в виде портативного диска, такого как оптический диск или тому подобное, или может быть установлен HDD (НЖМД, накопитель на жестком магнитном диске) для записи данных изображения.
Внешний интерфейс 8 выполняет передачу/прием различных типов данных во внешнее устройство через заданный кабель в соответствии со стандартом сигнала, например, таким как USB (УПШ, универсальная последовательная шина) или тому подобное. Само собой разумеется, что внешний интерфейс в соответствии с другим стандартом, таким как IEEE (Институт инженеров по электронике и радиотехнике) 1394 или тому подобное, можно использовать независимо от способа УПШ.
Кроме того, внешний интерфейс 8 может быть выполнен на основе способа беспроводной передачи данных, такого как инфракрасная передача, беспроводная передача данных на коротких расстояниях или тому подобное, вместо способа передачи по кабелю.
Устройство 1 формирования изображения может выполнять передачу/прием данных оборудования различных типов, такого как персональный компьютер или тому подобное, через внешний интерфейс 8. Например, снятые данные изображения могут быть переданы во внешнее устройство.
Следует отметить, что на фиг.2 показан бесконтактный датчик 50. Пусть бесконтактный датчик 50 представляет собой датчик, предназначенный для детектирования, находится или нет человек перед устройством 1 формирования изображения (сторона субъекта). Здесь можно использовать, например, пироэлектрический датчик или тому подобное. Как описано выше, в случае когда выполняют детектирование человека с помощью обработки анализа изображения модуля 44 анализа изображения, бесконтактный датчик 50 может не быть предусмотрен или можно одновременно использовать детектирование человека по анализу изображения и детектирование с помощью бесконтактного датчика 50.
2. Переход операции
Переход периода операции устройства 1 формирования изображения в соответствии с настоящим примером будет описан со ссылкой на фиг.3. Период операции представляет собой период, сопровождающий операцию формирования изображения или операцию записи.
Состояние операции устройства 1 формирования изображения меняется с периода мониторинга на период записи, период предварительного просмотра и период воспроизведения в соответствии с операциями пользователя или тому подобное. Следует отметить, что в действительности существуют другие состояния операций, такие как период, в который выполняют обмен данными с внешним устройством, но их описание здесь не будет приведено для упрощения пояснения.
Когда устройство 1 формирования изображения, например, включают, начинается операция мониторинга. Следует отметить, что возникают случаи, когда устройство 1 формирования изображения переходит в состояние выполнения операции воспроизведения в момент его включения, например в случае, когда пользователь выполняет операцию воспроизведения из состояния отключенного питания или тому подобное.
Период мониторинга представляет собой период операции, используемый для формирования изображения с помощью системы 2 формирования изображения. В случае когда пользователь обычно использует устройство 1 формирования изображения для формирования неподвижного изображения, вначале выполняют такую операцию мониторинга.
В такой период мониторинга отображают изображение субъекта (прямое изображение) на панели 6М основного дисплея. В частности, ЦПУ 31 управляет системой 2 формирования изображения и ЦСП 4 камеры для выполнения операции формирования изображения во время периода мониторинга. После этого ЦПУ 31 сохраняет снятые данные изображения для каждого кадра, передаваемые из ЦСП 4 камеры, например, в ОЗУ 32. После этого ЦПУ 31 передает снятые данные изображения для каждого кадра в контроллер 7 дисплея и управляет панелью 6М основного дисплея для выполнения отображения мониторинга. В это время возникает случай, когда передней панелью 6F дисплея также управляют для выполнения отображения мониторинга, как будет описано ниже.
Во время такого периода мониторинга пользователь выбирает субъект или ожидает соответствующий момент времени для съемки изображения, просматривая отображение на панели 6М основного дисплея.
Во время периода мониторинга после того, как пользователь нажмет на кнопку 5а съемки изображения, то есть после того, как пользователь выполнит операцию спуска затвора, начинается операция, используемая как период записи.
ЦПУ 31 выполняет обработку сохранения снятых данных изображения одного кадра, изображение которого будет сформировано в момент выполнения такой операции съемки, как данные неподвижного изображения. В частности, ЦПУ 31 передает данные снятого изображения, снятые в такой момент времени, в интерфейс 10 носителя информации для записи его на носитель 90 записи.
Следует отметить, что операция записи в соответствии с операцией съемки может быть выполнена не на носитель 90 записи, а в ПЗУ 33 типа флэш. Кроме того, может использоваться операционная система, в которой запись обычно выполняют на носитель записи, но в случае, когда носитель записи 90 не установлен, запись выполняют в ПЗУ 33 типа флэш. Такой период записи временно представляет собой мгновенный период непосредственно после операции спуска затвора, с точки зрения пользователя, но управление отображением выполняют в отношении панели 6М основного дисплея и передней панели 6F дисплея в течение такого периода, как описано ниже.
Например, некоторый период времени непосредственно после операции записи в соответствии с операцией съемки называется периодом предварительного просмотра. Период предварительного просмотра представляет собой период, в течение которого изображение, записанное в непосредственно предшествующей операции записи, отображают на панели 6М основного дисплея, то есть период, в который пользователь получает возможность проверки снятого неподвижного изображения непосредственно после съемки.
В случае когда период предварительного просмотра ограничен определенным периодом времени, например, период от двух секунд до нескольких секунд или тому подобное, предусмотрен как период предварительного просмотра. ЦПУ 31 управляет панелью 6М основного дисплея и передней панелью 6F дисплея для отображения записанных данных неподвижного изображения в течение этого периода.
Следует отметить, что в ходе внутренней обработки устройства 1 формирования изображения возникает случай, когда обработка периода записи и обработка периода предварительного просмотра накладываются друг на друга по времени. Такой пример представляет собой случай, когда требуется определенное время для выполнения обработки записи и обработка предварительного просмотра начинается до того, как запись будет закончена. В таком случае лучше понимать, что внутри устройства переход от периода записи к периоду предварительного просмотра не полностью закончен, но для операции отображения переход от периода записи к периоду предварительного просмотра выполнен.
После того как пройдет заданное время, используемое как период предварительного просмотра, ЦПУ 31 возвращает состояние операции в состояние мониторинга и выполняет управление операциями, используемое как период мониторинга. То есть последовательность операций, таких как формирование изображения для получения неподвижного изображения, выполняют как период мониторинга, период записи и период предварительного просмотра.
Следует отметить, что с помощью устройства 1 формирования изображения можно выполнять формирование движущегося изображения, но в случае движущегося изображения период записи продолжается в течение периода от начала до конца формирования такого движущегося изображения. Кроме того, в этом случае не предусмотрен период предварительного просмотра. Далее приведено описание относительно записи движущегося изображения.
В случае когда пользователь выполнил операцию передачи инструкции на выполнение операции воспроизведения, устройство 1 формирования изображения переходит в состояние операции воспроизведения (период воспроизведения). В течение периода воспроизведения выполняют операцию воспроизведения изображения, записанного на носитель 90 записи или в ПЗУ 33 типа флэш, в результате формирования изображения или тому подобное.
ЦПУ 31 считывает изображение, записанное на носитель 90 записи или в ПЗУ 33 типа флэш, в ответ на операцию пользователя и передает инструкцию в контроллер 7 дисплея отобразить миниатюрные изображения или воспроизводимое изображение на панели 6М основного дисплея. Кроме того, в некоторых случаях изображение воспроизведения отображают на передней панели 6F дисплея.
3. Примеры отображения на экране обоих модулей панели дисплея
Примеры отображения экрана, отображаемого в панели 6М основного дисплея и на передней панели 6F дисплея устройства 1 формирования изображения в соответствии с настоящим примером, будут описаны со ссылкой на фиг.4А-5С.
На фиг.4А показано состояние, в котором отображение изображения выполняют на панели 6М основного дисплея и отображение отключено на передней панели 6F дисплея. Отображаемое изображение представляет собой изображение мониторинга (сквозное изображение) во время периода мониторинга, изображение записи (изображение, записанное и обработанное как неподвижное изображение) в течение периода записи или изображения предварительного просмотра (изображение, записанное и обработанное как неподвижное изображение непосредственно перед) в течение периода предварительного просмотра или тому подобное. Кроме того, изображение, воспроизводимое в течение периода воспроизведения, представляет собой изображение, отображаемое в некоторых случаях.
Изображение воспроизведения представляет собой изображение воспроизведения для изображения, сформированного в прошлом и записанного на носитель 90 записи или в ПЗУ 33 типа флэш, но может представлять собой изображение, заранее сохраненное в устройстве 1 формирования изображения. Пример такого случая представляет собой случай, когда данные изображения подготовлены для отображения, когда изображение мониторинга не отображается на передней панели 6F дисплея, и заранее сохранены как заданное изображение в ПЗУ 33 типа флэш или тому подобное, и заданные их данные изображения считывают и отображают.
Кроме того, возможен случай, когда изображение воспроизведения не ограничивается данными изображения, используемыми как так называемые снятые изображения, текстовые данные, данные анимации, данные компьютерной графики или тому подобное, записанные на носитель 90 записи или в ПЗУ 33 типа флэш, и такие данные воспроизводят и отображают. То есть воспроизводимое изображение включает в себя изображение любого вида, которое может быть отображено. На фиг.5А показан пример, в котором отображение на панели 6М основного дисплея выключено и изображение мониторинга отображается на передней панели 6F дисплея.
На фиг.4В иллюстрируется состояние, в котором отображение изображения, такого как изображение мониторинга, воспроизводимое изображение или тому подобное, выполняют на панели 6М основного дисплея и такое же изображение также отображают на передней панели 6F дисплея.
На фиг.4С иллюстрируется состояние, в котором разное изображение отображают на панели 6М основного дисплея и на передней панели 6F дисплея.
На фиг.5А показан пример, в котором отображение выключено на панели 6М основного дисплея и отображение изображения мониторинга или тому подобное выполняют на передней панели 6F дисплея.
На фиг.5В иллюстрируется в качестве примера отображения для периода воспроизведения состояние, в котором выполняют отображение списка в виде миниатюрных изображений для изображения воспроизведения на панели 6М основного дисплея и, с другой стороны, на передней панели 6F дисплея, отображают воспроизводимое изображение, выбранное с помощью курсора К среди миниатюрных изображений.
На фиг.5С иллюстрируется в качестве примера отображения для периода воспроизведения состояние, в котором выполняют отображение воспроизводимого изображения на панели 6М основного дисплея, и такое же воспроизводимое изображение также отображают на передней панели 6F дисплея.
Выше был описан пример состояний отображения, но в настоящем примере выполняют соответствующее управление отображением на панели 6М основного дисплея и на передней панели 6F дисплея в течение каждого из периодов работы и, соответственно, реализуют различные состояния отображения.
ЦПУ 31 выполняет управление отображением в отношении панели 6М основного дисплея и передней панели 6F дисплея в соответствии с назначением отображения и оцениваемыми ситуациями в каждый из периодов работы, и в результате этого, как описано выше, состояния отображения обеих панелей 6М и 6F дисплея изменяются. Различные описания приведены ниже в отношении перехода периодов работы и пример управления работой в каждый период.
4. Примеры управления отображением
4-1. Примеры обработки для выполнения перехода периода работы
Вначале со ссылкой на фиг.6 будет описан пример общего управления работой, сопровождающий переход периода работы ЦПУ 31. Теперь будет описан пример, в котором при включении устройства 1 формирования изображения и его активации вначале выполняют операцию, используемую как период мониторинга (например, в соответствии с фиг.3).
После включения устройства 1 формирования изображения ЦПУ 31 выполняет обработку начала периода мониторинга на этапе F101 по фиг.6. В частности, ЦПУ 31 выполняет заданную обработку активации и передает инструкции в систему 2 формирования изображения и в ЦСП 4 камеры начать операцию формирования изображения. Таким образом, снимают каждые данные кадра, используемые как изображение мониторинга, которое должно быть получено при обработке в системе 2 формирования изображения и в камере 4.
На этапе F102 ЦПУ 31 выполняет обработку управления отображением, используемую как период мониторинга. В течение периода мониторинга, в основном, ЦПУ 31 управляет основной панелью 6F дисплея для отображения изображения мониторинга на передней панели 6F дисплея. Кроме того, в некоторых случаях ЦПУ 31 управляет передней панелью 6F дисплея для отображения изображения мониторинга. Конкретный пример обработки на этапе F102 будет описан со ссылкой на фиг.7А, 7В и т.д.
Период мониторинга представляет собой период, в течение которого пользователь определяет композицию субъекта или изображения при просмотре изображения мониторинга или с целью определения момента съемки изображения. Кроме того, пользователь также может переключать состояние работы устройства 1 формирования изображения из состояния мониторинга на операцию воспроизведения.
Поэтому на этапе F103 ЦПУ 31 отслеживает операцию инструкции воспроизведения пользователя, и на этапе F104 отслеживает операцию съемки изображения, выполняемую пользователем.
После детектирования, что пользователь выполнил операцию с кнопкой 5а операции съемки, на этапе F105, ЦПУ 31 переходит к периоду записи для выполнения обработки, которая должна быть выполнена, то есть обработке записи неподвижного изображения и управления отображением.
ЦПУ 31 выполняет как устройство записи неподвижного изображения обработку сохранения данных снятого изображения одного кадра, который должен быть сформирован в момент выполнения операции съемки, в качестве данных неподвижного изображения. То есть ЦПУ 31 передает данные снятого изображения, снятые в определенный момент времени, в интерфейс 10 носителя для записи их на носителе 90 записи или в ПЗУ 33 типа флэш.
Кроме того, такой период записи представляет собой очень короткий период времени непосредственно после выполнения операции съемки, с точки зрения пользователя, и течение этого периода записи ЦПУ 31 выполняет управление отображением, отличающееся от периода мониторинга, в отношении панели 6М основного дисплея и передней панели 6F дисплея. Конкретный пример будет описан ниже.
Как представлено на фиг.3, например, определенный период времени непосредственно после операции записи, соответствующей операции съемки, используют как период предварительного просмотра. ЦПУ 31 выполняет как обработку в период предварительного просмотра на этапе F106 обработку отображения изображения, записанного в ходе непосредственно предшествующей операции записи, но в данном случае также выполняет управление отображением в отношении панели 6М основного дисплея и передней панели 6F дисплея в качестве управления отображением, отличающимся от периода записи и периода мониторинга. После обработки предварительного просмотра ЦПУ 31 возвращается на этап F101 для выполнения снова обработки начала периода мониторинга и на этапе F102 выполняет управление операцией отображения, используемой как период мониторинга.
В случае когда пользователь выполнил операцию ввода инструкции воспроизведения во время периода мониторинга, ЦПУ 31 переходит на этап F107, для выполнения обработки отображения воспроизведения. То есть ЦПУ 31 выполняет управление обработкой считывания данных изображения с носителя 90 записи с помощью интерфейса 10 носителя информации или обработку считывания данных изображения из ПЗУ 33 типа флэш. В течение такого периода воспроизведения ЦПУ 31 выполняет описанную выше обработку управления отображением для периода воспроизведения для выполнения управления отображением в отношении панели 6М основного дисплея и передней панели 6F дисплея, которая будет описана ниже. В случае когда операция воспроизведения закончена в соответствии с операцией пользователя или тому подобное, ЦПУ 31 возвращается на этап F108-F101 для перехода снова к обработке периода мониторинга.
Следует отметить, что, хотя это и не показано на фиг.6, ЦПУ 31 выполняет обработку выключения питания в соответствии с операцией пользователя или по прошествии заданного времени в состоянии отсутствия какой-либо операции или тому подобное.
4-2. Примеры обработки в течение периода мониторинга
В соответствии с обработкой, показанной на фиг.6, устройство 1 формирования изображения выполняет в соответствии с операцией пользователя или тому подобного, в качестве состояния его работы, переход периода мониторинга, периода записи, периода предварительного просмотра и периода воспроизведения.
В настоящем примере в соответствии с переходом этих периодов работы, ЦПУ 31 выполняет переключение состояний отображения и содержания отображения панели 6М основного дисплея и передней панели 6F дисплея. Конкретный пример обработки в течение каждого из периодов операции будет описан ниже.
Вначале будет пример описан пример обработки в течение периода мониторинга со ссылкой на фиг.7А и 7В, то есть пример обработки ЦПУ 31 на этапе F102 по фиг.6.
В примере, показанном на фиг.7А, вначале на этапе F201 ЦПУ 31 управляет панелью 6М основного дисплея для отображения изображения мониторинга. Таким образом, изображение мониторинга, используемое как изображение субъекта (сквозное изображение), получаемое во время операций системы 2 формирования изображения и камеры ЦСП 4, отображают на панели 6М основного дисплея таким образом, что пользователь может выполнять выбор композиции субъекта, или изображения, или тому подобное при просмотре изображения мониторинга.
В это время ЦПУ 31 выполняет этапы F202-F205 как управление отображением передней панели 6F дисплея.
Вначале на этапе F202 ЦПУ 31 выполняет определение состояния для отображения на передней панели 6F дисплея. Это представляет собой процесс определения условий возможности визуального распознавания для просмотра передней панели 6F дисплея. "Возможность визуального распознавания" означает возможность того, что отображение передней панели 6F дисплея будет эффективно выполнено.
Например, предполагается, что для того, чтобы возможность визуального распознавания стала реальной, требуется наличие человека, который мог бы просматривать переднюю панель 6F дисплея, чтобы передняя панель 6F дисплея находилась в состоянии возможности нормального распознавания в случае, когда человек пытается просматривать переднюю панель 6F дисплея, чтобы человек стремился просматривать переднюю панель 6F дисплея и т.д.
Определение такой вероятности визуального распознавания может быть выполнено, например, как обработка определения в отношении наличия или отсутствия человека на стороне субъекта, обработка определения режима формирования изображения, обработка определения в отношении информации внутреннего детектирования или обработка определения в отношении результатов обработки анализа изображения для сигнала снятого изображения.
После этого после определения, что существует возможность визуального распознавания, ЦПУ 31 переводит обработку с этапа F203 на этап F204 для выполнения управления отображением изображения мониторинга на передней панели 6F дисплея. В этом случае, как показано на фиг.4В, таким же образом, как для панели 6М основного дисплея, изображение мониторинга также отображают на передней панели 6F дисплея.
С другой стороны, при определении, что отсутствует возможность визуального распознавания, ЦПУ 31 переводит обработку с этапа F203 на этап F205 для выполнения управления отключением отображения передней панели 6F дисплея. Например, ЦПУ 31 изменяет состояние передней панели 6F дисплея на состояние отсутствия отображения или выполняет управление с отключением питания для передней панели 6F дисплея. В этом случае, как показано на фиг.4А, изображение мониторинга отображают только на панели 6М основного дисплея.
Если условия, определенные для возможности визуального распознавания, удовлетворяются, ЦПУ 31, выполняющее обработку на фиг.7А на этапе F102 на фиг.6, отображает изображение мониторинга на передней панели 6F дисплея при выполнении обработки на этапе F204.
Во время периода мониторинга становится возможным отображать изображение мониторинга на передней панели 6F дисплея. Например, в случае когда субъект представляет собой человека, этот человек может проверять выражение своего лица, или позу, или тому подобное во время съемки, просматривая отображение на передней панели 6F дисплея.
Однако такой подход является эффективным, только когда человек находится на стороне субъекта. Например, когда пользователь пытается снять сцену, в которой человек отсутствует, при этом в большинстве случаев нет человека, который мог бы просматривать отображение на передней панели 6F дисплея.
Кроме того, даже если человек присутствует как субъект, в некоторых случаях для этого человека фактически может быть трудно просматривать отображение из-за яркости окружающего освещения или тому подобного. Кроме того, даже если человек присутствует как субъект, может возникнуть ситуация, в которой этот человек не будет просматривать отображение передней панели 6F дисплея или ему будет трудно просматривать отображение на передней панели 6F дисплея.
В таких случаях отсутствует смысл представления изображения мониторинга на передней панели 6F дисплея, и для экономии энергии целесообразно отключить переднюю панель 6F дисплея, и, соответственно, в таких случаях на этапе F205 ЦПУ 31 выключает переднюю панель 6F дисплея.
То есть выполняют компоновку, в которой в случае, когда определяют в соответствии с определением условия, что отображение на передней панели 6F дисплея является эффективным, изображение мониторинга отображают на передней панели 6F дисплея, в результате чего человек-субъект съемки или тому подобное может проверять этот субъект (например, свое собственное выражение лица или позу). С другой стороны, в случае когда определяют, что отображение на передней панели 6F дисплея является неэффективным, отображение на передней панели 6F дисплея выключают. То есть ненужное отображение, которое никто не просматривает, и ненужное отображение с плохой видимостью не выполняют, реализуя таким образом экономию энергии.
Определение условия возможности визуального распознавания будет представлено на примерах ниже. Определение в соответствии с режимом формирования изображения представляет собой один пример технологии определения условия.
Режим формирования изображения представляет собой режим, когда пользователь делает выбор для выполнения формирования изображения в соответствующем состоянии в различных ситуациях, таких как режим ночного видения, ночной вид и режим человека, режим портрета, режим сцены, режим "мягкой съемки", режим снега, режим пляжа, режим высокой скорости работы затвора, режим высокой чувствительности, режим срабатывания затвора при появлении улыбки и т.д.
В каждом из этих режимов формирования изображения заранее определены, соответствующая скорость затвора, соответствующая установка экспозиции соответствующая установка коэффициента усиления для сигнала снятого изображения, соответствующая установка обработки сигнала, такая как улучшение кромки и обработка цветов и т.д., и эти установки пользователь может выбирать, например, в соответствии с операциями участка 5b управления с круговым переключателем, показанным на фиг.1А.
Режим ночного видения представляет собой режим формирования изображения, в котором формирование изображения выполняют при установках, пригодных для формирования изображения ночного видения. Ночное видение и режим съемки человека представляют собой режим формирования изображения, в котором формирование изображения выполняют при установках, позволяющих формировать изображения ночного видения со спины и выражение лица человека с живой четкостью.
Режим портрета представляет собой режим формирования изображения, в котором формирование изображения выполняют при установках, соответствующих для формирования изображения человека.
Режим сцены представляет собой режим формирования изображения, в котором формирование изображения выполняют при установках, пригодных для формирования изображения сцены. Режим "мягкой съемки" представляет собой режим формирования изображения, в котором формирование изображения выполняют при установках, которые представляют для зрителя впечатление того, что текстура кожи человека является яркой и мягкой.
Режим съемки с высокой скоростью срабатывания затвора представляет собой режим формирования изображения, в котором формирование изображения выполняют при установках, пригодных для съемки движущегося субъекта.
Режим с высокой чувствительностью представляет собой режим съемки изображения, в котором формирование изображения выполняют в естественной тональности, без использования темных сцен или фотовспышки.
Режим срабатывания затвора при появлении улыбки представляет собой режим формирования изображения, в котором автоматически выполняется обработка срабатывания затвора (съемка изображения), когда человек - субъект съемки - улыбается.
Хотя режим формирования изображения, используемый для выполнения формирования изображения, пригодного для такой ситуации формирования изображения, выбирает пользователь, ЦПУ 31 выполняет управление обработкой формирования изображения в соответствии с установками режима формирования изображения, используя этап формирования неподвижного изображения от периода мониторинга до периода записи. То есть ЦПУ 31 выполняет различные типы инструкций параметров в системе 2 формирования изображения и ЦСП 4 камеры в соответствии с режимом формирования изображения, выбранным оператором через участок 5b управления с круговым переключателем. Например, инструкцию выполняют таким образом, что упомянутые выше установки скорости затвора, установки экспозиции, установки обработки сигнала или тому подобное.
В случае когда используют такой режим формирования изображения, например, для определения условия на этапе F202 на фиг.7А, выполняют определение, представляет ли собой или нет текущий режим формирования изображения определенный заранее заданный режим формирования изображения. То есть текущую окружающую ситуацию, субъекта, используемого как цель изображения, или тому подобное допускают в соответствии с режимом формирования изображения.
Например, пусть среди описанных выше режимов формирования изображения можно предположить заданные режимы формирования изображения, в результате чего ситуация, соответствующая для отображения на передней панели 6F дисплея, представляет собой ночной вид и режим съемки человека, режим съемки портрета, режим "мягкой съемки", режим спуска затвора при возникновении улыбки и т.п. То есть ЦПУ 31 определило эти режимы формирования изображения как режимы формирования изображения, соответствующие заданным режимам формирования изображения во время определения условия.
Такие режимы формирования изображения выбирают в случае, когда целью поставлено формирование изображения человека, и, соответственно, существует высокая вероятность того, что человек будет включен в изображение как субъект. То есть существует высокая вероятность того, что в качестве субъекта существует человек, который может просматривать отображение на передней панели 6F дисплея.
Поэтому ЦПУ 31 определяет, что, если режим формирования изображения представляет собой один из режима ночной сцены и режима съемки человека, режима портрета, режима "мягкой съемки" и режима срабатывания затвора при появлении улыбки, условия отображения на передней панели 6F дисплея удовлетворяются.
В случае когда режим съемки изображения представляет собой другой режим формирования изображения, кроме описанных, то есть кроме режима ночной сцены, режима сцены, режима срабатывания затвора с высокой скоростью или режима с высокой чувствительностью предполагается, что режим формирования изображения выбирают при отсутствии задачи формирования изображения человека или когда предполагается плохая видимость передней панели дисплея 6F.
Например, режим ночной сцены и режим сцены предназначены для формирования изображения на сцене, и можно предположить ситуацию, в которой человек не будет включен в изображение как субъект или, даже если человек будет включен в изображение как субъект, его личность не будет играть основную роль в пределах изображения. Кроме того, в случае режима ночной сцены или режима с высокой чувствительностью, даже если на переднем плане присутствует человек, изображение мониторинга, отображаемое во время формирования изображения темной сцены на передней панели 6F дисплея, может привести в результате к плохой видимости человека, находящегося перед ним.
Кроме того, субъект в режиме срабатывания затвора с высокой скоростью представляет собой субъект, находящийся в движении. Например, даже если человек представляет собой субъект, такой человек находится в такой ситуации, например, участвует в спортивном событии, танцует или тому подобное, и, соответственно, он не находится в ситуации, позволяющей внимательно просматривать переднюю панель 6F дисплея.
То есть в случае этих режимов формирования изображения предполагается ситуация, в которой человек спереди отсутствует, или даже если человек находится спереди, переднюю панель 6F дисплея отображают с плохой видимостью, или такой человек не в состоянии просматривать переднюю панель 6F дисплея.
Поэтому в случае, когда режим формирования изображения представляет собой один из режима ночной съемки, режима съемки сцены, режима съемки с высокой скоростью затвора и режима съемки с высокой чувствительностью, ЦПУ 31 определяет при определении условия, что условия отображения на передней панели 6F дисплея не удовлетворяются.
Следует отметить, что представленные выше режимы представляют собой примеры и в дополнение к ним в некоторых случаях предусмотрены режим вечернего просмотра, в котором выполняют формирование изображения с установками, пригодными для формирования изображения вечернего просмотра, макрорежим, пригодный для близкой съемки объектов, таких как растения, насекомые или тому подобное, режим фейерверка, пригодный для формирования изображения фейерверков, режим подводной съемки, пригодный для формирования изображения под водой, или тому подобное. Кроме того, режим снега, в котором формирование изображения выполняют с установками, позволяющими выразить спуск на лыжах и серебряный снег заснеженных ландшафтов так, как они выглядят для глаза человека, режим пляжа, в котором формирование изображения выполняют при установках, с помощью которых синева моря и неба будут подчеркнуты или тому подобное, будут предусмотрены в некоторых случаях.
В этих случаях также следует заранее установить, как определять условия (включен или нет режим формирования изображения в заданные режимы формирования изображения для выполнения отображения на передней панели 6F дисплея) в соответствии с присутствием или нет человека, видимостью отображаемого содержания на передней панели 6F дисплея и ситуацией с человеком на стороне субъекта.
Кроме того, примеры технологии определения условия включают в себя определение в соответствии с установками пользователя, помимо описанных выше режимов формирования изображения. Теперь предположим, что упомянутые здесь установки пользователя представляют собой состояние установки в соответствии с другой операцией пользователя, кроме установки режима формирования изображения, например, такой как установка включения света фотовспышки, операция положения степени увеличения или тому подобное.
Для определения условий определяют, представляет ли собой или нет состояние установки пользователя, отличающееся от текущего режима формирования изображения, состояние установки, пригодное для отображения на передней панели 6F дисплея.
Установка излучения света фотовспышки среди установок пользователя будет рассмотрена ниже. Установка излучения света фотовспышки представляет собой установку, при которой пользователь выбирает, следует ли выполнять излучение света фотовспышки (фотовспышка включена), не следует выполнять излучение фотовспышки (фотовспышка выключена) или следует автоматически выполнять включение/выключение излучения фотовспышки (фотовспышка авто). В этом случае пользователь обычно включает фотовспышку в ситуации с темным окружающим освещением. В случае ситуации с темным освещением изображение мониторинга во время периода мониторинга находится в состоянии низкой яркости и, соответственно, видимость дисплея на передней панели 6F дисплея можно рассматривать как плохую.
Поэтому, что касается установки излучения света фотовспышки, в случае, когда установлено, что фотовспышка включена, ЦПУ 31 определяет, что условия в отношении возможности визуального распознавания на передней панели 6F дисплея не удовлетворяются.
Установка операции положения степени увеличения среди установок пользователя будет рассмотрена ниже. Установка положения степени увеличения представляет собой установку положения степени увеличения, например, в случае когда пользователь выполняет операцию с кнопкой 5с управления широкоугольной съемкой/телесъемкой на фиг.1А для выполнения операции изменения степени увеличения.
Например, даже если человек был установлен как субъект, когда положение степени увеличения установлено как телесъемка (телефотосъемка), степень увеличения в котором превышает степень увеличения в заданном положении, можно предположить, что человек - субъект съемки - будет расположен далеко от устройства 1 формирования изображения. Само собой разумеется, что если человек - субъект съемки - находится слишком далеко от устройства 1 формирования изображения, этот человек с трудом сможет просматривать соответствующим образом отображение на передней панели 6F дисплея.
Поэтому в случае, когда положение степени увеличения, установленное в соответствии с операцией пользователя, представляет собой положение в состоянии телефотосъемки, превышающее заданное положение, ЦПУ 31 определяет, что условия для возможности визуального распознавания на передней панели 6F дисплея не удовлетворяются.
Следует отметить, что до настоящего момента было приведено описание в отношении установки излучения света фотовспышки и операции положения степени увеличения как установки пользователя, но в дополнение к описанному выше предполагается возможность установки пользователем чувствительности, установки экспозиции, установки включения/выключения коррекции сотрясений, установки специальных установок формирования изображения и т.п. Каждую из этих установок также можно рассматривать как отражение определения условий в отношении того, предполагается или нет соответствующая ситуация (возможность визуального распознавания) в отношении поведения, в котором человек - субъект - просматривает отображение на передней панели 6F дисплея, соответствующим образом.
Кроме того, определение с использованием информации внутреннего детектирования представляет собой пример технологии определения условий. Упомянутая здесь информация внутреннего детектирования представляет собой различные типы информации детектирования камеры, которое устройство 1 формирования изображения детектирует с использованием внутренних процессов. Информация детектирования камеры, упомянутая здесь, представляет собой информацию, детектируемую внутренним датчиком устройства 1 формирования изображения, информацию, которую ЦПУ 31 может распознавать в соответствии с управлением работой устройства 1 формирования изображения, например информацию детектирования количества внешнего света, используемую для управления фотовспышкой или управления экспозицией, информацию о положении степени увеличения, информацию фокусирования, информацию детектирования сотрясений, информацию о расстоянии до субъекта или тому подобное.
В качестве определений условий ЦПУ 31 определяет, представляет ли собой или нет ситуация, определяемая по текущей получаемой информации детектирования камеры, состояние установки, пригодное для отображения на передней панели 6F дисплея.
Количество внешнего света можно детектировать по среднему значению яркости снимаемых данных изображения, взвешенному среднему значению яркости, получаемому путем применения взвешивания к участку в пределах экрана, или тому подобное, и такую обработку обычно используют при выполнении автоматического управления экспозицией, управления излучением света фотовспышки, в случае когда установлен автоматический режим излучения света фотовспышки или тому подобное. Такие значения яркости рассчитывают, например, в модуле 41 обработки сигнала изображения ЦСП 4 камеры, в результате чего ЦПУ 31 может получать эту информацию.
Количество внешнего света можно детектировать по среднему значению яркости снимаемых данных изображения, взвешенному среднему значению яркости, получаемому путем применения взвешивания к участку в пределах экрана, или тому подобное, и такую обработку обычно используют при выполнении автоматического управления экспозицией, управления излучением света фотовспышки, в случае когда установлен автоматический режим излучения света фотовспышки или тому подобное. Такие значения яркости рассчитывают, например, в модуле 41 обработки сигнала изображения ЦСП 4 камеры, в результате чего ЦПУ 31 может получать эту информацию.
Кроме того, хотя это и не показано на фиг.2, может быть предусмотрена компоновка, в которой будет предусмотрен внешний датчик количества света или тому подобное, и количество внешнего света детектируют непосредственно.
В случае когда количество внешнего света, детектируемое с использованием этих технологий, мало, можно предусмотреть ситуацию, в которой, даже если изображение мониторинга или подобное отображают на передней панели 6F дисплея, яркость самого экрана будет низкой и, соответственно, невозможно обеспечить отличную видимость. Кроме того, при съемке напротив ярко освещенного фона, где уровень внешнего света слишком высокий, можно предположить ситуацию, в которой будет трудно визуально соответствующим образом распознавать отображение на передней панели 6F дисплея.
Поэтому в случае, когда количество внешнего света меньше, чем заданный уровень или уровень, определенный для съемки при ярком свете, ЦПУ 31 определяет, что количество внешнего света не составляет ситуацию, пригодную для отображения изображения на передней панели 6F дисплея, то есть определяет, что условия возможности визуального распознавания на передней панели 6F дисплея не удовлетворяются.
Что касается информации о положении степени увеличения, ЦПУ 31 выполняет привод и управляет линзой степени увеличения в соответствии с операцией пользователя, в результате чего можно детектировать положение степени увеличения. Даже если человек был установлен как субъект, когда положение степени увеличения находится на стороне телесъемки (телефотосъемки), которое превышает заданное положение, можно предположить, что человек - субъект этой съемки - будет расположен слишком далеко от устройства 1 формирования изображения. То есть можно предположить, что человек - субъект фотосъемки - не в состоянии просматривать соответствующим образом отображение на передней панели 6F дисплея.
Поэтому в случае, когда положение степени увеличения представляет собой положение для состояния телефотосъемки, превышающее заданное положение, ЦПУ 31 определяет, что условия для возможности визуального распознавания на передней панели 6F дисплея не удовлетворяются.
Информация о расстоянии до субъекта представляет собой информацию о расстоянии от устройства 1 формирования изображения до субъекта. ЦПУ 31 может получать информацию о расстоянии до субъекта, используя информацию из модуля 27 детектирования положения объектива, как описано выше. Например, даже если человек был установлен как субъект, в случае, когда можно определить, что этот человек - субъект - находится на слишком большом расстоянии от устройства 1 формирования изображения, можно предположить, что этот человек - субъект - не в состоянии рассматривать соответствующим образом отображение на передней панели 6F дисплея.
Поэтому в случае, когда детектируют, что субъект находится на большом расстоянии, которое превышает заданное положение, на основе информации расстояния до субъекта ЦПУ 31 определяет, что условия в отношении возможности визуального распознавания передней панели 6F дисплея не удовлетворяются.
Информация фокусирования представляет собой информацию определения сфокусированного состояния, используемую для обработки автофокуса в модуле 41 обработки сигнала изображения. В случае изображения, в котором сигнал снятого изображения не сфокусирован, ЦПУ 31 трудно отображать соответствующее изображение мониторинга, то есть отображают несфокусированное изображение мониторинга. Поэтому в случае несфокусированного состояния ЦПУ 31 определяет, что условия для возможности визуального распознавания передней панели 6F дисплея не удовлетворяются. Следует отметить, что такое условие является эффективным условием определения в случае отображения изображения мониторинга.
Информация детектирования степени смазанности представляет собой информацию детектирования сотрясений и движения устройства 1 формирования изображения. ЦПУ 31 может получать информацию детектирования степени смазанности, например, как информацию из 13 модуля детектирования степени смазанности.
В случае значительных сотрясений или в случае, когда пользователь перемещает устройство 1 формирования изображения, следуя за движущимся субъектом или тому подобное, человек, находящийся в непосредственной близости к нему, с трудом может визуально распознавать изображения на передней панели 6F дисплея соответствующим образом. Поэтому в случае, когда определяют, что степень смазанности или движение устройства 1 формирования изображения велики, на основе информации детектирования степени смазанности ЦПУ 31 определяет, что условия возможности визуального распознавания передней панели 6F дисплея не удовлетворяются.
Кроме того, определение с использованием информации анализа изображения представляет собой пример технологии определения условия. Информация анализа изображения представляет собой информацию, получаемую в процессе анализа изображения, который выполняет модуль 44 анализа изображения. Модуль 44 анализа изображения выполняет обработку анализа изображения в отношении снятых данных изображения, отображаемых в системе 2 формирования изображения и захваченных в ЦСП 4 камеры во время периода мониторинга или тому подобное. Например, модуль 44 анализа изображения выполняет обработку анализа изображения в отношении данных изображения каждого кадра, обработанного в модуле 41 обработки сигнала изображения, или данных изображения кадра, периодически выбираемого из кадров, обрабатываемых в модуле 41 обработки сигнала изображения.
Информацию о том, включен ли человек или нет в субъект изображения, можно использовать для определения условий как информацию анализа изображения. В этом случае модуль 44 анализа изображения определяет, включено ли или нет изображение, которое должно быть распознано как человек, в данные снятого изображения, используемые как цель анализа, то есть определяет, включен или нет участок контура, который будет распознан как человек, в изображение. Вследствие этого модуль 44 анализа изображения передает результат своего анализа изображения в ЦПУ 31. Поэтому ЦПУ 31 может подтверждать, что присутствие или отсутствие человека было распознано как его результат анализа изображения.
В случае когда было распознано присутствие человека, ЦПУ 31 определяет, что условия возможности визуального распознавания на передней панели 6F дисплея удовлетворяются. Кроме того, в случае когда присутствие человека не было распознано, ЦПУ 31 определяет, что условия для возможности визуального распознавания на передней панели 6F дисплея не удовлетворяются.
В соответствии с таким определением условий, например, когда пользователь направляет устройство 1 формирования изображения на человека, который будет представлять собой субъект съемки во время периода мониторинга, изображение мониторинга отображают на передней панели 6F дисплея. Кроме того, когда устройство направляют на субъект съемки, который не включает в себя человека, такой как сцена или тому подобное, отображение передней панели 6F дисплея отключают.
Следует отметить, что присутствие человека, который может просматривать отображение на передней панели 6F дисплея, было подтверждено в соответствии с анализом изображения, но вместо анализа изображения определение условия может быть выполнено путем подтверждения результата детектирования с помощью бесконтактного датчика 50, показанного на фиг.2, Кроме того, как результат анализа изображения, так и результат детектирования бесконтактного датчика 50 могут быть подтверждены.
В частности, детектирование лица может быть выполнено как детектирование человека в соответствии с анализом изображения. Например, модуль 44 анализа изображения определяет присутствие контура, который может быть распознан как лицо, и присутствие элемента лица, такого как глаза, нос, рот или тому подобное в снятых данных изображения, и определяет, включено или нет лицо человека, используемого как субъект съемки изображения, в снятые данные изображения.
Следовательно, в случае когда присутствие лица человека было распознано как результат анализа изображения, ЦПУ 31 определяет, что условия возможности визуального распознавания на передней панели 6F дисплея удовлетворяются. Кроме того, в случае когда присутствие лица человека не было распознано, ЦПУ 31 определяет, что условия возможности визуального распознавания на передней панели 6F дисплея не удовлетворяются.
Таким образом, вместо определения всего тела человека присутствие человека спереди можно подтверждать путем определения лица.
Различные типы результатов распознавания изображения могут быть получены с помощью другого подхода помимо распознавания человека и распознавания лица в зависимости от обработки анализа изображения в модуле 44 анализа изображения. Например, может быть получена информация определения количества внешнего света. Кроме того, относительное количество движения между устройством 1 формирования изображения и субъектом может быть определено в соответствии с детектированием движения при сравнении кадров, анализа величины смазанности для каждого пикселя или тому подобное.
Кроме того, в качестве обработки распознавания изображения в случае, когда было детектировано изображение лица, размер лица (процент участка лица, занятого изображением одного кадра), ориентация лица, направление, в котором направлены глаза субъекта, или тому подобное в пределах экрана, также могут быть получены как результаты анализа.
Таким образом, более широкое разнообразие результатов анализа изображения можно использовать для определения условия.
В случае когда количество внешнего света определяют для анализа изображения, в случае когда количество внешнего света мало или чрезмерно велико, например когда съемку выполняют при ярком свете или тому подобное, отображение на передней панели 6F дисплея можно предположить как непригодное для соответствующего распознавания, как описано выше, на основе информации детектирования камеры.
Поэтому в случае, когда количество внешнего света меньше, чем заданный уровень, или когда определяют, что съемку выполняют при ярком свете, ЦПУ 31 определяет, что условия, такие как возможность визуального распознавания передней панели 6F дисплея, не удовлетворяются.
Кроме того, количество относительного движения между устройством 1 формирования изображения и субъектом может быть определено как результат анализа изображения. То есть может быть определен случай, в котором устройство 1 формирования изображения само формирует смазанные изображения или перемещается (пользователь перемещает устройство 1 формирования изображения), или случай, когда субъект перемещается, или случай, в котором они оба движутся.
Когда величина движения в этих случаях велика, можно считать, что, даже если присутствует человек, используемый как субъект съемки, такой человек - субъект съемки - с трудом сможет распознавать соответствующим образом переднюю панель 6F дисплея.
Поэтому в случае, когда определяют, что относительное движение между устройством 1 формирования изображения и субъектом съемки велико, ЦПУ 31 определяет, что условия, такие как возможность визуального распознавания передней панели 6F дисплея, не удовлетворяются.
Не только простое детектирование лица, но также и размер лица (процент участка лица на экране) можно определять для анализа изображения. Хотя в зависимости от состояния положения степени увеличения, если рассматривать определенное фиксированное состояние степени увеличения, размер лица можно использовать как показатель для определения расстояния от устройства 1 формирования изображения до человека, используемого в качестве субъекта. Например, в случае когда состояние степени увеличения представляет собой состояние широкоугольной съемки, но лицо снято малым, такого человека можно рассматривать как находящегося на расстоянии.
Поэтому ЦПУ 31 определяет расстояние до человека - субъекта - на основе размера лица этого человека, учитывая положение степени увеличения. Затем в случае, когда такой человек находится на большом расстоянии и ему трудно рассматривать содержание, отображаемое на передней панели 6F дисплея, ЦПУ 31 определяет, что условия, такие как возможность визуального распознавания передней панели 6F дисплея, не удовлетворяются.
Кроме того, ориентацию лица или направление глаз субъекта также можно распознавать для анализа изображения. В случае когда лицо не направлено вперед на снятом изображении, или в случае, когда субъект не смотрит на устройство 1 формирования изображения, такого человека - субъекта - можно определять как человека, который не смотрит на устройство 1 формирования изображения, то есть на переднюю панель 6F дисплея.
Поэтому ЦПУ 31 подтверждает ориентацию лица или направление, в котором направлены глаза субъекта съемки. После этого в случае, когда определяют, что данный человек не просматривает отображаемое содержание на передней панели 6F дисплея, ЦПУ 31 определяет, что условия возможности визуального распознавания передней панели 6F дисплея не удовлетворяются.
Выше были приведены примеры, относящиеся к определению условия, но при выполнении фактического процесса определения условия возможности визуального распознавания, по меньшей мере, один из них можно использовать или можно использовать комбинацию из двух или больше.
Само собой разумеется, что другой пример обработки определения условий, кроме описанных выше примеров, может быть предусмотрен, если только такая обработка определения условий позволяет предположить возможность визуального распознавания в отношении отображения на передней панели 6F дисплея.
В ходе обработки, показанной на фиг.7А, отображение на передней панели 6F дисплея соответствующим образом выполняют в соответствии с таким определением условий.
На фиг.7В представлен другой пример, используемый как обработка на этапе F102 на фиг.6. В этом случае на этапе F201 ЦПУ 31 управляет панелью 6М основного дисплея для отображения изображения мониторинга во время периода мониторинга. Кроме того, на этапе F205 ЦПУ 31 отключает отображение передней панели 6F дисплея. То есть в таком примере отображение на передней панели 6F дисплея выключают во время периода мониторинга.
4-3. Примеры обработки во время периода записи
Ниже со ссылкой на фиг.8А-9 будут описаны примеры обработки, выполняемой во время периода записи. То есть будут описаны примеры обработки ЦПУ 31, используемой как этап F105 на фиг.6.
Пример, показанный на фиг.8А, представляет собой пример, в котором изображение, используемое как цель обработки записи, не отображают. То есть в качестве обработки, основанной на операции съемки изображения, выполняемой пользователем, или тому подобное, ЦПУ 31 передает данные снятого изображения, которые были сняты и захвачены в момент съемки через интерфейс 10 носителя, для записи их на носитель 90 записи или в ПЗУ 33 типа флэш.
Кроме того, в течение такого периода записи ЦПУ 31 выполняет управление с отключением отображения на каждой из панели 6М основного дисплея и передней панели 6F дисплея.
На фиг.8В представлен пример, в котором изображение, используемое как цель обработки записи, отображают только на панели 6М основного дисплея в течение периода записи. То есть в качестве обработки, основанной на операции пользователя при спуске затвора или тому подобное, ЦПУ 31 записывает данные снятого изображения, сформированные и захваченные в момент времени съемки изображения на носителе 90 записи или в ПЗУ 33 типа флэш. После этого во время такого периода записи ЦПУ 31 управляет панелью 6М основного дисплея для отображения данных изображения в соответствии с этим периодом записи и управляет передней панелью 6F дисплея для отключения отображения. Таким образом, пользователь устройства 1 формирования изображения может просматривать снятое изображение в моменты срабатывания затвора.
Например, на фиг.8С представлен пример, в котором изображение, используемое как цель обработки записи, отображают отдельно на передней панели 6F дисплея. То есть в качестве процесса, основанного на операции съемки изображения пользователя или тому подобное, ЦПУ 31 записывает данные снятого изображения, которые были сняты и захвачены в момент спуска затвора на носителе 90 записи или ПЗУ 33 типа флэш. После этого в течение этого периода записи ЦПУ 31 управляет передней панелью 6F дисплея для отображения данных изображения в соответствии с этим периодом записи и управляет панелью 6М основного дисплея, для отключения дисплея. Таким образом, человек, выполняющий роль субъекта, может просматривать снятое изображение в момент спуска затвора.
На фиг.8D представлен пример, в котором изображение, используемое как цель обработки записи, отображают как на панели 6М основного дисплея, так и на передней панели 6F дисплея. То есть в качестве процесса на основе операции съемки, выполняемой пользователем или тому подобное, ЦПУ 31 записывает данные снятого изображения, сформированные и снятые в момент съемки, на носителе 90 записи или в ПЗУ 33 типа флэш. После этого в течение такого периода записи ЦПУ 31 управляет панелью 6М основного дисплея и передней панелью 6F дисплея для отображения данных изображения в соответствии с этим периодом записи. Таким образом, пользователь устройства 1 формирования изображения и человек, используемый как субъект, могут просматривать снятое изображение в момент срабатывания затвора.
На фиг.9 показан пример обработки, в котором учитывают случай так называемого нажатия наполовину как операцию пользователя, относящуюся к кнопке 5а операции высвобождения.
В общем, устройства формирования изображения, такие как цифровые фотокамеры или тому подобное, в которых управление фокусом осуществляется для фокусирования устройства формирования изображения на субъект в состоянии нажатия наполовину, нашли широкое распространение. На фиг.9 показан пример, в котором в случае, когда такая функция применена в устройстве 1 формирования изображения в соответствии с настоящим примером, его период нажатия наполовину включен в период записи.
На фиг.9 представлена обработка, в которой, например, используя обработку, показанную на фиг.6, этап F104 представляет собой детектирование нажатия наполовину. После детектирования того, что пользователь нажал наполовину на кнопку 5а операции спуска затвора во время периода мониторинга, показанного на фиг.6, ЦПУ 31 переводит обработку с этапа F104 на этап F501 на фиг.9. После этого ЦПУ 31 выполняет управление фокусом для изображения субъекта, используемого в это время как цель.
ЦПУ 31 выполняет обработку мониторинга кнопки 5а съемки изображения на этапе F502. В частности, ЦПУ 31 определяет, что операция съемки была выполнена, когда пользователь нажал на кнопку 5а операций съемки из состояния нажатия наполовину. Следует отметить, что, хотя это и не показано на фиг.9, в случае, когда пользователь прекратил нажатие наполовину, без нажатия на кнопку 5а операции съемки, ЦПУ 31 должен вернуть обработку к обработке, выполняемой во время периода мониторинга по фиг.6.
Во время периода, в течение которого продолжается нажатие наполовину, ЦПУ 31 повторяет обработку на этапах F503-F507 и этапе F501.
Вначале на этапе F503 ЦПУ 31 управляет панелью 6М основного дисплея для отображения изображения мониторинга. Текущая ситуация представляет собой ситуацию, в которой пользователь ожидает соответствующего момента времени в состоянии нажатия наполовину, и, соответственно, в это время пользователь должен иметь возможность просмотра изображения мониторинга на панели 6М основного дисплея.
С другой стороны, что касается передней панели 6F дисплея, вначале, на этапе F504, ЦПУ 31 выполняет обработку определения условий в отношении возможности визуального распознавания, для отображения на передней панели 6F дисплея. Примеры определения условий представляют собой те же, что и примеры, описанные выше, и ЦПУ 31 выполняет, например, часть или всю обработку определения присутствия человека на стороне субъекта съемки, обработку определения режима формирования изображения, обработку определения, относящуюся к внутренней информации детектирования, обработку определения в отношении результата процесса анализа изображения сигнала снятого изображения и т.д. Таким образом, ЦПУ 31 определяет, что существует лицо, просматривающее переднюю панель 6F дисплея, что это лицо находится в визуально распознаваемой ситуации все время, в случае когда лицо пытается просмотреть переднюю панель дисплея 6F, что лицо намеревается просмотреть переднюю панель дисплея 6F или тому подобное.
После этого после определения, что существует возможность визуального распознавания, ЦПУ 31 переводит обработку с этапа F505 на этап F506 для выполнения управления отображением изображения мониторинга на передней панели 6F дисплея.
С другой стороны, после определения, что визуальная возможность распознавания отсутствует, ЦПУ 31 переводит обработку с этапа F505 на этап F507 для управления передней панелью 6F дисплея, чтобы выключить дисплей. Например, ЦПУ 31 меняет состояние передней панели 6F дисплея на состояние отсутствия отображения, или выполняет управление с отключением питания передней панели 6F дисплея.
То есть только в случае, когда существует вероятность того, что человек - субъект съемки - просматривает переднюю панель 6F дисплея, изображение мониторинга отображают на передней панели 6F дисплея.
После детектирования того, что пользователь нажал на кнопку 5а операции съемки, ЦПУ 31 переходит на этап F508 для выполнения обработки съемки.
То есть в качестве процесса, основанного на операции съемки изображения пользователем или тому подобное, ЦПУ 31 передает данные снятого изображения, снятые и захваченные в момент времени съемки изображения в интерфейс 10 носителя записи для записи их на носителе 90 записи или в ПЗУ 33 типа флэш.
Кроме того, ЦПУ 31 выполняет управление для отключения отображения каждой из панели 6М основного дисплея и передней панели 6F дисплея.
Следует отметить, что этот этап F508 аналогичен описанному выше со ссылкой на фиг.8А, но при этом может быть выполнена обработка, представленная на фиг.8В, 8С или 8D. В качестве обработки управления во время периода записи можно рассмотреть различные примеры, такие как показаны на фиг.8А-фиг.9.
4-4. Примеры обработки во время периода предварительного просмотра
Далее со ссылкой на фиг.10-13 будут описаны примеры обработки во время периода предварительного просмотра, то есть примеры обработки, выполняемые ЦПУ 31, используемой как этап F106, представленный на фиг.6, описанной выше.
На фиг.10 показан пример, в котором выполняют отображение предварительного просмотра на панели 6М основного дисплея в течение заданной длительности времени во время периода предварительного просмотра, и в отношении передней панели 6F дисплея отображение предварительного просмотра выполняют в соответствии с условиями.
В соответствии с описанным выше процессом после того, как будет закончен период записи, ЦПУ 31 затем выполняет обработку, показанную на фиг.10, как этап F106, представленный на фиг.6. Вначале на этапе F601 ЦПУ 31 выполняет определение условия в отношении возможности визуального распознавания для отображения на передней панели 6F дисплея. Таким же образом, как описано выше, ЦПУ 31 выполняет часть или всю обработку определения присутствия человека на стороне субъекта, обработку определения режима формирования изображения, обработку определения, относящуюся к внутренней информации детектирования, обработку определения, относящуюся к результату обработки анализа изображения для сигнала снятого изображения, и т.д.
Таким образом, ЦПУ 31 определяет, что присутствует человек, который просматривает переднюю панель 6F дисплея, что этот человек находится в ситуации возможности визуального распознавания все время в случае, когда этот человек пытается просматривать переднюю панель 6F дисплея, что этот человек намеревается просмотреть переднюю панель 6F дисплея, или тому подобное.
После этого после определения, что существует возможность визуального распознавания передней панели 6F дисплея, ЦПУ 31 переводит обработку с этапа F602 на этап F604 для выполнения управления отображением предварительного просмотра как для панели 6М основного дисплея, так и для передней панели 6F дисплея. То есть ЦПУ 31 управляет как панелью 6М основного дисплея, так и передней панелью 6F дисплея для отображения данных изображения, записанных в ходе непосредственно предшествующей обработки во время периода записи.
С другой стороны, после определения, что возможность визуального распознавания для передней панели 6F дисплея отсутствует, ЦПУ 31 переводит обработку с этапа F602 на этап F603 для выполнения управления отображением предварительного просмотра на панели 6М основного дисплея и управляет передней панелью 6F дисплея для отключения дисплея. Таким образом, данные изображения, записанные в непосредственно предшествующей обработке во время периода записи, отображают только на панели 6М основного дисплея.
Отображение предварительного просмотра, начатое на этапе F604 или F603, продолжают до тех пор, пока не пройдет заданное время отображения на этапе F605. Например, предположим, что заданное время отображения составляет несколько секунд или что-то вроде этого. ЦПУ 31 выполняет подсчет времени с момента времени, когда было начато отображение предварительного просмотра на этапе F604 или F603, и отслеживает течение этого заданного периода времени на этапе F605.
Затем после того, как заданный период времени пройдет, ЦПУ 31 заканчивает отображение предварительного просмотра на этапе F606.
Теперь обработка, выполняемая на этапе F106 по фиг.6, заканчивается и ЦПУ 31 возвращается на этап F101 на фиг.6 для возобновления обработки во время периода мониторинга.
В соответствии с обработкой, показанной на фиг.10, отображение предварительного просмотра постоянно выполняют на панели 6М основного дисплея в течение заданного периода времени, и отображение предварительного просмотра выполняют на передней панели 6F дисплея в течение заданного периода времени в ситуации, когда предполагается, что здесь присутствует зритель.
Далее будет описан пример обработки, показанной на фиг.11. На этой фиг.11 представлен пример обработки, при которой выполняют отображение предварительного просмотра только на передней панели 6F дисплея в течение заданного периода времени. Следует отметить, что на фиг.11 обработка, эквивалентная обработке предварительного просмотра на этапе F106, показанной на фиг.6, представляет собой обработку только на этапе F610, этап F101 описан как этап F101 на фиг.6 и этапы F201, F210, F205 описаны как обработка на этапе F102 на фиг.6.
После окончания описанной выше обработки в течение периода записи ЦПУ 31 выполняет обработку на этапе F610 по фиг.11 как этап F106 по фиг.6. То есть ЦПУ 31 управляет передней панелью 6F дисплея для выполнения отображения предварительного просмотра в отношении данных изображения, записанных в ходе непосредственно предшествующей обработки в течение периода записи.
Затем ЦПУ 31 переходит на этап F101 для возобновления обработки во время периода мониторинга. После этого на этапе F201 ЦПУ 31 управляет панелью 6М основного дисплея для отображения изображения мониторинга. Затем изображение мониторинга отображают на панели 6М основного дисплея, и отображение предварительного просмотра выполняют на передней панели 6F дисплея.
Кроме того, ЦПУ 31 выполняет подсчет времени с момента времени, когда было начато отображение предварительного просмотра на этапе F610, и отслеживает истечение этого определенного периода времени на этапе F210. Затем после окончания этого определенного периода времени ЦПУ 31 заканчивает отображение предварительного просмотра на передней панели 6F дисплея на этапе F205.
Как описано со ссылкой на фиг.6, ЦПУ 31 повторяет обработку на этапе F102 при выполнении обработки мониторинга на этапах F103 и F104. В соответствии с этим в случае, показанном на фиг.11, также в случае, когда не была детектирована ни инструкция воспроизведения (F103), ни операция съемки изображения (F104), ЦПУ 31 повторяет обработку, выполняемую на этапах F201, F210 и F205, возвращаясь с этапа F104 на этап F201.
После этого в соответствии с обработкой, представленной на фиг.11, непосредственно после начала отображения предварительного просмотра на передней панели 6F дисплея в течение периода предварительного просмотра выполняется обработка в течение периода мониторинга и начинают отображение изображения мониторинга на панели 6М основного дисплея. После этого после выполнения отображения предварительного просмотра на передней панели 6F дисплея в течение определенного периода времени отображение предварительного просмотра на передней панели 6F дисплея заканчивают и отображение на передней панели 6F дисплея выключают.
В соответствии с этим пользователь устройства 1 формирования изображения может непосредственно просматривать изображение мониторинга без просмотра отображения предварительного просмотра и может перейти к подготовке следующей записи неподвижного изображения, а также человек - субъект съемки - может проверять неподвижное изображение, на котором снят этот человек - субъект съемки, - в течение определенного периода времени.
Следует отметить, что в качестве модификации такой обработки может быть предусмотрена компоновка, в которой после окончания отображения предварительного просмотра на передней панели 6F дисплея выполняется обработка на этапах F202-F205 по фиг.7А и изображение мониторинга отображают на передней панели 6F дисплея в соответствии с условиями.
Далее будет описан пример обработки, показанный на фиг.12. На фиг.12 показан пример, в котором выполняют отображение предварительно просмотра на обеих панелях 6М и 6F дисплея, но отображение предварительного просмотра на передней панели 6F дисплея выполняют более длительное время.
Следует отметить, что на фиг.12 обработка, эквивалентная обработке предварительного просмотра на этапе F106 по фиг.6, представлена этапами F620 и F621, этап F101 описан как этап F101 на фиг.6 и этапы F201-F205 и F220 описаны как обработка на этапе F102 на фиг.6.
После описанной выше обработки во время окончания периода записи ЦПУ 31 выполняет обработку на этапе F620 по фиг.12, как этап F106 в фиг.6. То есть ЦПУ 31 управляет как панелью 6М основного дисплея, так и передней панелью 6F дисплея для выполнения отображения предварительного просмотра в отношении данных изображения, записанных в ходе непосредственно предшествующей обработки во время периода записи.
ЦПУ 31 выполняет подсчет времени после момента времени начала отображения предварительного просмотра на этапе F620. Затем ЦПУ 31 отслеживает истечение этого определенного периода времени на этапе F621. Однако в этом случае ЦПУ 31 отслеживает истечение заданного периода времени Т1, используемого для отображения предварительного просмотра на панели 6М основного дисплея.
Отображение предварительного просмотра на обеих панелях 6М и 6F дисплея продолжается как период предварительного просмотра до тех пор, пока не истечет заданный период времени Т1.
После того как истечет заданный период времени Т1, ЦПУ 31 переходит с этапа F621 на этап F101 для возобновления обработки во время периода мониторинга. Следует отметить, что ЦПУ 31 продолжает подсчет времени без перерыва.
После этого на этапе F201 ЦПУ 31 управляет панелью 6М основного дисплея для отображения изображения мониторинга. В соответствии с этим панель 6М основного дисплея переключают с отображения предварительного просмотра на отображение изображения мониторинга, и, с другой стороны, передняя панель 6F дисплея продолжает отображение предварительного просмотра.
После перехода к периоду мониторинга на этапе F220 ЦПУ 31 отслеживает истечение определенного времени в отношении подсчета времени после начала отображения предварительного просмотра на этапе F620, описанном выше. В этом случае ЦПУ 31 отслеживает истечение заданного периода времени Т2 (Т1<Т2), используемого как отображение предварительного просмотра на передней панели 6F дисплея.
Как описано на фиг.6, ЦПУ 31 повторяет обработку на этапе F102, выполняя обработку мониторинга на этапах F103 и F104. В соответствии с этим в случае также фиг.12, если не детектирована ни инструкция воспроизведения (F103), ни операция съемки изображения (F104), ЦПУ 31 возвращается с этапа F104 на этап F201 и повторяет этапы F220 и F202-F205.
Поэтому даже после входа в период мониторинга предварительный просмотр на передней панели 6F дисплея продолжается до тех пор, пока истечение заданного периода времени Т2 не будет определено на этапе F220.
После этого после истечения заданного периода времени Т2 ЦПУ 31 выполняет обработку на этапах F202-F205 на фиг.12 как обработку на этапе F102.
То есть на этапе F202 ЦПУ 31 выполняет определение условия в отношении возможности визуального распознавания для отображения на передней панели 6F дисплея, ЦПУ 31 выполняет, например, часть или всю обработку определения присутствия человека на стороне субъекта, обработку определения режима формирования изображения, обработку определения, относящуюся к информации внутреннего детектирования, обработку определения, относящуюся к результату обработки анализа изображения сигнала снятого изображения, и т.д.
После этого после определения, что существует возможность визуального распознавания для передней панели 6F дисплея, ЦПУ 31 переводит обработку на этап F204 с этапа F203 для выполнения управления отображением изображения мониторинга на передней панели 6F дисплея.
С другой стороны, после определения, что возможность визуального распознавания для передней панели 6F дисплея отсутствует, ЦПУ 31 переводит обработку на этап F205 с этапа F203 для управления передней панелью 6F дисплея с выключением ее отображения.
Затем в соответствии с обработкой, показанной на фиг.12, выполняют отображение предварительного просмотра на обеих панелях 6М и 6F дисплея, как период предварительного просмотра. После этого отображение предварительного просмотра на панели 6М основного дисплея заканчивается первым, ЦПУ 31 переходит к обработке, выполняемой во время периода мониторинга, и отображение на панели 6М основного дисплея изменяется на изображение мониторинга.
Что же касается передней панели 6F дисплея, даже после перехода к периоду мониторинга, продолжается отображение предварительного просмотра до тех пор, пока не пройдет определенный период времени Т2. После этого после окончания отображения предварительного просмотра отображают изображение мониторинга на передней панели 6F дисплея или ее отображение отключают в зависимости от возможности визуального распознавания.
В соответствии с этим непосредственно после того, как пользователь устройства 1 формирования изображения проверит отображение предварительного просмотра в течение короткого периода, пользователь может просматривать изображение мониторинга и может перейти к подготовке записи следующего неподвижного изображения. Затем человек - субъект съемки - может просматривать неподвижное изображение, на котором снят он сам, в течение относительно длительного периода времени.
Следует отметить, что в качестве модификация такой обработки может быть предусмотрена компоновка, в которой после окончания отображения предварительного просмотра на передней панели 6F дисплея отображение передней панели 6F дисплея принудительно отключают во время периода мониторинга.
Далее будет описан пример обработки, показанный на фиг.13. На фиг.13 показан пример, в котором отображение предварительного просмотра выполняют на обеих панелях 6М и 6F дисплея, но отображение предварительного просмотра закачивается в соответствии с операцией пользователя во время периода предварительного просмотра, и также отображение предварительного просмотра на передней панели 6F дисплея выполняют в течение более длительного периода времени.
Следует отметить, что на фиг.13 обработка, эквивалентная обработке предварительного просмотра, выполняемой на этапе F106 по фиг.6 представлена этапами F630 и F631, этап F101 описан как этап F101 на фиг.6, и этапы F201-F205 и F220 описаны как обработка на этапе F102 на фиг.6.
После окончания описанной выше обработки во время периода записи ЦПУ 31 выполняет обработку на этапе F630 по фиг.13 как этап F106 на фиг.6. То есть ЦПУ 31 управляет как панелью 6М основного дисплея, так и передней панелью 6F дисплея для выполнения отображения предварительного просмотра в отношении данных изображения, записанных в ходе непосредственно предыдущей обработки во время периода записи.
На этапе F631 ЦПУ 31 отслеживает, была ли выполнена операция инструкции, используемая для окончания отображения предварительного просмотра, как операция пользователя.
Отображение предварительного просмотра на обеих панелях 6М и 6F дисплея продолжается как период предварительного просмотра, до тех пор, пока не будет выполнена операция, используемая для окончания отображения предварительного просмотра.
После детектирования операции окончания предварительного просмотра ЦПУ 31 переходит на этап F101 с этапа F631 для возобновления обработки во время периода мониторинга. После этого на этапе F201 ЦПУ 31 управляет панелью 6М основного дисплея для отображения изображения мониторинга.
В соответствии с этим панель 6М основного дисплея переключают с отображения предварительного просмотра на отображение изображения мониторинга, и, с другой стороны, отображение предварительного просмотра продолжается на передней панели 6F дисплея.
После перехода к периоду мониторинга на этапе F220 ЦПУ 31 отслеживает течение определенного периода времени, выполняя подсчет времени после начала отображения предварительного просмотра на этапе F630, описанном выше. В качестве альтернативы ЦПУ 31 может начать подсчет времени в момент времени перехода к периоду мониторинга.
Как описано на фиг.6, ЦПУ 31 повторяет обработку на этапе F102, выполняя обработку мониторинга на этапах F103 и F104. В соответствии с этим в случае, показанном на фиг.13, также, если не была детектирована ни инструкция воспроизведения (F103), ни операция съемки изображения (F104), ЦПУ 31 возвращается с этапа F104 на этап F201 и повторяет этапы F220 и F202-F205. Поэтому, даже после перехода в период мониторинга продолжается предварительный просмотр на передней панели дисплея 6F до тех пор, пока не истечет определенный период времени, который определен на этапе F220.
Затем после истечения определенного периода времени ЦПУ 31 выполняет обработку на этапах F202-F205 на фиг.13, как обработку на этапе F102.
То есть на этапе F202 ЦПУ 31 выполняет определение состояния в отношении возможности визуального распознавания, касающейся отображения на передней панели 6F дисплея. ЦПУ 31 выполняет, например, часть или всю обработку определения присутствия человека на стороне субъекта, обработку определения режима формирования изображения, обработку определения, относящуюся к информации внутреннего детектирования, обработку определения, относящуюся к результату обработки анализа изображения сигнала снятого изображения, и т.д.
После этого после определения, что существует возможность визуального распознавания для передней панели 6F дисплея, ЦПУ 31 переводит обработку на этап F204 с этапа F203 для выполнения управления отображением изображения мониторинга на передней панели 6F дисплея.
С другой стороны, после определения, что возможность визуального распознавания в отношении передней панели дисплея 6F отсутствует, ЦПУ 31 переводит обработку на этап F205 c этапа F203 для управления передней панелью 6F дисплея для отключения отображения.
Следовательно, в соответствии с обработкой на фиг.13 выполняют отображение предварительного просмотра на обеих панелях 6М и 6F дисплея в качестве периода предварительного просмотра, до тех пор, пока не будет выполнена операция пользователя для окончания отображения предварительного просмотра.
После этого после того, как будет выполнена операция пользователя для окончания отображения предварительного просмотра, отображение предварительного просмотра на основной панели дисплея 6М будет закончено, ЦПУ 31 переходит к обработке во время периода мониторинга и отображение панели 6М основного дисплея изменяется на изображение мониторинга.
Для передней панели 6F дисплея, даже после перехода к периоду мониторинга, отображение предварительного просмотра продолжается до тех пор, пока не истечет заданный период времени. После этого после окончания отображения предварительного просмотра изображение мониторинга отображают на передней панели 6F дисплея или его отображение отключают в зависимости от возможности визуального распознавания.
В соответствии с этим пользователь устройства 1 формирования изображения может подтверждать отображение предварительного просмотра в течение произвольного периода времени. Затем пользователь заканчивает отображение предварительного просмотра по своему собственному желанию, в результате чего пользователь может просматривать изображение предварительного просмотра в это время и может перейти к подготовке к следующей записи неподвижного изображения. Даже после перехода к периоду мониторинга, человек - субъект съемки - может подтверждать неподвижное изображение, на котором снят он сам, в течение определенного периода времени.
Следует отметить, что в качестве модификации такой обработки может быть предусмотрена конфигурация, в которой после окончания отображения предварительного просмотра на передней панели 6F дисплея отображение на передней панели 6F дисплея принудительно отключают во время периода мониторинга.
Кроме того, существует вероятность того, что пользователь вообще не выполнит операцию окончания отображения предварительного просмотра, и в соответствии с этим также можно предусмотреть пример обработки, в которой после детектирования, что операция не была выполнена в течение определенного длительного периода времени на этапе F631, ЦПУ 31 автоматически переходит к периоду мониторинга.
4-5. Примеры обработки во время периода воспроизведения
Далее со ссылкой на фиг.14А до 15 будут описаны примеры обработки в течение периода воспроизведения. То есть будут описаны примеры обработки ЦПУ 31, используемые как этап F107 на фиг.6, описанный выше.
На фиг.14А показан пример, в котором отображение воспроизведения выполняют только на панели 6М основного дисплея в течение периода воспроизведения. В случае перехода на этап F107 по фиг.6 на этапе F701 на фиг.14А ЦПУ 31 управляет передней панелью 6F дисплея для отключения отображения.
После этого на этапе F702 ЦПУ 31 выполняет управление считыванием данных с носителя 90 записи или из ПЗУ 33 типа флэш в соответствии с операцией пользователя для управления панелью 6М основного дисплея для воспроизведения и отображения считанных данных изображения. То есть этот пример представляет собой пример, в котором переднюю панель 6F дисплея не используют для отображения воспроизведения.
На фиг.14В показан пример, в котором в некоторых случаях отображение воспроизведения также выполняют на передней панели 6F дисплея. В случае перехода к этапу F107 на фиг.6 на этапе F710 на фиг.14В ЦПУ 31 выполняет определение состояния в отношении возможности визуального распознавания, относящейся к отображению на передней панели 6F дисплея. ЦПУ 31 выполняет, например, часть или всю обработку определения присутствия человека на стороне субъекта, обработку определения режима формирования изображения, обработку определения, относящуюся к информации внутреннего детектирования, обработку определения, относящуюся к результату обработки анализа изображения для сигнала снятого изображения, и т.д.
После этого после определения, что существует возможность визуального распознавания в отношении передней панели 6F дисплея, ЦПУ 31 переводит обработку на этап F713 с этапа F711 для выполнения управления считыванием данных с носителя 90 записи или из ПЗУ 33 типа флэш, в ответ на операцию пользователя. После этого ЦПУ 31 управляет как панелью 6М основного дисплея, так и передней панелью 6F дисплея для выполнения отображения воспроизведения.
С другой стороны, после определения, что возможность визуального распознавания отсутствует для передней панели 6F дисплея, ЦПУ 31 переводит обработку на этап F712 с этапа F711 для выполнения управления считыванием данных с носителя 90 записи или из ПЗУ 33 типа флэш в ответ на операцию пользователя. После этого ЦПУ 31 управляет панелью 6М основного дисплея для выполнения отображения воспроизведения и управляет передней панелью 6F дисплея для отключения отображения. Таким образом, изображение воспроизведения отображают только на панели 6М основного дисплея.
Таким образом, в случае когда предполагают, что отображение на передней панели 6F дисплея является эффективным, ЦПУ 31 также управляет передней панелью 6F дисплея для отображения воспроизводимого изображения. Таким образом, человек, находящийся на передней стороне, также может наслаждаться воспроизводимым изображением.
Обработка, показанная на фиг.15, представляет собой пример, в котором воспроизводимое изображение отображают на обеих панелях 6М и 6F дисплея во время периода воспроизведения, но отображение на панели 6М основного дисплея и отображение на передней панели 6F дисплея отличаются друг от друга.
В случае перехода на этап F107 по фиг.6 на этапе F720 по фиг.15 ЦПУ 31 выполняет управление отображением воспроизведения на панели 6М основного дисплея. То есть ЦПУ 31 выполняет управление считыванием данных с носителя 90 записи или из ПЗУ 33 типа флэш в ответ на операцию пользователя на воспроизведение и отображение считываемых данных изображения на панели 6М основного дисплея.
После этого, что касается передней панели 6F дисплея, ЦПУ 31 разветвляет обработку в зависимости от состояния отображения воспроизведения на панели 6М основного дисплея.
В качестве отображения изображения воспроизведения на панели 6М основного дисплея режим отображения изменяется в соответствии с операцией пользователя. Например, одно изображение изменяют одновременно в соответствии с операцией пользователя или в некоторых случаях отображают миниатюрные изображения в виде списка.
На этапе F721 ЦПУ 31 разветвляет обработку в зависимости от того, отображается ли список миниатюрных изображений для воспроизводимых изображений или одиночное изображение на панели 6М основного дисплея.
В случае когда в данный момент времени отображают одиночное воспроизводимое изображение на панели 6М основного дисплея, ЦПУ 31 переводит обработку на этап F722 для передачи инструкции в контроллер 7 дисплея отобразить эти же данные воспроизводимого изображения также на передней панели 6F дисплея. В этом случае состояния отображения панели 6М основного дисплея и передней панели 6F дисплея представляют такие состояния, как показаны на фиг.5С.
С другой стороны, в случае когда список миниатюрных изображений отображают в данный момент времени на панели 6М основного дисплея, ЦПУ 31 переводит обработку на этап F723. В этом случае ЦПУ 31 передает инструкции в контроллер 7 дисплея для отображения на передней панели 6F дисплея данных воспроизводимого изображения, выбранных с помощью курсора К при отображении списка миниатюрных изображений. В этом случае состояния отображения панели 6М основного дисплея и передней панели 6F дисплея представляют собой такие состояния, как показаны на фиг.5В.
Когда ЦПУ 31 выполняет такую обработку, человек на передней стороны одновременно также может видеть сторону передней панели 6F дисплея. В соответствии с этим пользователь устройства 1 формирования изображения и человек, находящийся с передней стороны, могут наслаждаться воспроизводимым изображением.
Кроме того, как показано на фиг.5В, в случае когда список миниатюрных изображений отображают на панели 6М основного дисплея, пользователь устройства 1 формирования изображения перемещает курсор К, в результате чего человек на передней стороне может видеть выбранное воспроизводимое изображение на стороне передней панели 6F дисплея.
Следует отметить, что в качестве модификации обработки, показанной на фиг.15, например, может быть принята компоновка, в которой та же обработка, что и на этапах F202-F205 по фиг.7А, выполняется перед этапом F721 на фиг.15, и отображение воспроизведения на этапе F722 или F723 выполняют на передней панели 6F дисплея в соответствии с условиями.
4-6. Примеры обработки во время периода записи движущегося изображения
Выше была описана обработка во время каждого периода операции в случае формирования изображений, таких как неподвижное изображение, в устройстве 1 формирования изображения. Можно предусмотреть случай, в котором запись движущегося изображения будет выполнена в устройстве 1 формирования изображения, и, соответственно, здесь будут описаны примеры обработки в случае записи движущегося изображения.
На фиг.16 показан пример обработки в соответствии с переходом каждого периода работы в случае выполнения записи движущегося изображения. Этапы F101-F103, F107 и F108 представляют собой те же, что и на фиг.6. Обработка (F104-F106) как обработка операции, относящейся к записи неподвижного изображения на фиг.6, показана на этапах F150-F153 на фиг.16, используемых как обработка, относящаяся к записи движущегося изображения.
Период мониторинга представляет собой период в состоянии ожидания до тех пор, пока не будет начата запись движущегося изображения, но изображение мониторинга отображают, как на этапе F102. В этом случае, например, выполняется такая обработка, как показано на фиг.7А или 7В.
Во время периода мониторинга в ответ на операцию пользователя начала записи ЦПУ 31 переходит на этап F151 с этапа F150 для выполнения обработки записи движущегося изображения и управления отображением во время записи. Обработка на этапе F151 продолжается до тех пор, пока пользователь не выполнит операцию остановки записи, или до тех пор, пока не будет определено, что требуется остановить запись из-за того, что запись далее невозможна из-за заполненного состояния носителя 90 записи или тому подобное.
После получения отчета о том, что пользователь ввел операцию остановки или тому подобное, ЦПУ 31 переходит на этап F153 с этапа F152 для выполнения обработки окончания движущегося изображения и возвращается на этап F101 для возобновления операции, соответствующей периоду мониторинга.
Теперь примеры обработки на этапе F151 будут показаны со ссылкой на фиг.17А, 17В и 17С.
На фиг.17А показан пример, в котором отображение изображения во время записи движущегося изображения также выполняют на передней панели 6F дисплея в зависимости от ситуации. В случае перехода на этап F151 на фиг.16 ЦПУ 31 выполняет обработку записи движущегося изображения на этапе F800 на фиг.17А. То есть ЦПУ 31 выполняет обработку, в которой снятые данные изображения для каждого кадра, полученные в системе 2 формирования изображения и в ЦСП 4 камеры, подвергают заданной обработке кодирования со сжатием или тому подобное, и их записывают на носитель 90 записи или в ПЗУ 33 типа флэш как движущееся изображение.
Во время такой обработки записи движущегося изображения на этапе F801 ЦПУ 31 выполняет управление отображением движущегося изображения на панели 6М основного дисплея. То есть ЦПУ 31 управляет панелью 6М основного дисплея для выполнения отображения движущегося изображения, используемого как изображение мониторинга во время записи.
ЦПУ 31 выполняет этапы F802-F805 для передней панели 6F дисплея.
На этапе F802 ЦПУ 31 выполняет определение условия в отношении возможности визуального распознавания для отображения на передней панели 6F дисплея. ЦПУ 31 выполняет, например, часть или всю обработку определения присутствия человека на стороне субъекта съемки, обработку определения режима формирования изображения, обработку определения, относящуюся к информации внутреннего детектирования, обработку определения, относящуюся к результату обработки анализа изображения сигнала снятого изображения, и т.д.
После определения, что имеется возможность визуального распознавания передней панели 6F дисплея, ЦПУ 31 переводит обработку с этапа F803 на этап F804 для выполнения отображения движущегося изображения, используемого как изображение мониторинга во время записи, на передней панели 6F дисплея. То есть в этом случае выполняют отображение мониторинга движущегося изображения, как на панели 6М основного дисплея, так и на передней панели 6F дисплея.
С другой стороны, после определения, что отсутствует возможность визуального распознавания передней панели 6F дисплея, ЦПУ 31 переводит обработку с этапа F803 на этап F805 для управления передней панелью 6F дисплея с отключением отображения. Таким образом, отображение мониторинга движущегося изображения отображают только на панели 6М основного дисплея.
Таким образом, в случае когда предполагают, что отображение на передней панели 6F дисплея будет эффективным, отображение движущегося изображения во время записи также выполняют на передней панели 6F дисплея. Таким образом, человек, находящийся с передней стороны, также может просматривать изображение мониторинга для записываемого движущегося изображения.
На фиг.17В показан пример, в котором отображение изображения мониторинга во время записи движущегося изображения выполняют на обеих панелях 6М и 6F дисплея. В случае перехода на этап F151 по фиг.16 ЦПУ 31 выполняет обработку записи движущегося изображения на этапе F810 на фиг.17В, то есть выполняет обработку, в которой данные снятого изображения каждого кадра, полученного в системе 2 формирования изображения и ЦСП 4 камеры, подвергают заданной обработке кодирования со сжатием или тому подобное, для записи их на носителе 90 записи или ПЗУ 33 типа флэш как движущегося изображения.
После этого во время такой обработки записи движущегося изображения на этапе F811 ЦПУ 31 выполняет управление отображением движущегося изображения для панели 6М основного дисплея и передней панели 6F дисплея, то есть управляет обеими панелями 6М и 6F дисплея, с отображением движущегося изображения, используемого как изображение мониторинга во время записи.
На фиг.17С показан пример, в котором отображение изображения мониторинга во время записи движущегося изображения выполняют только на панели 6М основного дисплея. В случае перехода на этап F151 на фиг.16 ЦПУ 31 выполняет обработку записи движущегося изображения на этапе F820 на фиг.17С, то есть выполняет обработку, в которой данные снятого изображения каждого кадра, полученного в системе 2 формирования изображения и в ЦСП 4 камеры, подвергают заданной обработке кодирования со сжатием или тому подобное, для записи их на носителе 90 записи или в ПЗУ 33 типа флэш в качестве движущегося изображения.
После этого на этапе F821 ЦПУ 31 управляет передней панелью 6F дисплея, отключая ее отображение, и на этапе F822 выполняет управление отображением движущегося изображения на панели 6М основного дисплея, то есть предотвращает использование передней панели 6F дисплея для отображения движущегося изображения, используемого в качестве изображения мониторинга во время записи.
Например, в случае выполнения записи движущегося изображения можно предусмотреть пример управления отображением, такой как показан выше на фиг.17А, 17В и 17С.
5. Примеры перехода состояния отображения
Примеры управления, относящиеся к отображению на панели 6М основного дисплея и на передней панели 6F дисплея, были описаны в отношении периода мониторинга, периода записи неподвижного изображения, периода предварительного просмотра, периода воспроизведения и периода записи движущегося изображения.
С помощью устройства 1 формирования изображения в соответствии с настоящим примером можно выполнить последовательность из операции формирования изображения неподвижного изображения, операции воспроизведения и операции записи движущегося изображения, в то время как каждый период операции для этих операций изменяется. После этого в каждый период операций используют один из описанных выше примеров обработки, реализуя при этом эффективное отображение для обеих панелей 6М и 6F дисплея.
На фиг.18 и 19 представлены примеры состояния отображения на обеих панелях 6М и 6F дисплея, сопровождающие переход периода операции как в примерах №1-№8.
Примеры №1-5 представляют пример состояния отображения в случае, когда период операции изменяется, таким образом: период мониторинга → период записи неподвижного изображения → период предварительного просмотра → период мониторинга, то есть в случае, когда выполняют запись неподвижного изображения в соответствии с последовательностью: период мониторинга → период записи неподвижного изображения → период предварительного просмотра, и затем во время периода мониторинга этот период мониторинга переходит в период воспроизведения в результате выполнения операции пользователя или тому подобное.
Первый пример №1, показанный на фиг.18, представляет собой случай, в котором выполняют обработку, показанную на фиг.7А, используемую как обработка во время периода мониторинга, обработку, показанную на фиг.8А, используемую как обработка во время периода записи неподвижного изображения, обработку по фиг.10, используемую как обработка во время периода предварительного просмотра, и обработку по фиг.14А, используемую как обработка во время периода воспроизведения.
Что касается панели 6М основного дисплея, отображение изображения мониторинга постоянно выполняют во время периода мониторинга, отображение отключают только в момент, используемый для периода записи неподвижного изображения, и отображение предварительного просмотра выполняют в течение заданного периода времени во время периода предварительного просмотра.
Что касается передней панели 6F дисплея, отображение изображения мониторинга выполняют во время периода мониторинга в случае, когда предполагают, что существует возможность визуального распознавания, но в случае, когда предполагают, что возможность визуального распознавания отсутствует, это отображение отключают, предотвращая таким образом выполнение ненужного отображения. Дисплей выключают только в период записи неподвижного изображения, отображение предварительного просмотра выполняют в течение заданного периода времени в течение периода предварительного просмотра в случае, когда существует возможность визуального распознавания, но в случае, когда возможность визуального распознавания отсутствует, отображение предварительного просмотра не выполняют. Кроме того, в течение периода воспроизведения отображение воспроизведения не выполняют.
То есть данный пример №1 представляет собой пример, в котором для передней панели 6F дисплея отображение изображения мониторинга и отображение предварительного просмотра выполняют в соответствии с условиями возможности визуального распознавания.
Пример №2 представляет собой случай, в котором используются обработка по фиг.7В, используемая как обработка во время периода мониторинга, обработка по фиг.8В, используемая как обработка во время периода записи неподвижного изображения, обработка по фиг.10, используемая как обработка во время периода предварительного просмотра, и обработка по фиг.14В, используемая как обработка во время периода воспроизведения.
Что касается панели 6М основного дисплея, отображение изображения мониторинга постоянно выполняют во время периода мониторинга, отображение записанного неподвижного изображения выполняют в период от начала записи неподвижного изображения до периода предварительного просмотра и отображение воспроизведения выполняют во время периода воспроизведения.
Что касается передней панели 6F дисплея, отображение выключают во время периода мониторинга. Отображение все еще остается выключенным во время периода записи неподвижного изображения. Отображение предварительного просмотра выполняют в течение заданного периода времени в случае, когда существует возможность визуального распознавания, но в случае, когда возможность визуального распознавания отсутствует, отображение предварительного просмотра не выполняют. Кроме того, во время периода воспроизведения отображение воспроизведения не выполняют в соответствии с и в зависимости от того, существует или нет возможность визуального распознавания, или отображение выключают.
То есть этот пример №2 представляет собой пример, в котором на передней панели 6F дисплея выполняют отображение записанного неподвижного изображения или изображение воспроизведения в соответствии с условиями возможности визуального распознавания.
Пример №3 представляет собой случай, в котором обработка на этапе F102 на фиг.11 используется как обработка во время периода мониторинга, обработка на фиг.8С используется как обработка во время периода записи неподвижного изображения, обработка по F106 на фиг.11 используется как обработка во время периода предварительного просмотра и обработка по фиг.15 используется как обработка во время периода воспроизведения.
Что касается панели 6М основного дисплея, отображение изображения мониторинга постоянно выполняют во время периода мониторинга. Отображение не выполняют во время периода записи неподвижного изображения и периода предварительного просмотра, но отображение на мгновение выключают во время периода записи неподвижного изображения и периода предварительного просмотра, представляемого для пользователя, и период работы немедленно переходит к периоду мониторинга, в течение которого выполняют отображение изображения мониторинга. Кроме того, во время периода воспроизведения отображение воспроизведения выполняют в таком формате, как отображение одиночного изображения или отображение списка из миниатюрных изображений или тому подобное.
Что касается передней панели 6F дисплея, отображение выключают во время периода мониторинга. Неподвижное изображение, предназначенное для записи, отображают во время периода записи неподвижного изображения, и представление его изображения также продолжается во время периода предварительного просмотра. В этом случае отображение предварительного просмотра продолжается даже в случае перехода в период мониторинга. После окончания отображения предварительного просмотра в течение определенного периода времени отображение выключают. Кроме того, во время периода воспроизведения отображают одиночное изображение, аналогичное панели 6М основного дисплея, или одиночное выбранное изображение в случае, когда отображают изображение в виде списка миниатюрных изображений на панели 6М основного дисплея.
То есть данный пример №3 представляет собой пример, в котором для панели 6М основного дисплея предотвращается предварительный просмотр записанного изображения и для передней панели 6F дисплея отображение изображения мониторинга не выполняют, выполняют отображение записанного неподвижного изображения (изображение предварительного просмотра) или воспроизводимого изображения.
Пример №4 представляет случай, в котором используется обработка этапа F102 по фиг.12 как обработка во время периода мониторинга, при этом используется обработка по фиг.8D как обработка во время периода записи неподвижного изображения, обработка на F106 на фиг.12, используемая как обработка во время периода предварительного просмотра, и обработка на фиг.14В, используемая как обработка во время периода воспроизведения.
Что касается панели 6М основного дисплея, отображение изображения мониторинга постоянно выполняют во время периода мониторинга. Отображение записанного неподвижного изображения отображают начиная с периода записи неподвижного изображения до периода предварительного просмотра. После окончания периода предварительного просмотра период операций переходит в период мониторинга, на котором выполняют отображение изображения мониторинга. Кроме того, во время периода воспроизведения выполняют отображение воспроизведения.
Что касается передней панели 6F дисплея, во время периода мониторинга выполняют отображение мониторинга или отображение отключают в зависимости от того, существует или нет возможность визуального распознавания. Записанное неподвижное изображение отображают от начала периода записи неподвижного изображения до периода предварительного просмотра. В этом случае выполняют отображение предварительного просмотра для более длительного периода, чем у панели 6М основного дисплея. То есть даже в случае перехода к периоду мониторинга, продолжают отображение предварительного просмотра в течение определенного периода времени. После окончания отображения предварительного просмотра выполняют отображение изображения мониторинга или отображение отключают в зависимости от того, существует или нет возможность визуального распознавания. Кроме того, во время периода воспроизведения выполняют отображение воспроизведения или отображение отключают в зависимости от того, существует или нет возможность визуального распознавания.
Данный пример №4 представляет собой пример, в котором на передней панели 6М дисплея как можно дольше выполняют отображение предварительного просмотра и отображение изображения мониторинга и отображение воспроизведения выполняют в зависимости от условий возможности визуального распознавания.
Пример №5, показанный на фиг.19, представляет случай, в котором применяют обработку этапа F102 по фиг.13, используемую как обработка во время периода мониторинга, обработку по фиг.9, используемую как обработка во время периода записи неподвижного изображения, обработку на этапе F106 по фиг.13, используемую как обработка во время периода предварительного просмотра, и обработку по фиг.15, используемую как обработка во время периода воспроизведения.
Что касается панели 6М основного дисплея, отображение изображения мониторинга постоянно выполняют во время периода мониторинга. Отображение изображения мониторинга продолжают, в то время как выполняют операцию нажатия наполовину во время периода записи неподвижного изображения. Отображение отключают во время обработки съемки изображения. Во время периода предварительного просмотра отображение предварительного просмотра продолжают до тех пор, пока пользователь не выполнит операцию окончания отображения предварительного просмотра. Кроме того, во время периода воспроизведения отображение воспроизведения выполняют в таком формате, как отображение одиночного изображения, или отображение в виде списка миниатюрных изображений, или тому подобное.
Что касается передней панели 6F дисплея, во время периода мониторинга выполняют отображение изображения мониторинга или отображение выключают в зависимости от того, существует или нет возможность визуального распознавания. Операцию отображения в зависимости от условий также продолжают в течение периода нажатия наполовину во время периода записи неподвижного изображения. Отображение выключают во время процесса съемки изображения. Во время периода предварительного просмотра выполняют отображение предварительного просмотра, но даже в случае перехода к периоду мониторинга продолжают отображение предварительного просмотра. После окончания отображения предварительного просмотра, выполнявшегося в течение определенного периода времени, передняя панель 6Р дисплея переходит в состояние отображения мониторинга изображения в зависимости от того, существует или нет возможность визуального распознавания. Кроме того, во время периода воспроизведения отображают одиночное изображение, аналогичное панели 6М основного дисплея, или одиночное изображение, выбранное для случая, когда отображение на основной панели дисплея 6М представляет собой изображение списка в виде миниатюрных изображений.
То есть данный пример №5 представляет собой пример, в котором, на панели 6М основного дисплея предварительный просмотр записанного изображения закончен с использованием операции пользователя, но даже в случае, когда период предварительного просмотра был закончен и был выполнен переход к периоду мониторинга, отображение предварительного просмотра продолжается на передней панели 6F дисплея в течение определенного периода времени.
В примерах №6-8 иллюстрируется пример состояния отображения в случае, когда период операции изменяется таким образом: период мониторинга → период записи движущегося изображения → период мониторинга → период воспроизведения, то есть случай, когда запись движущегося изображения выполняют в соответствии с периодом мониторинга → период записи движущегося изображения и затем в течение периода мониторинга, такой период мониторинга переходит в период воспроизведения, выполняемый по операции пользователя, или тому подобное.
Пример №6 представляет случай, в котором используется обработка на фиг.7А, используемая как обработка во время периода мониторинга, обработка на фиг.17А, используемая как обработка во время периода записи движущегося изображения, и обработка по фиг.14В, используемая как обработка во время периода воспроизведения.
Что касается панели 6М основного дисплея, отображение изображения мониторинга постоянно выполняют во время периода мониторинга. Кроме того, во время периода записи движущегося изображения также выполняют отображение изображения мониторинга во время записи. Кроме того, во время периода воспроизведения выполняют отображение воспроизведения.
Что касается панели дисплея 6F, во время периода мониторинга выполняют мониторинг отображения изображения мониторинга или отображение выключают в зависимости от того, существует или нет возможность визуального распознавания. Также во время периода записи движущегося изображения выполняют отображение мониторинга во время записи или отображение отключают в зависимости от того, существует или нет возможность визуального распознавания. Кроме того, во время периода воспроизведения выполняют отображение воспроизведения или отображение отключают в зависимости от того, существует или нет возможность визуального распознавания.
То есть пример №6 представляет собой пример, в котором, что касается передней панели 6F дисплея, отображение изображения мониторинга, отображение мониторинга во время записи и отображение воспроизведения выполняют постоянно в зависимости от условий возможности визуального распознавания.
Пример №7 представляет собой случай, в котором используют обработку, показанную на фиг.7А, используемую как обработка во время периода мониторинга, обработку, показанную на фиг.17В, используемую как обработка во время периода записи движущегося изображения, и обработку по фиг.14В, используемую как обработка во время периода воспроизведения. Остальные операции, кроме периода записи движущегося изображения, аналогичны примеру №6.
Что касается панели 6М основного дисплея, отображение изображения мониторинга во время записи также выполняют во время периода записи движущегося изображения. На передней панели дисплея 6F также постоянно выполняют отображение мониторинга во время записи в течение периода записи движущегося изображения.
То есть данный пример №7 представляет собой пример, в котором отображение мониторинга во время записи также постоянно выполняют на передней панели 6F дисплея во время записи движущегося изображения.
Пример №8 представляет собой случай, в котором используют обработку по фиг.7А, используемую как обработка во время периода мониторинга, обработку по фиг.17С, используемую как обработка во время периода записи движущегося изображения, и обработку по фиг.14В, используемую как обработка во время периода воспроизведения. В остальном, кроме периода записи движущегося изображения, обработка аналогична примеру №6.
Что касается панели 6М основного дисплея, отображение изображения мониторинга во время записи также выполняют во время периода записи движущегося изображения. На передней панели 6F дисплея отображение отключают во время периода записи движущегося изображения.
То есть данный пример №8 представляет собой пример, в котором отображение мониторинга записи не выполняют на передней панели 6F дисплея во время записи движущегося изображения.
Примеры перехода состояния отображения, сопровождаемого переходом периода записи, были описаны выше как примеры №1-8, но, само собой разумеется, что можно рассмотреть другие различные типы примеров обработки отображения, кроме этих примеров.
В процессах, описанных на фиг.6-17С, одну из (или модификацию) фиг.7А и 7В, этапа F102 на фиг.11, F102 на фиг.12 и F102 на фиг.13 можно использовать как обработку во время периода мониторинга.
Одну (или модификацию) фиг.8А-8D и фиг.9 можно использовать как обработку во время периода записи неподвижного изображения.
Одну (или модификацию) из фиг.10, этапа F106 на фиг.11, F106 на фиг.12 и F106 на фиг.13 можно использовать как обработку во время периода предварительного просмотра.
Одно (или модификация) из фиг.14А и 14В и фиг.15 можно использовать как обработку во время периода воспроизведения.
Одну (или модификацию) из фиг.17А, 17В и 17С можно использовать как обработку во время периода записи движущегося изображения.
То есть эти примеры обработки комбинируют, в результате чего можно предполагать различные примеры перехода состояния отображения в соответствии с переходом операции.
В устройстве 1 формирования изображения в соответствии с настоящим вариантом выполнения состояниями отображения панели 6М основного дисплея и передней панели 6F дисплея управляют для каждого типа периода операции, которые изменяются на этапе операции, таком как описанные выше примеры №1-8.
Например, во время перехода к периоду мониторинга, периоду записи неподвижного изображения, периоду предварительного просмотра, периоду воспроизведения, периоду записи движущегося изображения или тому подобного, состояниями отображения управляют в соответствии с назначением отображения, присутствием человека, просматривающего отображение, или тому подобным.
В частности, во время, по меньшей мере, одного или больше периодов операции выполняют управление отображением, в результате чего панель 6М основного дисплея и передняя панель 6F дисплея могут иметь разное содержание отображения. Разное содержание отображения, отмеченное здесь, означает состояние, в котором различное изображение отображают на обеих панелях дисплея, или состояние, в котором отображение на одной из панелей дисплея выключают, которые могут иметь различное средство содержания отображения таким образом, что обе панели дисплея будут иметь разное содержание отображения в соответствии с примером, результатами определения условий.
Например, для примера №1 во время периода мониторинга и периода предварительного просмотра панель 6М основного дисплея и передняя панель 6F дисплея могут иметь разное содержание отображения. Кроме того, во время периода воспроизведения обе панели дисплея могут иметь разное содержание отображения. В других примерах №2-8 также во время, по меньшей мере, одного или более периодов работы выполняют управление отображением, в результате которого панель 6М основного дисплея и передняя панель 6F дисплея могут иметь разное содержание отображения.
Такое управление выполняют таким образом, что соответствующее отображение, полезное отображение, исключение ненужного отображения или тому подобное реализуют на каждой панели дисплея для каждого периода операции.
6. Примеры модификации
Различные типы примеров обработки и модификаций, используемых как варианты выполнения, были описаны выше, но дополнительные различные модификации можно рассмотреть как варианты выполнения настоящего изобретения.
В описанных выше примерах, что касается передней панели 6Р дисплея, например, в случае, когда условия возможности визуального распознавания не удовлетворяются, отображение выключают. Однако может быть предусмотрен пример, в котором в таком случае вместо отключения дисплея переднюю панель 6F дисплея переключают в состояние отображения с низкой интенсивностью или на ней отображают изображение воспроизведения или предварительно установленное изображение.
Например, в случае когда обработка по фиг.7А переходит на этап F205, изображение мониторинга отображают в состоянии, в котором яркость отображения на передней панели 6F дисплея уменьшается. Например, в случае когда устройство отображения, состоящее из элементов, самостоятельно излучающих свет, такое как панель органической электролюминесценции, используют как переднюю панель 6F дисплея, уменьшение яркости отображения является полезным для уменьшения потребляемой энергии. В соответствии с этим, когда условие возможности визуального распознавания не удовлетворяется из-за того, что человек спереди отсутствует, когда видимость слишком плохая для просмотра отображения или тому подобное, яркость отображения понижают, в результате чего реализуется уменьшение потребления энергии.
Кроме того, например, в случае когда обработка, показанная на фиг.7А, переходит на этап F205, изображение, не связанное с изображением мониторинга, такое как предварительно установленное изображение, воспроизводимое изображение или тому подобное, отображают на передней панели 6F дисплея. Например, даже в случае, когда предполагают, что человек, используемый как субъект изображения, отсутствует спереди, или когда видимость слишком плохая для просмотра отображения, существует множество ситуаций, в которых человек находится поблизости. Кроме того, возникает случай, когда человек находится в ситуации, в которой человек может непосредственно просматривать отображение на передней панели 6F дисплея в зависимости от положения этого человека.
Для человека, который присутствует в этих обстоятельствах, отображение на передней панели 6F дисплея можно распознавать как часть дизайна внешнего вида устройства 1 формирования изображения, что может быть интересным.
Кроме того, в таком случае пользователь может выбрать изображение, отображаемое на передней панели 6F дисплея, в результате чего пользователь может произвольно устанавливать внешний вид своего устройства 1 формирования изображения, и в соответствии с этим пользователь может наслаждаться более разнообразным использованием камеры.
Такую обработку можно предусмотреть как модификацию обработки в случае, когда отображение на передней панели 6F дисплея выключают, как показано на фиг.8А и 8В, и модификацию обработки в случае, когда отображение на передней панели 6F дисплея отключено на этапах F507 и F508 на фиг.9. Аналогично, такая обработка также может применяться для этапа F603 по фиг.10, этапа F205 по фиг.11, этапа F205 по фиг.12, этапа F205 по фиг.13, этапа F701 по фиг.14А, этапа F713 по фиг.14В, этапа F805 по фиг.17А и этапа F821 по фиг.17С.
Кроме того, например, может быть выполнена компоновка, в которой в случае, когда общее отображение изображения мониторинга, или общее отображение предварительного просмотра, или подобное не выполняют на передней панели 6F дисплея пользователь может выбрать, следует ли выключить отображение на передней панели 6F дисплея, установить отображение на передней панели 6F дисплея как отображение с малой интенсивностью или отобразить воспроизводимое изображение или заданное изображение на передней панели 6F дисплея.
В настоящем примере устройство, в общем называемое цифровой фотокамерой, было представлено в качестве примера как устройство 1 формирования изображения, но вариант выполнения настоящего изобретения можно применять к устройствам различных типов, например, таким как видеокамеры, сотовые телефоны, имеющие функции формирования изображения, PDA (КПК, карманный персональный компьютер) и т.д.
Настоящая заявка содержит предмет изобретения, относящийся к тому, что раскрыто в Приоритетной заявке на японский патент JP 2008-284294, поданной в японское патентное ведомство 5 ноября 2008 г., полное содержание которой приведено здесь в качестве ссылочного материала.
Для специалистов в данной области техники должно быть понятно, что различные модификации, комбинации, подкомбинации и изменения могут возникнуть в зависимости от требований к конструкции и других факторов, если только они находятся в пределах объема приложенной формулы изобретения или ее эквивалентов.
Изобретение относится к вычислительной технике. Технический результат заключается в сокращении времени на редактирование изображения. Устройство формирования изображения включает в себя: первый модуль панели дисплея, предназначенный для выполнения отображения в направлении стороны пользователя; второй модуль панели дисплея, предназначенный для выполнения отображения в направлении стороны субъекта; модуль обработки формирования изображения, предназначенный для выполнения для света, падающего со стороны субъекта, фотоэлектрического преобразования, для получения сигнала снятого изображения; модуль обработки записи, предназначенный для выполнения обработки записи на носитель записи сигнала снятого изображения, полученного в модуле обработки формирования изображения; модуль управления, предназначенный для управления состояниями отображения первого модуля панели дисплея и второго модуля панели дисплея для каждого из множества различных типов периодов работы, изменяющихся в ходе работы модуля обработки формирования изображения или модуля обработки записи, и выполнения управления отображением, в котором первый модуль панели дисплея и второй модуль панели дисплея могут иметь разное содержание отображения во время, по меньшей мере, одного периода работы. 2 н. и 12 з.п. ф-лы, 19 ил.
1. Устройство формирования изображения, содержащее:
первый модуль панели дисплея, расположенный на кожухе устройства, выполненный с возможностью отображения в направлении стороны пользователя;
второй модуль панели дисплея, расположенный на упомянутом кожухе устройства, выполненный с возможностью отображения в направлении стороны субъекта;
модуль обработки формирования изображения, выполненный с возможностью подвергать свет, падающий с упомянутой стороны субъекта, фотоэлектрическому преобразованию для получения сигнала снятого изображения;
модуль обработки записи, выполненный с возможностью обработки записи на носитель записи сигнала снятого изображения, полученного в упомянутом модуле обработки формирования изображения; и
модуль управления, выполненный с возможностью
управления состояниями отображения упомянутого первого модуля панели дисплея и упомянутого второго модуля панели дисплея для каждого из множества различных типов периодов работы, изменяющихся в ходе работы упомянутого модуля обработки формирования изображения или упомянутого модуля обработки записи, и
выполнения управления отображением, в котором упомянутый первый модуль панели дисплея и упомянутый второй модуль панели дисплея могут иметь разное содержание отображения в течение, по меньшей мере, одного периода работы.
2. Устройство формирования изображения по п.1, причем упомянутые изменяющиеся периоды работы включают в себя:
период мониторинга, предназначенный для выполнения отображения мониторинга сигнала снятого изображения, полученного в упомянутом модуле обработки формирования изображения без выполнения обработки записи в упомянутом модуле обработки записи;
период записи, предназначенный для выполнения для сигнала снятого изображения, полученного в упомянутом модуле обработки формирования изображения, обработки записи в упомянутом модуле обработки записи, в качестве данных неподвижного изображения; и
период предварительного просмотра, предназначенный для отображения данных неподвижного изображения в соответствии с обработкой записи, выполняемой в упомянутый период записи.
3. Устройство формирования изображения по п.2, в котором упомянутый модуль управления управляет упомянутым первым модулем панели дисплея для отображения сигнала снятого изображения, полученного в упомянутом модуле обработки формирования изображения, в качестве изображении мониторинга, и управляет выполнением/невыполнением отображения упомянутого изображения мониторинга в упомянутом втором модуле панели дисплея на основе результатов процесса определения условий возможности визуального распознавания для упомянутой второй панели дисплея во время упомянутого периода мониторинга.
4. Устройство формирования изображения по п.3, в котором обработка определения упомянутых условий возможности визуального распознавания представляет собой обработку определения, относящуюся к тому, присутствует или нет человек на упомянутой стороне субъекта, обработку определения режима формирования изображения, обработку определения в отношении информации внутреннего детектирования или обработку определения в отношении результатов обработки анализа изображения сигнала снятого изображения.
5. Устройство формирования изображения по п.2, в котором упомянутый модуль управления управляет упомянутым первым модулем панели дисплея для отображения сигнала снятого изображения, полученного в упомянутом модуле обработки формирования изображения, в качестве изображения мониторинга, и управляет упомянутым вторым модулем панели дисплея так, чтобы не выполнять отображение упомянутого изображения мониторинга в течение упомянутого периода мониторинга.
6. Устройство формирования изображения по п.2, в котором упомянутый модуль управления управляет только одним из упомянутого первого модуля панели дисплея и упомянутого второго модуля панели дисплея для выполнения отображения данных неподвижного изображения в соответствии с обработкой записи в упомянутом модуле обработки записи во время упомянутого периода записи.
7. Устройство формирования изображения по п.2, в котором упомянутый модуль управления управляет обоими или ни одним из упомянутого первого модуля панели дисплея и упомянутого второго модуля панели дисплея для выполнения отображения данных неподвижного изображения в соответствии с обработкой записи в упомянутом модуле обработки записи во время упомянутого периода записи.
8. Устройство формирования изображения по п.2, в котором упомянутый модуль управления управляет только одним из упомянутого первого модуля панели дисплея и упомянутого второго модуля панели дисплея для выполнения отображения данных неподвижного изображения в соответствии с обработкой записи в упомянутом модуле обработки записи во время упомянутого периода предварительного просмотра.
9. Устройство формирования изображения по п.2, в котором упомянутый модуль управления управляет обоими из упомянутого первого модуля панели дисплея и упомянутого второго модуля панели дисплея для выполнения отображения данных неподвижного изображения в соответствии с обработкой записи в упомянутом модуле обработки записи и дополнительно управляет упомянутым вторым модулем панели дисплея для выполнения отображения упомянутых данных неподвижного изображения в течение более длительного периода по сравнению с упомянутым первым модулем панели дисплея в течение упомянутого периода предварительного просмотра.
10. Устройство формирования изображения по п.2, упомянутые периоды работы дополнительно включают в себя:
период воспроизведения, предназначенный для воспроизведения и отображения данных изображения, записанных на носителе записи;
в котором упомянутый модуль управления управляет только одним из упомянутого первого модуля панели дисплея и упомянутого второго модуля панели дисплея для выполнения упомянутого отображения воспроизведения во время упомянутого периода воспроизведения.
11. Устройство формирования изображения по п.2, упомянутые периоды работы дополнительно включают в себя:
период воспроизведения, предназначенный для воспроизведения и отображения данных изображения, записанных на носителе записи;
в котором упомянутый модуль управления управляет упомянутым первым модулем панели дисплея для выполнения упомянутого отображения воспроизведения и управляет выполнением/невыполнением упомянутого отображения воспроизведения в упомянутом втором модуле панели дисплея на основе результатов обработки определения условий возможности визуального распознавания упомянутой второй панели дисплея во время упомянутого периода воспроизведения.
12. Устройство формирования изображения по п.2, упомянутые периоды работы дополнительно включают в себя:
период воспроизведения, предназначенный для воспроизведения и отображения данных изображения, записанных на носителе записи;
в котором упомянутый модуль управления управляет упомянутым первым модулем панели дисплея для избирательного выполнения отображения списка и отображения одиночного изображения, используемого как упомянутое отображение воспроизведения, и управляет упомянутым вторым модулем панели дисплея для выполнения отображения только одиночного изображения в течение упомянутого периода воспроизведения.
13. Устройство формирования изображения по п.2, упомянутые периоды работы дополнительно включают в себя:
период записи движущегося изображения, предназначенный для выполнения для сигнала снятого изображения, полученного в упомянутом модуле обработки формирования изображения, обработки записи в упомянутом модуле обработки записи, в качестве данных движущегося изображения;
в котором упомянутый модуль управления управляет упомянутым первым модулем панели дисплея для выполнения отображения движущегося изображения в соответствии с упомянутой обработкой записи и управляет выполнением/невыполнением упомянутого отображения движущегося изображения в упомянутом втором модуле панели дисплея на основе результатов процесса определения условий возможности визуального распознавания упомянутой второй панели дисплея.
14. Способ управления отображением для устройства формирования изображения, включающий в себя как периоды работы упомянутого устройства формирования изображения, по меньшей мере, период мониторинга, предназначенный для выполнения отображения мониторинга сигнала снятого изображения, полученного при обработке формировании изображения, без выполнения обработки записи, период записи, предназначенный для выполнения для сигнала снятого изображения, полученного при упомянутой обработке формирования изображения, обработки записи, как данные неподвижного изображения, и период предварительного просмотра, предназначенный для отображения данных неподвижного изображения в соответствии с упомянутой обработкой записи,
упомянутый способ управления отображением, содержащий следующие этапы:
управляют состояниями отображения первого модуля панели дисплея, расположенного на кожухе устройства и выполненного с возможностью отображения в направлении стороны пользователя, и второго модуля панели дисплея, расположенного на упомянутом кожухе устройства и выполненного с возможностью отображения в направлении стороны субъекта, для каждого из упомянутых периодов работы; и
выполняют управление отображением, в результате чего упомянутый первый модуль панели дисплея и упомянутый второй модуль панели дисплея могут иметь разное содержание отображения в течение, по меньшей мере, одного или больше периодов работы.
| Пломбировальные щипцы | 1923 |
|
SU2006A1 |
| JP 2004260501 A, 16.09.2004 | |||
| Способ и приспособление для нагревания хлебопекарных камер | 1923 |
|
SU2003A1 |
| KR 20040077189 A, 04.09.2004 | |||
| JP 2008228053 A, 25.09.2008 | |||
| СПОСОБ И СИСТЕМЫ ДЛЯ ОПРЕДЕЛЕНИЯ ПАРАМЕТРОВ И КАРТОГРАФИРОВАНИЯ ПОРАЖЕНИЙ ТКАНИ | 2001 |
|
RU2288636C2 |
