УСТРОЙСТВО ОБРАБОТКИ ИНФОРМАЦИИ, СПОСОБ ОБРАБОТКИ ИНФОРМАЦИИ И НОСИТЕЛЬ ЗАПИСИ, НА КОТОРОМ СОХРАНЕНА КОМПЬЮТЕРНАЯ ПРОГРАММА Российский патент 2013 года по МПК H04M1/57 H04M3/56 H04N7/14 

Область техники, к которой относится изобретение

Настоящее изобретение относится к устройству обработки информации, способу обработки информации и носителю записи, на котором сохранена компьютерная программа. Более конкретно, настоящее изобретение относится к устройству обработки информации, способу обработки информации и носителю записи, на котором сохранена компьютерная программа, которые имеют функцию видеотелефона.

Уровень техники

Некоторые телефоны имеют функцию отображения на экране принимающей стороны (функция видеотелефона), которая основана на информации, полученной от принимающей стороны. Такие телефоны взаимно используют компактное устройство формирования изображения для съемки видеоизображения вызывающей стороны, и это видеоизображение передают вместе со звуком вызывающей стороны на сторону приема, обеспечивая, таким образом, функцию видеотелефона.

В некоторых из этих телефонов предусмотрена функция адресной книги, в которой сохранена информация, такая как имя, номер телефона и адрес электронной почты и т.д., в соответствии друг с другом (информация адресной книги). Кроме того, в последнее время, в результате регистрации и сохранения изображений в виде информации индивидуальной адресной книги, становится возможным отображать изображение, как информацию адресной книги. Пользователь, использующий телефон с функцией видеотелефона, может выполнить телефонный вызов принимающей стороны из адресной книги, отмечая информацию, зарегистрированную в адресной книге.

Сущность изобретения

Однако в известном уровне техники трудно регистрировать изображение в информации индивидуальной адресной книги без предварительного сохранения изображения в телефоне. Кроме того, для регистрации видеоизображения в информации индивидуальной адресной книги, необходимо редактировать это видеоизображение в другом устройстве, а не в телефоне.

Учитывая вышесказанное, желательно предусмотреть новое и улучшенное устройство обработки информации, способ обработки информации и носитель записи, на котором сохранена компьютерная программа, которые обеспечивали бы простую регистрацию изображения в адресной книге путем сохранения видеоизображения, передаваемого от принимающей стороны во время вызова, используя функции видеотелефона, и путем регистрации после окончания вызова изображения в информации адресной книги, используя сохраненное видеоизображение.

В соответствии с вариантом выполнения настоящего изобретения предусмотрено устройство обработки информации, включающее в себя блок записи информации принимающей стороны, который записывает информацию принимающей стороны, блок записи изображения, который записывает изображения принимающей стороны, снимаемые принимающей стороной во время вызова, блок выделения изображения, который выделяет изображение в заданный момент времени из изображений, записанных блоком записи изображения, и блок регистрации, который, после окончания вызова, ассоциирует изображение, выделенное блоком выделения изображения, с информацией принимающей стороны, и регистрирует это ассоциированное изображение в блоке записи информации принимающей стороны.

В соответствии с такой конфигурацией, блок записи информации принимающей стороны записывает информацию принимающей стороны, блок записи изображения записывает изображение принимающей стороны, снятое на стороне принимающей стороны во время вызова, блок выделения изображения выделяет изображение в заданный момент времени из изображений, записанных в блоке записи изображения, и блок регистрации, который после окончания вызова ассоциирует изображение, выделенное блоком удаления изображения, с информацией принимающей стороны, и регистрирует это ассоциированное изображение в блоке записи информации принимающей стороны. В результате устройство обработки информации обеспечивает простую регистрацию изображения в адресной книге путем сохранения видеоизображения, которое передают от принимающей стороны, и путем регистрации изображения после окончания вызова на блоке записи информации принимающей стороны, используя сохраненное видеоизображение.

Блок выделения изображения может выделять неподвижное изображение. И блок выделения изображения может выделять, в момент времени, когда поступает инструкция от пользователя, неподвижное изображение из изображений, записанных в блоке записи изображения. И блок выделения изображения может выделять в определенный интервал времени неподвижное изображение из изображений, записанных в блоке записи изображения.

Блок выделения изображения может выделять, как неподвижное изображение, среди изображений, записанных в блоке записи изображения, кадр, который включает в себя лицо.

Блок выделения изображения может детектировать степень изменения между кадрами изображений, записанных в блоке записи изображения, и выделять, как неподвижное изображение, кадр с малой степенью изменения.

Блок выделения изображения может выделять видеоизображение. И блок выделения изображения может выделять, в момент времени, когда поступает инструкция от пользователя, видеоизображение, среди изображений, записанных на блоке записи изображения.

Блок выделения изображения может выделять, как видеоизображение, среди изображений, записанных в блоке записи изображения, кадр, который включает в себя лицо.

Блок выделения изображения может детектировать степень изменения, между кадрами изображений, записанных в блоке записи изображения, и выделять, как видеоизображение, кадры с малой степенью изменения.

Устройство обработки информации дополнительно включает в себя блок записи звука, который записывает звук во время вызова от принимающей стороны. Блок выделения изображения может выделять, как видеоизображения, кадры в момент времени, в который громкость звука, записанного в блоке записи звука, громче, чем громкость звука в любой момент времени.

Устройство обработки информации дополнительно включает в себя блок записи звука, который записывает звук принимающей стороны во время вызова, и блок выделения, который выделяет звук в заданный момент времени среди звука, записанного в блоке записи звука. После окончания вызова блок регистрации может регистрировать изображение, выделенное блоком выделения изображения, и звук, выделенный блоком выделения звука, в адресной книге.

В соответствии с другим вариантом выполнения настоящего изобретения предложен способ обработки информации, включающий в себя этапы записи изображений принимающей стороны, снятых принимающей стороной во время вызова, выделения изображения в заданный момент времени из изображений, записанных на этапе записи изображения, и, после окончания вызова, ассоциирования изображения, выделенного на этапе выделения изображения, с информацией принимающей стороны и регистрации этого ассоциированного изображения в блоке записи информации принимающей стороны, который записывает информацию принимающей стороны.

В соответствии с другим вариантом выполнения настоящего изобретения, предложен носитель записи, на котором сохранена компьютерная программа, которая включает в себя инструкции, которые представляют в компьютер команды на выполнение этапов записи изображений принимающей стороны, снятых принимающей стороной во время вызова, выделения изображения в заданный момент времени из изображений, записанных на этапе записи изображения, и, после окончания вызова, ассоциирования изображения, выделенного на этапе выделения изображения, с информацией принимающей стороны, и регистрации этого ассоциированного изображения в блоке записи информации принимающей стороны, который записывает информацию принимающей стороны.

Как описано выше, в соответствии с настоящим изобретением, путем сохранения видеоизображения, передаваемого из принимающей стороны во время вызова, используя функции видеотелефона, и путем регистрации видеоизображения в информации адресной книги, используя сохраненное видеоизображение после окончания вызова, можно предоставить новые и улучшенные устройство обработки информации, способ обработки информации и носитель записи, на котором сохранена компьютерная программа, которые обеспечивают возможность простой регистрации изображений в адресной книге.

Краткое описание чертежей

На фиг.1 приведен пример схемы, иллюстрирующей конфигурацию системы видеотелефона, в которой используется телефон с функцией видеотелефона, в соответствии с вариантом выполнения настоящего изобретения;

на фиг.2 показана пояснительная схема, иллюстрирующая конфигурацию аппаратных средств видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения;

на фиг.3 показана пояснительная схема, иллюстрирующая функциональную конфигурацию видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения;

на фиг.4 показана блок-схема последовательности операции, иллюстрирующая видеотелефон 100 в соответствии с вариантом выполнения настоящего изобретения;

на фиг.5 показана пояснительная схема, представляющая пример экрана адресной книги;

на фиг.6 показана пояснительная схема, представляющая пример экрана вызова, отображаемого на дисплее 101;

на фиг.7 показана пояснительная схема, представляющая пример экрана адресной книги после окончания вызова;

на фиг.8 показана блок-схема последовательности операций, иллюстрирующая работу видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения.

Подробное описание изобретения

Ниже будут подробно описаны предпочтительные варианты воплощения настоящего изобретения со ссылкой на приложенные чертежи. Следует отметить, что, в данном описании и на приложенных чертежах, конструктивные элементы, которые имеют, по существу, одинаковую функцию и структуру, обозначены одинаковыми номерами ссылочных позиций, и повторное пояснение этих конструктивных элементов не приведено.

Предпочтительный вариант воплощения для практического выполнения настоящего изобретения поясняется в порядке, представленном ниже.

1. Конфигурация системы видеотелефона в соответствии с вариантом выполнения настоящего изобретения

2. Конфигурация аппаратных средств видеотелефона в соответствии с вариантом выполнения настоящего изобретения

3. Функциональная конфигурация видеотелефона в соответствии с вариантом выполнения настоящего изобретения

4. Работа видеотелефона в соответствии с вариантом выполнения настоящего изобретения

5. Модифицированный пример

1. Конфигурация системы видеотелефона в соответствии с вариантом выполнения настоящего изобретения

Вначале поясняется конфигурация системы видеотелефона, в которой используется телефон с функциями видеотелефона в соответствии с вариантом выполнения настоящего изобретения. На фиг.1 представлена пояснительная схема, иллюстрирующая конфигурацию системы видеотелефона, в которой используется видеотелефон с функциями видеотелефона в соответствии с вариантом выполнения настоящего изобретения. Ниже, конфигурация системы видеотелефона, в которой используется телефон с функциями видеотелефона в соответствии с вариантом выполнения настоящего изобретения, поясняется со ссылкой на фиг.1.

Как показано на фиг.1, в системе 1 видеотелефона в соответствии с вариантом выполнения настоящего изобретения видеотелефон 100 и видеотелефон 200 находятся в состоянии подключения через сеть 10. Следует отметить, что сеть 10 может быть кабельной или беспроводной. Кроме того, сеть 10 может представлять собой сеть, работающую с протоколом Интернет (IP, ПИ), коммутируемую телефонную сеть общего пользования (PSTN, КТСО) или сеть мобильной связи.

Видеотелефон 100 и видеотелефон 200, оба представляют собой телефоны, которые имеют функцию видеотелефона. Видеотелефон 100 и видеотелефон 200 могут представлять собой телефон, который имеет встроенную функцию видеотелефона, и телефон может представлять собой стационарный телефон или мобильный телефон. Кроме того, видеотелефон 100 и видеотелефон 200 могут быть представлять собой персональный компьютер или игровой терминал, который соединен компактной камерой, и в котором установлено такое приложение, что персональный компьютер или игровой терминал могут выполнять функции видеотелефона. Кроме того, видеотелефон 100 и видеотелефон 200 могут представлять телевизионный приемник, который соединен с компактной камерой и устройством для реализации функции видеотелефона.

В следующем пояснении, видеотелефон 100 представлен как пример в виде телевизионного приемника, который соединен с компактной камерой и устройством, реализующим функции видеотелефона, но естественно, что видеотелефон 100 не ограничивается этим примером. Кроме того, в следующем пояснении видеотелефон, используемый пользователем, представляет собой видеотелефон 100, и видеотелефон, используемый принимающей стороной, с которой пользователь связывается, представляет собой видеотелефон 200.

Конфигурация системы видеотелефона 1, в которой используется видеотелефон, обладающей функциями видеотелефона в соответствии с вариантом выполнения настоящего изобретения, пояснялась выше со ссылкой на фиг.1. Далее поясняется конфигурация аппаратных средств видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения.

2. Конфигурация аппаратных средств видеотелефона в соответствии с вариантом выполнения настоящего изобретения

На фиг.2 показана пояснительная схема, иллюстрирующая конфигурацию аппаратных средств видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения. Ниже конфигурация аппаратных средств видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения поясняется со ссылкой на фиг.2.

Как показано на фиг.2, видеотелефон 100 в соответствии с вариантом выполнения настоящего изобретения включает в себя дисплей 101, камеру 102, микрофон 103, громкоговоритель 104, фотоприемник 105 и модуль 110 видеотелефона.

Дисплей 101 соединен с модулем 110 видеотелефона, и когда выполняют вызов принимающей стороны, используя функцию видеотелефона, дисплей 101 отображает изображение принимающей стороны, передаваемое из видеотелефона 200 принимающей стороны через сеть 10. Монитор CRT (ЭЛТ, электронно-лучевая трубка), жидкокристаллический дисплей, плазменный дисплей, дисплей органической электролюминесценции или устройство дисплея другого типа можно использовать как дисплей 101.

Камера 102 снимает изображение пользователя. Обработку сигналов выполняют с помощью модуля 110 видеотелефона по изображениям пользователя, снимаемым камерой 102, и обрабатываемые изображением передают в видеотелефон 200 принимающей стороны через сеть 10. Микрофон 103 воспринимает голос пользователя. Модуль 110 видеотелефона выполняет обработку сигнала голоса пользователя, принимаемого с помощью микрофона 103, и обработанный голос передают в видеотелефон 200 принимающей стороны через сеть 10. Громкоговоритель 104 выводит голос принимающей стороны, передаваемый из видеотелефона 200 принимающей стороны, через сеть 10. Камера 102, микрофон 103 и громкоговоритель 104 соединены с модулем 110 видеотелефона.

Фотоприемник 105 принимает сигналы, излучаемые пультом 150 дистанционного управления, с помощью которого управляют модулем 110 видеотелефона, и передает принятые сигналы в модуль 110 видеотелефона. Например, когда сигнал включения источника питания модуля видеотелефона 110 передают из пульта 150 дистанционного управления, фотоприемник 105 принимает этот сигнал и передает его в модуль 110 видеотелефона, и, таким образом, включают источник питания модуля 110 видеотелефона. Сигналы из пульта 150 дистанционного управления могут быть определены с помощью инфракрасных лучей, или могут быть переданы по беспроводному каналу передачи.

Модуль 110 видеотелефона представляет собой устройство, в котором установлены аппаратные и программные средства, реализующие функции видеотелефона. Как показано на фиг.2, модуль 110 видеотелефона в соответствии с вариантом выполнения настоящего изобретения включает в себя энергонезависимое запоминающее устройство 112, оперативное запоминающее устройство 114, запоминающее устройство 116 видеоданных, центральное процессорное устройство (CPU, ЦПУ) 118 и цифровой сигнальный процессор 120 (DSP, ЦСП). Все компоненты, включенные в модуль 110 видеотелефона, взаимно соединены через системную шину 130.

Энергонезависимое запоминающее устройство 112, в основном, сохраняет компьютерные программы, которые реализуют функции видеотелефона. Компьютерные программы, которые реализуют функции видеотелефона, представляют собой, например, программу вызова видеотелефона для выполнения функции вызова между видеотелефоном 100 и видеотелефоном 200 принимающей стороны. Программное обеспечение, сохраненное в энергонезависимом запоминающем устройстве 112, считывают с помощью ЦПУ 118 и последовательно выполняют. Кроме того, в энергонезависимом запоминающем устройстве 112 сохранена информация об адресной книге. Путем свободного выбора стороны приема из информации адресной книги, сохраненной в энергонезависимом запоминающем устройстве 112, пользователь может осуществлять вызов, используя функции видеотелефона (или используя функции телефона с передачей только звука).

Когда программное обеспечение, сохраненное в энергонезависимом запоминающем устройстве 112, считывают и выполняют с помощью ЦПУ 118, оперативное запоминающее устройство 114 используют как рабочую область для каждого типа обработки. Запоминающее устройство 116 видеоданных содержит сигналы изображения, передаваемые видеотелефоном 200 принимающей стороны, и графические данные, которые отображаются на дисплее 101, такие как графический интерфейс пользователя (GUI, ГИП), используемый для выполнения функции видеотелефона. Кроме того, когда выполняют вызов с использованием функции видеотелефона между видеотелефоном 100 и видеотелефоном 200, запоминающее устройство 116 видеоданных временно сохраняет изображения и звук, передаваемые из видеотелефона 200.

ЦПУ 118 представляет собой электронную схему, которая выполняет цифровые расчеты, обработку информации и управление инструментами. В соответствии с настоящим вариантом выполнения ЦПУ 118 считывает и последовательно выполняет компьютерные программы, которые сохранены в энергонезависимом запоминающем устройстве 112, и которые реализуют функции видеотелефона. Путем последовательного выполнения компьютерных программ с помощью ЦПУ 118 модуль 110 видеотелефона может реализовать функции видеотелефона.

ЦСП 120 представляет собой микропроцессор, пригодный для обработки цифрового сигнала, и, в соответствии с настоящим вариантом выполнения, ЦСП 120 кодирует и выполняет потоковую передачу данных изображения, выводимых из камеры 102, и сигналов звука, выводимых из микрофона 103. Поток данных, генерируемый ЦСП 120, передают в видеотелефон 200 принимающей стороны через сеть 10 и выводят в видеотелефон 200 как изображение и звук. Кроме того, поток, передаваемый из видеотелефона 200 принимающей стороны, декодируют с помощью ЦСП 120 и преобразуют в сигналы изображения и сигналы звука.

Конфигурация аппаратных средств видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения пояснялась выше. Далее поясняется функциональная конфигурация видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения.

3. Функциональная конфигурация видеотелефона в соответствии с вариантом выполнения настоящего изобретения

На фиг.3 показана пояснительная схема, иллюстрирующая функциональную конфигурацию видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения. Ниже, со ссылкой на фиг.3, поясняется функциональная конфигурация видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения.

Как показано на фиг.3, видеотелефон 100 в соответствии с вариантом выполнения настоящего изобретения включает в себя блок 122 обработки передачи, блок 124 обработки приема, основной блок 126 и интерфейс 128 пользователя.

Блок 122 обработки передачи выполняет передачу данных в видеотелефон принимающей стороны 200. Например, в соответствии с настоящим вариантом выполнения, когда пользователь видеотелефона 100 начинает вызов принимающей стороны, используя функцию видеотелефона, основной блок 126 (описан ниже) выполняет управление вызовом видеотелефона 200 принимающей стороны. Информацию вызова, используемую при выполнении управления вызовом, передают из блока 122 передачи в сеть 10. Когда связь с видеотелефоном 200 принимающей стороны будет установлена, блок 122 обработки передачи кодирует преобразованные в цифровую форму сигналы изображения, выводимые из камеры 102, и преобразованные в цифровую форму аудиосигналы, выводимые из микрофона 103. Затем, блок 122 обработки передачи выполняет кодирование канала для кодированных данных, такое как коррекция ошибки и так далее. Кроме того, блок 122 обработки передачи выполняет формирование пакетов для передачи в видеотелефон 200 принимающей стороны и передает их в сеть 10.

Блок 124 обработки приема выполняет прием данных из видеотелефона 200 принимающей стороны. Например, в соответствии с настоящим вариантом выполнения, когда пользователь видеотелефона 100 начинает вызов принимающей стороны, используя функции видеотелефона, основной блок 126 (описанный ниже) выполняет управление вызовом видеотелефона 200 принимающей стороны. При выполнении управлением вызова информацию управления вызовом, передаваемую из видеотелефона 200 принимающей стороны, принимают с помощью блока 124 обработки приема. Кроме того, когда устанавливают связь с видеотелефоном 200 принимающей стороны, когда преобразованные в пакеты данные изображения и аудиоданные принимают из видеотелефона 200 принимающей стороны, блок 124 обработки приема выполняет декодирование канала, декодирование изображения и декодирование аудиоданных. Сигналы изображения и сигналы звука, получаемые в результате декодирования, передают в интерфейс 128 пользователя.

Основной блок 126 выполняет различную обработку для реализации функций видеотелефона. Например, в соответствии с настоящим вариантом выполнения, когда пользователь видеотелефона 100 начинает вызов принимающей стороны, используя функции видеотелефона, управление вызовом видеотелефона 200 принимающей стороны выполняют с помощью основного блока 126. Кроме того, основной блок 126 имеет функцию регистрации изображений и звука в адресной книге, сохраненной в энергонезависимом запоминающем устройстве 112, используя данные изображения и данные звука принимающей стороны, которые принимает блок 124 обработки приема.

Далее, как показано на фиг.3, основной блок 126 включает в себя блок 132 выделения изображения и блок 134 регистрации адресной книги.

В течение периода, в который выполняют вызов видеотелефона 200, в котором используется функция видеотелефона, блок 132 выделения изображения выделяет изображение, которое временно сохраняют в запоминающем устройстве 116 видеоданных и которое передают из видеотелефона 200 принимающей стороны, как неподвижное изображение или как видеоизображение. Моменты времени выделения, выполняемого блоком 132 выделения изображения, могут представлять собой выбранные моменты времени, которые соответствуют инструкции пользователя, или могут представлять собой заданные моменты времени, установленные заранее. Кроме того, блок 132 выделения изображения может анализировать изображения, передаваемые из видеотелефона 200, и может выделять неподвижное изображение или видеоизображение, на основе результатов анализа. Выделение неподвижного изображения или видеоизображения блоком 132 выделения изображения подробно поясняется ниже.

Блок 134 регистрации адресной книги регистрирует в адресной книге неподвижное изображение или видеоизображение, выделенное блоком 132 выделения изображения. В настоящем варианте выполнения, когда вызов видеотелефона 200, который использует функции видеотелефона, заканчивается, блок 134 регистрации адресной книги регистрирует неподвижное изображение или видеоизображение, выделенное блоком 132 выделения изображения, ассоциирующее зарегистрированное изображение с информацией адресной книги принимающей стороны, с которой была установлена связь во время вызова.

Блок 128 интерфейса пользователя принимает операцию, вводимую пользователем видеотелефона 100, и выводит изображения и звук, передаваемые из видеотелефона 200 принимающей стороны, в дисплей 101 и громкоговоритель 104.

Функциональная конфигурация видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения пояснялась выше со ссылкой на фиг.3. Далее, поясняется работа видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения.

4. Работа видеотелефона в соответствии с вариантом выполнения настоящего изобретения

На фиг.4 показана блок-схема последовательности операций, иллюстрирующая работу видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения. Ниже работа видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения поясняется со ссылкой на фиг.4.

При использовании видеотелефона 100 для осуществления вызова принимающей стороны, используя функцию видеотелефона, вначале принимающую сторону принимают с помощью операции пользователя (этап S102). Для выбора принимающей стороны, видеотелефоном 100 можно оперировать, используя пульт 150 дистанционного управления и т.д., для непосредственного ввода телефонного номера принимающей стороны, или принимающую сторону можно выбрать из адресной книги.

На фиг.5 показана пояснительная схема, представляющая пример экрана адресной книги видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения. Экран адресной книги, представленный на фиг.5, отображают на дисплее 101, как результат операции видеотелефона 100, используя пульт дистанционного управления 150. В состоянии, в котором отображается такой тип экрана, как показано на фиг.5, пользователь видеотелефона 100 может использовать пульт 150 дистанционного управления для выполнения операций видеотелефона 100 и выбора принимающей стороны.

В следующем пояснении представлен пример, в котором вызов устанавливают после выбора верхнего пункта "дедушка, бабушка" в качестве принимающей стороны в адресной книге, показанной на фиг.5.

Когда принимающую сторону выбирают на описанном выше этапе S102, устанавливают соединение с принимающей стороной, выбранной на описанном выше этапе S102, и начинают вызов с принимающей стороны (этап S104). Связь с выбранной принимающей стороной может быть установлена, например, путем генерирования информации управления вызова в основном блоке 126, передачи сгенерированной информации управления вызова из блока 122 обработки передачи и приема ответа от видеотелефона 200 принимающей стороны в блоке 124 обработки приема.

На фиг.6 показана пояснительная схема, представляющая пример экрана вызова видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения. Экран вызова, показанный на фиг.6, отображается на дисплее 101 после начала вызова принимающей стороны. Как показано на фиг.6, экран вызова включает в себя домашний экран 162 и экран 164 принимающей стороны.

Домашний экран 162 представляет собой экран, на котором отображают изображения, снимаемые камерой 102, и изображения, отображаемые на домашнем экране 162, также отображают в видеотелефоне 200 принимающей стороны. Кроме того, экран 164 принимающей стороны отображает изображение принимающей стороны, снимаемое с помощью камеры видеотелефона 200 принимающей стороны. Изображение, отображаемое на экране 164 принимающей стороны, представляет собой изображение, полученное как результат декодирования блока 124 обработки приема, и его отображают с помощью блока 128 интерфейса пользователя. Пользователь видеотелефона 100 может осуществлять вызов принимающей стороны, используя функции видеотелефона, при просмотре экрана такого типа, как показано на фиг.6.

Затем, в настоящем варианте выполнения, используя изображение, передаваемое из видеотелефона 200 принимающей стороны и полученное как результат декодирования блоком 124 обработки приема, изображение автоматически регистрируют в адресной книге. При использовании такого типа автоматической регистрации изображения в адресной книге, изображение заранее сохраняют в телефоне, экономя, таким образом, время и усилия, связанные с редактированием видеоизображения, используя другое устройство, кроме телефона, и эти изображения могут быть просто зарегистрированы. В следующем пояснении описан пример, в котором неподвижное изображение регистрируют в адресной книге.

При регистрации изображения в адресной книге пользователь может передавать инструкции в выбранные моменты времени для съемки изображения, и блок 132 выделения изображения может выделять изображение в указанные с помощью инструкции моменты времени из изображений, передаваемых из видеотелефона 200 принимающей стороны. Затем, блок 134 регистрации адресной книги регистрирует в адресной книге изображение, выделенное блоком 132 выделения изображения. Съемку изображения можно выполнять, например, когда пользователь видеотелефона 100 выполняет операцию с пультом 150 дистанционного управления. Кроме того, количество снимаемых изображений может быть не ограничено и изображение можно снимать многократно. Когда существует множество снятых изображений, экран адресной книги может последовательно отображать снятые изображения на экране адресной книги в формате последовательности кадров.

С другой стороны, при регистрации изображения в адресной книге, во время вызова принимающей стороны, изображение, передаваемое из видеотелефона 200 принимающей стороны, может быть проанализировано блоком 132 выделения изображения, определенное изображение может быть выделено из результата анализа, и выделенное изображение может быть зарегистрировано в адресной книге с помощью блока 134 регистрации адресной книги. В настоящем варианте выполнения выполняют следующую обработку анализа.

Из данных изображений принимающей стороны блок 132 выделения изображения последовательно захватывает неподвижное изображение через заданные интервалы времени и принимает неподвижное изображение (этап S106).

Блок 132 выделения изображения выполняет обработку распознавания лица в данных изображения принимающей стороны, снимает кадр, в котором показан человек, в виде изображения, снятого принимающей стороной, и выделяют кадр как неподвижное изображение (этап S108). Блок 132 выделения изображения выполняет обработку распознавания лица, путем детектирования черт лица, таких как брови, глаза, нос, рот, и т.д., включенные в изображение, и может использовать технологию, раскрытую, например, в публикации заявки на японский патент № JP-A-2008-152530. Например, блок 132 выделения изображения может выполнять обработку распознавания лица по данным изображения принимающей стороны, использовать результаты обработки распознавания лица для идентификации размера лица человека, показанного камерой принимающей стороны, захватывать кадр, в котором представлено крупное лицо, и выделять кадр, как неподвижное изображение. Кроме того, например, блок 132 выделения изображения может выполнять обработку распознавания лица для данных изображения принимающей стороны и распознавать выражение лица человека, показанного камерой принимающей стороны. Он может затем снимать кадр, представляющий улыбающееся лицо, и выделять этот кадр, как неподвижное изображение.

Блок 132 выделения изображения выполняет обработку распознавания лица в данных изображения принимающей стороны и распознает, представляет ли собой принимающая сторона ребенка или взрослого человека. Заранее установлено, следует ли устанавливать приоритет при регистрации в адресной книге для взрослого человека или ребенка, и мужчины или женщины. Затем, выполняют захват кадра на основе установок приоритета, и выполняют обработку выделения неподвижного изображения (этап S110). Следует отметить, что можно определять, представляют ли собой изображения, включенные в данные изображения принимающей стороны, взрослого человека или нет, а также можно определять пол представленного человека путем детектирования, например, положения глаз, носа и рта и т.д. и на основе соотношения положений между этими чертами лица.

Блок 132 выделения изображения рассчитывает степень изменения между кадрами данных изображения принимающей стороны и измеряет интенсивность движения изображений принимающей стороны. Если изображение, в котором присутствует большая степень изменения между кадрами, а именно, изображение с интенсивным движением, будет выделено, как неподвижное изображение, четкое изображение нельзя будет получить из-за тряски камеры или размывания объекта изображения. Поэтому, изображение, в котором имеется малая степень изменения между кадрами, выделяют как неподвижное изображение (этап S112). Следует отметить, что следующие способы можно использовать для измерения степени изменения между кадрами. Каждый из способов, представленных ниже, можно использовать отдельно или можно использовать их комбинации.

1. Величина вектора движения всего экрана

2. Различие между кадрами всего экрана

3. Измерение степени движения путем детектирования движения

4. Другая технология детектирования различия/движения кадра

Следует отметить, что такие виды обработки анализа показаны на фиг.4 как последовательность обработки, но в настоящем изобретении, обработка анализа может быть выполнена отдельно, или множество видов обработки анализа могут быть выполнены в комбинации.

Во время вызова принимающей стороны, когда обработка анализа данных изображения принимающей стороны, выполненная блоком 132 выделения изображения, будет закончена, и будет выделено неподвижное изображение после окончания вызова, это неподвижное изображение, выделенное блоком 132 выделения изображения, регистрируют в адресной книге с помощью блока 134 регистрации в адресной книге. В это время неподвижное изображение ассоциируют с информацией адресной книги, соответствующей принимающей стороне. Когда вызов принимающей стороны заканчивают (этап S114), блок 134 регистрации адресной книги регистрирует неподвижное изображение, выделенное блоком 132 выделения изображения, в адресной книге так, что неподвижное изображение регистрируется в ассоциации с информацией адресной книги, соответствующей принимающей стороне (этап S116).

На фиг.17 показана пояснительная схема, представляющая примеры экрана, отображаемого на дисплее 101, когда с помощью видеотелефона 100, в соответствии с вариантом выполнения настоящего изобретения, пользователь передает инструкцию в видеотелефон 100 - отобразить экран адресной книги после окончания вызова принимающей стороны. На фиг.7 представлен случай, в котором изображение было вставлено блоком регистрации адресной книги 134 в верхний пункт "дедушка, бабушка". Благодаря автоматической регистрации изображения в адресной книге с помощью блока 134 регистрации адресной книги изображения могут быть легко вставлены в адресную книгу.

Работа видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения пояснялась выше со ссылкой на фиг.4. Во время работы видеотелефона 100 в соответствии с данным вариантом выполнения настоящего изобретения, показанным на фиг.4, пояснение описывает пример, в котором неподвижное изображение регистрировали в адресной книге. Однако вместо неподвижного изображения в адресной книге может быть зарегистрировано видеоизображение. На фиг.8 показана блок-схема последовательности операций, иллюстрирующая работу видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения. Ниже, работа видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения поясняется со ссылкой на фиг.8.

Так же как происходит регистрация неподвижного изображения в адресной книге, когда видеотелефон 100 используют для осуществления вызова принимающей стороны, используя функции видеотелефона, вначале принимающую сторону выбирают с помощью операции пользователя (этап S122). Для выбора принимающей стороны, видеотелефоном 100 можно управлять, используя, например, пульт 150 дистанционного управления, чтобы непосредственно вводить номер телефона принимающей стороны, или принимающая сторона может быть выбрана из адресной книги.

Когда принимающую сторону выбирают на описанном выше этапе S122, устанавливают соединение с принимающей стороной, выбранной на описанном выше этапе S122, и начинают вызов принимающей стороны (этап S124). Соединение с выбранной принимающей стороной может быть установлено, например, путем генерирования информации управления вызова в основном блоке 126, который передает сгенерированную информацию управления вызова из блока 122 обработки передачи, и принимает ответ из видеотелефона 200 принимающей стороны в блоке 124 обработки приема.

Во время регистрации видеоизображения в адресной книге пользователь может вводить инструкцию выбора момента времени захвата видеоизображения, и блок 132 выделения изображения может выделять видеоизображение в момент времени, соответствующий инструкции, из видеоизображений, передаваемых видеотелефоном 200 принимающей стороны. Затем, блок 134 регистрации адресной книги регистрирует видеоизображение, выделенное блоком 132 выделения изображения в адресной книге. Захват видеоизображения может быть выполнен, например, с использованием пользователем пульта 150 дистанционного управления видеотелефона 100. Кроме того, количество снятых видеоизображений может быть не ограничено. Когда существует множество снятых видеоизображений, экран адресной книги может последовательно отображать снятое видеоизображение на экране адресной книги в формате представления последовательности кадров.

С другой стороны, при регистрации видеоизображений в адресной книге, во время вызова принимающей стороны, видеоизображение, передаваемое видеотелефоном 200 принимающей стороны, может быть проанализировано блоком 132 выделения изображения, при этом определенное видеоизображение может быть выделено из результатов анализа, и выделенное видеоизображение может быть зарегистрировано в адресной книге блоком 134 регистрации адресной книги. В настоящем варианте выполнения может быть выполнена следующая обработка анализа.

По данным изображения принимающей стороны, блок 132 выделения изображения последовательно захватывает видеоизображение в определенный интервал времени и выделяет видеоизображение для выбранного периода времени (этап S126).

Блок 132 выделения изображения выполняет обработку распознавания лица по данным изображения принимающей стороны (этап S128). Обработка распознавания лица позволяет распознавать, например, что человек представлен в камере видеотелефона 200 принимающей стороны, может захватывать кадры, в которых представлен человек, и может выделять эти кадры, как видеоизображение. В качестве альтернативы, например, обработка может распознавать количество людей, представленных в камере видеотелефона 200 принимающей стороны, может захватывать кадры, в которых присутствует множество или несколько человек, и может выделять эти кадры как видеоизображение. В качестве альтернативы, например, обработка может распознавать размер лица человека, представленного в камере видеотелефона 200 принимающей стороны, может захватывать изображения, в которых показано большое лицо, и может выделять эти кадры как видеоизображение. И снова, в качестве альтернативы, например, обработка может распознавать выражение лица человека, представленного в камере видеотелефона 200 принимающей стороны, может захватывать кадры, представляющие улыбающееся лицо, и может выделять эти кадры как видеоизображение. Следует отметить, что можно определять, представляют ли собой лица, включенные в данные изображения принимающей стороны, улыбающиеся лица или нет, детектируя положение и форму глаз, носа и рта и т.д., например, и по взаимосвязи положения и формы этих черт лица.

Блок 132 выделения изображения выполняет обработку распознавания лица по данным изображения принимающей стороны и распознает, представляет ли собой принимающая сторона ребенка или взрослого человека и мужчину или женщину. Он также распознает количество взрослых или детей, и количество представленных мужчин или женщин. Заранее определяют, следует ли устанавливать приоритет для взрослого человека или ребенка, и мужчины или женщины, и кадры, включающие в себя взрослого человека, или кадры, включающие в себя ребенка, или кадры, включающие в себя мужчину, или кадры, включающие в себя женщину, захватывают и выделяют как видеоизображение (этап S130).

Блок 132 выделения изображения рассчитывает степень изменения между кадрами данных изображения принимающей стороны и распознает, в какой степени изображения принимающей стороны движутся (интенсивность движения). Кадры с большой степенью движения или кадры с малой степенью движения захватывают, и эти кадры выделяют как видеоизображение (этап S132). Следует отметить, что способы измерения степени изменения между кадрами, вышеописанные на этапе S112, можно использовать здесь как способы измерения степени изменения между кадрами.

Кроме того, голосовые данные принимающей стороны, включенные в данные изображения принимающей стороны, можно анализировать с помощью основного блока 126. В результате анализа, выполняемого с помощью основного блока 126, кадры, в которых слышан голос принимающей стороны, определяют как кадры, в которых происходит живой разговор, и выполняют захват соответствующих кадров с помощью блока 132 выделения изображения и выделяют их как видеоизображение (этап S134). Различные способы можно использовать для выполнения обработки анализа голосовых данных на этапе S134, и настоящее изобретение не ограничивается каким-либо конкретным способом.

Следует отметить, что эта обработка анализа показана на фиг.8 как последовательность обработки, но в настоящем изобретении, обработка анализа может быть выполнена отдельно, или множество видов обработки анализа может быть выполнено в комбинации.

Во время вызова принимающей стороны, когда обработка анализа данных изображения принимающей стороны, выполняемая блоком 132 выделения изображения, будет закончена и видеоизображение будет выделено, после окончания вызова, видеоизображение, выделенное блоком 132 выделения изображения, регистрируют в адресной книге с помощью блока 134 регистрации адресной книги. В этот момент времени видеоизображение ассоциируют с информацией адресной книги, соответствующей принимающей стороне. Когда вызов принимающей стороны заканчивается (этап S136), блок 134 регистрации адресной книги регистрирует видеоизображение, выделяемое блоком 132 выделения изображения, в адресной книге таким образом, что видеоизображение регистрируют в ассоциации с информацией адресной книги, соответствующей принимающей стороне (этап S138).

Работа видеотелефона 100 в соответствии с вариантом выполнения настоящего изобретения пояснялась выше со ссылкой на фиг.8. Таким образом, путем анализа данных изображения принимающей стороны с помощью блока 132 выделения изображения, выделения неподвижного изображения или видеоизображения и регистрации выделенного неподвижного изображения или видеоизображения в адресной книге изображения могут быть просто зарегистрированы в адресной книге без предварительного сохранения изображения в видеотелефоне 100 и без необходимости редактирования видеоизображения в отдельном устройстве.

Следует отметить, что в приведенном выше пояснении данные изображения принимающей стороны анализируют, неподвижное изображение или видеоданные выделяют и выделенное неподвижное изображение или видеоизображение регистрируют в адресной книге. Однако, когда адресная книга имеет функцию, обеспечивающую возможность прослушивания аудиоданных, аудиоданные могут быть выделены, и выделенные аудиоданные могут быть зарегистрированы в адресной книге.

Обычно, когда начинается вызов, принимающая сторона часто использует стандартную фразу, такую как "Алло" или "Говорит XX (имя)". Поэтому аудиоданные выделяют с помощью основного блока 126 непосредственно после начала вызова в заданный момент времени и регистрируют в адресной книге. В результате регистрации описанных выше аудиоданных, таким образом, звук можно воспроизводить через отображение адресной книги на экране, и пользователь может вспомнить, кем является принимающая сторона.

Период, регистрируемый в адресной книге, например, может составлять от момента, когда принимающая сторона начинает разговор непосредственно после начала вызова, до следующего периода молчания. Период молчания может быть определен путем проверки уровня микрофона, или путем проверки содержания пакета и определения, наступил или нет период молчания.

В качестве альтернативы, период, регистрируемый в адресной книге, может начинаться от начала вызова до окончания заданного периода времени (например, от трех до пяти секунд). Период времени, приблизительно этой длины, представляет собой достаточный период времени, который включает в себя обычную фразу принимающей стороны, такую как "Алло", или "говорит XX".

Следует отметить, что при регистрации звука в адресной книге, зарегистрированная пиктограмма, обозначающая звук (например, изображение микрофона), может отображаться на экране адресной книги, показанном на фиг.5 и фиг.7, слева от изображения или справа от имени и т.д.

Настоящее изобретение содержит предмет изобретения, относящийся к тому, что раскрыто в приоритетной заявке на японский патент JP 2008-261020, поданной в японское патентное ведомство 7 октября 2008 года, полное содержание которой приведено здесь в качестве ссылочного материала.

Для специалистов в данной области техники будет понятно, что различные модификации, комбинации, подкомбинации и изменения могут возникать в зависимости от требований к конструкции и других факторов, если только они находятся в пределах объема приложенной формулы изобретения или ее эквивалентов.

5. Модифицированный пример

В настоящем варианте выполнения, например, блок 132 выделения изображения выполняет обработку анализа данных изображения принимающей стороны и выделяет неподвижное изображение или видеоизображение. Однако количество неподвижных изображений и видеоизображений не ограничивается одним.

Например, блок 132 выделения изображения выполняет обработку анализа по данным изображения от принимающей стороны, и когда можно выделить множество неподвижных изображений или видеоизображений, которые соответствуют предварительным условиям, блок 134 регистрации адресной книги может регистрировать все множество выделенных неподвижных изображений или видеоизображений в адресной книге. Затем, при отображении адресной книги, в которой зарегистрированы неподвижные изображения или видеоизображения, зарегистрированные неподвижные изображения или видеоизображения могут отображаться в так называемом формате последовательного представления кадров.

Затем при отображении неподвижных изображений или видеоизображений в формате последовательного представления кадров, может быть установлен порядок приоритета для выделенных неподвижных изображений или видеоизображений, когда блок 132 выделения изображения выделяет неподвижные изображения или видеоизображения. В следующем пояснении представлен случай, в котором распознают размер лица, показываемого в камере принимающей стороны, на описанном выше этапе S108, и кадры с крупным размером лица захватывают и выделяют как неподвижные изображения. В этом случае блок 132 выделения изображения может быть установлен так, что он будет устанавливать наивысший приоритет для кадра с самым крупным лицом, и степень приоритета уменьшают по мере уменьшения размера лица.

Кроме того, в пояснениях описан случай, в котором распознают выражение лица человека, представленного в камере принимающей стороны, на описанном выше этапе S108, и кадры, представляющие улыбающееся лицо, захватывают и выделяют как неподвижные изображения. В этом случае, блок 132 выделения изображения может быть установлен так, чтобы он присваивал наибольший приоритет кадру, в котором лицо имеет самую большую улыбку, и уменьшал степень приоритета при уменьшении размера улыбки на лице.

Настоящее изобретение можно применять к устройству обработки информации, способу обработки информации и компьютерной программе. В частности, его можно применять к устройству обработки информации, способу обработки информации и компьютерной программе, которые имеют функции видеотелефона.

Изобретение относится к устройству и способу обработки информации, которые имеют функцию видеотелефона. Техническим результатом является обеспечение регистрации изображения в адресной книге путем сохранения видеоизображения, передаваемого от принимающей стороны во время вызова, используя функции видеотелефона, и путем регистрации после окончания вызова изображения в информации адресной книги, используя сохраненное видеоизображение. Указанный технический результат достигается тем, что предложено устройство обработки информации, включающее в себя блок записи информации принимающей стороны, который записывает информацию принимающей стороны, блок записи изображения, который записывает изображение принимающей стороны, снятое принимающей стороной во время вызова, блок выделения изображения, который выделяет изображение в заданной момент времени из изображений, записанных на блоке записи изображения, и блок регистрации, который, после окончания вызова, ассоциирует изображение, выделенное блоком выделения изображения, с информацией принимающей стороны и регистрирует это ассоциированное изображение в блоке записи информации принимающей стороны. 3 н. и 9 з.п. ф-лы, 8 ил.

1. Устройство обработки информации, содержащее:
блок записи информации принимающей стороны, записывающий информацию принимающей стороны;
блок записи аудиоданных, записывающий аудиоданные принимающей стороны во время вызова;
блок записи изображения, записывающий изображения принимающей стороны, снимаемые принимающей стороной во время вызова;
блок выделения изображения, который выделяет изображение в заданный момент времени из изображений, записанных блоком записи изображения;
блок выделения аудиоданных, выделяющий аудиоданные в определенный момент времени из аудиоданных, записанных в блоке записи аудиоданных; и
блок регистрации, который, после окончания вызова, ассоциирует изображение, выделенное блоком выделения изображения, и аудиоданные, выделенные блоком выделения аудиоданных, с информацией принимающей стороны, и регистрирует это ассоциированное изображение и аудиоданные в адресной книге.

2. Устройство обработки информации по п. 1, в котором
блок выделения изображения выделяет неподвижное изображение.

3. Устройство обработки информации по п. 2, в котором
блок выделения изображения выделяет, в момент времени, в который поступает инструкция от пользователя, неподвижное изображение среди изображений, записанных в блоке записи изображения.

4. Устройство обработки информации по п. 2, в котором
блок выделения изображения выделяет, в определенный интервал времени, неподвижное изображение из изображений, записанных в блоке записи изображения.

5. Устройство обработки информации по п. 2, в котором
блок выделения изображения выделяет, как неподвижное изображение, из изображений, записанных в блоке записи изображения, кадр, который включает в себя лицо.

6. Устройство обработки информации по п. 2, в котором
блок выделения изображения детектирует степень изменения между кадрами изображений, записанных в блоке записи изображения, и выделяет, как неподвижное изображение, кадр с малой степенью изменения.

7. Устройство обработки информации по п. 1, в котором
блок выделения изображения выделяет видеоизображение.

8. Устройство обработки информации по п. 7, в котором
блок выделения изображения выделяет, в момент времени, в которой поступает инструкция от пользователя, видеоизображение среди изображений, записанных в блоке записи изображения.

9. Устройство обработки информации по п. 7, в котором
блок выделения изображения детектирует степень изменения между кадрами изображений, записанными в блоке записи изображения, и выделяет, как видеоизображение, кадры с низкой степенью изменения.

10. Устройство обработки информации по п. 1, в котором
блок выделения изображения выделяет, как видеоданные, кадры в момент времени, в который громкость звука, записанного в блоке записи аудиоданных, выше, чем громкость в другой момент времени.

11. Способ обработки информации, содержащий следующие этапы:
записывают аудиоданные принимающей стороны во время вызова;
записывают изображения принимающей стороны, снятые принимающей стороной
во время вызова;
выделяют изображение в заданный момент времени из изображений, записанных на этапе записи изображения;
выделяют аудиоданные в определенный момент времени из аудиоданных, записанных на этапе записи аудиоданных; и
после окончания вызова, ассоциируют изображение, выделенное на этапе выделения изображения, и аудиоданные, выделенные на этапе выделения аудиоданных, с информацией принимающей стороны и регистрируют это ассоциированное изображение и аудиоданные в адресной книге .

12. Носитель записи, на котором содержится компьютерная программа, которая содержит инструкции, которые представляют в компьютер команды для выполнения следующих этапов:
записывают аудиоданные принимающей стороны во время вызова;
записывают изображения принимающей стороны, снятые принимающей стороной во время вызова;
выделяют изображение в заданный момент времени из изображений, записанных на этапе записи изображения;
выделяют аудиоданные в определенный момент времени из аудиоданных, записанных на этапе записи аудиоданных; и
после окончания вызова, ассоциируют изображение, выделенное на этапе
выделения изображения, и аудиоданные, выделенные на этапе выделения аудиоданных с информацией принимающей стороны и регистрируют это ассоциированное изображение и аудиоданные в адресной книге .