АВТОМАТИЧЕСКОЕ РАСПОЗНАВАНИЕ И СЪЕМКА ОБЪЕКТА Российский патент 2014 года по МПК G06K9/22 G06K9/78 

ОБЛАСТЬ ТЕХНИКИ, К КОТОРОЙ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ

[0001] Варианты осуществления раскрытия изобретения в целом относятся к области электроники, а конкретнее к способам и системам управления мобильными устройствами.

ПРЕДШЕСТВУЮЩИЙ УРОВЕНЬ ТЕХНИКИ

[0002] Терминал может быть выполнен в виде мобильного терминала или стационарного терминала. Мобильный терминал дополнительно может подразделяться на портативный терминал или устанавливаемый в транспортном средстве терминал. Так как свойства мобильного терминала становятся многообразнее, мобильный терминал становится мультимедийным проигрывателем, выполняющим различные функции, например, съемку изображений и видео, проигрывание музыкальных или мультимедийных файлов, запуск игр, прием широковещательных программ и так далее. В частности, в настоящее время все больше и больше выделяется функция камеры в мобильном терминале. Однако когда объект, который пользователь хочет снять, быстро перемещается или входит в поле зрения и выходит из него, может быть очень сложно получить хорошую фотографию объекта.

СУЩНОСТЬ ИЗОБРЕТЕНИЯ

[0003] Раскрываются способ, система и устройство для автоматического распознавания и съемки объекта. В одном аспекте мобильный терминал содержит блок отображения (дисплейное устройство), запоминающее устройство, модуль камеры и контроллер. Контроллер сконфигурирован задавать по меньшей мере одно изображение предполагаемого объекта в ответ на его пользовательский ввод, принимать изображение объекта посредством модуля камеры, формировать указание совпадения, когда степень совпадения изображения объекта с упомянутым по меньшей мере одним изображением предполагаемого объекта превышает пороговое значение, и выполнять съемку изображения объекта при подтверждении указания совпадения.

[0004] В другом аспекте способ в мобильном терминале содержит задание по меньшей мере одного изображения предполагаемого объекта в ответ на его пользовательский ввод, прием изображения объекта посредством модуля камеры в мобильном терминале, формирование указания совпадения, когда степень совпадения изображения объекта с упомянутым по меньшей мере одним изображением предполагаемого объекта превышает пороговое значение, и съемку изображения объекта при подтверждении указания совпадения.

[0005] В еще одном аспекте способ в мобильном терминале содержит задание изображения первого предполагаемого объекта, изображения второго предполагаемого объекта и условия совпадения в ответ на их пользовательский ввод, прием изображения первого объекта и изображения второго объекта посредством модуля камеры в мобильном терминале, формирование указания совпадения, когда изображение первого объекта и изображение второго объекта совпадают с изображением первого предполагаемого объекта и изображением второго предполагаемого объекта согласно условию совпадения, и съемку изображения объекта при подтверждении указания совпадения.

[0006] Другие признаки вариантов осуществления станут очевидными из прилагаемых чертежей и из подробного описания изобретения, которое идет ниже.

КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ

[0007] Примерные варианты осуществления иллюстрируются в качестве примера, а не ограничения на фигурах прилагаемых чертежей, где одинаковые ссылки указывают аналогичные элементы, и на которых:

[0008] Фиг. 1 иллюстрирует типовую схематическую блок-схему мобильного терминала в соответствии с одним вариантом осуществления.

[0009] Фиг. 2a - вид в перспективе спереди, иллюстрирующий пример мобильного терминала, а фиг. 2b - вид в перспективе сзади, иллюстрирующий мобильный терминал на фиг. 2a, в соответствии с вариантом осуществления настоящего раскрытия изобретения.

[0010] Фиг. 3 иллюстрирует типовой процесс, выполняемый мобильным терминалом для автоматического распознавания и съемки объекта в соответствии с одним вариантом осуществления.

[0011] Фиг. 4a и 4b иллюстрируют типовые изображения мобильного терминала, регистрирующего объект для автоматического распознавания и съемки в соответствии с одним вариантом осуществления.

[0012] Фиг. 5a-5c иллюстрируют типовые изображения мобильного терминала, регистрирующего выбранный из изображения объект в соответствии с одним вариантом осуществления.

[0013] Фиг. 6 иллюстрирует типовые изображения мобильного терминала, регистрирующего несколько изображений объекта в соответствии с одним вариантом осуществления.

[0014] Фиг. 7a-7c иллюстрируют типовые изображения мобильного терминала, выбирающего предполагаемый объект в соответствии с одним вариантом осуществления.

[0015] Фиг. 8a-8c иллюстрируют другие типовые изображения мобильного терминала, выбирающего предполагаемый объект в соответствии с одним вариантом осуществления.

[0016] Фиг. 9a и 9b иллюстрируют типовые изображения мобильного терминала, выбирающего два предполагаемых объекта и условие совпадения в соответствии с одним вариантом осуществления.

[0017] Фиг. 10a-10c иллюстрируют типовые изображения мобильного терминала, выбирающего предполагаемый объект из группы миниатюрных изображений, ассоциированных с искомым словом, в соответствии с одним вариантом осуществления.

[0018] Фиг. 11a-11c иллюстрируют типовые изображения мобильного терминала, выбирающего предполагаемый объект из группы миниатюрных изображений, ассоциированных с местоположением, в соответствии с одним вариантом осуществления.

[0019] Фиг. 12 иллюстрирует типовое изображение мобильного терминала, автоматически распознающего предполагаемый объект в соответствии с одним вариантом осуществления.

[0020] Фиг. 13a и 13b иллюстрируют типовые изображения мобильного терминала, автоматически распознающего два предполагаемых объекта в соответствии с одним вариантом осуществления.

[0021] Фиг. 14a-14d иллюстрируют типовые изображения мобильного терминала, отслеживающего и снимающего предполагаемый объект в соответствии с одним вариантом осуществления.

[0022] Фиг. 15 иллюстрирует типовое изображение мобильного терминала, автоматически распознающего предполагаемый объект и характеристику предполагаемого объекта в соответствии с одним вариантом осуществления.

[0023] Фиг. 16 иллюстрирует последовательность операций типового способа, выполняемого мобильным терминалом для автоматического распознавания и съемки объекта в соответствии с одним вариантом осуществления.

[0024] Фиг. 17 иллюстрирует последовательность операций другого типового способа, выполняемого мобильным терминалом для автоматического распознавания и съемки объекта в соответствии с одним вариантом осуществления.

[0025] Другие признаки настоящих вариантов осуществления станут очевидными из прилагаемых чертежей и из подробного описания изобретения, которое идет ниже. Кроме того, описанные в этом документе чертежи предназначены только для иллюстрации и никоим образом не предназначены для ограничения объема настоящего раскрытия изобретения.

ПОДРОБНОЕ ОПИСАНИЕ

[0026] Раскрываются способ, система и устройство для автоматического распознавания и съемки объекта. В соответствии с различными вариантами осуществления настоящего раскрытия изобретения, в мобильном терминале создается набор или библиотека изображений объектов. Тогда пользователь может выбирать предполагаемый объект (например, гоночный автомобиль, самолет, прыгающий дельфин и т.д.) для автоматического распознавания. Фотографию предполагаемого объекта можно снять автоматически или вручную. Например, когда пользователь посещает некоторое мероприятие, пользователь может захотеть получить фотографии одного или нескольких объектов для мероприятия, но съемка объектов может быть непростой, когда те объекты быстро входят и выходят из поля зрения пользователя. В вариантах осуществления настоящего раскрытия изобретения мобильный терминал обучается для распознавания желаемого или предполагаемого объекта и получения фотографии, когда появляется тот объект.

[0027] В дальнейшем раскрытые в этом документе варианты осуществления будут подробно описываться со ссылкой на прилагаемые чертежи, и одинаковые или аналогичные элементы обозначаются одинаковыми числовыми ссылками независимо от чисел на чертежах, и их избыточное описание будет пропущено. Прибавка "модуль" или "блок", используемая для составляющих элементов, раскрытых в нижеследующем описании, предназначена всего лишь для удобного описания изобретения, и сама прибавка не придает никакого особого смысла или функции. Кроме того, при описании раскрытых в этом документе вариантов осуществления подробное описание будут пропущено, когда считается, что определенное описание для общеизвестных технологий, к которым имеет отношение изобретение, затрудняет понимание сущности настоящего изобретения. Также следует отметить, что прилагаемые чертежи всего лишь иллюстрируются для удобного объяснения сущности изобретения, и поэтому их не следует толковать как ограничивающие технологическую сущность, раскрытую в этом документе с помощью прилагаемых чертежей.

[0028] Мобильный терминал, раскрытый в этом документе, может включать в себя портативный телефон, смартфон, переносной компьютер, терминал цифрового вещания, персональный цифровой помощник (PDA), портативный мультимедийный проигрыватель (PMP) или навигационное устройство. Однако специалисты в данной области техники без труда поняли бы, что конфигурация в соответствии с нижеследующим описанием может быть применима к стационарному терминалу, например, цифровому телевизору, настольному компьютеру и т.п., исключающему составляющие элементы, отдельно сконфигурированные для мобильных целей.

[0029] Фиг. 1 иллюстрирует типовую схематическую блок-схему мобильного терминала 100 в соответствии с одним вариантом осуществления. Мобильный терминал 100 может включать в себя блок 110 беспроводной связи, блок 120 ввода видео/звука (A/V), блок 130 пользовательского ввода, считывающий блок 140, блок 150 вывода, запоминающее устройство 160, интерфейсный блок 170, контроллер 180, источник питания 190 и т.п. Однако составляющие элементы, которые проиллюстрированы на фиг. 1, не обязательно являются необходимыми, и мобильный терминал может быть реализован с большим или меньшим количеством элементов, нежели проиллюстрированные элементы.

[0030] В дальнейшем составляющие элементы будут описываться последовательно. Блок 110 беспроводной связи обычно включает в себя один или несколько элементов, предоставляющих возможность радиосвязи между мобильным терминалом 100 и системой беспроводной связи или предоставляющих возможность радиосвязи между мобильным терминалом 100 и сетью, в которой располагается мобильный терминал 100. Например, блок 110 беспроводной связи может включать в себя модуль 111 приема широковещательной трансляции, модуль 112 мобильной связи, модуль 113 беспроводного Интернета, модуль 114 связи малой дальности, модуль 115 информации о местоположении и т.п.

[0031] Модуль 111 приема широковещательной трансляции принимает широковещательные сигналы и/или ассоциированную с широковещанием информацию от внешнего сервера управления широковещанием по каналу широковещания. Канал широковещания может включать в себя спутниковый канал и/или наземный канал. Сервер управления широковещанием может означать сервер, который формирует и передает широковещательный сигнал и/или ассоциированную с широковещанием информацию, или сервер, который принимает ранее сформированный широковещательный сигнал и/или ассоциированную с широковещанием информацию и передает мобильному терминалу 100. Широковещательный сигнал может включать в себя сигнал телевизионной передачи, сигнал радиопередачи и сигнал широковещательной передачи данных, а также широковещательный сигнал в виде, в котором сигнал широковещательной передачи данных соединяется с сигналом телевизионной или радиопередачи.

[0032] Ассоциированная с широковещанием информация может означать информацию о канале широковещания, широковещательной программе, поставщике услуг широковещания и т.п. Ассоциированная с широковещанием информация также может предоставляться по сети мобильной связи, и в этом случае ассоциированная с широковещанием информация может приниматься модулем 112 мобильной связи. Ассоциированная с широковещанием информация может существовать в различных видах. Например, она может существовать в виде электронной программы передач (EPG) цифрового мультимедийного вещания (DMB), электронной программы услуг (ESG) цифрового телевидения для мобильных устройств (DVB-H) и т.п.

[0033] Модуль 111 приема широковещательной трансляции может принимать широковещательный сигнал с использованием различных типов широковещательных систем. В частности, модуль 111 приема широковещательно трансляции может принимать цифровой широковещательный сигнал с использованием цифровой широковещательной системы, например, наземного цифрового мультимедийного широковещания (DMB-T), спутникового цифрового мультимедийного широковещания (DMB-S), только прямой линии связи для мультимедиа (MediaFLO), цифрового телевидения для мобильных устройств (DVB-H), наземного цифрового широковещания с интегрированными услугами (ISDB-T) и т.п. Конечно, модуль 111 приема трансляции конфигурируется подходящим для каждой широковещательной системы, которая предоставляет широковещательный сигнал, а также для вышеупомянутых цифровых широковещательных систем.

[0034] Широковещательный сигнал и/или ассоциированная с широковещанием информация, принятая посредством модуля 111 приема широковещательной трансляции, может сохраняться в запоминающем устройстве 160. Модуль 112 мобильной связи передает и/или принимает радиосигнал по меньшей мере к одной и/или от одной из базовой станции, внешнего терминала и сервера по сети мобильной связи. Здесь радиосигнал может включать в себя сигнал речевого вызова, сигнал видеовызова и/или различные типы данных в соответствии с передачей и/или приемом текстовых и/или мультимедийных сообщений. Модуль 112 мобильной связи может конфигурироваться для реализации режима видеосвязи и режима речевой связи. Режим видеосвязи относится к конфигурации, в которой связь осуществляется наряду с просмотром изображения собеседника, а режим речевой связи относится к конфигурации, в которой связь осуществляется без просмотра изображения собеседника. Модуль 112 мобильной связи может конфигурироваться для передачи или приема по меньшей мере одних из речевых данных и данных изображения, чтобы реализовать режим видеосвязи и режим речевой связи.

[0035] Модуль 113 беспроводного Интернета означает модуль для поддержки доступа к беспроводному Интернету. Модуль 113 беспроводного Интернета может быть встроенным или внешне установленным на мобильный терминал 100. Здесь может использоваться методика доступа к беспроводному Интернету, включающая в себя WLAN (Беспроводная LAN), Wi-Fi, Wibro (Беспроводной широкополосный доступ), WiMAX (Общемировая совместимость для микроволнового доступа), HSDPA (Высокоскоростной пакетный доступ по нисходящей линии связи) и т.п. Модуль 114 связи малой дальности является модулем для поддержки связи малой дальности. Здесь может использоваться технология связи малой дальности, включающая в себя Bluetooth, Радиочастотную идентификацию (RFID), Ассоциацию по передаче данных в инфракрасном диапазоне (IrDA), Сверхширокополосную связь (UWB), ZigBee и т.п. Модуль 115 информации о местоположении является модулем для проверки или получения местоположения мобильного терминала, и в качестве показательного примера существует модуль GPS.

[0036] Ссылаясь на фиг. 1, блок 120 ввода A/V (видео/звука) принимает звуковой или видеосигнал, и блок 120 ввода A/V (видео/звука) может включать в себя камеру 121 и микрофон 122. Камера 121 обрабатывает кадр изображения, например, фотоснимок или видеоизображение, полученный датчиком изображения в режиме вызова по видеотелефону или съемки изображения. Обработанный кадр изображения может отображаться на блоке 151 отображения. Кадры изображения, обработанные камерой 121, могут сохраняться в запоминающем устройстве 160 или передаваться внешнему устройству посредством блока 110 беспроводной связи. Две камеры 121 или более могут предоставляться в соответствии с условиями использования мобильного терминала.

[0037] Микрофон 122 принимает внешний звуковой сигнал через микрофон в режиме телефонного вызова, режиме записи, режиме распознавания речи и т.п., и перерабатывает звуковой сигнал в электрические речевые данные. Обработанные речевые данные могут быть преобразованы и выведены в формат, который можно передать базовой станции мобильной связи посредством модуля 112 мобильной связи в режиме телефонного вызова. Микрофон 122 может реализовывать различные типы алгоритмов подавления шумов, чтобы подавлять шум, сформированный в процедуре приема внешнего звукового сигнала. Блок 130 пользовательского ввода может формировать входные данные для управления работой терминала. Блок 130 пользовательского ввода может конфигурироваться путем включения в себя клавишной панели, купольного переключателя, сенсорной панели (чувствительной к давлению/емкостной), безупорного регулятора, ступенчатого переключателя и т.п.

[0038] Считывающий блок 140 обнаруживает текущее состояние мобильного терминала 100, например, открытое или закрытое состояние мобильного терминала 100, местоположение мобильного терминала 100, ориентацию мобильного терминала 100 и т.п., и формирует сигнал считывания для управления работой мобильного терминала 100. Например, когда мобильный терминал 100 является раздвижным типом телефона, он может считывать открытое или закрытое состояние раздвижного телефона. Кроме того, считывающий блок 140 берет на себя считывающую функцию, ассоциированную с тем, поступает ли энергия от источника 190 питания, или соединено ли внешнее устройство с интерфейсным блоком 170. Блок 150 вывода конфигурируется для обеспечения вывода для звукового сигнала, видеосигнала или сигнала тревоги, и блок 150 вывода может включать в себя блок 151 отображения, модуль 152 вывода звука, блок 153 тревоги, тактильный модуль 154 и т.п.

[0039] Блок 151 отображения может отображать (выводить) информацию, обработанную в мобильном терминале 100. Например, когда мобильный терминал 100 находится в режиме телефонного вызова, блок 151 отображения может отобразить Интерфейс пользователя (UI) или Графический интерфейс пользователя (GUI), ассоциированный с вызовом. Когда мобильный терминал 100 находится в режиме видеовызова или режиме съемки изображения, блок 151 отображения может отобразить снятое изображение и/или принятое изображение, UI или GUI. Блок 151 отображения может включать в себя по меньшей мере один из жидкокристаллического дисплея (LCD), LCD на тонкопленочных транзисторах (TFT-LCD), дисплея на органических светоизлучающих диодах (OLED), гибкого дисплея, трехмерного (3D) дисплея и дисплея на электронных чернилах (e-ink).

[0040] Некоторые из тех дисплеев могут конфигурироваться как прозрачный или оптически-прозрачный тип, чтобы предоставлять возможность просмотра внешнего пространства через блок отображения, что может называться "прозрачными" дисплеями. Пример типичных прозрачных дисплеев может включать в себя прозрачный LCD (TOLED) и т.п. При этой конфигурации пользователь может наблюдать объект, помещенный с задней стороны корпуса терминала, через область, занятую блоком 151 отображения в корпусе терминала. Два или более блоков 151 отображения могут быть реализованы в соответствии со сконфигурированной особенностью мобильного терминала 100. Например, множество блоков 151 отображения может располагаться на одной поверхности на расстоянии друг от друга или объединенными друг с другом, или может располагаться на разных поверхностях.

[0041] Когда блок 151 отображения и чувствительный к касанию датчик (в дальнейшем называемый "датчиком касания") имеют межслойную структуру (в дальнейшем называемую "сенсорным экраном"), блок 151 отображения может использоваться в качестве устройства ввода, а не устройства вывода. Датчик касания может быть реализован в виде сенсорной пленки, сенсорного листа, сенсорной панели и т.п. Датчик касания может конфигурироваться для преобразования изменений давления, приложенного к определенной части блока 151 отображения, или емкости, возникающей от определенной части блока 151 отображения, в электрические входные сигналы. Также датчик касания может конфигурироваться для считывания не только положения касания и области касания, но также и давления касания. Когда имеется сенсорный ввод в датчик касания, соответствующие сигналы передаются контроллеру касания (не показан). Контроллер касания обрабатывает принятые сигналы, а затем передает соответствующие данные контроллеру 180. Соответственно, контроллер 180 может считывать, какой области блока 151 отображения коснулись.

[0042] Ссылаясь на фиг. 1, датчик 141 приближения может располагаться во внутренней области мобильного терминала 100, закрытой сенсорным экраном, или рядом с сенсорным экраном. Датчик приближения означает датчик для считывания наличия или отсутствия объекта, приближающегося к поверхности, которую нужно считать, или объекта, расположенного рядом с поверхностью, которую нужно считать, используя электромагнитное поле или инфракрасные лучи без механического контакта. Датчик приближения имеет более длительный срок службы и большую полезность, чем контактный датчик. Примеры датчика приближения могут включать в себя фотоэлектрический датчик прозрачности, фотоэлектрический датчик направленного отражения, фотоэлектрический датчик зеркального отражения, датчик приближения на основе колебаний высокой частоты, емкостной датчик приближения, магнитный датчик приближения, инфракрасный датчик приближения и так далее. Когда сенсорный экран реализуется в виде емкостного типа, близость указателя к сенсорному экрану считывается с помощью изменений электромагнитного поля. В этом случае сенсорный экран (датчик касания) можно категоризировать как датчик приближения.

[0043] В дальнейшем для удобства краткого объяснения состояние, когда указатель устанавливается близко к сенсорному экрану без контакта, будет называться "бесконтактным касанием", тогда как состояние, когда указатель практически вступает в контакт с сенсорным экраном, будет называться "контактным касанием". Для положения, соответствующего бесконтактному касанию указателя на сенсорном экране, такое положение соответствует положению, где указатель обращен перпендикулярно к сенсорному экрану при бесконтактном касании указателя. Датчик приближения считывает бесконтактное касание и шаблоны бесконтактного касания (например, расстояние, направление, скорость, время, положение, состояние перемещения и т.д.). Информация, относящаяся к считанному бесконтактному касанию и считанным шаблонам бесконтактного касания, может выводиться на сенсорный экран.

[0044] Модуль 152 вывода звука может выводить звуковые данные, принятые от блока 110 беспроводной связи или сохраненные в запоминающем устройстве 160, в режиме приема вызова, в режиме осуществления вызова, в режиме записи, в режиме распознавания речи, в режиме приема вещания и так далее. Модуль 152 вывода звука может выводить звуковые сигналы, относящиеся к функциям, выполняемым в мобильном терминале 100, например, звуковое оповещение о принятом вызове или принятом сообщении, и так далее. Модуль 152 вывода звука может включать в себя приемник, динамик, зуммер и так далее.

[0045] Блок 153 тревоги выводит сигналы, сообщающие о возникновении событий от мобильного терминала 100. События, происходящие от мобильного терминала 100, могут включать в себя принятый вызов, принятое сообщение, ввод сигнала от клавиши, сенсорный ввод и так далее. Блок 153 тревоги может выводить не только видеосигналы или звуковые сигналы, но также другие типы сигналов, например, сигналы, сообщающие о возникновении событий с помощью вибрации. Поскольку видеосигналы или звуковые сигналы могут выводиться посредством блока 151 отображения или блока 152 вывода звука, блок 151 отображения и модуль 152 вывода звука можно категоризировать как часть блока 153 тревоги.

[0046] Тактильный модуль 154 формирует различные тактильные эффекты, которые может ощутить пользователь. Показательный пример тактильных эффектов, сформированных тактильным модулем 154, включает в себя вибрацию. Вибрация, сформированная тактильным модулем 154, может иметь управляемую интенсивность, управляемый шаблон и так далее. Например, разная вибрация может выводиться синтезированным образом или последовательным образом. Тактильный модуль 154 может формировать различные тактильные эффекты, включающие в себя не только вибрацию, но также размещение штырьков, движущихся вертикально относительно кожи, которой они касаются, силу нагнетания воздуха или силу всасывания воздуха через отверстие нагнетания или отверстие всасывания, касание поверхностью кожи, наличие или отсутствие контакта с электродом, эффекты от раздражителя, например, электростатическая сила, воспроизведение ощущения холода или тепла с использованием теплопоглотителя или теплоизлучателя, и т.п. Тактильный модуль 154 может конфигурироваться для передачи тактильных эффектов посредством прямого контакта с пользователем или мышечно-суставного чувства пользователя с использованием пальца или руки. Тактильный модуль 154 может быть реализован в количестве двух или более, в соответствии с конфигурацией мобильного терминала 100.

[0047] Запоминающее устройство 160 может хранить программу для обработки и управления контроллером 180. В качестве альтернативы запоминающее устройство 160 может временно хранить входные/выходные данные (например, данные телефонной книги, сообщения, звукозаписи, неподвижные изображения, видеоизображения и т.п.). Также запоминающее устройство 160 может хранить данные, имеющие отношение к различным шаблонам вибраций и звуков, выводимых при сенсорном вводе на сенсорном экране. Запоминающее устройство 160 может быть реализовано с использованием любого типа подходящего носителя информации, включая флэш-память, жесткий диск, мультимедийную карту микро-типа, карту памяти (например, SD или DX), оперативное запоминающее устройство (RAM), статическое оперативное запоминающее устройство (SRAM), постоянное запоминающее устройство (ROM), электрически стираемое программируемое постоянное запоминающее устройство (EEPROM), программируемое постоянное запоминающее устройство (PROM), магнитное запоминающее устройство, магнитный диск, оптический диск и т.п. Также мобильный терминал 100 может работать с веб-хранилищем, которое выполняет функцию хранения у запоминающего устройства 160 в Интернете.

[0048] Интерфейсный блок 170 в большинстве случаев может быть реализован для сопряжения мобильного терминала с внешними устройствами. Интерфейсный блок 170 может позволить прием данных от внешнего устройства, подачу энергии к каждому компоненту в мобильном терминале 100 или передачу данных от мобильного терминала 100 к внешнему устройству. Интерфейсный блок 170 может включать в себя, например, входы для проводной/беспроводной гарнитуры, входы внешнего зарядного устройства, порты для проводной/беспроводной передачи данных, порты для карт памяти, порты для соединения устройств, имеющих модуль идентификации, порты ввода/вывода звука, порты ввода/вывода видеоизображения, входы для наушников и т.п. Модуль идентификации может конфигурироваться в виде микросхемы для хранения различной информации, необходимой для аутентификации полномочия на использование мобильного терминала 100, которая может включать в себя Модуль идентификации пользователя (UIM), Модуль идентификации абонента (SIM) и т.п. Также устройство, имеющее модуль идентификации (в дальнейшем называемое "устройством идентификации"), может быть реализовано в некотором типе смарт-карты. Поэтому устройство идентификации может соединяться с мобильным терминалом 100 через порт. Также интерфейсный блок 170 может служить в качестве пути для поступления энергии от внешней подставки к мобильному терминалу 100, когда мобильный терминал 100 подключается к внешней подставке, или в качестве пути для переноса различных инструкций, введенных с подставки пользователем, в мобильный терминал 100. Такие различные инструкции или энергия, введенные из подставки, могут действовать в качестве сигналов для распознавания, что мобильный терминал точно установлен в подставке.

[0049] Контроллер 180 обычно управляет всеми действиями мобильного терминала 100. Например, контроллер 180 выполняет управление и обработку, ассоциированные с телефонными вызовами, передачами данных, видеовызовами и т.п. Контроллер 180 может включать в себя модуль 181 мультимедиа для воспроизведения мультимедийных данных. Модуль 181 мультимедиа может быть реализован объединенным с контроллером 180, либо может быть реализован отдельно от контроллера 180. Кроме того, контроллер 180 может выполнять обработку по распознаванию образов, чтобы распознавать рукописный или нарисованный ввод на сенсорном экране в качестве текста или изображения. Кроме того, контроллер 180 может реализовать состояние блокировки для ограничения ввода управляющей команды пользователя в приложения, когда состояние мобильного терминала удовлетворяет заданному условию. Кроме того, контроллер 180 может управлять экраном блокировки, отображенным в состоянии блокировки на основе считанного сенсорного ввода на блоке 151 отображения (в дальнейшем называемом "сенсорным экраном") в состоянии блокировки. Источник 190 питания принимает внешнюю энергию и внутреннюю энергию под управлением контроллера 180, чтобы предоставить энергию, необходимую различным компонентам.

[0050] Различные варианты осуществления, описанные в этом документе, могут быть реализованы на носителе, который можно считывать с помощью компьютера или аналогичного устройства с использованием программного обеспечения, аппаратных средств или любого их сочетания. Для аппаратной реализации они могут быть реализованы с использованием по меньшей мере одного из специализированных интегральных схем (ASIC), цифровых процессоров сигналов (DSP), цифровых устройств обработки сигналов (DSPD), программируемых логических устройств (PLD), программируемых пользователем вентильных матриц (FPGA), процессоров, контроллеров, микроконтроллеров, микропроцессоров, электрических блоков, спроектированных для выполнения описанных в этом документе функций. В некоторых случаях такие варианты осуществления могут быть реализованы в самом контроллере 180. Для программной реализации варианты осуществления, например, процедуры или функции, могут быть реализованы вместе с отдельными программными модулями. Программные модули могут выполнять по меньшей мере одну функцию или операцию, описанные в этом документе. Программные коды могут быть реализованы программным приложением, написанным на любом подходящем языке программирования. Программные коды могут храниться в запоминающем устройстве 160 и выполняться контроллером 180. Ниже будет описываться мобильный терминал в соответствии с вариантом осуществления настоящего раскрытия изобретения, описанный на фиг. 1, или мобильный терминал, расположенный вместе с составляющими элементами мобильного терминала, или структура мобильного терминала.

[0051] Фиг. 2a - вид в перспективе спереди, иллюстрирующий пример мобильного терминала 100, а фиг. 2b - вид в перспективе сзади, иллюстрирующий мобильный терминал 100 на фиг. 2a, в соответствии с вариантом осуществления настоящего раскрытия изобретения. Мобильный терминал 100, раскрытый в этом документе, снабжается корпусом терминала цельного типа (моноблок). Однако настоящее изобретение не ограничивается только этим типом терминала, а также применимо к различным конструкциям терминалов, например, раздвижного типа, раскладного типа, поворотного типа, откидного типа и т.п., в которых два и более корпуса объединяются друг с другом относительно подвижным способом.

[0052] В соответствии с чертежом, корпус терминала 100 (в дальнейшем называемый "корпусом") может включать в себя переднюю поверхность, боковую поверхность и заднюю поверхность. Кроме того, корпус может включать в себя оба края, образованные по направлению длины. Корпус 100 включает в себя кожух (оболочку, кожух, чехол и т.д.), формирующий внешний вид терминала. В этом варианте осуществления кожух может разделяться на переднюю поверхность 101 (в дальнейшем называемую "передним кожухом") и заднюю поверхность 102 (в дальнейшем называемую "задним кожухом"). Различные электронные компоненты могут встраиваться в пространство, образованное между передним кожухом 101 и задним кожухом 102. По меньшей мере один промежуточный кожух может дополнительно располагаться между передним кожухом 101 и задним кожухом 102. Кожухи могут быть сделаны путем литья под давлением из синтетической смолы или также могут быть сделаны из материала, например, нержавеющей стали (STS), титана (Ti) или т.п.

[0053] Блок 151 отображения, модуль 152 вывода звука, камера 121, блок 130 (130/131, 132) пользовательского ввода, микрофон 122, интерфейс 170 и т.п. могут располагаться на корпусе терминала 100, преимущественно на переднем кожухе 101. Блок 151 отображения занимает большую часть переднего кожуха 101. Блок 152 вывода звука и камера 121 располагаются в области рядом с одним из краев блока 151 отображения, а блок 131 пользовательского ввода и микрофон 122 располагаются в области рядом с другим его краем. Интерфейс 132 пользователя и интерфейс 170 и т.п. могут располагаться на боковой поверхности переднего кожуха 101 и заднего кожуха 102. Наоборот, микрофон 122 может располагаться на другом крае корпуса 100.

[0054] На блок 130 пользовательского ввода воздействуют для приема команды для управления работой портативного терминала 100, и он может включать в себя множество блоков 131, 132 манипуляций. Блоки 131, 132 манипуляций обычно могут обозначаться как манипулирующая часть, и любой способ может применяться, если он является тактильным способом, позволяющим пользователю выполнять манипуляцию с тактильным ощущением. Контент, вводимый блоками 131, 132 манипуляций, может задаваться различными способами. Например, первый блок 131 манипуляций может принимать такую команду, как начало, завершение, прокрутка или т.п., а второй блок 132 манипуляций может принимать такую команду, как регулировка уровня громкости, выводимого из блока 152 вывода звука, или переключение в режим распознавания касаний у блока 151 отображения.

[0055] Кроме того, блок 152' вывода звука может дополнительно располагаться на задней поверхности корпуса терминала. Блок 152' вывода звука вместе блоком 152 вывода звука (см. фиг. 2a) может реализовывать функцию стереофонии, и он также может использоваться для реализации режима громкой связи во время телефонного вызова. Кроме того, источник 190 питания для подачи энергии в мобильный терминал 100 может устанавливаться на задней поверхности корпуса терминала. Источник 190 питания может конфигурироваться для встраивания в корпус терминала или непосредственно отсоединяемым от корпуса терминала. Кроме того, сенсорная панель 135 для обнаружения касания может дополнительно устанавливаться на заднем кожухе 102. Сенсорная панель 135 может конфигурироваться имеющей прозрачный тип аналогично блоку 151 отображения. В этом случае, если блок 151 отображения конфигурируется для вывода визуальной информации по обеим сторонам блока 151 отображения, то визуальная информация также может распознаваться через сенсорную панель 135. Информация, выводимая из обеих сторон, может управляться сенсорной панелью 135. К тому же на сенсорную панель 135 может дополнительно устанавливаться дисплей, а сенсорный экран также может располагаться на заднем кожухе 102.

[0056] Кроме того, камера 121' может дополнительно устанавливаться на заднем кожухе 102 корпуса терминала. Камера 121' имеет направление съемки изображения, которое практически противоположно направлению камеры 121 (см. фиг. 2a), и может иметь отличные пиксели от пикселей первого блока 121 ввода видеосигнала. Например, камера 121 предпочтительно может иметь относительно небольшое количество пикселей, достаточное, чтобы не вызывать затруднения, когда пользователь снимает свое лицо и отправляет его другому абоненту во время видеовызова или т.п., а камера 121' имеет относительно большое количество пикселей, поскольку пользователь часто снимает обычный объект, который не отправляется немедленно. Камеры 121' могут предоставляться в корпусе терминала 100 поворотным и выдвижным способом. Кроме того, вспышка 123 и зеркало 124 дополнительно могут располагаться рядом с камерой 121'. Вспышка 123 направляет свет на объект при съемке объекта с помощью камеры 121'. Зеркало позволяет пользователю смотреть на свое лицо или т.п. отраженным способом при съемке самого себя (в режиме автопортрета) с использованием камеры 121'.

[0057] Сенсорная панель 135 для обнаружения касания может дополнительно устанавливаться на заднем кожухе 102. Сенсорная панель 135 может конфигурироваться имеющей прозрачный тип аналогично блоку 151 отображения. В этом случае, если блок 151 отображения конфигурируется для вывода визуальной информации по обеим сторонам блока 151 отображения, то визуальная информация также может распознаваться через сенсорную панель 135. Информация, выводимая из обеих сторон, может управляться сенсорной панелью 135. К тому же на сенсорную панель 135 может дополнительно устанавливаться дисплей, а сенсорный экран также может располагаться на заднем кожухе 102. Сенсорная панель 135 работает в соотношении взаимности с блоком 151 отображения в переднем кожухе 101. Сенсорная панель 135 может располагаться параллельно на задней стороне блока 151 отображения. Сенсорная панель 135 может иметь такой же или меньший размер, чем у блока 151 отображения.

[0058] Фиг. 3 иллюстрирует последовательность операций типового способа, выполняемого мобильным терминалом 100 для автоматического распознавания и съемки объекта в соответствии с одним вариантом осуществления. На этапе 302, который будет проиллюстрирован на фиг. 4a-6, одно или несколько изображений объектов регистрируются в мобильном терминале 100. На этапе 304, который проиллюстрирован на фиг. 7a-11c, по меньшей мере один предполагаемый объект выбирается мобильным терминалом для автоматического распознавания. На этапе 306, который проиллюстрирован на фиг. 12, объект автоматически распознается мобильным терминалом 100. На этапе 308, который проиллюстрирован на фиг. 15 и 16, изображение предполагаемого объекта снимается (захватывается) мобильным терминалом 100. Также принимается во внимание, что способы, раскрытые на фиг. 3, могут быть реализованы в виде машиночитаемого носителя, воплощающего набор команд, которые при выполнении машиной побуждают машину выполнить любую из операций, раскрытых в этом документе.

[0059] Фиг. 4a и 4b иллюстрируют типовые изображения мобильного терминала 100, регистрирующего объект для автоматического распознавания и съемки в соответствии с одним вариантом осуществления. В одном варианте осуществления одно или несколько изображений объектов предварительно регистрируются в таблицу соответствий, сохраненную в запоминающем устройстве, посредством идентификации изображений с помощью метаданных. На фиг. 4a пользователь может выбрать изображения объектов из совокупности изображений объектов (например, фотоальбома), сохраненной в мобильном терминале 100. В качестве альтернативы изображения могут снабжаться приложением, выполняющим различные варианты осуществления, описанные в этом документе. Кроме того, изображения могут загружаться через Интернет или отправляться пользователем. На фиг. 4a одно из изображений (например, изображение 406 самолета) предварительно выбирается из числа изображений, которые включают в себя изображения 404-408. Когда изображение 406 предварительно выбирается для регистрации, рамка 410 выбора отображается для отметки выбора изображения 406.

[0060] Предварительно выбранное изображение 406 можно подтвердить нажатием главной кнопки 402 или нажатием на область в рамке 410 выбора. Как только изображение 406 выбирается для регистрации, изображение 406 можно зарегистрировать в таблице соответствий, сохраненной в запоминающем устройстве 160, путем сопоставления изображения 406 с соответствующими метаданными (например, названием 412). На фиг. 4b вводится название 412, например, путем использования клавиатуры, чтобы сопоставить изображение 406 самолета с названием 412. В другой типовой реализации название 412 может произноситься, когда изображение 406 отображается на блоке 151 отображения. В одном варианте осуществления изображение 406 содержит фотографию объекта, контур объекта и 3-мерное изображение объекта.

[0061] Фиг. 5a-5c иллюстрируют типовые изображения мобильного терминала 100, регистрирующего выбранный из изображения объект в соответствии с одним вариантом осуществления. В одном варианте осуществления один или несколько объектов предварительно регистрируются в таблице соответствий, сохраненной в запоминающем устройстве 160, посредством выбора части изображения, содержащей множество объектов. На фиг. 5a изображение 502, содержащее несколько объектов, выбирается для дальнейшей обработки. На фиг. 5b выбирается объект из числа нескольких объектов, который указывается в виде выбранной части 504, отмеченной рамкой 506 выбора, и подтверждается (например, путем нажатия главной кнопки 402 или путем касания рамки 506 выбора). На фиг. 5c, как только выбранная часть 504 подтверждается для регистрации, изображение 508 выбранной части 504 можно зарегистрировать в таблице соответствий, сохраненной в запоминающем устройстве 160, путем сопоставления изображения 508 с соответствующими метаданными (например, названием 510). Название 510 может вводиться путем набора названия 510 (например, "слон"), которое соответствует изображению 508. В другой типовой реализации название 510 может произноситься, когда изображение 508 отображается на блоке 151 отображения.

[0062] Фиг. 6 иллюстрирует типовые изображения мобильного терминала 100, регистрирующего несколько изображений объекта в соответствии с одним вариантом осуществления. В одном варианте осуществления пользователь может выбрать несколько изображений объекта из совокупности изображений (например, фотоальбома), сохраненной в мобильном терминале 100, для регистрации в метаданных. На фиг. 6 изображение 602, изображение 604 и изображение 606 самолета предварительно выбираются для регистрации. Затем изображение 602, изображение 604 и изображение 606 могут быть зарегистрированы в таблице соответствий, сохраненной в запоминающем устройстве 160, путем сопоставления изображений с соответствующими метаданными (например, названием 606). В одной типовой реализации название 606 (например, самолет) вводится, например, с использованием клавиатуры, чтобы сопоставить изображения с названием 606. В другой типовой реализации название 606 может произноситься, когда изображения отображаются на блоке 151 отображения.

[0063] Фиг. 7a-7c иллюстрируют типовые изображения мобильного терминала 100, выбирающего предполагаемый объект в соответствии с одним вариантом осуществления. На фиг. 7a приложение для автоматического распознавания и съемки предполагаемого объекта запускается путем нажатия пиктограммы 702, представляющей это приложение (например, A-Focus), с помощью сенсорного ввода 704. На фиг. 7b название 706 предполагаемого объекта (например, дельфина) вводится с использованием виртуальной клавиатуры 708. На фиг. 7c, как только вводится название 706, изображение 710 дельфина появляется на блоке 151 отображения для указания и/или подтверждения выбора предполагаемого объекта.

[0064] Фиг. 8a-8c иллюстрируют другие типовые изображения мобильного терминала 100, выбирающего предполагаемый объект в соответствии с одним вариантом осуществления. На фиг. 8a приложение для автоматического распознавания и съемки предполагаемого объекта запускается путем нажатия пиктограммы 702, представляющей это приложение (например, A-Focus), с помощью сенсорного ввода 704. На фиг. 8b миниатюрные изображения 804 для изображений объектов, зарегистрированных в мобильном устройстве 100, отображаются на блоке 151 отображения. Затем миниатюрное изображение 802 предполагаемого объекта (например, дельфина) выбирается путем касания миниатюрного изображения 802 с использованием сенсорного ввода. На фиг. 8c, как только миниатюрное изображение 802 выбирается и/или подтверждается, изображение 710 дельфина появляется на блоке 151 отображения для указания и/или подтверждения выбора предполагаемого объекта.

[0065] Фиг. 9a и 9b иллюстрируют типовые изображения мобильного терминала 100, выбирающего один или несколько предполагаемых объектов и условие совпадения в соответствии с одним вариантом осуществления. В одном варианте осуществления несколько предполагаемых объектов и условие совпадения выбираются для автоматического распознавания и съемки. На фиг. 9a, когда выбираются два предполагаемых объекта, изображения двух предполагаемых объектов, которые включают в себя изображение 710 дельфина и изображение 902 надувного мяча, отображаются на блоке 151 отображения. К тому же на блоке 151 отображения отображаются условия совпадения, которые включают в себя кнопку 904, представляющую условие "AND" ("И"), и кнопку 906, представляющую условие "OR" ("ИЛИ").

[0066] В одной типовой реализации, когда выбирается кнопка 904 AND, каждый из двух предполагаемых объектов нужно распознать выше порогового значения (например, с коэффициентом распознавания в 70 процентов). Например, когда первый объект и второй объект распознаются мобильным терминалом 100 как совпадающие с двумя предполагаемыми объектами, представленными изображением 702 и изображением 902, с коэффициентом распознавания 75% и 67% соответственно, ни первый объект, ни второй объект не будут сняты мобильным терминалом 100, когда кнопка 904 AND выбрана в качестве условия совпадения. В другом примере, когда первый объект и второй объект распознаются мобильным терминалом 100 как совпадающие с двумя предполагаемыми объектами, представленными изображением 702 и изображением 902, с коэффициентом распознавания 75% и 67% соответственно, только первый объект будет снят мобильным терминалом 100, когда кнопка 906 OR выбрана в качестве условия совпадения. Принимается во внимание, что для автоматического распознавания и съемки можно выбирать больше двух предполагаемых объектов. Дополнительно принимается во внимание, что может быть более двух условий совпадения, которые можно выбирать пользователю мобильного терминала 100, и пороговый уровень для распознавания предполагаемого объекта может конфигурироваться пользователем.

[0067] На фиг. 9b, когда один предполагаемый объект выбирается путем выбора изображения 908 женщины, то на блоке 151 отображения отображаются изображение 908, характеристика 910 женщины (например, знак ILY (Я люблю тебя)) и условия совпадения, которые включают в себя кнопку 904, представляющую условие "AND", и кнопку 906, представляющую условие "OR". В одной типовой реализации, когда выбирается кнопка 904 AND, предполагаемый объект, мигающий знаком ILY, нужно распознать выше порогового значения (например, с коэффициентом распознавания в 70 процентов). Например, когда предполагаемый объект распознается мобильным терминалом 100 с коэффициентом распознавания 75%, но знак ILY распознается менее чем на 70%, мобильный терминал 100 не снимет предполагаемый объект, когда кнопка 904 AND выбрана в качестве условия совпадения. В другом примере, когда предполагаемый объект распознается мобильным терминалом 100 с коэффициентом распознавания 75%, но знак ILY распознается менее чем на 70%, мобильный терминал 100 снимет предполагаемый объект, когда кнопка 906 OR выбрана в качестве условия совпадения. Принимается во внимание, что для автоматического распознавания и съемки можно выбирать больше двух предполагаемых объектов. Дополнительно принимается во внимание, что может быть более двух условий совпадения, которые можно выбирать пользователю мобильного терминала 100, и пороговый уровень для распознавания предполагаемого объекта может конфигурироваться пользователем. Кроме того, принимается во внимание, что может быть более двух характеристик, которые можно выбирать пользователю мобильного терминала 100, и пороговый уровень для распознавания предполагаемого объекта может конфигурироваться пользователем. В одном варианте осуществления характеристика содержит выражение лица (например, подмигивание, улыбку и т.д.), жест, движение и т.д.

[0068] Фиг. 10a-10c иллюстрируют типовые изображения мобильного терминала 100, выбирающего предполагаемый объект из группы миниатюрных изображений, ассоциированных с искомым словом, в соответствии с одним вариантом осуществления. На фиг. 10a мобильным терминалом 100 принимается искомое слово (например, название 1002) для выбора одного или нескольких изображений предполагаемого объекта. В одной типовой реализации пользователь может набрать название 1002 с использованием клавиатуры 708. В другой типовой реализации пользователь может ввести название 1002 с использованием речевой команды. На фиг. 10b один или несколько возможных миниатюрных изображений 1004, ассоциированных с искомым словом, отображаются на блоке 151 отображения в ответ на прием искомого слова. К тому же, когда миниатюрное изображение 802 дельфина выбирается с помощью пользовательского ввода, изображение 710 дельфина формируется в качестве изображения предполагаемого объекта.

[0069] Фиг. 11a-11c иллюстрируют типовые изображения мобильного терминала 100, выбирающего предполагаемый объект из группы миниатюрных изображений, ассоциированных с местоположением, в соответствии с одним вариантом осуществления. На фиг. 11a, когда приложение для автоматического распознавания и съемки предполагаемого объекта выполняется путем касания пиктограммы 702, местоположение мобильного терминала 100 может определяться с использованием модуля связи (например, модуля GPS) в мобильном терминале 100. Как проиллюстрировано на фиг. 11b, отображается несколько возможных миниатюрных изображений 1004, ассоциированных с местоположением. Например, когда модуль GPS в мобильном терминале 100 определяет, что настоящее местоположение мобильного терминала 100 находится в зоопарке или рядом с ним, миниатюрные изображения 1004, ассоциированные с зоопарком, отображаются на блоке 151 отображения. На фиг. 11c, когда миниатюрное изображение 802 дельфина выбирается пользователем, изображение 710 дельфина отображается в качестве изображения предполагаемого объекта.

[0070] Фиг. 12 иллюстрирует типовое изображение мобильного терминала 100, автоматически распознающего предполагаемый объект в соответствии с одним вариантом осуществления. На фиг. 12, чтобы автоматически распознать объект 1202 (например, прыгающий дельфин), объект 1202 сначала сравнивается с изображением 710 дельфина, которое ранее задано в качестве предполагаемого объекта. Когда коэффициент распознавания объекта 1202 для совпадения с предполагаемым объектом меньше порогового уровня, мобильный терминал 100 обращается в Интернет для получения дополнительной информации из внешних источников (например, от сервера 1206A-1206N), чтобы помочь распознаванию объекта 1202. В этом процессе изображение объекта 1202 можно сравнить с одним или несколькими изображениями, ассоциированными с изображением предполагаемого объекта. Когда изображение объекта 1202 совпадает выше порогового значения с сочетанием изображения предполагаемого объекта и одного или нескольких изображений или другой информацией, ассоциированных с изображением предполагаемого объекта, формируется указание совпадения.

[0071] Информация, имеющая отношение к сопоставлению объекта с его предполагаемым объектом, может конфигурироваться в виде базы данных. База данных может обновляться посредством обучения, происходящего в течение многочисленных повторений для распознавания объектов и сравнения объектов с предполагаемыми объектами, сконфигурированными в мобильном терминале 100, а также с дополнительной информацией из внешних источников (например, из Интернета). В результате обучения можно постепенно улучшать успешное сопоставление объекта с предполагаемым объектом, так что можно соответственно снизить пороговый уровень для распознавания объекта как предполагаемого объекта.

[0072] Фиг. 13a и 13b иллюстрируют типовые изображения мобильного терминала 100, автоматически распознающего два предполагаемых объекта в соответствии с одним вариантом осуществления. На фиг. 13a имеется объект 1302 (например, прыгающий дельфин) и объект 1304 (например, надувной круг или автомобильная камера). Если предполагаемые объекты выбирались в соответствии с фиг. 9a для автоматического распознавания и съемки, и выбрано условие AND, то объект 1302 может быть распознан, когда объект 1302 сравнивается с первым предполагаемым объектом (например, изображением 710 дельфина), тогда как объект 1304 может быть не распознан, когда сравнивается со вторым предполагаемым объектом (например, изображением 902 надувного мяча). Соответственно, нельзя получить никакую фотографию. Однако, если вместо этого выбрано условие OR, то можно получить только фотографию объекта 1302.

[0073] На фиг. 13b имеется объект 1306 (например, частично погруженный дельфин) и объект 1308 (например, надувной мяч). Если предполагаемые объекты выбирались в соответствии с фиг. 9a для автоматического распознавания и съемки и выбрано либо условие AND, либо условие OR, то объект 1306 и объект 1308 можно распознать, когда объект 1306 и объект 1308 сравниваются и совпадают с первым предполагаемым объектом (например, изображением 710 дельфина) и вторым предполагаемым объектом (например, изображением 902 надувного мяча), соответственно. Соответственно, потом можно получить фотографию объекта 1306 и объекта 1308. В одной типовой реализации фотографию можно получить, когда указание того, что имеется совпадение между объектом (например, объектом 1302, объектом 1304, объектом 1306 или объектом 1308) и предполагаемым объектом (например, изображением 710 дельфина или изображением 902 надувного мяча) подтверждается путем нажатия главной кнопки 402 мобильного терминала 100, путем касания экрана или блока 151 отображения или путем произнесения речевой команды.

[0074] Фиг. 14a-14d иллюстрируют типовые изображения мобильного терминала 100, отслеживающего и снимающего предполагаемый объект в соответствии с одним вариантом осуществления. В одном варианте осуществления при распознавании объекта в качестве предполагаемого объекта на блоке 151 отображения отображается указание совпадения, отмечающее объект. В одной типовой реализации указание совпадения содержит пунктирную линию, отличительный цвет, выразительную отметку, предупреждающий звук, вибрацию или предупреждающий световой сигнал. На фиг. 14a, когда объект 1402 (например, самолет), отображенный на блоке 151 отображения, совпадает с предполагаемым объектом сверх порогового уровня, объект 1402 можно отметить следящей рамкой 1404 из пунктирных линий. К тому же мобильный терминал 100 может сформировать вибрацию, предупреждающий звук и/или мигающий свет.

[0075] В одном варианте осуществления, когда формируется указание совпадения, автоматически выполняется подтверждение указания совпадения. В одном варианте осуществления подтверждение указания совпадения выполняется в ответ на его пользовательский ввод. На фиг. 14b подтверждение указания совпадения выполняется путем нажатия главной кнопки 402 с использованием сенсорного ввода 1406. В результате снимается изображение объекта 1402. На фиг. 14c выполняется подтверждение указания совпадения для съемки изображения объекта 1402 путем касания экрана или блока 151 отображения, который отображает изображение объекта 1402. В результате снимается изображение объекта 1402. На фиг. 14d выполняется подтверждение указания совпадения для съемки изображения объекта 1402 путем касания области внутри следящей рамки 1404, отмечающей изображение объекта 1402. В одной типовой реализации только изображение объекта 1402 в следящей рамке 1402 может быть снято автоматически или при подтверждении указания совпадения. В другой типовой реализации изображение объекта 1402, а также его окружение, отображенное на блоке 151 отображения, может быть снято автоматически или при подтверждении указания совпадения.

[0076] Фиг. 15 иллюстрирует типовое изображение мобильного терминала 100, автоматически распознающего предполагаемый объект, и характеристику предполагаемого объекта в соответствии с одним вариантом осуществления. В одном варианте осуществления при распознавании объекта в качестве предполагаемого объекта и характеристики объекта (например, знака ILY) на блоке отображения отображаются указания совпадения, отмечающие объект и характеристику. В одной типовой реализации указание совпадения содержит пунктирную линию, отличительный цвет, выразительную отметку, предупреждающий звук, вибрацию или предупреждающий световой сигнал.

[0077] На фиг. 15, когда объект 1502 (например, женщина), отображенный на блоке 151 отображения, совпадает с предполагаемым объектом сверх порогового уровня, объект 1502 отмечается пунктирными линиями. Более того, когда характеристика 1504 объекта 1502 совпадает с предполагаемой характеристикой предполагаемого объекта, характеристика 1504 отмечается пунктирными линиями. В качестве альтернативы, рамка из пунктирных линий может окружать объект 1502 и характеристику 1504, когда они совпадают с предполагаемым объектом и характеристикой. К тому же мобильный терминал 100 может сформировать вибрацию, предупреждающий звук и/или мигающий свет. Как только объект 1502 и характеристика 1504 распознаются как совпадающие с предполагаемым объектом и характеристикой, изображение объекта 1502 и характеристики 1504 может быть снято автоматически или при подтверждении указания совпадения.

[0078] Фиг. 16 иллюстрирует последовательность операций типового способа, выполняемого мобильным терминалом 100 для автоматического распознавания и съемки объекта в соответствии с одним вариантом осуществления. На этапе 1602 одно или несколько изображений предполагаемого объекта задается или выбирается в ответ на его пользовательский ввод. На этапе 1604 изображение объекта принимается посредством модуля камеры в мобильном терминале. На этапе 1606 формируется указание совпадения, когда изображение объекта совпадает по меньшей мере с одним изображением предполагаемого объекта сверх порогового значения. На этапе 1608 изображение объекта снимается при подтверждении указания совпадения.

[0079] В одном варианте осуществления изображение (изображения) предполагаемого объекта задается путем приема искомого слова для выбора изображения (изображений) предполагаемого объекта, отображения множества возможных миниатюрных изображений, ассоциированных с искомым словом, и формирования изображения предполагаемого объекта (объектов) в ответ на ввод, выбирающий по меньшей мере одно возможное миниатюрное изображение, соответствующее изображению (изображениям) предполагаемого объекта. В одном варианте осуществления изображение (изображения) предполагаемого объекта задается путем определения местоположения мобильного терминала с использованием модуля GPS в мобильном терминале, отображения множества возможных миниатюрных изображений, ассоциированных с местоположением, формирования изображения (изображений) предполагаемого объекта в ответ на ввод, выбирающий по меньшей мере одно возможное миниатюрное изображение, соответствующее изображению (изображениям) предполагаемого объекта.

[0080] В одном варианте осуществления указание совпадения формируется путем обращения в Интернет, когда изображение объекта не совпадает с изображением (изображениями) предполагаемого объекта сверх порогового значения, и сравнения изображения объекта по меньшей мере с одним изображением, ассоциированным с изображением (изображениями) предполагаемого объекта, когда по меньшей мере к одному изображению обращаются через Интернет. Кроме того, указание совпадения формируется, когда изображение объекта совпадает сверх порогового значения с сочетанием изображения (изображений) предполагаемого объекта и по меньшей мере одного изображения, ассоциированного с изображением (изображениями) предполагаемого объекта.

[0081] Также принимается во внимание, что способы, раскрытые на фиг. 16, могут быть реализованы в виде машиночитаемого носителя, воплощающего набор команд, которые при выполнении машиной побуждают машину выполнить любую из операций, раскрытых в этом документе.

[0082] Фиг. 17 иллюстрирует последовательность операций другого типового способа, выполняемого мобильным терминалом 100 для автоматического распознавания и съемки объекта в соответствии с одним вариантом осуществления. На этапе 1702 изображение первого предполагаемого объекта, изображение второго предполагаемого объекта и условие совпадения задаются или выбираются в ответ на их пользовательский ввод. На этапе 1704 изображение первого объекта и изображение второго объекта принимаются посредством модуля камеры в мобильном терминале. На этапе 1706 указание совпадения формируется, когда изображение первого объекта и изображение второго объекта совпадают с изображением первого предполагаемого объекта и изображением второго предполагаемого объекта согласно условию совпадения. На этапе 1708 изображение объекта снимается при подтверждении указания совпадения.

[0083] В одном варианте осуществления условие совпадения выполняется, когда изображение первого объекта совпадает с изображением первого предполагаемого объекта сверх первого порогового значения и когда изображение второго объекта совпадает с изображением второго предполагаемого объекта сверх второго порогового значения. В одном варианте осуществления условие совпадения выполняется, когда изображение первого объекта совпадает с изображением первого предполагаемого объекта сверх первого порогового значения, либо когда изображение второго объекта совпадает с изображением второго предполагаемого объекта сверх второго порогового значения.

[0084] Также принимается во внимание, что способы, раскрытые на фиг. 17, могут быть реализованы в виде машиночитаемого носителя, воплощающего набор команд, которые при выполнении машиной побуждают машину выполнить любую из операций, раскрытых в этом документе.

[0085] Различные устройства, модули, анализаторы, генераторы и т.д., описанные в этом документе, могут быть задействованы и управляться с использованием схем аппаратных средств (например, логических схем на основе комплементарного металлооксидного полупроводника (CMOS)), микропрограммного обеспечения, программного обеспечения и/или любого сочетания аппаратных средств, микропрограммного обеспечения и/или программного обеспечения (например, воплощаться в машиночитаемом носителе). Более того, различные электрические структуры и способы могут быть воплощены с использованием транзисторов, логических вентилей и/или электрических схем (например, специализированной интегральной схемы (ASIC)). Хотя настоящие варианты осуществления описаны со ссылкой на определенные примерные варианты осуществления, станет очевидно, что различные модификации и изменения можно внести в эти варианты осуществления без отклонения от расширенной сущности и объема различных вариантов осуществления.

Группа изобретений относится к способам и системам управления мобильными устройствами. Техническим результатом является обеспечение автоматического распознавания и съемки объекта. Мобильный терминал содержит блок отображения, запоминающее устройство, модуль камеры и контроллер. Контроллер конфигурируется для задания по меньшей мере одного изображения предполагаемого объекта в ответ на его пользовательский ввод, приема изображения объекта посредством модуля камеры, формирования указания совпадения, когда степень совпадения изображения объекта с этим по меньшей мере одним изображением предполагаемого объекта превышает пороговое значение, посредством обращения в Интернет, когда степень соответствия изображения объекта с упомянутым по меньшей мере одним изображением предполагаемого объекта не превышает порогового значения, и сравнения изображения объекта с по меньшей мере одним изображением, ассоциированным с упомянутым по меньшей мере одним изображением предполагаемого объекта, когда к упомянутому по меньшей мере одному изображению обращаются через Интернет, и съемки изображения объекта при подтверждении указания совпадения. 2 н. и 11 з.п. ф-лы, 34 ил.

1. Мобильный терминал, содержащий:
блок отображения;
запоминающее устройство;
модуль камеры; и
контроллер, сконфигурированный:
задавать по меньшей мере одно изображение предполагаемого объекта в ответ на его пользовательский ввод;
принимать изображение объекта посредством модуля камеры;
формировать указание совпадения, когда степень совпадения изображения объекта с упомянутым по меньшей мере одним изображением предполагаемого объекта превышает пороговое значение, посредством обращения в Интернет, когда степень соответствия изображения объекта с упомянутым по меньшей мере одним изображением предполагаемого объекта не превышает порогового значения, и сравнения изображения объекта с по меньшей мере одним изображением, ассоциированным с упомянутым по меньшей мере одним изображением предполагаемого объекта, когда к упомянутому по меньшей мере одному изображению обращаются через Интернет, при этом указание совпадения формируется, когда степень совпадения изображения объекта с сочетанием упомянутого по меньшей мере одного изображения предполагаемого объекта и упомянутого по меньшей мере одного изображения, ассоциированного с данным по меньшей мере одним изображением предполагаемого объекта, превосходит пороговое значение; и
осуществлять съемку изображения объекта при подтверждении указания совпадения.

2. Мобильный терминал по п.1, в котором упомянутое по меньшей мере одно изображение предполагаемого объекта предварительно регистрируется в таблице соответствий, сохраненной в запоминающем устройстве, посредством идентификации упомянутого по меньшей мере одного изображения предполагаемого объекта с помощью метаданных.

3. Мобильный терминал по п.1, в котором упомянутое по меньшей мере одно изображение предполагаемого объекта предварительно регистрируется в таблице соответствий, сохраненной в запоминающем устройстве, посредством выбора части изображения, содержащей множество объектов.

4. Мобильный терминал по п.1, в котором упомянутое по меньшей мере одно изображение предполагаемого объекта содержит по меньшей мере два изображения предполагаемого объекта, поставленные в соответствие метаданным.

5. Мобильный терминал по п.1, в котором подтверждение указания совпадения выполняется автоматически при распознавании указания совпадения.

6. Мобильный терминал по п.1, в котором подтверждение указания совпадения выполняется в ответ на его пользовательский ввод.

7. Способ автоматического распознавания и съемки объекта мобильным терминалом, содержащий этапы, на которых:
задают по меньшей мере одно изображение предполагаемого объекта в ответ на его пользовательский ввод;
принимают изображение объекта посредством модуля камеры в мобильном терминале;
формируют указание совпадения, когда степень совпадения изображения объекта с упомянутым по меньшей мере одним изображением предполагаемого объекта превышает пороговое значение, при этом формирование указания совпадения содержит этапы, на которых:
обращаются в Интернет, когда степень соответствия изображения объекта с упомянутым по меньшей мере одним изображением предполагаемого объекта не превышает порогового значения; и
сравнивают изображения объекта с по меньшей мере одним изображением, ассоциированным с упомянутым по меньшей мере одним изображением предполагаемого объекта, когда к упомянутому по меньшей мере одному изображению обращаются через Интернет, при этом указание совпадения формируется, когда степень совпадения изображения объекта с сочетанием упомянутого по меньшей мере одного изображения предполагаемого объекта и упомянутого по меньшей мере одного изображения, ассоциированного с данным по меньшей мере одним изображением предполагаемого объекта, превосходит пороговое значение; и
снимают изображение объекта при подтверждении указания совпадения.

8. Способ по п.7, в котором этап, на котором задают по меньшей мере одно изображение предполагаемого объекта, содержит этапы, на которых:
принимают искомое слово для выбора упомянутого по меньшей мере одного изображения предполагаемого объекта;
отображают множество возможных миниатюрных изображений, ассоциированных с искомым словом; и
формируют упомянутое по меньшей мере одно изображение предполагаемого объекта в ответ на ввод, выбирающий по меньшей мере одно возможное миниатюрное изображение, соответствующее упомянутому по меньшей мере одному изображению предполагаемого объекта.

9. Способ по п.7, в котором этап, на котором задают по меньшей мере одно изображение предполагаемого объекта, содержит этапы, на которых:
определяют местоположение мобильного терминала с использованием модуля GPS в мобильном терминале;
отображают множество возможных миниатюрных изображений, ассоциированных с местоположением; и
формируют упомянутое по меньшей мере одно изображение предполагаемого объекта в ответ на ввод, выбирающий по меньшей мере одно возможное миниатюрное изображение, соответствующее упомянутому по меньшей мере одному изображению предполагаемого объекта.

10. Способ по п.7, в котором упомянутое по меньшей мере одно изображение предполагаемого объекта предварительно регистрируется в таблице соответствий, сохраненной в запоминающем устройстве, посредством идентификации упомянутого по меньшей мере одного изображения предполагаемого объекта с помощью метаданных.

11. Способ по п.7, в котором упомянутое по меньшей мере одно изображение предполагаемого объекта содержит по меньшей мере два изображения предполагаемого объекта, поставленные в соответствие метаданным.

12. Способ по п.7, в котором подтверждение указания совпадения выполняется автоматически при распознавании указания совпадения.

13. Способ по п.7, в котором подтверждение указания совпадения выполняется в ответ на его пользовательский ввод.