Область техники, к которой относится изобретение
Настоящая заявка относится, в общем, к области мобильных оконечных устройств и, в частности, к способу управления частотой кадров записи и соответствующему устройству.
Уровень техники
В настоящее время фотокамеры стали одним из компонентов стандартной конфигурации мобильных оконечных устройств, и съемка изображений и видео с использованием фотокамер стала стилем жизни пользователей. Из-за особой физиологической структуры глаза человека, если частота кадров видеоизображения, просматриваемого людьми, превышает 24 кадра в секунду, видео считается плавным. Это явление называется зрительным постоянством. В настоящее время, когда используется функция записи мобильного терминала, частота кадров видео, как правило, является фиксированной. Другими словами, частоту кадров записи нельзя регулировать в процессе фотографирования. Таким образом, если частота кадров записи является чрезмерно низкой, в видео может появляться размытие движения, так как период времени экспозиции каждого кадра изображения является относительно большим. Если частота кадров записи является относительно высокой, и сценарий фотографирования является относительно темным, из-за неадекватного периода времени экспозиции снимаемого видеоизображения все видеоизображение будет темным, и детали будут нечеткими.
Раскрытие сущности изобретения
Настоящая заявка обеспечивает способ управления частотой кадров записи и соответствующее устройство для автоматической регулировки частоты кадров, которая используется во время видеозаписи, тем самым повышая качество видеоизображения.
Согласно первому аспекту настоящая заявка обеспечивает способ управления частотой кадров записи, включающий в себя следующие этапы: сначала мобильный терминал принимает первый пользовательский ввод, и, в ответ на первый пользовательский ввод, мобильный терминал начинает запись видео. Затем мобильный терминал выполняет сбор N видеокадров сценария фотографирования на первой частоте кадров. Затем мобильный терминал определяет интенсивность света в сценарии фотографирования на основе собранных N видеокадров и автоматически регулирует частоту кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования, где частота кадров записи, полученная после регулировки, отличается от первой частоты кадров, и N является положительным целым числом, большим 2. Кроме того, мобильный терминал продолжает сбор видеокадра сценария фотографирования на основе частоты кадров записи, полученной после регулировки. Наконец, мобильный терминал генерирует видеофайл на основе видеокадров, которые собираются на первой частоте кадров, и видеокадра, который собирается на основе частоты кадров записи, полученной после регулировки.
Таким образом, мобильный терминал может автоматически управлять частотой кадров записи на основе интенсивности света в сценарии фотографирования. Когда начинается запись видео, мобильный терминал выполняет по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Затем, когда интенсивность света в сценарии фотографирования является высокой, мобильный терминал может выполнять сбор видеокадра на второй частоте кадров (например, 60 кадров в секунду). Когда мобильный терминал определяет то, что интенсивность света в сценарии фотографирования является слабой, мобильный терминал может выполнять сбор видеокадра с третьей частотой кадров (например, 24 кадра в секунду). Когда мобильный терминал определяет то, что интенсивность света в сценарии фотографирования является средней, мобильный терминал может продолжить сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Динамическая регулировка частоты кадров на основе интенсивности света в сценарии фотографирования позволяет повысить яркость изображения видео, снятого мобильным терминалом в относительно темном сценарии фотографирования, и повысить плавность изображения видео, снятого мобильным терминалом, в сценарии относительно яркого фотографирования, для повышения качества видеоизображения.
В возможной реализации определение, мобильным терминалом, интенсивности света в сценарии фотографирования на основе собранных N видеокадров включает в себя: определение мобильным терминалом того, меньше ли параметры экспозиции N видеокадров, чем первое пороговое значение параметра экспозиции; и, если "Да", определение мобильным терминалом того, что интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света.
В возможной реализации определение, мобильным терминалом, интенсивности света в сценарии фотографирования на основе собранных N видеокадров включает в себя: определение мобильным терминалом того, превышают ли параметры экспозиции N видеокадров второе пороговое значение параметра экспозиции; и, если "Да", определение мобильным терминалом того, что интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света.
В возможной реализации автоматическая регулировка частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования включает в себя: настройку, мобильным терминалом, частоты кадров записи мобильного терминала на вторую частоту кадров, когда интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света, где вторая частота кадров больше, чем первая частота кадров. Таким образом, когда интенсивность света в сценарии фотографирования является относительно высокой, экспозиция видео, снятого мобильным терминалом, является адекватной, и мобильный терминал может увеличить частоту кадров снимаемого видео. Из-за увеличения частоты кадров количество кадров изображений, снимаемых мобильным терминалом в секунду, увеличивается, и видео становится более плавным.
В возможной реализации автоматическая регулировка частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования включает в себя: настройку, мобильным терминалом, частоты кадров записи мобильного терминала на третью частоту кадров, когда интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света, где третья частота кадров меньше первой частоты кадров, и вторая пороговая величина интенсивности света меньше первого порогового значения интенсивности света. Таким образом, когда интенсивность света в сценарии фотографирования является относительно маленькой, экспозиция видео, снятого мобильным терминалом, является неадекватной, и мобильный терминал может уменьшить частоту кадров снимаемого видео. Из-за уменьшения частоты кадров период времени экспозиции каждого видеокадра на мобильном терминале увеличивается, и яркость видеоизображения может быть повышена.
В возможной реализации, когда мобильный терминал выполняет сбор видеокадра сценария фотографирования на второй частоте кадров, способ дополнительно включает в себя: определение мобильным терминалом того, больше ли параметр экспозиции собранного на данный момент видеокадра, чем третье пороговое значение параметра экспозиции, и меньше ли он, чем второе пороговое значение параметра экспозиции; и, если "Да", настройку мобильным терминалом частоты кадров записи мобильного терминала на первую частоту кадров, где первое пороговое значение параметра экспозиции меньше, чем третье пороговое значение параметра экспозиции, и третье пороговое значение параметра экспозиции меньше, чем второе пороговое значение параметра экспозиции. Таким образом, можно избежать частого переключения частоты кадров записи между первой частотой кадров и второй частотой кадров, когда параметр экспозиции видеокадра изменяется около первого порогового значения параметра экспозиции.
В возможной реализации, когда мобильный терминал выполняет сбор видеокадра сценария фотографирования на второй частоте кадров, способ дополнительно включает в себя: определение мобильным терминалом того, меньше ли параметр экспозиции собранного на данный момент видеокадра, чем четвертое пороговое значение параметра экспозиции, и больше ли он, чем первое пороговое значение параметра экспозиции; и, если "Да", настройку мобильным терминалом частоты кадров записи мобильного терминала на первую частоту кадров, где первое пороговое значение параметра экспозиции меньше, чем четвертое пороговое значение параметра экспозиции, и четвертое пороговое значение параметра экспозиции меньше, чем второе пороговое значение параметра экспозиции. Таким образом, можно избежать частого переключения частоты кадров записи между первой частотой кадров и третьей частотой кадров, когда параметр экспозиции видеокадра изменяется около второго порогового значения параметра экспозиции.
В возможной реализации автоматическая регулировка частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования включает в себя: определение мобильным терминалом, больше ли интенсивность света в сценарии фотографирования, чем первое пороговое значение интенсивности света, и больше ли смещение мобильного терминала, чем первое пороговое значение расстояния; или определение мобильным терминалом того, больше ли интенсивность света в сценарии фотографирования, чем первое пороговое значение интенсивности света, и больше ли скорость движения мобильного терминала, чем первое пороговое значение скорости; и, если "Да", настройку, мобильным терминалом, частоты кадров записи мобильного терминала на вторую частоту кадров, где вторая частота кадров больше, чем первая частота кадров.
В возможной реализации автоматическая регулировка частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования включает в себя: определение мобильным терминалом, меньше ли интенсивность света в сценарии фотографирования, чем второе пороговое значение интенсивности света, меньше ли смещение, вызванное движением мобильного терминала, второго порогового значения расстояния, и меньше ли скорость движения мобильного терминала второго порогового значения скорости; и, если "Да", настройку, мобильным терминалом, частоты кадров записи мобильного терминала на третью частоту кадров, где третья частота кадров меньше первой частоты кадров.
Таким образом, когда мобильный терминал сильно движется, частота кадров записи увеличивается, период времени экспозиции каждого кадра изображения, снятого мобильным терминалом, уменьшается, и уменьшается размытость видеоизображения, вызванная движением мобильного терминала. Таким образом, размытость при движении видео, снятого мобильным терминалом в состоянии сильного движения, может быть уменьшена для повышения плавности видео и качества видеоизображения.
В возможной реализации автоматическая регулировка частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования включает в себя: определение мобильным терминалом, больше ли интенсивность света в сценарии фотографирования, чем в первом сценарии пороговое значение интенсивности света, и больше ли смещение одного и того же фотографируемого объекта в любых двух из N видеокадров, чем третье пороговое значение расстояния; и, если "Да", настройку, мобильным терминалом, частоты кадров записи мобильного терминала на вторую частоту кадров, где вторая частота кадров больше, чем первая частота кадров.
В возможной реализации автоматическая регулировка частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования включает в себя: определение мобильным терминалом, меньше ли интенсивность света в сценарии фотографирования, чем второе пороговое значение интенсивности света, и меньше ли смещение одного и того же фотографируемого объекта в любых двух из N видеокадров, чем четвертое пороговое значение расстояния; и, если "Да", настройку, мобильным терминалом, частоты кадров записи мобильного терминала на третью частоту кадров, где третья частота кадров меньше первой частоты кадров.
Таким образом, так как частота кадров записи увеличивается тогда, когда сфотографированный объект сильно движется, период времени экспозиции каждого кадра изображения, сфотографированного мобильным терминалом, уменьшается, и размытие видеоизображения, вызванное движением фотографируемым объектом, уменьшается. Так как частота кадров записи уменьшается тогда, когда фотографируемый объект немного смещается, количество кадров изображений, снимаемых в секунду, уменьшается, и период времени экспозиции каждого кадра изображения увеличивается. Таким образом, можно обеспечить яркость изображения снимаемого видео, и уменьшить потребление энергии, вызванное обработкой мобильным терминалом снятых изображений. Таким образом, размытость изображения при движении на видео, снятом, когда фотографируемый объект находится в состоянии сильного движения, может быть уменьшена для повышения плавности видео и качества видеоизображения.
В возможной реализации автоматическая регулировка частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования включает в себя: определение мобильным терминалом того, выполняется ли следующее условие: интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света, и смещение мобильного терминала больше, чем первое пороговое значение расстояния, или скорость движения мобильного терминала больше, чем первое пороговое значение скорости; или интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света, и смещение одного и того же фотографируемого объекта в любых двух из N видеокадров больше, чем третье пороговое значение расстояния; и, если "Да", настройку, мобильным терминалом, частоты кадров записи мобильного терминала на вторую частоту кадров, где вторая частота кадров больше, чем первая частота кадров.
В возможной реализации автоматическая регулировка частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования включает в себя: определение мобильным терминалом того, выполняется ли следующее условие: интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света, смещение, вызванное движением мобильного терминала, меньше, чем второе пороговое значение расстояния, и смещение одного и того же фотографируемого объекта в любых двух из N видеокадров меньше, чем четвертое пороговое значение расстояния; или интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света, скорость движения мобильного терминала меньше, чем второе пороговое значение скорости, и смещение одного и того же фотографируемого объекта в любых двух из N видеокадров меньше, чем четвертое пороговое значение расстояния; и, если "Да", то настройку, мобильным терминалом, частоты кадров записи мобильного терминала на третью частоту кадров, где третья частота кадров меньше первой частоты кадров, первое пороговое значение интенсивности света больше второго порогового значения интенсивности света, первое пороговое значение расстояния меньше второго порогового значения расстояния, первое пороговое значение скорости больше второго порогового значения скорости, и четвертое пороговое значение расстояния меньше третьего порогового значения расстояния.
Таким образом, так как частота кадров записи является высокой, когда интенсивность света в сценарии фотографирования является высокой, и мобильный терминал находится в состоянии сильного движения, количество кадров изображений, снимаемых мобильным терминалом в секунду, увеличивается, и период времени экспозиции каждого кадра изображения уменьшается. Таким образом, размытость видеоизображения при движении, вызванная сильным движением мобильного терминала, может быть уменьшена для повышения плавности видео. Кроме того, так как интенсивность света в сценарии фотографирования является высокой, даже если частота кадров записи является высокой, каждый кадр изображения будет относительно ярким. Так как частота кадров записи является низкой, когда интенсивность света в сценарии фотографирования является маленькой, и мобильный терминал находится в состоянии слабого движения, количество кадров изображений, снятых мобильным терминалом в секунду, уменьшается, и увеличивается период времени экспозиции каждого кадра изображения. Таким образом, повышается яркость изображения видео в окружающей обстановке с низкой яркостью. Таким образом, с учетом интенсивности окружающего света и состояния движения мобильного терминала, яркость изображения видео и плавность видео в сценарии с высокой яркостью повышаются за счет управления на нескольких уровнях частоты кадров.
Согласно второму аспекту настоящая заявка обеспечивает мобильный терминал, включающий в себя: сенсорный экран, фотокамеру, один или более процессоров и одно или более запоминающих устройств, где одно или более запоминающих устройств соединены с одним или несколькими процессорами, одно или более запоминающих устройств выполнены с возможностью хранения компьютерного программного кода, и компьютерный программный код включает в себя компьютерную инструкцию. Когда один или более процессоров исполняют компьютерную инструкцию, мобильный терминал выполняет способ управления частотой кадров записи согласно любой из возможных реализаций вышеупомянутого аспекта.
Согласно третьему аспекту вариант осуществления настоящей заявки обеспечивает компьютерный носитель информации, включающий в себя компьютерную инструкцию. Когда компьютерная инструкция исполняется на мобильном терминале, устройству связи предоставляется возможность выполнять способ управления частотой кадров записи согласно любой из возможных реализаций вышеупомянутого аспекта.
Согласно четвертому аспекту вариант осуществления настоящей заявки обеспечивает компьютерный программный продукт. Когда компьютерный программный продукт запускается на компьютере, компьютер получает возможность выполнять способ управления частотой кадров записи согласно любой из возможных реализаций вышеупомянутого аспекта.
Краткое описание чертежей
Фиг.1 – схематичная структурная схема мобильного терминала согласно варианту осуществления настоящей заявки;
фиг.2 – схематичная схема архитектуры программного обеспечения согласно варианту осуществления настоящей заявки;
фиг.3 – схематичная логическая схема способа управления частотой кадров записи согласно варианту осуществления настоящей заявки;
фиг.4а и фиг.4b показаны линейные графики группы частот кадров записи, изменяющихся в зависимости от интенсивности света в сценарии фотографирования согласно варианту осуществления настоящей заявки;
фиг.5 – схематичная логическая схема другого способа управления частотой кадров записи согласно варианту осуществления настоящей заявки;
фиг.6а и фиг.6b – схематичные линейные графики группы частот кадров записи, изменяющихся в зависимости от состояния движения мобильного терминала, согласно варианту осуществления настоящей заявки;
фиг.7 – схематичная логическая схема другого способа управления частотой кадров записи согласно варианту осуществления настоящей заявки;
фиг.8а и фиг.8b – схематичные линейные графики группы частот кадров записи, изменяющихся в зависимости от состояния движения фотографируемого объекта, согласно варианту осуществления настоящей заявки;
фиг.9 – схематичная логическая схема другого способа управления частотой кадров записи согласно варианту осуществления настоящей заявки;
фиг.10а-10c – схематичные линейные графики группы частот кадров записи, изменяющихся в зависимости от интенсивности света в сценарии фотографирования и состояния движения мобильного терминала согласно варианту осуществления настоящей заявки;
фиг.11 – схематичная логическая схема другого способа управления частотой кадров записи согласно варианту осуществления настоящей заявки;
фиг.12а-12c – схематичные линейные графики группы частот кадров записи, изменяющихся в зависимости от интенсивности света в сценарии фотографирования и состояния движения фотографируемого объекта согласно варианту осуществления настоящей заявки;
фиг.13 – схематичная логическая схема другого способа управления частотой кадров записи согласно варианту осуществления настоящей заявки;
фиг.14а-14c – схематичные линейные графики группы частот кадров записи, изменяющихся в зависимости от состояния движения мобильного терминала и состояния движения фотографируемого объекта, согласно варианту осуществления настоящей заявки;
фиг.15 – схематичная логическая схема другого способа управления частотой кадров записи согласно варианту осуществления настоящей заявки;
фиг.16а-16d – схематичные линейные графики группы частот кадров записи, изменяющихся в зависимости от интенсивности света в сценарии фотографирования, состояния движения мобильного терминала и состояния движения фотографируемого объекта согласно варианту осуществления настоящей заявки;
фиг.17A-17F – схематичные схемы группы интерфейсов согласно варианту осуществления настоящей заявки;
фиг.18 – схематичная схема архитектуры системы управления частотой кадров записи согласно варианту осуществления настоящей заявки;
фиг.19 – схематичная блок-схема последовательности операций способа управления частотой кадров записи согласно варианту осуществления настоящей заявки; и
фиг.20 – схематичная блок-схема последовательности операций другого способа управления частотой кадров записи согласно варианту осуществления настоящей заявки.
Осуществление изобретения
Далее, со ссылкой на сопроводительные чертежи, подробно описаны технические решения вариантов осуществления, представленных в настоящей заявке. При описании вариантов осуществления настоящей заявки, если не указано иное, "/" означает "или". Например, A/B может обозначать A или B. Термин "и/или" в этом описании описывает только отношение между ассоциированными объектами для описания связанных объектов и указывает, что могут существовать три отношения. Например, A и/или B могут указывать на следующие три случая: существует только A, существуют и A, и B, и существует только B. Кроме того, при описании вариантов осуществления настоящей заявки "множество" означает два или более чем два.
Термины "первый" и "второй", упомянутые ниже, предназначены только для описания и не должны пониматься как указание или значение относительной важности или неявное указание количества указанных технических характеристик. Таким образом, функция, ограниченная "первым" или "вторым", может явно или неявно включать в себя одну или более функций. В описаниях вариантов осуществления настоящей заявки, если не указано иное, "множество" означает два или более.
На фиг.1 показана схематичная структурная схема мобильного терминала 100.
Мобильный терминал 100 используется в качестве примера ниже для подробного описания вариантов осуществления. Следует понимать, что мобильный терминал 100, показанный на фиг.1 является просто примером, и мобильный терминал 100 может иметь больше или меньше компонентов, чем показано на фиг.1, может объединять два или более компонентов, или может иметь разные конфигурации компонентов. Различные компоненты, показанные на чертеже, могут быть реализованы в виде аппаратных средств, которые включают в себя одну или более схем обработки сигналов и/или специализированных интегральных схем, программного обеспечения или комбинации аппаратных средств и программного обеспечения.
Мобильный терминал 100 может включать в себя процессор 110, интерфейс 120 внешней памяти, внутреннюю память 121, интерфейс 130 универсальной последовательной шины (universal serial bus, USB), модуль 140 управления зарядкой, модуль 141 управления питанием, аккумуляторную батарею 142, антенну 1, антенну 2, и модуль 150 мобильной связи, модуль 160 беспроводной связи, модуль 170 аудио, громкоговоритель 170A, телефонный приемник, микрофон 170C, разъем 170D для подключения гарнитуры, модуль 180 датчиков, ключ 190, мотор 191, индикатор 192, фотокамеру 193, дисплей 194, интерфейс 195 карты модуля идентификации абонента (subscriber identification module, SIM) и т.п. Модуль 180 датчиков может включать в себя датчик 180A давления, гироскопический датчик 180B, датчик 180C барометрического давления, магнитный датчик 180D, датчик 180E ускорения, датчик 180F расстояния, оптический датчик 180G приближения, датчик 180H отпечатков пальцев, датчик 180J температуры, датчик 180K касания, датчик 180L окружающего света, датчик 180M костной проводимости звука и т.п.
Следует понимать, что примерная структура в данном варианте осуществления настоящего изобретения не составляет конкретного ограничения для мобильного терминала 100. В некоторых других вариантах осуществления настоящей заявки мобильный терминал 100 может включать в себя больше или меньше компонентов, чем те, которые показаны на чертежах, или некоторые компоненты могут быть объединены, или некоторые компоненты могут быть разделены, или могут использоваться различные компоновки компонентов. Компоненты на чертежах могут быть реализованы с помощью аппаратных средств, программного обеспечения или комбинации программного обеспечения и аппаратных средств.
Процессор 110 может включать в себя один или более блоков обработки. Например, процессор 110 может включать в себя процессор приложений (application processor, AP), процессор модема, графический процессор (graphics processing unit, GPU), процессор сигналов изображения (image signal processor, ISP), контроллер, память, видеокодек, процессор цифровых сигналов (digital signal processor, DSP), процессор основной полосы частот и/или блок нейронной сетевой обработки (neural-network processing unit, NPU). Различные блоки обработки могут быть независимыми компонентами или могут быть интегрированы в один или более процессоров.
Контроллер может быть руководящим центром и командным центром мобильного терминала 100. Контроллер может вырабатывать сигнал управления операцией на основе кода операции инструкции и сигнала временной последовательности, чтобы завершить управление считыванием инструкций и исполнением инструкций.
Кроме того, в процессоре 110 может быть размещена память для хранения инструкций и данных. В некоторых вариантах осуществления память в процессоре 110 является кэш-памятью. В памяти могут храниться инструкция или данные, которые только что использовались или циклически используются процессором 110. Если процессору 110 необходимо снова использовать инструкцию или данные, процессор 110 может напрямую вызвать инструкцию или данные из памяти, чтобы избежать повторного доступа и сократить время ожидания процессора 110. Таким образом, повышается эффективность системы.
В некоторых вариантах осуществления процессор 110 может включать в себя один или более интерфейсов. Интерфейс может включать в себя интерфейс схемы для связи между интегральными схемами (inter-integrated circuit, I2C), интерфейс схемы для передачи аудиоданных между интегральными схемами (inter-integrated circuit sound, I2S), интерфейс импульсно-кодовой модуляции (pulse code modulation, PCM), интерфейс универсального асинхронного приемника/передатчика (universal asynchronous receiver/transmitter, UART), интерфейс процессора мобильной индустрии (mobile industry processor interface, MIPI), интерфейс ввода/вывода общего назначения (general-purpose input/output, GPIO), интерфейс модуля идентификации абонента (subscriber identity module, SIM), интерфейс универсальной последовательной шины (universal serial bus, USB) и/или тому подобное.
Интерфейс I2C представляет собой последовательную шину с двусторонней синхронизацией и включает в себя одну линию последовательной передачи данных (serial data line, SDA) и одну линию последовательной передачи тактовых импульсов (serial clock line, SCL). В некоторых вариантах осуществления процессор 110 может включать в себя множество групп шин I2C. Процессор 110 может быть подключен к сенсорному датчику 180K, зарядному устройству, вспышке, фотокамере 193 и т.п. с использованием различных интерфейсов шины I2C. Например, процессор 110 может быть подключен к датчику 180K касания с помощью интерфейса I2C таким образом, чтобы процессор 110 мог обмениваться данными с датчиком 180K касания с помощью интерфейса шины I2C для реализации функции касания мобильного терминала 100.
Интерфейс I2S может использоваться для аудиосвязи. В некоторых вариантах осуществления процессор 110 может включать в себя множество групп шин I2S. Процессор 110 может быть подключен к модулю 170 аудио с помощью шины I2S для реализации связи между процессором 110 и модулем 170 аудио. В некоторых вариантах осуществления модуль 170 аудио может передавать аудиосигнал в модуль 160 беспроводной связи с помощью интерфейса I2S для реализации функции ответа на звонок через Bluetooth-гарнитуру.
Интерфейс PCM может также использоваться для аудиосвязи и выборки, квантования и кодирования аналогового сигнала. В некоторых вариантах осуществления модуль 170 аудио может быть подключен к модулю 160 беспроводной связи с использованием интерфейса шины PCM. В некоторых вариантах осуществления модуль 170 аудио может также передавать аудиосигнал в модуль 160 беспроводной связи с использованием интерфейса PCM для реализации функции ответа на вызов с помощью гарнитуры Bluetooth. Как интерфейс I2S, так и интерфейс PCM могут использоваться для аудиосвязи.
Интерфейс UART представляет собой универсальную последовательную шину данных и используется для асинхронной связи. Шина может быть шиной двусторонней связи. Шина выполняет преобразование между последовательным и параллельным обменом данными, подлежащими передаче. В некоторых вариантах осуществления интерфейс UART, как правило, выполнен с возможностью подключения процессора 110 к модулю 160 беспроводной связи. Например, процессор 110 обменивается данными с модулем Bluetooth в модуле 160 беспроводной связи с помощью интерфейса UART для реализации функции Bluetooth. В некоторых вариантах осуществления модуль 170 аудио может передавать аудиосигнал в модуль 160 беспроводной связи с использованием интерфейса UART для реализации функции воспроизведения музыки через гарнитуру Bluetooth.
Интерфейс MIPI может быть выполнен с возможностью подключения процессора 110 к периферийному устройству, такому как дисплей 194 или фотокамера 193. Интерфейс MIPI включает в себя последовательный интерфейс фотокамеры (camera serial interface, CSI), последовательный интерфейс дисплея (display serial interface, DSI) и т.п. В некоторых вариантах осуществления процессор 110 обменивается данными с фотокамерой 193 с помощью интерфейса CSI для реализации функции фотографирования мобильного терминала 100. Процессор 110 обменивается данными с дисплеем 194 с помощью интерфейса DSI для реализации функции отображения мобильного терминала 100.
Интерфейс GPIO может быть сконфигурирован с использованием программного обеспечения. Интерфейс GPIO может быть сконфигурирован как сигнал управления или может быть сконфигурирован как сигнал данных. В некоторых вариантах осуществления интерфейс GPIO может быть выполнен с возможностью подключения процессора 110 к фотокамере 193, дисплею 194, модулю 160 беспроводной связи, модулю 170 аудио, модулю 180 датчиков и т.п. В качестве альтернативы интерфейс GPIO может быть сконфигурирован как интерфейс I2C, интерфейс I2S, интерфейс UART, интерфейс MIPI и т.п.
Интерфейс 130 USB является интерфейсом, который соответствует спецификации стандарта USB, и может быть, в частности, интерфейсом мини-USB, интерфейсом микро-USB, интерфейсом USB типа C или т.п. Интерфейс 130 USB может быть выполнен с возможностью подключения к зарядному устройству для зарядки мобильного терминала 100 или может быть выполнен с возможностью передачи данных между мобильным терминалом 100 и периферийным устройством. В качестве альтернативы интерфейс 130 USB может быть выполнен с возможностью подключения к гарнитуре для воспроизведения звука через гарнитуру. В качестве альтернативы интерфейс 130 USB может быть выполнен с возможностью подключения к другому мобильному терминалу, например, устройству AR.
Следует понимать, что взаимосвязь интерфейсного соединения между модулями, проиллюстрированными в вариантах осуществления настоящего изобретения, является просто примером, предназначенным для описания, и никоим образом не ограничивает структуру мобильного терминала 100. В некоторых других вариантах осуществления настоящей заявки мобильный терминал 100 может альтернативно использовать режим интерфейсного соединения, который отличается от режимов, используемых в вышеупомянутых вариантах осуществления, или может использовать комбинацию из множества режимов интерфейсного соединения.
Модуль 140 управления зарядкой выполнен с возможностью приема ввода зарядки от зарядного устройства. Зарядное устройство может быть беспроводным или проводным. В некоторых вариантах осуществления проводной зарядки модуль 140 управления зарядкой может принимать ввод зарядки проводного зарядного устройства с помощью интерфейса 130 USB. В некоторых вариантах осуществления беспроводной зарядки модуль 140 управления зарядкой может получать ввод беспроводной зарядки с использованием катушки беспроводной зарядки мобильного терминала 100. Во время зарядки аккумулятора 142 модуль 140 управления зарядкой может дополнительно подавать питание на мобильный терминал, используя модуль 141 управления питанием.
Модуль 141 управления питанием выполнен с возможностью подключения к аккумуляторной батарее 142, модулю 140 управления зарядкой и процессору 110. Модуль 141 управления питанием принимает входные данные из аккумуляторной батареи 142 и/или модуля 140 управления зарядкой и подает питание на процессор 110, внутреннюю память 121, внешнюю память, дисплей 194, фотокамеру 193, модуль 160 беспроводной связи и т.п. Модуль 141 управления питанием может дополнительно быть выполнен с возможностью контроля параметров, таких как емкость аккумуляторной батареи, циклы заряда-разряда аккумуляторной батареи и состояние работоспособности аккумуляторной батареи (утечка электричества или импеданс). В некоторых других вариантах осуществления модуль 141 управления питанием альтернативно может быть расположен в процессоре 110. В некоторых других вариантах осуществления модуль 141 управления питанием и модуль 140 управления зарядкой альтернативно могут быть расположены в одном и том же компоненте.
Функция беспроводной связи мобильного терминала 100 может быть реализована с использованием антенны 1, антенны 2, модуля 150 мобильной связи, модуля 160 беспроводной связи, процессора модема, процессора основной полосы частот и т.п.
Антенна 1 и антенна 2 выполнены с возможностью передачи и приема сигнала электромагнитной волны. Каждая антенна в мобильном терминале 100 может быть выполнена с возможностью покрытия одного или нескольких диапазонов связи. Различные антенны могут дополнительно мультиплексироваться для улучшения использования антенны. Например, антенна 1 может быть мультиплексирована как разнесенная антенна беспроводной локальной сети. В некоторых других вариантах осуществления антенна может использоваться в сочетании с переключателем регулировки.
Модуль 150 мобильной связи может предоставить решение для беспроводной связи, включая 2G/3G/4G/5G и т.п., применяемое к мобильному терминалу 100. Модуль 150 мобильной связи может включать в себя по меньшей мере один фильтр, переключатель, усилитель мощности, малошумящий усилитель (low noise amplifier, LNA) и т.п. Модуль 150 мобильной связи может принимать электромагнитную волну с помощью антенны 1, выполнять обработку, такую как фильтрация или усиление принятой электромагнитной волны, и передавать электромагнитную волну в процессор модема для демодуляции. Модуль 150 мобильной связи может дополнительно усиливать сигнал, модулированный процессором модема, и преобразовывать сигнал в электромагнитную волну для излучения с помощью антенны 1. В некоторых вариантах осуществления по меньшей мере некоторые функциональные модули в модуле 150 мобильной связи могут быть расположены в процессоре 110. В некоторых вариантах осуществления по меньшей мере некоторые функциональные модули в модуле 150 мобильной связи и по меньшей мере некоторые модули в процессоре 110 могут быть расположены в одном компоненте.
Процессор модема может включать в себя модулятор и демодулятор. Модулятор выполнен с возможностью модуляции отправляемого низкочастотного сигнала основной полосы частот в сигнал средней и высокой частоты. Демодулятор выполнен с возможностью демодуляции принятого сигнала электромагнитной волны в низкочастотный сигнал основной полосы частот. Затем демодулятор передает низкочастотный сигнал основной полосы частот, полученный посредством демодуляции, в процессор основной полосы частот для обработки. Низкочастотный сигнал основной полосы частот обрабатывается процессором основной полосы частот, и затем передается в процессор приложений. Процессор приложения выводит звуковой сигнал с помощью аудиоустройства (которое не ограничивается громкоговорителем 170A, телефонным приемником 170B и т.п.) или отображает изображение или видео на дисплее 194. В некоторых вариантах осуществления процессор модема может быть независимым компонентом. В некоторых других вариантах осуществления процессор модема может быть независимым от процессора 110 и располагаться в одном компоненте с модулем 150 мобильной связи или другим функциональным модулем.
Модуль 160 беспроводной связи может предоставлять решение для беспроводной связи, такой как беспроводная локальная сеть (wireless local area networks, WLAN) (например, сеть беспроводной связи Wi-Fi (Wireless Fidelity, Wi-Fi)), технология беспроводной связи Bluetooth (bluetooth, BT), глобальная навигационная спутниковая система (global navigation satellite system, GNSS), частотная модуляция (frequency modulation, FM), технология беспроводной ближней связи NFC (Near Field Communication, NFC) или технология связи в инфракрасном диапазоне длин волн (infrared, IR), которые могут применяться в мобильном терминале 100. Модуль 160 беспроводной связи может быть одним или несколькими компонентами, объединяющими по меньшей мере один модуль процессора связи. Модуль 160 беспроводной связи принимает электромагнитную волну с помощью антенны 2, выполняет частотную модуляцию и фильтрацию сигнала электромагнитной волны и отправляет обработанный сигнал в процессор 110. Модуль 160 беспроводной связи может дополнительно принимать сигнал, который может быть отправлен из процессора 110, выполняет частотную модуляцию и усиливает сигнал, и преобразует сигнал в электромагнитную волну для излучения с помощью антенны 2.
В некоторых вариантах осуществления антенна 1 и модуль 150 мобильной связи мобильного терминала 100 соединены, и антенна 2 и модуль 160 беспроводной связи мобильного терминала 100 соединены, так что мобильный терминал 100 может обмениваться данными с сетью и другим устройством посредством технологии беспроводной связи. Технология беспроводной связи может включать в себя такую технологию, как глобальная система мобильной связи (global system for mobile communications, GSM), служба пакетной передачи данных общего пользования (general packet radio service, GPRS), множественный доступ с кодовым разделением каналов (code division multiple access, CDMA), широкополосный множественный доступ с кодовым разделением каналов (wideband code division multiple access, WCDMA), множественный доступ с временным разделением кодов (time-division code division multiple access, TD-SCDMA), долгосрочное развитие (long term evolution, LTE), BT, GNSS, WLAN, NFC, FM и/или IR. GNSS может включать в себя глобальную систему позиционирования (global positioning system, GPS), глобальная навигационная спутниковая система (global navigation satellite system, GLONASS), навигационная спутниковая система BeiDou (BeiDou navigation satellite system, BDS), квазизенитная спутниковая система (quasi-zenith satellite system, QZSS)) и/или спутниковая система функционального дополнения (satellite based augmentation systems, SBAS).
Мобильный терминал 100 реализует функцию отображения, используя графический процессор, дисплей 194, процессор приложений и т.п. Графический процессор представляет собой микропроцессор для обработки изображений, подключенный к дисплею 194 и процессору приложений. Графический процессор выполнен с возможностью выполнения математических и геометрических вычислений и выполнен с возможностью визуализации изображений. Процессор 110 может включать в себя один или более графических процессоров, которые исполняют программную инструкцию для выработки или изменения отображаемой информации.
Дисплей 194 выполнен с возможностью отображения изображения, видео и т.п. Дисплей 194 включает в себя дисплейную панель. В дисплейной панели может использоваться жидкокристаллический дисплей (liquid crystal display, LCD), органический светоизлучающий диод (organic light-emitting diode, OLED), органический светоизлучающий диод с активной матрицей или органический светоизлучающий диод с активной матрицей (active-matrix organic light emitting diode, AMOLED), гибкий светоизлучающий диод (flex light-emitting diode, FLED), мини-светодиод, микро-светодиод, микро-OLED, светоизлучающий диод с квантовыми точками (quantum dot light emitting diodes, QLED) или тому подобное. В некоторых вариантах осуществления мобильный терминал 100 может включать в себя один или N дисплеев 194, где N – положительное целое число больше 1.
Мобильный терминал 100 может реализовать функцию фотографирования с помощью ISP, фотокамеры 193, видеокодека, графического процессора, дисплея 194, процессора приложений и т.п.
ISP выполнен с возможностью обработки данных, подаваемых по обратной связи фотокамерой 193. Например, во время фотографирования включается затвор, луч света передается на светочувствительный элемент фотокамеры через объектив, оптический сигнал преобразуется в электрический сигнал, светочувствительный элемент фотокамеры передает электрический сигнал в ISP для обработки, и электрический сигнал преобразуется в изображение, которое можно увидеть. Интернет-провайдер может дополнительно выполнить оптимизацию алгоритма в отношении шума, яркости и цвета лица изображения. Интернет-провайдер может дополнительно оптимизировать такие параметры, как экспозиция и цветовая температура сценария фотографирования. В некоторых вариантах осуществления ISP может быть расположен в фотокамере 193.
Фотокамера 193 выполнена с возможностью захвата статического изображения или видео. Оптическое изображение объекта создается с помощью объектива и проецируется на светочувствительный элемент. Светочувствительный элемент может быть прибором с зарядовой связью (charge coupled device, CCD) или фотоэлектрическим транзистором на комплементарных металл-оксид-полупроводниках (complementary metal-oxide-semiconductor, CMOS). Светочувствительный элемент преобразует оптический сигнал в электрический сигнал, и затем передает электрический сигнал в ISP для преобразования электрического сигнала в цифровой сигнал изображения. Интернет-провайдер выводит цифровой сигнал изображения на DSP для обработки. DSP преобразует сигнал цифрового изображения в стандартный сигнал изображения в таком формате, как RGB или YUV. В некоторых вариантах осуществления мобильный терминал 100 может включать в себя одну или N фотокамер 193, где N – положительное целое число больше 1.
Процессор цифровых сигналов выполнен с возможностью обработки цифрового сигнала. В дополнение к цифровому сигналу изображения процессор цифровых сигналов может дополнительно обрабатывать другой цифровой сигнал. Например, когда мобильный терминал 100 выбирает частоту, процессор цифровых сигналов конфигурируется для выполнения преобразования Фурье его спектральной плотности и т.п.
Видеокодек выполнен с возможностью сжатия или распаковки цифрового видео. Мобильный терминал 100 может поддерживать один или более типов видеокодеков. Таким образом, мобильный терминал 100 может воспроизводить или записывать видео в множестве форматов кодирования, например, группа экспертов по движущимся изображениям (moving picture experts group, MPEG) 1, MPEG 2, MPEG 3 и MPEG 4.
NPU представляет собой вычислительный процессор нейронной сети (neural-network, NN), который быстро обрабатывает входную информацию, обращаясь к структуре биологической нейронной сети, например, обращаясь к режиму передачи между нейронами мозга человека, и может в дальнейшем непрерывно выполнять самообучение. NPU может использоваться для реализации интеллектуального познания и других приложений мобильного терминала 100, таких как распознавание изображений, распознавание лиц, распознавание речи и понимание текста.
Интерфейс 120 внешней памяти может быть выполнен с возможностью подключения к внешней карте памяти, такой как карта микро-SD, для расширения возможностей хранения мобильного терминала 100. Внешняя карта памяти обменивается данными с процессором 110 с помощью интерфейса 120 внешней памяти для реализации функции хранения данных. Например, такие файлы, как музыка и видео, хранятся на внешней карте памяти.
Внутренняя память 121 может быть выполнена с возможностью хранения исполняемого компьютером программного кода, и исполняемый программный код включает в себя инструкцию. Процессор 110 исполняет инструкцию, хранящуюся во внутренней памяти 121, для реализации различных функциональных приложений мобильного терминала 100 и обработки данных. Внутренняя память 121 может включать в себя область хранения программ и область хранения данных. В области хранения программ может храниться операционная система, прикладная программа, требуемая по меньшей мере для одной функции (например, функция воспроизведения голоса или функция воспроизведения изображения) и т.п. В области хранения данных могут храниться данные (такие как аудиоданные и адресная книга), созданные во время использования мобильного терминала 100, и т.п. Кроме того, внутренняя память 121 может включать в себя высокоскоростную память с произвольным доступом и может дополнительно включать в себя энергонезависимую память, например, по меньшей мере одно устройство хранения на магнитном диске, устройство флэш-памяти или универсальное флэш-хранилище (universal flash storage, UFS).
Мобильный терминал 100 может реализовывать функцию аудио, например, воспроизведение и запись музыки, с использованием модуля 170 аудио, громкоговорителя 170A, телефонного приемника 170B, микрофона 170C, разъема 170D для гарнитуры, процессора приложений и т.п.
Модуль 170 аудио выполнен с возможностью преобразования цифровой аудиоинформации в выходной аналоговый аудиосигнал, и также выполнен с возможностью преобразования аналогового аудиовхода в цифровой аудиосигнал. Модуль 170 аудио может быть дополнительно выполнен с возможностью кодирования и декодирования аудиосигнала. В некоторых вариантах осуществления модуль 170 аудио может быть расположен в процессоре 110, или некоторые функциональные модули в модуле 170 аудио расположены в процессоре 110.
Громкоговоритель 170A, также называемый "динамиком", выполнен с возможностью преобразования звукового электрического сигнала в звуковой сигнал. Мобильный терминал 100 может использоваться для прослушивания музыки или ответа на вызов в режиме громкой связи через громкоговоритель 170A.
Телефонный приемник 170B, также называемый "наушником", выполнен с возможностью преобразования звукового электрического сигнала в звуковой сигнал. При ответе на вызов или прослушивании звуковой информации с помощью мобильного терминала 100 телефонный приемник 170В можно поднести близко к уху человека для прослушивания голоса.
Микрофон 170C, также называемый "микрофоном" или "передатчиком голоса", выполнен с возможностью преобразования звукового сигнала в электрический сигнал. При совершении вызова или отправке голосовой информации пользователь может издавать звук возле микрофона 170C, используя рот пользователя, чтобы ввести звуковой сигнал в микрофон 170C. В мобильном терминале 100 может быть расположен по меньшей мере один микрофон 170C. В некоторых других вариантах осуществления два микрофона 170C могут быть расположены в мобильном терминале 100 для сбора звукового сигнала и реализации функции шумоподавления. В некоторых других вариантах осуществления в мобильном терминале 100 альтернативно могут быть расположены три, четыре или более микрофонов 170C для сбора звукового сигнала, уменьшения шума, идентификации источника звука, реализации функции направленной записи и т.п.
Разъем 170D для гарнитуры выполненный с возможностью подключения к проводной гарнитуре. Разъем 170D для гарнитуры может быть интерфейсом USB 130, стандартным интерфейсом открытой платформы мобильного терминала 3,5 мм (open mobile terminal platform, OMTP) или интерфейс стандарта ассоциации индустрии сотовой связи США (cellular telecommunications industry association of the USA, CTIA).
Датчик давления 180A выполнен с возможностью воспринимать сигнал давления и может преобразовывать сигнал давления в электрический сигнал. В некоторых вариантах осуществления датчик 180A давления может быть расположен на дисплее 194. Существует много типов датчиков 180A давления, таких как резистивный датчик давления, индуктивный датчик давления и емкостной датчик давления. Емкостной датчик давления может представлять собой параллельную пластину, содержащую по меньшей мере два проводящих материала. Когда к датчику 180А давления прикладывается сила, емкость между электродами изменяется. Мобильный терминал 100 определяет силу давления на основе изменения емкости. Когда операция касания выполняется на дисплее 194, мобильный терминал 100 определяет силу операции касания с помощью датчика 180A давления. Мобильный терминал 100 может дополнительно вычислить положение касания на основе сигнала обнаружения датчика 180А давления. В некоторых вариантах осуществления операции касания, которые применяются к одному и тому же положению касания, но имеют разную интенсивность операций касания, могут соответствовать разным инструкциям операций. Например, когда операция касания, интенсивность которой меньше первого порогового значения давления, выполняется на значке приложения сообщения SMS, исполняется инструкция для просмотра сообщения SMS. Когда сенсорная операция, интенсивность сенсорной операции которой больше или равна первому пороговому значению давления, выполняется на значке приложения SMS-сообщения, исполняется инструкция для создания SMS-сообщения.
Гироскопический датчик 180B может быть выполнен с возможностью определения положения движения мобильного терминала 100. В некоторых вариантах осуществления угловые скорости мобильного терминала 100 вокруг трех осей (а именно осей x, y и z) могут определяться с помощью гироскопического датчика 180В. Гироскопический датчик 180B может использоваться для стабилизации изображения во время фотографирования. Например, когда затвор включен, гироскопический датчик 180B определяет угол, при котором мобильный терминал 100 дрожит, вычисляет на основе угла расстояние, которое модуль объектива должен компенсировать, и позволяет объективу нейтрализовать дрожание мобильного терминала 100 через обратное движение, чтобы реализовать стабилизацию изображения. Гироскопический датчик 180B также может использоваться для навигации и игровой сцены с обнаружением движения.
Датчик 180C атмосферного давления выполнен с возможностью измерения атмосферного давления. В некоторых вариантах осуществления мобильный терминал 100 вычисляет высоту, используя значение атмосферного давления, измеренное датчиком 180C атмосферного давления, для облегчения позиционирования и навигации.
Магнитный датчик 180D включает в себя датчик Холла. Мобильный терминал 100 может обнаруживать открытие и закрытие откидного кожаного футляра с помощью магнитного датчика 180D. В некоторых вариантах осуществления, когда мобильный терминал 100 является раскладным телефоном, мобильный терминал 100 может обнаруживать открытие и закрытие откидной крышки на основе магнитного датчика 180D. Кроме того, такая функция, как автоматическая разблокировка откидной крышки, устанавливается на основе обнаруженного состояния открытия или закрытия кожаного футляра или обнаруженного состояния открытия или закрытия откидной крышки.
Датчик 180E ускорения может обнаруживать значения ускорений в различных направлениях (обычно по трем осям) мобильного терминала 100. Когда мобильный терминал 100 является неподвижным, можно определять значение и направление силы тяжести. Датчик 180E ускорения может быть дополнительно выполнен с возможностью определения положения мобильного терминала и может применяться в приложении, таком как переключение экрана между альбомным режимом и портретным режимом и шагомер).
Датчик 180F расстояния выполнен с возможностью измерения расстояния. Мобильный терминал 100 может измерять расстояние с помощью инфракрасного луча или лазера. В некоторых вариантах осуществления в сценарии фотографирования мобильный терминал 100 может использовать датчик 180F расстояния для измерения расстояния, чтобы реализовать быструю фокусировку.
Оптический датчик 180G приближения может включать в себя, например, светоизлучающий диод (light emitting diode, LED) и оптический детектор, такой как фотодиод. Светоизлучающий диод может быть инфракрасным светоизлучающим диодом. Мобильный терминал 100 излучает инфракрасный свет наружу с помощью светоизлучающего диода. Мобильный терминал 100 использует фотодиод для обнаружения инфракрасного света, отраженного от ближайшего объекта. Когда обнаружен адекватный отраженный свет, может быть определено, что рядом с мобильным терминалом 100 есть объект. Когда обнаруживается, что отраженного света недостаточно, мобильный терминал 100 может определить то, что рядом с мобильным терминалом 100 нет объекта. Мобильный терминал 100 может обнаруживать с помощью оптического датчика 180G приближения то, что пользователь держит мобильный терминал 100 близко к уху, чтобы позвонить, чтобы автоматически выключить дисплей для экономии энергии. Оптический датчик 180G приближения также может использоваться в режиме интеллектуальной крышки или в карманном режиме для автоматической разблокировки или блокировки экрана.
Датчик 180L окружающего света выполнен с возможностью определения яркости окружающего света. Мобильный терминал 100 может адаптивно регулировать яркость дисплея 194 на основе измеренной яркости окружающего света. Датчик 180L окружающего света может быть дополнительно выполнен с возможностью автоматической регулировки баланса белого во время фотографирования. Датчик 180L окружающего света может дополнительно взаимодействовать с оптическим датчиком 180G приближения, чтобы определять, находится ли мобильный терминал 100 в кармане, чтобы предотвратить ложное касание.
Датчик 180H отпечатков пальцев выполнен с возможностью сбора отпечатка пальца. Мобильный терминал 100 может использовать функцию собранного отпечатка пальца для реализации разблокировки по отпечатку пальца, блокировки доступа к приложению, фотографирования отпечатка пальца, ответа на вызов по отпечатку пальца и т.п.
Датчик температуры 180J выполнен с возможностью определения температуры. В некоторых вариантах осуществления мобильный терминал 100 исполняет политику обработки температуры, используя температуру, определенную датчиком 180J температуры. Например, когда температура, сообщаемая датчиком 180J температуры, превышает пороговое значение, мобильный терминал 100 снижает производительность процессора, расположенного рядом с датчиком 180J температуры, чтобы снизить энергопотребление для реализации тепловой защиты. В некоторых других вариантах осуществления, когда температура ниже другого порогового значения, мобильный терминал 100 нагревает аккумуляторную батарею 142, чтобы предотвратить аварийное отключение мобильного терминала 100, вызванное низкой температурой. В некоторых других вариантах осуществления, когда температура ниже еще одного порогового значения, мобильный терминал 100 повышает выходное напряжение аккумуляторной батареи 142, чтобы предотвратить ненормальное отключение, вызванное низкой температурой.
Сенсорный датчик 180K также называется "сенсорной панелью". Сенсорный датчик 180K может быть расположен на дисплее 194, и сенсорный датчик 180K и дисплей 194 образуют сенсорный экран. Датчик 180K касания выполнен с возможностью обнаружения операции касания на датчике 180K касания или рядом с ним. Датчик касания может передавать обнаруженную операцию касания процессору приложения для определения типа события касания. Визуальный вывод, который относится к операции касания, может обеспечиваться с использованием дисплея 194. В некоторых других вариантах осуществления сенсорный датчик 180K может быть также расположен на поверхности мобильного терминала 100 в положении, отличном от положения дисплея 194.
Датчик 180M костной проводимости звука может собирать сигнал вибрации. В некоторых вариантах осуществления датчик 180M костной проводимости звука может получать сигнал вибрации от вибрирующей кости части голосовых связок человека. Датчик 180M костной проводимости звука также может контактировать с пульсом тела для приема сигнала биения артериального давления. В некоторых вариантах осуществления датчик 180M костной проводимости звука альтернативно может быть расположен в гарнитуре для получения гарнитуры костной проводимости звука. Модуль 170 аудио может получать речевой сигнал посредством анализа на основе сигнала вибрации, полученного датчиком 180M костной проводимости звука вибрационной кости части голосовой связки, для реализации голосовой функции. Процессор приложения может анализировать информацию о частоте сердечных сокращений на основе сигнала биений артериального давления, полученного датчиком 180M костной проводимости звука, для реализации функции определения частоты сердечных сокращений.
Клавиша 190 включает в себя клавишу включения, клавишу громкости и т.п. Клавиша 190 может быть механической или сенсорной. Мобильный терминал 100 может принимать ввод с клавиатуры и формировать ввод сигнала с клавиатуры, относящийся к пользовательским регулировкам и управлению функциями мобильного терминала 100.
Мотор 191 может генерировать подсказку вибрацией. Мотор 191 может использоваться для вибросигнала при входящем вызове и обратной связи с вибрацией при касании. Например, сенсорные операции, выполняемые в разных приложениях (например, фотографирование и воспроизведение звука), могут соответствовать разным эффектам вибрационной обратной связи. Мотор 191 также может соответствовать различным эффектам вибрационной обратной связи для сенсорных операций, применяемых к различным областям дисплея 194. Различные сценарии приложений (например, напоминание о времени, получение информации, будильник и игра) также могут соответствовать различным эффектам вибрационной обратной связи. Дополнительно может поддерживаться регулировка эффекта обратной связи с вибрацией при касании.
Индикатор 192 может быть световым индикатором, который может быть выполнен с возможностью индикации состояния зарядки и изменения мощности, или может быть выполнен с возможностью индикации сообщения, пропущенного вызова, уведомления и т.п.
Интерфейс 195 SIM-карты выполнен с возможностью подключения к SIM-карте. SIM-карта может быть вставлена в интерфейс 195 SIM-карты или подключена к интерфейсу 195 SIM-карты для обеспечения контакта с мобильным терминалом 100 или отделения от него. Мобильный терминал 100 может поддерживать один или N интерфейсов SIM-карты, где N – положительное целое число больше 1. Интерфейс 195 SIM-карты может поддерживать нано-SIM-карту, микро-SIM-карту, SIM-карту и т.п. Множество карт может быть вставлено одновременно в один и тот же интерфейс 195 SIM-карты. Множество карт может быть одного или разных типов. Интерфейс 195 SIM-карты также может быть совместим с SIM-картами различных типов. Интерфейс 195 SIM-карты может быть также совместим с внешней картой памяти. Мобильный терминал 100 взаимодействует с сетью с помощью SIM-карты для реализации таких функций, как вызов и передача данных. В некоторых вариантах осуществления мобильный терминал 100 использует eSIM, а именно встроенную SIM-карту. Карта eSIM может быть встроена в мобильный терминал 100 и не может быть отделена от мобильного терминала 100.
Система программного обеспечения мобильного терминала 100 может использовать многоуровневую архитектуру, архитектуру, управляемую событиями, архитектуру микроядра, архитектуру микросервисов или облачную архитектуру. В вариантах осуществления настоящего изобретения система Android, использующая многоуровневую архитектуру, используется в качестве примера для иллюстрации структуры программного обеспечения мобильного терминала 100.
На фиг.2 показана блок-схема структуры программного обеспечения мобильного терминала 100 согласно варианту осуществления настоящего изобретения.
В многоуровневой архитектуре программное обеспечение разделено на несколько уровней, и каждый уровень имеет четкую роль и задачу. Уровни взаимодействуют друг с другом с помощью программного интерфейса. В некоторых вариантах осуществления система Android разделена на четыре уровня, а именно уровень прикладных программ, уровень структуры прикладной программы, среда выполнения Android-приложений (Android runtime), системная библиотека и уровень ядра сверху вниз.
Уровень прикладных программ может включать в себя ряд пакетов прикладных программ.
Как показано на фиг.2, пакет прикладных программ может включать в себя прикладные программы, такие как фотокамера, галерея, календарь, телефон, карта, навигация, WLAN, Bluetooth, музыка, видео и обмен сообщениями.
Уровень структуры прикладной программы обеспечивает интерфейс прикладного программирования (application programming interface, API) и структуру программирования для прикладной программы на уровне прикладной программы. Уровень структуры прикладной программы включает в себя некоторые заданные функции.
Как показано на фиг.2, уровень структуры прикладной программы может включать в себя диспетчер окон, поставщика содержания, систему просмотра, диспетчер телефона, диспетчер ресурсов, диспетчер уведомлений и т.п.
Оконный менеджер выполнен с возможностью управления оконной программой. Диспетчер окон может получать размер дисплея, определять то, имеется ли строка состояния, блокировать экран, сделать снимок экрана и т.п.
Поставщик содержания выполнен с возможностью: хранения и получения данных и обеспечения доступа к данным для прикладной программы. Данные могут включать в себя видео, изображение, аудио, вызовы, которые были совершены и отвечены, историю просмотра и закладку, адресную книгу и т.п.
Система просмотра включает в себя визуальные элементы управления, такие как элемент управления для отображения текста и элемент управления для отображения изображения. Система просмотра может быть выполнена с возможностью создания прикладной программы. Интерфейс дисплея может включать в себя одно или более представлений. Например, интерфейс дисплея, включающий в себя значок уведомления о SMS-сообщении, может включать в себя представление для отображения текста и представление для отображения изображения.
Диспетчер телефона выполнен с возможностью обеспечения функции связи мобильного терминала 100, например, управления статусом вызова (включая ответ или отклонение).
Диспетчер ресурсов предоставляет различные ресурсы, такие как строка локализованных символов, значок, изображение, файл макета и видеофайл для прикладной программы.
Диспетчер уведомлений позволяет прикладной программе отображать информацию уведомления в строке состояния и может быть выполнен с возможностью передачи сообщения типа уведомления. Сообщение типа уведомления может автоматически исчезнуть после короткой паузы без вмешательства пользователя. Например, диспетчер уведомлений выполнен с возможностью предоставления уведомлений о завершении загрузки, сообщения-подсказки и т.п. Диспетчер уведомлений может быть уведомлением, которое появляется в верхней строке состояния системы в виде графика или текста полосы прокрутки, например, уведомлением о прикладной программе, работающей в фоновом режиме, или может быть уведомлением, которое появляется на экране в виде диалогового окна. Например, текстовая информация запрашивается в строке состояния, производится объявление, мобильный терминал вибрирует или мигает световой индикатор.
Среда выполнения Android-приложений включает в себя библиотеку ядра и виртуальную машину. Среда выполнения Android-приложений отвечает за планирование и управление системой Android.
Библиотека ядра включает в себя две части: функцию, которая должна вызываться языком Java, и библиотеку ядра Android.
Уровень прикладной программы и уровень структуры прикладной программы выполняются на виртуальной машине. Виртуальная машина исполняет java-файлы уровня прикладной программы и уровня структуры прикладной программы в виде двоичных файлов. Виртуальная машина выполнена с возможностью выполнения таких функций, как управление жизненным циклом объекта, управление стеком, управление потоками, управление безопасностью и исключениями, и сборка "мусора".
Системная библиотека может включать в себя множество функциональных модулей, например, диспетчер поверхности (surface manager), медиа-библиотеку (Media Libraries), библиотеку обработки трехмерной графики (например, OpenGL ES) и 2D-графический движок (например, SGL).
Диспетчер поверхности выполнен с возможностью: управления подсистемой отображения и обеспечения объединения двухмерных и трехмерных слоев для множества прикладных программ.
Медиа-библиотека поддерживает воспроизведение и запись в множестве широко используемых аудио- и видеоформатов, файлов статических изображений и т.п. Медиа-библиотека может поддерживать множество форматов кодирования аудио и видео, например, MPEG-4, H.264, MP3, AAC, AMR, JPG и PNG.
Библиотека обработки трехмерной графики выполнена с возможностью реализации трехмерных графических изображений, визуализации изображений, композиции, обработки слоев и т.п.
Механизм 2D-графики представляет собой механизм рисования для 2D-рисования.
Уровень ядра представляет собой уровень между аппаратными средствами и программным обеспечением. Уровень ядра включает в себя по меньшей мере драйвер дисплея, драйвер фотокамеры, драйвер аудио и драйвер датчика.
Ниже описан процесс работы программного обеспечения и аппаратных средств мобильного терминала 100 с использованием примера со ссылкой на сценарий захвата при фотографировании.
Когда сенсорный датчик 180K принимает операцию касания, соответствующее аппаратное прерывание отправляется на уровень ядра. Уровень ядра преобразует операцию касания в необработанное событие ввода (включая информацию, такую как координаты касания или отметку времени операции касания). Необработанное входное событие хранится на уровне ядра. Уровень структуры прикладной программы получает необработанное входное событие с уровня ядра и идентифицирует элемент управления, соответствующий входному событию. Например, операция касания представляет собой операцию касания путем касания, и управление, соответствующее операции касания, представляет собой управление значком приложения фотокамеры. Приложение фотокамеры вызывает интерфейс на уровне инфраструктуры приложения, чтобы включить приложение фотокамеры, затем включает драйвер фотокамеры, вызывая уровень ядра, и захватывает статическое изображение или видео с помощью фотокамеры 193.
Ниже приведено описание частоты кадров, с которой мобильный терминал снимает видео в вариантах осуществления настоящей заявки.
Частота кадров (frame rate) также называется частотой кадров и выражается в единицах "кадры в секунду (fps). Когда мобильный терминал используется для записи видео, частота кадров может относиться к количеству статических изображений, захваченных мобильным терминалом в секунду. Когда мобильный терминал воспроизводит видео на одной и той же частоте кадров, в секунду воспроизводится такое же количество статических изображений. С точки зрения пользователя, эти статические изображения обладают динамическим эффектом. Как правило, когда частота кадров составляет 8 кадров в секунду или выше, пользователь чувствует, что видео воспроизводится плавно. Стандартная частота кадров для фильмов составляет 24 кадра в секунду или выше. Когда частота кадров видео, снятого мобильным терминалом, ниже, количество статических изображений, захваченных мобильным терминалом в секунду, меньше, при этом увеличиваются период времени экспозиции каждого статического изображения и яркость статического изображения.
Размытие из-за движения (motion blur), также называемое динамическим размытием, представляет собой эффект движения в изображении пейзажа и определенно появляется во время длительной экспозиции или быстрого перемещения объекта в сцене. Когда мобильный терминал снимает видео, если мобильный терминал движется быстро, или объект на снятом изображении движется быстро, но частота кадров записи является относительно низкой, происходит размытие из-за движения. Причина состоит в том, что когда частота кадров записи является относительно низкой, мобильный терминал захватывает относительно небольшое количество статических изображений в секунду. В этом случае увеличивается время экспозиции статического изображения. Так как мобильный терминал движется быстро, или объект на снятом изображении движется быстро, объект на статическом изображении выглядит размытым или перетащенным.
Варианты осуществления настоящей заявки предусматривают способ управления частотой кадров записи для управления частотой кадров записи мобильного терминала на основе одного или нескольких из трех факторов: интенсивности света в сценарии фотографирования во время видеозаписи, выполняемой мобильным терминалом, состояния движения мобильного терминала и состояния движения фотографируемого объекта. Мобильный терминал автоматически регулирует частоту кадров записи на основе интенсивности света в сценарии фотографирования, чтобы повысить яркость видеоизображения в сценарии с низкой яркостью и плавность видео в сценарии с высокой яркостью. Мобильный терминал управляет частотой кадров на основе состояния движения мобильного терминала, чтобы повысить плавность видео, снятого мобильным терминалом во время движения. Мобильный терминал управляет частотой кадров на основе состояния движения фотографируемого объекта, чтобы повысить плавность изображения, когда на видеоизображении присутствует движущийся объект, и уменьшить размытость движения, вызванную движением фотографируемого объекта на снятом изображении. Таким образом, частота кадров записи мобильного терминала регулируется автоматически, и повышается качество видеоизображения.
Нижеследующее конкретно описывает со ссылкой на сценарии приложений способ управления частотой кадров записи, предусмотренный в вариантах осуществления настоящей заявки.
В некоторых сценариях приложений, когда мобильный терминал записывает видео, интенсивность света в сценарии фотографирования может измениться. Например, когда мобильный терминал записывает видео, интенсивность света в части сценария фотографирования может быть относительно высокой, и интенсивность света в другой части сценария фотографирования может быть относительно низкой. Когда интенсивность света в сценарии фотографирования относительно является маленькой, яркость изображения видео, вырабатываемого мобильным терминалом посредством видеозаписи, также является относительно маленькой, что приводит к нечетким деталям сценария фотографирования. Например, когда пользователь использует мобильный терминал для записи видео ночью, пользователь сначала фотографирует члена семьи при освещении комнаты, то есть сценарием фотографирования мобильного терминала является сначала сценарий нахождения в здании. Затем объектив поворачивается на неосвещенную улицу и продолжает снимать ночную сцену на открытом воздухе. В этом случае сценарий фотографирования мобильного терминала переключается на сценарий на открытом воздухе. В этом случае из-за недостаточного освещения ночной сцены на открытом воздухе яркость изображения видео также является относительно низкой. Таким образом, в варианте осуществления настоящей заявки предусмотрен способ управления частотой кадров записи, показанный на фиг.3. В сценарии фотографирования мобильный терминал может автоматически управлять частотой кадров записи на основе интенсивности света. Когда начинается запись видео, мобильный терминал выполняет по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Затем, когда интенсивность света в сценарии фотографирования является высокой, мобильный терминал может выполнять сбор видеокадра на второй частоте кадров (например, 60 кадров в секунду). Когда мобильный терминал определяет то, что интенсивность света в сценарии фотографирования является слабой, мобильный терминал может выполнять сбор видеокадра с третьей частотой кадров (например, 24 кадра в секунду). Когда мобильный терминал определяет то, что интенсивность света в сценарии фотографирования является средней, мобильный терминал может продолжить сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Вторая частота кадров больше, чем первая частота кадров, и первая частота кадров больше, чем третья частота кадров. Когда частота кадров записи уменьшается, период времени экспозиции каждого кадра изображения, снятого мобильным терминалом, увеличивается, чтобы повысить яркость изображения снимаемого видео. Когда интенсивность света в сценарии фотографирования является относительно большой, экспозиция видео, снятого мобильным терминалом, является адекватной, и мобильный терминал может увеличить частоту кадров снимаемого видео. Из-за увеличения частоты кадров количество кадров изображений, снимаемых мобильным терминалом в секунду, увеличивается, и видео становится более плавным. Динамическая регулировка частоты кадров на основе интенсивности света в сценарии фотографирования позволяет повысить яркость изображения видео, снятого мобильным терминалом в относительно темном сценарии фотографирования, и повысить плавность изображения видео, снятого мобильным терминалом, в сценарии относительно яркого фотографирования для повышения качества видеоизображения.
На фиг.4a представлена примерная схема, показывающая изменение интенсивности света сценария фотографирования во время видеозаписи, выполняемой мобильным терминалом согласно варианту осуществления настоящей заявки, и на фиг.4b представлена схема, показывающая изменение частоты кадров во время видеосъемки, выполняемой мобильным терминалом, согласно варианту осуществления настоящей заявки.
Как показано на фиг.4a, когда период времени фотографирования мобильного терминала составляет от 0-ой секунды до 10-ой секунды, интенсивность света в сценарии фотографирования во время видеозаписи, выполняемой мобильным терминалом, превышает первое пороговое значение интенсивности света (например, 1000 Люкс), и сценарием фотографирования является сценарий высокой яркости. Когда период времени фотографирования мобильного терминала составляет от 10-ой секунды до 25-ой секунды, интенсивность света в сценарии фотографирования находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первым пороговым значением интенсивности света (например, 1000 Люкс). Когда период времени фотографирования мобильного терминала составляет от 25-ой секунды до 40-ой секунды, интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света (например, 100 Люкс). Когда период времени фотографирования мобильного терминала составляет от 40-ой секунды до 55-ой секунды, интенсивность света в сценарии фотографирования находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первым пороговым значением интенсивности света (например, 1000 Люкс). Когда период времени фотографирования мобильного терминала составляет от 55-ой секунды до 65-ой секунды, интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света (например, 1000 Люкс). Первое пороговое значение интенсивности света больше, чем второе пороговое значение интенсивности света.
Как показано на фиг.4b, когда мобильный терминал начинает запись видео (например, в период времени фотографирования от 0-ой секунды до 2-ой секунды), мобильный терминал может выполнять по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 2-ой секунды до 10-ой секунды, так как интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света (например, 1000 Люкс), и сценарием фотографирования является окружающая среда с высокой яркостью, мобильный терминал снимает видео на второй частоте кадров (например, 60 кадров в секунду), чтобы обеспечить плавность видео. Когда период времени фотографирования мобильного терминала составляет от 10-ой секунды до 25-ой секунды, так как интенсивность света в сценарии фотографирования находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первым пороговым значением интенсивности света (например, 1000 Люкс), и сценарием фотографирования является сценарий окружающей среды со средней яркостью, мобильный терминал может уменьшить частоту кадров записи и выполнить сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Таким образом, период времени экспозиции каждого кадра изображения видео увеличивается, и яркость изображения видео, снятого мобильным терминалом, повышается, обеспечивая при этом плавность видео. Когда период времени фотографирования мобильного терминала составляет от 25-ой секунды до 40-ой секунды, так как интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света (например, 100 Люкс), и интенсивность света в сценарии фотографирования является сценарием фотографирования с низкой яркостью, мобильный терминал может дополнительно уменьшить частоту кадров записи и выполнить сбор видеокадра на третьей частоте кадров (например, 24 кадра в секунду). Таким образом, период времени экспозиции каждого кадра изображения видео дополнительно увеличивается, и яркость изображения видео, снятого мобильным терминалом, повышается в сценарии фотографирования с низкой яркостью. Вторая частота кадров (например, 60 кадров в секунду) больше, чем первая частота кадров (например, 30 кадров в секунду), и первая частота кадров больше, чем третья частота кадров (например, 24 кадра в секунду). Вторая частота кадров не ограничена 60 кадрами в секунду, показанными на фиг.4b, и может иметь другое значение. Первая частота кадров не ограничена 30 кадрами в секунду, как показано на фиг.4b, либо другим значением. Третья частота кадров не ограничена 24 кадрами в секунду, показанными на фиг.4b, и может иметь другое значение.
В некоторых возможных реализациях, когда мобильный терминал уменьшает частоту кадров записи, мобильный терминал может дополнительно регулировать яркость видеоизображения ступенчатым образом. Например, когда интенсивность света в сценарии фотографирования мобильного терминала составляет 100 Люкс, если частота кадров записи мобильного терминала составляет 30 кадров в секунду, значение яркости изображения видео, снятого мобильным терминалом, равно 40, и, если частота кадров записи мобильного терминала уменьшается до 24 кадра в секунду, значение яркости изображения видео, снятого мобильным терминалом, равно 80. Когда частота кадров записи мобильного терминала изменяется с 30 кадров в секунду на 24 кадра в секунду, мобильный терминал регулирует значение яркости изображения снимаемого видео с 40 на 80 ступенчатым образом за период времени (например, в течение 1 секунды). Таким образом, при изменении яркости изображения видео можно предусмотреть переходный период, чтобы повысить качество изображения видео, снятого мобильным терминалом, и улучшить взаимодействие с пользователем.
В некоторых возможных реализациях, когда мобильный терминал записывает видео, мобильный терминал может сначала выполнить сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Если мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования превышает первое пороговое значение интенсивности света (например, 1000 Люкс), мобильный терминал может выполнять сбор видеокадра на второй частоте кадров (например, 60 кадров в секунду). Когда мобильный терминал выполняет сбор видеокадра на второй частоте кадров, если мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования находится между четвертым пороговым значением интенсивности света (например, 150 Люкс) и третьим пороговым значением интенсивности света (950 Люкс) мобильный терминал может выполнять сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда мобильный терминал записывает видео, мобильный терминал может сначала выполнить сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Если мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света (например, 100 Люкс), мобильный терминал может выполнять сбор видеокадра на третьей частоте кадров (например, 24 кадра в секунду). Если мобильный терминал сначала выполняет сбор видеокадра на третьей частоте кадров (например, 24 кадра в секунду), когда мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования находится между четвертым пороговым значением интенсивности света (например, 150 Люкс) и третьим пороговым значением интенсивности света (например, 950 Люкс), мобильный терминал может выполнять сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Первое пороговое значение интенсивности света (например, 1000 Люкс) больше, чем третье пороговое значение интенсивности света (например, 950 Люкс), третье пороговое значение интенсивности света больше, чем четвертое пороговое значение интенсивности света (например, 150 Люкс), и четвертое пороговое значение интенсивности света больше, чем второе пороговое значение интенсивности света (например, 100 Люкс). Кроме того, разница между третьим порогом интенсивности света и первым пороговым значением интенсивности света представляет собой заданную разность яркости (например, 50 Люкс), и разница между четвертым пороговым значением интенсивности света и вторым пороговым значением интенсивности света представляет собой заданную разность яркости (например, 50 Люкс). Таким образом, можно предотвратить частое изменение частоты кадров записи, вызванное изменением интенсивности света в сценарии фотографирования около первого порогового значения интенсивности света или второго порогового значения интенсивности света.
В некоторых сценариях движения мобильного терминала, например, когда пользователь использует мобильный терминал для записи видео на движущемся транспортном средстве, или, когда пользователь быстро вращает мобильный терминал, чтобы снимать некоторые движущиеся объекты, так как состояние движения изменений мобильного терминала, когда мобильный терминал снимает видео, период времени экспозиции каждого кадра изображения в снятом видео является чрезмерно большим из-за относительно низкой частоты кадров записи. Объект в кадре изображения может появляться в разных местах кадра изображения из-за движения мобильного терминала, вызывая размытие изображения. Таким образом, в варианте осуществления настоящей заявки предусмотрен способ управления частотой кадров записи, показанный на фиг.5. Мобильный терминал может автоматически управлять частотой кадров записи на основе состояния движения мобильного терминала. При запуске записи видео мобильный терминал может выполнять по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Затем, когда мобильный терминал находится в состоянии сильного движения, мобильный терминал может выполнять сбор видеокадра на второй частоте кадров (например, 60 кадров в секунду). Когда мобильный терминал находится в состоянии слабого движения, мобильный терминал может снимать видео на третьей частоте кадров (например, 24 кадра в секунду). Вторая частота кадров больше первой частоты кадров, и первая частота кадров больше третьей частоты кадров. Когда мобильный терминал находится в состоянии среднего движения, мобильный терминал может выполнять сбор видеокадра на второй частоте кадров (например, 30 кадров в секунду). Когда мобильный терминал сильно движется, частота кадров записи увеличивается, период времени экспозиции каждого кадра изображения, снятого мобильным терминалом, уменьшается, и уменьшается размытость видеоизображения, вызванная движением мобильного терминала. Таким образом, размытость при движении видео, снятого мобильным терминалом в состоянии сильного движения, может быть уменьшена для повышения плавности видео и качества видеоизображения.
На фиг.6a представлена примерная схема, показывающая состояние движения мобильного терминала согласно варианту осуществления настоящей заявки, и на фиг.6b представлена схема, показывающая изменение частоты кадров во время видеосъемки, выполняемой мобильным терминалом, согласно варианту осуществления настоящей заявки.
Как показано на фиг.6a, когда период времени фотографирования мобильного терминала составляет от 0-ой секунды до 5-ой секунды, мобильный терминал обнаруживает, что состоянием движения мобильного терминала является состояние среднего движения. Когда период времени фотографирования мобильного терминала составляет от 5-ой секунды до 30-ой секунды, мобильный терминал обнаруживает, что состоянием движения мобильного терминала является состояние слабого движения. Когда период времени фотографирования мобильного терминала составляет от 30-ой секунды до 65-ой секунды, мобильный терминал обнаруживает, что состоянием движения мобильного терминала является состояние сильного движения.
Как показано на фиг.6b, когда мобильный терминал начинает запись видео (например, в период времени фотографирования от 0-ой секунды до 2-ой секунды), мобильный терминал может выполнять по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 2-ой секунды до 5-ой секунды, так как состоянием движения мобильного терминала является состояние среднего движения, мобильный терминал продолжает сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду), чтобы обеспечить плавность воспроизведения видео. Когда период времени фотографирования мобильного терминала составляет от 5-ой секунды до 30-ой секунды, так как состоянием движения мобильного терминала является состояние слабого движения, мобильный терминал может уменьшить частоту кадров записи и выполнить сбор видеокадра с третьей частотой кадров (например, 24 кадра в секунду). Таким образом, период времени экспозиции каждого кадра изображения увеличивается, и яркость каждого кадра изображения повышается. Когда период времени фотографирования мобильного терминала составляет от 30-ой секунды до 65-ой секунды, так как состоянием движения мобильного терминала является состояние сильного движения, мобильный терминал может увеличить частоту кадров записи и выполнить сбор видеокадра на второй частоте кадров (например, 60 кадров в секунду). Таким образом, период времени экспозиции каждого кадра изображения уменьшается, размытие движения, вызванное движением мобильного терминала, уменьшается, и плавность изображения видео, снятого мобильным терминалом, повышается. Вторая частота кадров (например, 60 кадров в секунду) больше, чем первая частота кадров (например, 30 кадров в секунду), и первая частота кадров больше, чем третья частота кадров (например, 24 кадра в секунду). Вторая частота кадров не ограничена 60 кадрами в секунду, показанными на фиг.6b, и может иметь другое значение. Первая частота кадров не ограничена 30 кадрами в секунду, как показано на фиг.6b, либо другим значением. Третья частота кадров не ограничена 24 кадрами в секунду, показанными на фиг.6b, и может иметь другое значение.
В некоторых сценариях движения фотографируемого объекта, например, когда пользователь использует мобильный терминал для фотографирования движущегося транспортного средства, так как состояние движения фотографируемого объекта изменяется, когда мобильный терминал снимает видео, период времени экспозиции каждого кадра изображения в снятом видео является чрезмерно длинным из-за относительно низкой частоты кадров записи. Объект, движущийся с высокой скоростью в кадре изображения, может появляться в разных местах кадра изображения, вызывая размытие изображения. Таким образом, в варианте осуществления настоящей заявки предусмотрен способ управления частотой кадров записи, показанный на фиг.7. Мобильный терминал может автоматически управлять частотой кадров записи на основе состояния движения фотографируемого объекта. При запуске записи видео мобильный терминал может выполнять по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Затем, когда мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние сильного движения, мобильный терминал может снимать видео на второй частоте кадров (например, 60 кадров в секунду). Когда мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние слабого движения, мобильный терминал может снимать видео с третьей частотой кадров (например, 24 кадра в секунду). Когда мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние среднего движения, мобильный терминал может снимать видео на первой частоте кадров (например, 30 кадров в секунду). Вторая частота кадров больше, чем первая частота кадров, и первая частота кадров больше, чем третья частота кадров. Так как частота кадров записи увеличивается тогда, когда сфотографированный объект сильно движется, период времени экспозиции каждого кадра изображения, сфотографированного мобильным терминалом, уменьшается, и уменьшается размытость видеоизображения, вызванная движением фотографируемого объекта. Так как частота кадров записи уменьшается тогда, когда фотографируемый объект немного смещается, количество кадров изображений, снимаемых в секунду, уменьшается, и период времени экспозиции каждого кадра изображения увеличивается. Таким образом, можно обеспечить яркость изображения снятого видео, и уменьшается потребление энергии, вызванное обработкой мобильным терминалом снятых изображений. Таким образом, можно уменьшить размытие при движении на снятом видео, когда фотографируемый объект находится в состоянии сильного движения, для повышения плавности видеосигнала и качества видеоизображения.
На фиг.8a представлена примерная схема, показывающая состояние движения объекта, сфотографированного мобильным терминалом, согласно варианту осуществления настоящей заявки, и на фиг.8b представлена схема, показывающая изменение частоты кадров во время видеосъемки, выполняемой мобильным терминалом, согласно варианту осуществления настоящей заявки.
Как показано на фиг.8a, когда период времени фотографирования мобильного терминала составляет от 0-ой секунды до 15-ой секунды, мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние среднего движения. Когда период времени фотографирования мобильного терминала составляет от 15-ой секунды до 35-ой секунды, мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние слабого движения. Когда период времени фотографирования мобильного терминала составляет от 35-ой секунды до 65-ой секунды, мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние сильного движения.
Как показано на фиг.8b, когда мобильный терминал начинает запись видео (например, в период времени фотографирования от 0-ой секунды до 2-ой секунды), мобильный терминал может выполнять по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 2-ой секунды до 15-ой секунды, так как мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние среднего движения, мобильный терминал продолжает съемку видео на первой частоте кадров (например, 30 кадров в секунду), чтобы обеспечить плавность видео. Когда период времени фотографирования мобильного терминала составляет от 15-ой секунды до 35-ой секунды, так как состоянием движения фотографируемого объекта является состояние слабого движения, мобильный терминал может уменьшить частоту кадров и снимать видео с третьей частотой кадров (например, 24 кадра в секунду). Таким образом, период времени экспозиции каждого кадра изображения увеличивается, и яркость каждого кадра изображения повышается. Когда период времени фотографирования мобильного терминала составляет от 35-ой секунды до 65-ой секунды, так как состоянием движения мобильного терминала является состояние сильного движения, мобильный терминал может увеличить частоту кадров записи и снимать видео на второй частоте кадров (например, 60 кадров в секунду). Таким образом, период времени экспозиции каждого кадра изображения уменьшается, размытие при движении, вызванное движением фотографируемого объекта, уменьшается, и повышается плавность изображения видео, снятого мобильным терминалом. Вторая частота кадров (например, 60 кадров в секунду) больше, чем первая частота кадров (например, 30 кадров в секунду), и первая частота кадров больше, чем третья частота кадров (например, 24 кадра в секунду). Вторая частота кадров не ограничена 60 кадрами в секунду, показанными на фиг.8b, и может иметь другое значение. Первая частота кадров не ограничена 30 кадрами в секунду, как показано на фиг.8b, либо другим значением. Третья частота кадров не ограничена 24 кадрами в секунду, показанными на фиг.8b, и может иметь другое значение.
В некоторых сценариях приложений интенсивность света в сценарии фотографирования мобильного терминала временами является низкой и высокой, и мобильный терминал записывает видео во время движения. Например, ночью пользователь держит мобильный терминал и переходит от сценария фотографирования с высокой яркостью в помещении к сценарию фотографирования с низкой яркостью на улице, чтобы снять сегмент видео. Так как интенсивность света в сценарии фотографирования мобильного терминала бывает в зависимости от времени низкой и высокой, когда интенсивность света в сценарии фотографирования является относительно маленькой, и частота кадров записи является чрезмерно высокой, период времени экспозиции каждого кадра изображения является недостаточным, и яркость изображения видео, записанного мобильным терминалом, также является относительно низкой. Так как мобильный терминал записывает видео во время движения, когда мобильный терминал находится в состоянии сильного движения, в изображении снятого видео может возникать размытие движения из-за слишком низкой частоты кадров. Таким образом, в варианте осуществления настоящей заявки предусмотрен способ управления частотой кадров записи, показанный на фиг.9. Мобильный терминал может автоматически управлять частотой кадров записи на основе интенсивности света в сценарии фотографирования и состояния движения мобильного терминала. При запуске записи видео мобильный терминал может выполнять по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Затем, когда интенсивность света в сценарии фотографирования является высокой, и мобильный терминал находится в состоянии сильного движения, мобильный терминал может выполнять сбор видеокадра на второй частоте кадров (например, 60 кадров в секунду). Когда интенсивность света в сценарии фотографирования является маленькой, и состоянием движения мобильного терминала является состояние слабого движения, мобильный терминал может выполнять сбор видеокадра с третьей частотой кадров (например, 24 кадра в секунду). В другом случае мобильный терминал выполняет сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Вторая частота кадров больше, чем первая частота кадров, и первая частота кадров больше, чем третья частота кадров. Так как частота кадров записи является высокой, когда интенсивность света в сценарии фотографирования является высокой, и мобильный терминал находится в состоянии сильного движения, количество кадров изображений, снятых мобильным терминалом в секунду, увеличивается, и период времени экспозиции каждого кадра изображения уменьшается. Таким образом, размытие видеоизображения при движении, вызванное сильным движением мобильного терминала, может быть уменьшено, чтобы повысить плавность видео. Кроме того, так как интенсивность света в сценарии фотографирования является высокой, даже если частота кадров записи является высокой, каждый кадр изображения будет относительно ярким. Так как частота кадров записи является низкой, когда интенсивность света в сценарии фотографирования является маленькой, и мобильный терминал находится в состоянии слабого движения, количество кадров изображений, снимаемых мобильным терминалом в секунду, уменьшается, и период времени экспозиции каждого кадра изображения увеличивается. Таким образом, повышается яркость изображения видео в условиях низкой яркости. Таким образом, с учетом интенсивности окружающего света и состояния движения мобильного терминала, яркость изображения видео и плавность видео в сценарии с высокой яркостью повышаются за счет управления на нескольких уровнях частоты кадров.
На фиг.10а представлена примерная схема, показывающая изменение интенсивности света сценария фотографирования мобильного терминала согласно варианту осуществления настоящей заявки, на фиг.10b представлена схема, показывающая изменение состояния движения мобильного терминала согласно варианту осуществления настоящей заявки, и на фиг.10c представлена схема, показывающая изменение частоты кадров во время видеосъемки, выполняемой мобильным терминалом, согласно варианту осуществления настоящей заявки.
Как показано на фиг.10a, когда период времени фотографирования мобильного терминала составляет от 0-ой секунды до 10-ой секунды, мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света (например, 1000 Люкс). Когда период времени фотографирования мобильного терминала составляет от 10-ой секунды до 25-ой секунды, мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первым пороговым значением интенсивности света (например, 1000 Люкс). Когда период времени фотографирования мобильного терминала составляет от 25-ой секунды до 40-ой секунды, мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света (например, 100 Люкс). Когда период времени фотографирования мобильного терминала составляет от 40-ой секунды до 55-ой секунды, мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первым пороговым значением интенсивности света (например, 1000 Люкс). Когда период времени фотографирования мобильного терминала составляет от 55-ой секунды до 65-ой секунды, мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования превышает первое пороговое значение интенсивности света (например, 1000 Люкс). Первое пороговое значение интенсивности света больше, чем второе пороговое значение интенсивности света.
Как показано на фиг.10b, когда период времени фотографирования мобильного терминала составляет от 0-ой секунды до 5-ой секунды, мобильный терминал обнаруживает, что состоянием движения мобильного терминала является состояние среднего движения. Когда период времени фотографирования мобильного терминала составляет от 5-ой секунды до 30-ой секунды, мобильный терминал обнаруживает, что состоянием движения мобильного терминала является состояние слабого движения. Когда период времени фотографирования мобильного терминала составляет от 30-ой секунды до 65-ой секунды, мобильный терминал обнаруживает, что состоянием движения мобильного терминала является состояние сильного движения.
Как показано на фиг.10c, когда мобильный терминал начинает запись видео (например, в период времени фотографирования от 0-ой секунды до 2-ой секунды), мобильный терминал может выполнять по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 2-ой секунды до 5-ой секунды, так как интенсивность света в сценарии фотографирования мобильного терминала больше, чем первое пороговое значение интенсивности света (например, 1000 Люкс), сценарием фотографирования является сценарий окружающей среды с высокой яркостью, и состоянием движения мобильного терминала является состояние среднего движения, мобильный терминал продолжает сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 5-ой секунды до 10-ой секунды, так как интенсивность света в сценарии фотографирования мобильного терминала больше, чем первое пороговое значение интенсивности света, сценарием фотографирования является сценарий высокой яркости, и состоянием движения мобильного терминала является состояние слабого движения, мобильный терминал продолжает съемку видео на первой частоте кадров. Когда период времени фотографирования мобильного терминала составляет от 10-ой секунды до 25-ой секунды, так как интенсивность света в сценарии фотографирования мобильного терминала находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первой интенсивностью света порогового значения, сценарием фотографирования является сценарий средней яркости, и состоянием движения мобильного терминала является состояние слабого движения, мобильный терминал продолжает сбор видеокадра на первой частоте кадров. Когда период времени фотографирования мобильного терминала составляет от 25-ой секунды до 30-ой секунды, так как интенсивность света в сценарии фотографирования мобильного терминала меньше, чем второе пороговое значение интенсивности света, сценарием фотографирования является сценарий низкой яркости, и состоянием движения мобильного терминала является состояние слабого движения, мобильный терминал выполняет сбор видеокадра с третьей частотой кадров (например, 24 кадра в секунду). Когда период времени фотографирования мобильного терминала составляет от 30-ой секунды до 40-ой секунды, так как интенсивность света в сценарии фотографирования мобильного терминала меньше, чем второе пороговое значение интенсивности света, сценарием фотографирования является сценарий низкой яркости, и состоянием движения мобильного терминала является состояние сильного движения, мобильный терминал снимает видео на первой частоте кадров. Когда период времени фотографирования мобильного терминала составляет от 40-ой секунды до 55-ой секунды, так как интенсивность света в сценарии фотографирования мобильного терминала находится между вторым пороговым значением интенсивности света и первым пороговым значением интенсивности света, сценарием фотографирования является сценарий окружающей среды со средней яркостью, и состоянием движения мобильного терминала является состояние сильного движения, мобильный терминал снимает видео на первой частоте кадров. Когда период времени фотографирования мобильного терминала составляет от 55-ой секунды до 65-ой секунды, интенсивность света в сценарии фотографирования мобильного терминала больше, чем первое пороговое значение интенсивности света, сценарием фотографирования является сценарий высокой яркости, и состоянием движения мобильного терминала является состояние сильного движения, мобильный терминал снимает видео на второй частоте кадров (например, 60 кадров в секунду). Вторая частота кадров (например, 60 кадров в секунду) больше, чем первая частота кадров (например, 30 кадров в секунду), и первая частота кадров больше, чем третья частота кадров (например, 24 кадра в секунду).
В некоторых сценариях приложений сценарий фотографирования, в котором мобильный терминал записывает видео, переключается между сценарием высокой яркости и сценарием низкой яркости, и объект, фотографируемый мобильным терминалом, смещается. Когда интенсивность света в сценарии фотографирования является относительно маленькой, если частота кадров записи является чрезмерно высокой, период времени экспозиции каждого кадра изображения является недостаточным, и яркость изображения видео, снятого мобильным терминалом, также является относительно низкой. Когда мобильный терминал находится в состоянии сильного движения, в изображении снятого видео может возникать размытие движения из-за чрезмерно низкой частоты кадров записи. Таким образом, в варианте осуществления настоящей заявки предусмотрен способ управления частотой кадров записи, показанный на фиг.11. Мобильный терминал может автоматически управлять частотой кадров записи на основе интенсивности света в сценарии фотографирования и состояния движения фотографируемого объекта. При запуске записи видео мобильный терминал может выполнять по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Затем, когда интенсивность света в сценарии фотографирования является высокой, и фотографируемый объект находится в состоянии сильного движения, мобильный терминал может выполнять сбор видеокадра на второй частоте кадров (например, 60 кадров в секунду). Когда интенсивность света в сценарии фотографирования является маленькой и состоянием движения фотографируемого объекта является состояние слабого движения, мобильный терминал может выполнять сбор видеокадра с третьей частотой кадров (например, 24 кадра в секунду). В другом случае мобильный терминал выполняет сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Вторая частота кадров больше, чем первая частота кадров, и первая частота кадров больше, чем третья частота кадров. Так как частота кадров записи является высокой, когда интенсивность света в сценарии фотографирования является высокой, и мобильный терминал находится в состоянии сильного движения, количество кадров изображений, снятых мобильным терминалом в секунду, увеличивается, и период времени экспозиции каждого кадра изображения уменьшается. Таким образом, размытость видеоизображения при движении, вызванная сильным движением фотографируемого объекта, может быть уменьшена для повышения плавности видео. Кроме того, так как интенсивность света в сценарии фотографирования является высокой, даже если частота кадров записи является высокой, каждый кадр изображения будет относительно ярким. Так как частота кадров записи является низкой, когда интенсивность света в сценарии фотографирования является маленькой, и фотографируемый объект находится в состоянии слабого движения, количество кадров изображений, снятых мобильным терминалом в секунду, уменьшается, и период времени экспозиции каждого кадра изображения увеличивается. Таким образом, повышается яркость изображения видео в сценарии фотографирования с низкой яркостью. В других условиях мобильный терминал может снимать видео с общей частотой кадров (которая меньше высокой частоты кадров и больше низкой частоты кадров). Таким образом, с учетом интенсивности света в сценарии фотографирования и состояния движения фотографируемого объекта, яркость изображения видео и плавность видео в сценарии с высокой яркостью повышаются за счет управления на нескольких уровнях частоты кадров.
На фиг.12a представлена примерная схема, показывающая изменение интенсивности света сценария фотографирования мобильного терминала согласно варианту осуществления настоящей заявки, на фиг.12b представлена схема, показывающая изменение состояния движения фотографируемого объекта согласно варианту осуществления настоящей заявки, и на фиг.12c представлена схема, показывающая изменение частоты кадров во время видеосъемки, выполняемой мобильным терминалом, согласно варианту осуществления настоящей заявки.
Как показано на фиг.12a, когда период времени фотографирования мобильного терминала составляет от 0-ой секунды до 10-ой секунды, мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света (например, 1000 Люкс). Когда период времени фотографирования мобильного терминала составляет от 10-ой секунды до 25-ой секунды, мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первым пороговым значением интенсивности света (например, 1000 Люкс), и сценарием фотографирования является сценарий средней яркости. Когда период времени фотографирования мобильного терминала составляет от 25-ой секунды до 40-ой секунды, мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света (например, 100 Люкс). Когда период времени фотографирования мобильного терминала составляет от 40-ой секунды до 55-ой секунды, мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первым пороговым значением интенсивности света (например, 1000 Люкс). Когда период времени фотографирования мобильного терминала составляет от 55-ой секунды до 65-ой секунды, мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования превышает первое пороговое значение интенсивности света (например, 1000 Люкс). Первое пороговое значение интенсивности света больше, чем второе пороговое значение интенсивности света.
Как показано на фиг.12b, когда период времени фотографирования мобильного терминала составляет от 0-ой секунды до 15-ой секунды, мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние среднего движения. Когда период времени фотографирования мобильного терминала составляет от 15-ой секунды до 35-ой секунды, мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние слабого движения. Когда период времени фотографирования мобильного терминала составляет от 35-ой секунды до 65-ой секунды, мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние сильного движения.
Как показано на фиг.12c, когда мобильный терминал начинает запись видео (например, в период времени фотографирования от 0-ой секунды до 2-ой секунды), мобильный терминал может выполнять по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 2-ой секунды до 10-ой секунды, так как интенсивность света в сценарии фотографирования превышает первое пороговое значение интенсивности света (например, 1000 Люкс), сценарием фотографирования является сценарий высокой яркости, и состоянием движения фотографируемого объекта является состояние среднего движения, мобильный терминал может продолжить сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 10-ой секунды до 15-ой секунды, так как интенсивность света в сценарии фотографирования мобильного терминала находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первой интенсивностью света порогового значения, сценарием фотографирования является сценарий средней яркости, и состоянием движения фотографируемого объекта является состояние среднего движения, мобильный терминал продолжает сбор видеокадра на первой частоте кадров. Когда период времени фотографирования мобильного терминала составляет от 15-ой секунды до 25-ой секунды, так как интенсивность света в сценарии фотографирования находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первым пороговым значением интенсивности света, сценарием фотографирования является сценарий средней яркости, и состоянием движения фотографируемого объекта является состояние слабого движения, мобильный терминал продолжает сбор видеокадра на первой частоте кадров. Когда период времени фотографирования мобильного терминала составляет от 25-ой секунды до 35-ой секунды, так как интенсивность света в сценарии фотографирования мобильного терминала меньше, чем второе пороговое значение интенсивности света, сценарием фотографирования является сценарий низкой яркости, и состоянием движения фотографируемого объекта является состояние слабого движения, мобильный терминал выполняет сбор видеокадра с третьей частотой кадров (например, 24 кадра в секунду). Когда период времени фотографирования мобильного терминала составляет от 35-ой секунды до 40-ой секунды, так как интенсивность света в сценарии фотографирования мобильного терминала меньше, чем второе пороговое значение интенсивности света, сценарием фотографирования является сценарий низкой яркости, и состоянием движения фотографируемого объекта является состояние сильного движения, мобильный терминал выполняет сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 40-ой секунды до 55-ой секунды, так как интенсивность света в сценарии фотографирования мобильного терминала находится между вторым пороговым значением интенсивности света и первым пороговым значением интенсивности света, сценарием фотографирования является сценарий средней яркости, и состоянием движения фотографируемого объекта является состояние сильного движения, мобильный терминал выполняет сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 55-ой секунды до 65-ой секунды, так как интенсивность света в сценарии фотографирования мобильного терминала больше, чем первое пороговое значение интенсивности света, сценарий фотографирования представляет собой среду с высокой яркостью, и состоянием движения фотографируемого объекта является состояние сильного движения, мобильный терминал выполняет сбор видеокадра на второй частоте кадров (например, 60 кадров в секунду). Вторая частота кадров (например, 60 кадров в секунду) больше, чем первая частота кадров (например, 30 кадров в секунду), и первая частота кадров больше, чем третья частота кадров (например, 24 кадра в секунду).
В некоторых сценариях приложений мобильный терминал записывает видео при движении, и объект, фотографируемый мобильным терминалом, также движется. Когда мобильный терминал находится в состоянии сильного движения, или фотографируемый объект находится в состоянии сильного движения, в изображении снятого видео может возникать размытие движения из-за относительно низкой частоты кадров записи. Таким образом, в варианте осуществления настоящей заявки предусмотрен способ управления частотой кадров записи, показанный на фиг.13. Мобильный терминал может автоматически управлять частотой кадров записи на основе состояния движения мобильного терминала и состояния движения фотографируемого объекта. Когда начинается запись видео, мобильный терминал может выполнять по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Затем, когда мобильный терминал находится в состоянии сильного движения, или фотографируемый объект находится в состоянии сильного движения, мобильный терминал может снимать видео на второй частоте кадров (например, 60 кадров в секунду). Когда мобильный терминал находится в состоянии слабого движения, и состоянием движения мобильного терминала является состояние слабого движения, мобильный терминал может снимать видео с третьей частотой кадров (например, 24 кадра в секунду). В другом случае мобильный терминал снимает видео на первой частоте кадров (например, 30 кадров в секунду). Вторая частота кадров больше, чем первая частота кадров, и первая частота кадров больше, чем третья частота кадров. Так как частота кадров записи является высокой, когда мобильный терминал находится в состоянии сильного движения, или фотографируемый объект находится в состоянии сильного движения, количество кадров изображений, снятых мобильным терминалом в секунду, увеличивается, и период времени экспозиции каждого кадра изображения уменьшается. Таким образом, размытость видеоизображения при движении, вызванная сильным движением фотографируемого объекта, может быть уменьшена для повышения плавности видео. Так как видео снимается с низкой частотой кадров, когда мобильный терминал находится в состоянии слабого движения, и фотографируемый объект находится в состоянии слабого движения, может быть уменьшена потребляемая мощность при съемке видео мобильным терминалом. Таким образом, с учетом состояния движения мобильного терминала и состояния движения фотографируемого объекта плавность видео повышается за счет управления на нескольких уровнях частоты кадров.
На фиг.14а представлена примерная схема, показывающая изменение состояния движения мобильного терминала согласно варианту осуществления настоящей заявки, на фиг.14b представлена схема, показывающая изменение состояния движения фотографируемого объекта согласно варианту осуществления настоящей заявки, и на фиг.14c представлена схема, показывающая изменение частоты кадров во время видеосъемки, выполняемой мобильным терминалом, согласно варианту осуществления настоящей заявки.
Как показано на фиг.14a, когда период времени фотографирования мобильного терминала составляет от 0-ой секунды до 5-ой секунды, состоянием движения мобильного терминала является состояние среднего движения. Когда период времени фотографирования мобильного терминала составляет от 5-ой секунды до 30-ой секунды, состоянием движения мобильного терминала является состояние слабого движения. Когда период времени фотографирования мобильного терминала составляет от 30-ой секунды до 65-ой секунды, состоянием движения мобильного терминала является состояние сильного движения.
Как показано на фиг.14b, когда период времени фотографирования мобильного терминала составляет от 0-ой секунды до 15-ой секунды, мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние среднего движения. Когда период времени фотографирования мобильного терминала составляет от 15-ой секунды до 35-ой секунды, мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние слабого движения. Когда период времени фотографирования мобильного терминала составляет от 35-ой секунды до 65-ой секунды, мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние сильного движения.
Как показано на фиг.14c, когда мобильный терминал начинает запись видео (например, в период времени фотографирования от 0-ой секунды до 2-ой секунды), мобильный терминал может выполнять по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 2-ой секунды до 5-ой секунды, так как состоянием движения мобильного терминала является состояние среднего движения, и состоянием движения фотографируемого объекта является состояние среднего движения, мобильный терминал может продолжить сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 5-ой секунды до 15-ой секунды, так как состоянием движения мобильного терминала является состояние слабого движения, и состоянием движения фотографируемого объекта является состояние среднего движения, мобильный терминал может продолжить сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 15-ой секунды до 30-ой секунды, так как состоянием движения мобильного терминала является состояние слабого движения, и состоянием движения фотографируемого объекта является состояние слабого движения, мобильный терминал может выполнять сбор видеокадра на третьей частоте кадров (например, 24 кадра в секунду). Когда период времени фотографирования мобильного терминала составляет от 30-ой секунды до 35-ой секунды, так как состоянием движения мобильного терминала является состояние сильного движения, и состоянием движения фотографируемого объекта является состояние сильного движения, мобильный терминал может выполнять сбор видеокадра на второй частоте кадров (например, 60 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 35-ой секунды до 65-ой секунды, так как состоянием движения мобильного терминала является состояние сильного движения, и состоянием движения фотографируемого объекта является состояние сильного движения, мобильный терминал может снимать видео на второй частоте кадров (например, 60 кадров в секунду). Вторая частота кадров (например, 60 кадров в секунду) больше, чем первая частота кадров (например, 30 кадров в секунду), и первая частота кадров больше, чем третья частота кадров (например, 24 кадра в секунду).
В сценарии приложения сценарий фотографирования, в котором мобильный терминал записывает видео, переключается между сценарием высокой яркости и сценарием низкой яркости, и мобильный терминал фотографирует движущийся объект во время движения. Когда интенсивность света в сценарии фотографирования является относительно маленькой, если частота кадров записи является чрезмерно высокой, период времени экспозиции каждого кадра изображения является недостаточным, и яркость изображения видео, снятого мобильным терминалом, также является относительно низкой. Когда мобильный терминал находится в состоянии сильного движения, или фотографируемый объект находится в состоянии сильного движения, в изображении снятого видео может возникать размытие движения из-за чрезмерно низкой частоты кадров записи. Таким образом, в варианте осуществления настоящей заявки предусмотрен способ управления частотой кадров записи, показанный на фиг.15. Мобильный терминал может автоматически управлять частотой кадров записи на основе интенсивности света в сценарии фотографирования, состояния движения мобильного терминала и состояния движения фотографируемого объекта. При запуске записи видео мобильный терминал может выполнять по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Затем, когда интенсивность света в сценарии фотографирования мобильного терминала является высокой, и мобильный терминал находится в состоянии сильного движения; или, когда интенсивность света в сценарии фотографирования мобильного терминала является высокой, и фотографируемый объект находится в состоянии сильного движения, мобильный терминал может выполнять сбор видеокадра на второй частоте кадров (например, 60 кадров в секунду). Когда интенсивность света в сценарии фотографирования является маленькой и состоянием движения фотографируемого объекта является состояние слабого движения, мобильный терминал может выполнять сбор видеокадра на третьей частоте кадров (например, 24 кадра в секунду). В другом случае мобильный терминал выполняет сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Вторая частота кадров больше, чем первая частота кадров, и первая частота кадров больше, чем третья частота кадров. Когда интенсивность света в сценарии фотографирования мобильного терминала является высокой, и мобильный терминал находится в состоянии сильного движения, или, когда интенсивность света в сценарии фотографирования мобильного терминала является высокой, и фотографируемый объект находится в состоянии сильного движения, частота кадров записи является высокой. Таким образом, количество кадров изображений, снимаемых мобильным терминалом в секунду, увеличивается, и период времени экспозиции каждого кадра изображения уменьшается. Таким образом, размытие видеоизображения при движении, вызванное резким движением фотографируемого объекта, может быть уменьшено, чтобы повысить плавность видео. Так как частота кадров записи является низкой, когда интенсивность света в сценарии фотографирования является маленькой, мобильный терминал находится в состоянии слабого движения, и фотографируемый объект находится в состоянии слабого движения, количество кадров изображений, снятых мобильным терминалом в секунду уменьшается, и время экспозиции каждого кадра изображения увеличивается. Таким образом, повышается яркость изображения видео в сценарии с низкой яркостью. Таким образом, с учетом интенсивности окружающего света, состояния движения мобильного терминала и состояния движения фотографируемого объекта, яркость изображения видео и плавность видео в сценарии с высокой яркостью повышаются за счет управления на нескольких уровни частоты кадров.
На фиг.16a представлена примерная схема, показывающая изменение интенсивности света сценария фотографирования мобильного терминала согласно варианту осуществления настоящей заявки, на фиг.16b представлена примерная схема, показывающая изменение состояния движения мобильного терминала согласно варианту осуществления настоящей заявки, на фиг.16c представлена примерная схема, показывающая изменение состояния движения фотографируемого объекта согласно варианту осуществления настоящей заявки, и на фиг.16d представлена схема, показывающая изменение частоты кадров во время видеосъемки, выполняемой мобильным терминалом, согласно варианту осуществления настоящей заявки.
Как показано на фиг.16a, когда период времени фотографирования мобильного терминала составляет от 0-ой секунды до 5-ой секунды, мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света (например, 1000 Люкс). Когда период времени фотографирования мобильного терминала составляет от 10-ой секунды до 25-ой секунды, мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первым пороговым значением интенсивности света (например, 1000 Люкс). Когда период времени фотографирования мобильного терминала составляет от 25-ой секунды до 40-ой секунды, мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования меньше второго порогового значения интенсивности света (например, 100 Люкс). Когда период времени фотографирования мобильного терминала составляет от 40-ой секунды до 55-ой секунды, мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первым пороговым значением интенсивности света (например, 1000 Люкс). Когда период времени фотографирования мобильного терминала составляет от 55-ой секунды до 65-ой секунды, мобильный терминал обнаруживает, что интенсивность света в сценарии фотографирования превышает первое пороговое значение интенсивности света (например, 1000 Люкс). Первое пороговое значение интенсивности света больше, чем второе пороговое значение интенсивности света.
Как показано на фиг.16b, когда период времени фотографирования мобильного терминала составляет от 0-ой секунды до 5-ой секунды, мобильный терминал обнаруживает, что состоянием движения мобильного терминала является состояние среднего движения. Когда период времени фотографирования мобильного терминала составляет от 5-ой секунды до 30-ой секунды, мобильный терминал обнаруживает, что состоянием движения мобильного терминала является состояние слабого движения. Когда период времени фотографирования мобильного терминала составляет от 30-ой секунды до 65-ой секунды, мобильный терминал обнаруживает, что состоянием движения мобильного терминала является состояние сильного движения.
Как показано на фиг.16c, когда период времени фотографирования мобильного терминала составляет от 0-ой секунды до 15-ой секунды, мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние среднего движения. Когда период времени фотографирования мобильного терминала составляет от 15-ой секунды до 35-ой секунды, мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние слабого движения. Когда период времени фотографирования мобильного терминала составляет от 35-ой секунды до 65-ой секунды, мобильный терминал обнаруживает, что состоянием движения фотографируемого объекта является состояние сильного движения.
Как показано на фиг.16d, когда мобильный терминал начинает записывать видео (например, в течение периода времени фотографирования от 0-ой секунды до 2-ой секунды), мобильный терминал может выполнять по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 2 секунд до 5 секунд, так как интенсивность света в сценарии фотографирования мобильного терминала больше, чем первое пороговое значение интенсивности света (например, 1000 Люкс), сценарием фотографирования является сценарий, высокой яркости, состоянием движения мобильного терминала является состояние среднего движения, и состоянием движения фотографируемого объекта является состояние среднего движения, мобильный терминал может продолжить сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 5 секунд до 10 секунд, так как интенсивность света в сценарии фотографирования мобильного терминала больше, чем первое пороговое значение интенсивности света, сценарием фотографирования является сценарий, высокой яркости, то состоянием движения мобильного терминала является состояние слабого движения, и состоянием движения фотографируемого объекта является состояние среднего движения, мобильный терминал может выполнять сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 10 секунд до 15 секунд, так как интенсивность света в сценарии фотографирования мобильного терминала находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первым пороговым значением интенсивности света, сценарием фотографирования является сценарий фотографирования средней яркости, состоянием движения мобильного терминала является состояние слабого движения, и состоянием движения фотографируемого объекта является состояние среднего движения, мобильный терминал может продолжить сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 15 секунд до 25 секунд, так как интенсивность света в сценарии фотографирования мобильного терминала находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первым пороговым значением интенсивности света, сценарием фотографирования является сценарий фотографирования средней яркости, состоянием движения мобильного терминала является состояние слабого движения, и состоянием движения фотографируемого объекта является состояние слабого движения, мобильный терминал может продолжить сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 25 секунд до 30 секунд, так как интенсивность света в сценарии фотографирования мобильного терминала меньше, чем второе пороговое значение интенсивности света (например, 100 Люкс), сценарием фотографирования является сценарий фотографирования с низким уровнем яркости, состоянием движения мобильного терминала является состояние слабого движения, и состоянием движения фотографируемого объекта является состояние слабого движения, мобильный терминал может выполнять сбор видеокадра на третьей частоте кадров (для например, 24 кадра в секунду). Когда период времени фотографирования мобильного терминала составляет от 30 секунд до 35-ой секунды, так как интенсивность света в среде, в которой мобильный терминал находится меньше, чем второе пороговое значение интенсивности света (например, 100 Люкс), сценарий фотографирования является сценарием фотографирования с низким уровнем яркости, состоянием движения мобильного терминала является состояние сильного движения, и состоянием движения фотографируемого объекта является состояние слабого движения, мобильный терминал может выполнять сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала от 35-ой секунды до 40-ой секунды, так как интенсивность света в сценарии фотографирования мобильного терминала меньше, чем второе пороговое значение интенсивности света (например, 100 Люкс), сценарием фотографирования является сценарий фотографирования с низким уровнем яркости, состоянием движения мобильного терминала является состояние сильного движения, и состоянием движения фотографируемого объекта является состояние слабого движения, мобильный терминал может снимать видео на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 40-ой секунды до 55-ой секунды, так как интенсивность света в сценарии фотографирования мобильного терминала находится между вторым пороговым значением интенсивности света и первым пороговым значением интенсивности света, сценарием фотографирования является сценарий фотографирования с низким уровнем яркости, состоянием движения мобильного терминала является состоянием сильного движения, и состоянием движения фотографируемого объекта является состояние сильного движения, мобильный терминал может снимать видео на первой частоте кадров (например, 30 кадров в секунду). Когда период времени фотографирования мобильного терминала составляет от 55-ой секунды до 65-ой секунды, так как интенсивность света в сценарии фотографирования мобильного терминала больше, чем первое пороговое значение интенсивности света, сценарием фотографирования является сценарий фотографирования высокой яркости, состоянием движения мобильного терминала является состояние сильного движения, и состоянием движения фотографируемого объекта является состояние слабого движения, мобильный терминал может снимать видео на второй частоте кадров (например, 60 кадров в секунду). Вторая частота кадров (например, 60 кадров в секунду) больше, чем первая частота кадров (например, 30 кадров в секунду), и первая частота кадров больше, чем третья частота кадров (например, 24 кадра в секунду).
В некоторых реализациях, когда мобильный терминал снимает видео, мобильный терминал может отображать текущую частоту кадров записи на сенсорном экране, и, когда частота кадров записи изменяется, может подсказывать пользователю, что частота кадров записи изменяется.
Например, на фиг.17A показан пример пользовательского интерфейса 1710, используемого для съемки изображения. Пользовательский интерфейс 1710 может быть пользовательским интерфейсом, к которому пользователь получает доступ путем касания значка фотокамеры, и не ограничивается этим. Пользователь может альтернативно отобразить в другой прикладной программе пользовательский интерфейс 1710, используемый для съемки изображения. Например, пользователь касается элемента управления фотографированием в приложении WeChat, чтобы отобразить пользовательский интерфейс 1710, используемый для съемки изображения. Как показано на фиг.17A, пользовательский интерфейс 1710, используемый для съемки изображения, может включать в себя: элемент 1711A управления, используемый для включения/выключения фонарика, элемент 1711B управления, используемый для установки цветового режима фотографирования, элемент 1711C управления, используемый для установки различных параметров во время фотографирования, элемент 1712 управления, используемый для регулировки фокусного расстояния, отображаемого в кадре 1713 видоискателя, элемент 1715 управления, используемый для переключения фотокамеры, элемент 1716 управления фотографирования, элемент 1717 управления воспроизведением снятого изображения и элемент управления режимом фотографирования (например, элемент 1718A управления ночным режимом, элемент 1718A управления, элемент 1718B управления портретным режимом, элемент 1718C управления стандартным режимом фотографирования, элемент 1718D управления режимом видео, элемент 1718E управления профессиональным режимом или элемент 1718F управления другими режимами).
Когда режим фотографирования переключается на режим видео, и мобильный терминал принимает операцию 1719 ввода (например, касание), выполняемую пользователем в элементе 1716 управления фотографированием, в ответ на операцию 1719 ввода мобильный терминал может начать запись видео и отобразить интерфейс 1720 записи, показанный на фиг.17B. Как показано на фиг.17B, интерфейс 1720 записи мобильного терминала включает в себя элемент 1721 управления, используемый для включения/выключения фонарика, область 1722 отображения частоты кадров, элемент 1723 управления, используемый для регулировки фокусного расстояния, отображаемого в кадре 1724 видоискателя, область 1725 отображения времени записи, элемент 1726 управления съемкой изображения, элемент 1727 управления остановкой записи и элемент 1728 управления паузой записи.
С учетом вышеизложенного варианта осуществления управления частотой кадров записи на основе интенсивности света в сценарии фотографирования, показанном на фиг.3, при запуске записи видео мобильный терминал может выполнять по умолчанию сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Как показано на фиг.17B, когда моментом времени фотографирования является первая секунда, мобильный терминал выполняет по умолчанию сбор видеокадра с частотой 30 кадров в секунду и отображает текущее значение частоты кадров фотографирования (например, "кадры в секунду: 30") в области 1722 отображения частоты кадров, показанной на фиг.17B. Как показано на фиг.17C, когда моментом времени фотографирования мобильного терминала является 9-я секунда, интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света (например, 1000 Люкс), и мобильный терминал находится в сценарии фотографирования с высокой яркостью. Мобильный терминал может выполнять сбор видеокадра на второй частоте кадров (например, 60 кадров в секунду) и отображать текущее значение частоты кадров фотографирования (например, "кадры в секунду: 60") в области 1722 отображения частоты кадров, показанной на фиг.17С. Как показано на фиг.17D, когда моментом времени фотографирования мобильного терминала является 25-я секунда, интенсивность света в сценарии фотографирования находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первым пороговым значением интенсивности света (например, 1000 Люкс), и сценарием фотографирования является сценарий фотографирования со средней яркостью. Мобильный терминал может выполнять сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду) и отображать текущее значение частоты кадров фотографирования (например, "кадры в секунду: 30") в области 1722 отображения частоты кадров, показанной на фиг.17D. Как показано на фиг.17E, когда моментом времени фотографирования мобильного терминала является 26-я секунда, интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света (например, 100 Люкс), и сценарием фотографирования является сценарий фотографирования с низкой яркостью. Если мобильный терминал по-прежнему выполняет сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду), яркость видеоизображения является относительно низкой. Как показано на фиг.17F, когда моментом времени фотографирования мобильного терминала является 27-я секунда, интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света (например, 100 Люкс), и сценарием фотографирования является сценарий фотографирования с низкой яркостью. Мобильный терминал выполняет сбор видеокадра на третьей частоте кадров (например, 24 кадра в секунду) для повышения яркости видеоизображения и отображает текущее значение частоты кадров записи (например, "кадры в секунду: 24") в области 1722 отображения частоты кадров, показанной на фиг.17F. В сценарии фотографирования с низкой яркостью, так как частота кадров записи уменьшается, видеоизображение, снятое мобильным терминалом, становится более ярким.
В вариантах осуществления настоящей заявки в любом временном интервале видео частота кадров записи во время фотографирования мобильным терминалом совпадает с частотой кадров воспроизведения, используемой тогда, когда видео воспроизводится после завершения фотографирования. Например, мобильный терминал выполняет сбор видеокадра с частотой 30 кадров в секунду в течение от 0-ой секунды до 2-ой секунды видео, сбор видеокадра с частотой 60 кадров в секунду в течение от 2-ой секунды до 10-ой секунды видео, сбор видеокадра с частотой 30 кадров в секунду в течение 10-ой секунды до 55-ой секунды видео, сбор видеокадра с частотой 24 кадра в секунду в течение от 25-ой секунды до 40-ой секунды видео, сбор видеокадра с частотой 30 кадров в секунду в течение от 40-ой секунды до 55-ой секунды видео и сбор видеокадра с частотой 60 кадров в секунду в течение от 55-ой секунды до 65-ой секунды видео. В этом случае после того, как видео снято и выработан видеофайл, мобильный терминал воспроизводит видеофайл с частотой 30 кадров в секунду в течение от 0-ой секунды до 2-ой секунды видео, с частотой 60 кадров в секунду в течение от 2-ой секунды до 10-ой секунды видео, с частотой 30 кадров в секунду в течение от 10-ой секунды до 25-ой секунды видео, с частотой 24 кадра в секунду в течение от 25-ой секунды до 40-ой секунды видео, с частотой 30 кадров в секунду в течение от 40-ой секунды до 55-ой секунды видео и с частотой 60 кадров в секунду в течение от 55-ой секунды до 65-ой секунды видео.
Ниже описана система управления частоты кадров записи 1800, представленная в одном варианте осуществления настоящей заявки.
На фиг.18 показана схематичная блок-схема системы управления частотой кадров записи согласно варианту осуществления настоящей заявки. Как показано на фиг.18, система 1800 управления частотой кадров записи может включать в себя центральный процессор 1810, датчик 1830 изображения, процессор 1840 изображения, модуль 1850 кодирования, память 1860, датчик 1870 угловой скорости и датчик 1880 перемещения.
Центральный процессор 1810 может включать в себя модуль 1811 обнаружения яркости окружающего света, модуль 1812 обнаружения движения мобильного терминала, модуль 1813 обнаружения движения фотографируемого объекта и модуль 1820 распознавания фотографируемого объекта. Модуль 1820 распознавания фотографируемого объекта может включать в себя модуль 1821 распознавания лица, модуль 1822 распознавания тела человека, модуль 1823 распознавания действий и модуль 1824 распознавания транспортного средства. Центральный процессор 1810 может быть выполнен с возможностью управления во время видеосъемки частотой кадров записи датчика 1830 изображения на основе одного или нескольких из трех факторов: яркости сценария фотографирования, состояния движения мобильного терминала и состояния движения фотографируемого объекта.
Модуль 1812 обнаружения движения мобильного терминала может обнаруживать состояние движения мобильного терминала на основе данных угловой скорости, отправленных датчиком 1870 угла поворота, и/или данных перемещения, отправленных датчиком 1880 перемещения. Модуль 1813 обнаружения движения фотографируемого объекта может быть выполнен с возможностью обнаружения состояния движения фотографируемого объекта (например, лица, тела человека, действия или транспортного средства) на основе фотографируемого объекта, распознанного блоком 1820 распознавания фотографируемого объекта. Модуль 1821 распознавания лица выполнен с возможностью распознавания лица по изображению, снятому фотокамерой, модуль 1822 распознавания тела человека выполнен с возможностью распознавания тела человека по изображению, захваченному фотокамерой, модуль 1823 распознавания действий выполнен с возможностью распознавания действия по изображению, захваченному фотокамерой, и модуль 1824 распознавания транспортного средства выполнен с возможностью распознавания транспортного средства по изображению, захваченному фотокамерой.
Датчик 1830 изображения может быть выполнен с возможностью восприятия света и выработки изображения. Датчик изображения 1830 может быть датчиком, выполненным из комплементарного металлооксидного полупроводника (complementary metal oxide semiconductor, CMOS), или может быть оптическим датчиком изображения, таким как датчик прибора с зарядовой связью (charge-coupled device, CCD). Процессор 1840 изображения может быть выполнен с возможностью обработки изображения, вырабатываемого датчиком 1830 изображения, для получения данных, таких как данные изображения и параметра экспозиции, и отправки данных в центральный процессор 1810. Датчик 1830 изображения дополнительно выполнен с возможностью: выполнения обработки данных на изображении, выработанном датчиком 1830 изображения посредством восприятия света, для получения данных изображения и отправки данных изображения в модуль 1850 кодирования. Модуль 1850 кодирования может быть выполнен с возможностью кодирования данных изображения для получения видеофайла 1861 и хранения видеофайла 1861 в памяти 1860.
Датчика 1870 угла поворота может быть выполнен с возможностью обнаружения движения поворота устройства в направлении X, направлении Y и направлении Z в трехмерной системе координат. Датчик 1870 угла поворота может быть гироскопом или другим датчиком движения. Датчик 1870 угла поворота может быть установлен на корпусе устройства или в модуле фотокамеры. Если датчиком 1870 угла поворота является гироскоп, выходной сигнал гироскопа представляет угловую скорость движения мобильного терминала. Угол, на который поворачивается мобильный терминал, может быть получен путем выполнения однократного интегрирования сигнала гироскопа. Гироскоп может быть микро-механическим (micro electro mechanical systems, MEMS) гироскопом.
Датчик 1880 перемещения может быть выполнен с возможностью обнаружения поступательного движения устройства в направлениях X, Y и Z в трехмерной системе координат. Датчик 1880 перемещения может быть акселерометром или другим датчиком движения. Датчик 1880 перемещения может быть установлен на корпусе мобильного терминала или может быть установлен в модуле фотокамеры. Если датчик 1880 перемещения является датчиком ускорения, выходной сигнал датчика ускорения представляет собой ускорение движения устройства. Линейная скорость во время движения устройства может быть получена путем однократного интегрирования сигнала датчика ускорения, и расстояние, на которое перемещается устройство, может быть получено путем интегрирования линейной скорости. Датчик ускорения может быть пьезоэлектрическим акселерометром MEMS или емкостным акселерометром MEMS. Пьезоэлектрический акселерометр MEMS использует пьезоэлектрический эффект. В пьезоэлектрическом акселерометре MEMS имеется блок массы, поддерживаемый твердым телом. Когда устройство движется, блок масс создает давление, и твердое тело создает напряжение, чтобы преобразовать ускорение в электрический сигнал для вывода. Внутри емкостного акселерометра MEMS также имеется блок массы, который представляет собой стандартный пластинчатый конденсатор. Изменение ускорения приводит в движение движущийся блок массы, который изменяет расстояние между двумя полюсами пластинчатого конденсатора и площадь перекрытия, и ускорение вычисляется путем измерения величины изменения емкости. В одной реализации гироскоп и акселерометр могут быть спроектированы в одном и том же электронном компоненте или могут быть спроектированы отдельно как два независимых электронных компонента.
Ниже приведено описание того, как мобильный терминал определяет то, что интенсивность света в сценарии фотографирования, в котором мобильный терминал записывает видео, является высокой, средней или низкой в данном варианте осуществления настоящей заявки.
Мобильный терминал может определить интенсивность света в сценарии фотографирования, используя параметр экспозиции изображения, полученный процессором 1840 изображения, выполняя обработку изображения.
Когда значение ISO параметра экспозиции изображения меньше первого порогового значения параметра экспозиции (например, 800), это может указывать на то, что интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света (например, 1000 Люкс), и мобильный терминал может определить то, что интенсивность света в сценарии фотографирования является высокой.
Когда значение ISO больше второго порогового значения параметра экспозиции (например, 2000), это может указывать на то, что интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света (например, 100 Люкс), и мобильный терминал может определить то, что яркость в сценарии фотографирования низкая.
Когда значение ISO находится между первым пороговым значением параметра экспозиции (например, 800) и вторым пороговым значением параметра экспозиции (например, 2000), это может указывать на то, что интенсивность света в сценарии фотографирования находится между вторым пороговым значением интенсивности света (например, 100 Люкс) и первым пороговым значением интенсивности света (например, 1000 Люкс), и мобильный терминал может определить то, что интенсивность света в сценарии фотографирования является средней.
Первое пороговое значение интенсивности света больше, чем второе пороговое значение интенсивности света. Пороговое значение первого параметра экспозиции меньше, чем второе пороговое значение параметра экспозиции. Первое пороговое значение параметра экспозиции может быть другим стандартным значением и не ограничивается 800. Второе пороговое значение параметра экспозиции может быть другим стандартным значением и не ограничивается 2000. Параметр для определения интенсивности света в сценарии фотографирования альтернативно может быть другим параметром экспозиции или информацией об изображении, отличной от ISO, например, может быть временем автоматической экспозиции или информацией о пикселях изображения. В данном документе этот случай не является ограничением.
Например, фиг.19 показана схематичная блок-схема последовательности операций способа управления частотой кадров записи согласно варианту осуществления настоящей заявки. На фиг.19, мобильный терминал использует значение ISO параметра экспозиции изображения в качестве основы для определения интенсивности света в сценарии фотографирования и управляет частотой кадров записи во время видеозаписи на основе интенсивности света в сценарии фотографирования, состояния движения мобильного терминала и состояния движения фотографируемого объекта.
Как показано на фиг.19, мобильный терминал может сначала записать видео на второй частоте кадров (например, 30 кадров в секунду) по умолчанию и динамически переключаться на первую частоту кадров (например, 60 кадров в секунду) или третью частоту кадров (например, 24 кадра в секунду) на основе интенсивности света в сценарии фотографирования, состояния движения мобильного терминала и состояния движения фотографируемого объекта. Когда значение ISO параметра экспозиции изображения меньше 800, и мобильный терминал находится в состоянии сильного движения, или, когда значение ISO параметра экспозиции изображения меньше 800, и фотографируемый объект находится в состоянии сильного движения, мобильный терминал может записывать видео на первой частоте кадров (а именно 60 кадров в секунду). Когда значение ISO параметра экспозиции изображения больше 2000, мобильный терминал находится в состоянии слабого движения, и фотографируемый объект находится в состоянии слабого движения, мобильный терминал может записывать видео на третьей частоте кадров (например, 24 кадра в секунду). В других условиях мобильный терминал может записывать видео на второй частоте кадров (например, 30 кадров в секунду).
В качестве альтернативы, мобильный терминал может сначала записать видео на первой частоте кадров (например, 60 кадров в секунду) или третьей частотой кадров (например, 24 кадра в секунду), и затем динамически переключать частоту кадров записи на 60 кадров в секунду, 30 кадров в секунду или 24 кадра в секунду в зависимости от яркости в сценарии фотографирования, состояния движения мобильного терминала и состояния движения фотографируемого объекта. В данном документе этот случай не является ограничением.
Таким образом, когда мобильный терминал находится в сценарии фотографирования с высокой яркостью, и мобильный терминал находится в сценарии сильного движения, или фотографируемый объект находится в сценарии сильного движения, изображения снятого видео становятся более плавными и более четкими. В сценарии фотографирования с низкой яркостью, когда мобильный терминал находится в сценарии слабого движения, и фотографируемый объект находится в сценарии слабого движения, яркость изображений снятого видео более высокой, и шум становится более низким.
В примере реализации, когда мобильный терминал находится в режиме записи видео, мобильный терминал может сначала выполнить сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Если мобильный терминал обнаруживает, что значение ISO параметра экспозиции изображения собранного видеокадра меньше порогового значение параметра первого экспозиции (например, 800), мобильный терминал может настроить первую частоту кадров на вторую частоту кадров (например, 60 кадров в секунду), чтобы выполнить сбор видеокадра. Когда мобильный терминал выполняет сбор видеокадра на второй частоте кадров (например, 60 кадров в секунду), если мобильный терминал обнаруживает, что значение ISO параметра экспозиции изображения собираемого видеокадра между третьим пороговым значением параметра экспозиции (например, 800) и между четвертым пороговым значением параметра экспозиции (например, 1900), мобильный терминал может настроить вторую частоту кадров на первую частоту кадров (например, 30 кадров в секунду), чтобы собрать видеокадр. Когда мобильный терминал находится в режиме записи видео, мобильный терминал может сначала выполнить сбор видеокадра на первой частоте кадров (например, 30 кадров в секунду). Если мобильный терминал обнаруживает, что значение ISO параметра экспозиции изображения собранного видеокадра больше, чем пороговое значение параметра второго экспозиции (например, 2000), мобильный терминал может настроить первую частоту кадров на третью частоту кадров (например, 24 кадра в секунду), чтобы выполнить сбор видеокадра. Если мобильный терминал сначала выполняет сбор видеокадра на третьей частоте кадров (например, 24 кадра в секунду), когда мобильный терминал обнаруживает, что значение ISO параметра экспозиции изображения собранного видеокадра находится между третьим пороговым значением параметра экспозиции (например, 900) и четвертым пороговым значением параметра экспозиции (например, 1900), мобильный терминал может настроить третью частоту кадров на первую частоту кадров (например, 30 кадров в секунду), чтобы собрать видеокадр. Первое пороговое значение параметра экспозиции меньше третьего порогового значения параметра экспозиции, третье пороговое значение параметра экспозиции меньше, чем четвертое пороговое значение параметра экспозиции, и четвертое пороговое значение параметра экспозиции меньше, чем второе пороговое значение параметра экспозиции. разность между первым пороговым значением параметров экспозиции и третьим пороговым значением параметра экспозиции равна заданной разности (например, 100), и разность между третьим пороговым значением параметра экспозиции и пороговым параметром экспозиции четвертым равна заданной разности (например, 100), Таким образом, можно избежать частых изменений частоты кадров записи, которые возникают тогда, когда значение ISO параметра экспозиции видеокадров изменяется около первого порогового значения параметра экспозиции или второго порогового значения параметра экспозиции.
Ниже приведено описание того, как мобильный терминал определяет то, что состоянием движения мобильного терминала является состояние сильного движения, состояние среднего движения или состояние слабого движения в данном варианте осуществления настоящей заявки.
(1) Мобильный терминал может определить состояние движения мобильного терминала, используя данные, измеренные гироскопом.
Мобильный терминал может вычислять, используя данные, измеренные трехосным гироскопом XYZ, среднеквадратичные значения Rx, Ry и Rz данных измерений в направлениях X, Y и Z в трехмерной системе координат. Rx – среднеквадратичное значение данных, измеренное гироскопом в направлении оси X, Ry – среднеквадратичное значение данных, измеренное гироскопом в направлении оси Y, и Rz – среднеквадратичное значение данных, измеренное гироскопом в направлении оси Z. Rx можно вычислить по следующей формуле (1), где N – количество групп данных, измеренных гироскопом, и i-я группа данных, измеренных гироскопом по оси X. Ry можно вычислить по следующей формуле (2) и представляет собой i-ю группу данных, измеренных гироскопом по оси Y. Rz можно вычислить по следующей формуле (3) и представляет собой i-ю группу данных, измеренных гироскопом по оси Z.
Формула (1)
Формула (2)
Формула (3)
Когда Rx, Ry или Rz больше первого значения, мобильный терминал может определить то, что состоянием движения мобильного терминала является состояние сильного движения.
Когда все Rx, Ry и Rz меньше второго значения, мобильный терминал может определить то, что состоянием движения мобильного терминала является состояние слабого движения, где первое значение больше второго значения.
Когда Rx, Ry и Rz удовлетворяют другому условию, мобильный терминал может определить то, что состоянием движения мобильного терминала является состояние среднего движения.
В реализации, когда терминал вращается с постоянной скоростью, терминал может рассматриваться как находящийся в состоянии сильного движения. Когда мобильный терминал вращается с постоянной скоростью, данные гироскопа по одной оси (например, по оси X, оси Y или оси Z) определенно больше, чем данные гироскопа по двум другим осям, и данные гироскопа по этой оси направления являются стабильными и не имеют обратного полярного колебания. Таким образом, мобильный терминал может обнаруживать состояние вращения, используя стандартное отклонение сигнала и амплитуду сигнала. Sx можно вычислить по следующей формуле (4), где N – количество групп данных, измеренных гироскопом, – i-я группа данных, измеренных гироскопом по оси X, и r – среднее значение N группы данных гироскопа по оси X. Sy можно вычислить по следующей формуле (5), где – i-я группа данных, измеренных гироскопом по оси Y, и s – среднее значение N групп данных гироскопа по оси Y. Sz можно вычислить по следующей формуле (6), где – i-я группа данных, измеренных гироскопом по оси Z, и t – среднее значение N групп данных гироскопа по оси Z.
Формула (4)
Формула (5)
Формула (6)
Когда все Sx, Sy и Sz меньше значения, и любое из Rx, Ry или Rz больше первого значения, мобильный терминал может определить то, что состоянием движения мобильного терминала является состояние сильного движения.
Когда все Rx, Ry и Rz меньше второго значения, мобильный терминал может определить то, что состоянием движения мобильного терминала является состояние слабого движения.
Когда Rx, Ry и Rz удовлетворяют другому условию, мобильный терминал может определить то, что состоянием движения мобильного терминала является состояние среднего движения.
(2) Мобильный терминал может определить состояние движения мобильного терминала, используя данные, измеренные акселерометром.
Мобильный терминал может вычислять, используя данные, измеренные трехосным акселерометром XYZ, среднеквадратичные значения Ax, Ay и Az измеренных данных в направлениях X, Y и Z в трехмерной системе координат. Ax – среднеквадратичное значение данных, измеренное акселерометром в направлении оси X. Ay – среднеквадратичное значение данных, измеренное акселерометром в направлении оси Y. Az – среднеквадратичное значение данных, измеренное акселерометром в направлении оси Z. Rx можно вычислить по следующей формуле (7), где M – количество групп данных, измеренных акселерометром, и i-я группа данных, измеренных акселерометром по оси X. Ry можно вычислить по следующей формуле (8) и представляет собой i-ю группу данных, измеренных акселерометром по оси Y. Rz можно вычислить по следующей формуле (9) и представляет собой i-ю группу данных, измеренных акселерометром по оси Z.
Формула (7)
Формула (8)
Формула (9)
Когда Ax, Ay или Az больше третьего значения, мобильный терминал может определить то, что состоянием движения мобильного терминала является состояние сильного движения.
Когда Ax, Ay и Az меньше четвертого значения, мобильный терминал может определить то, что состоянием движения мобильного терминала является состояние слабого движения, где третье значение больше четвертого значения.
Когда Ax, Ay и Az удовлетворяют другому условию, мобильный терминал может определить то, что состоянием движения мобильного терминала является состояние среднего движения.
Ниже приведено описание того, как мобильный терминал определяет состояние движения фотографируемого объекта в изображении снимаемого видео в данном варианте осуществления настоящей заявки.
Мобильный терминал может обнаруживать, используя модуль 1821 распознавания лиц, модуль 1822 распознавания человеческого тела, модуль 1823 распознавания действий, модуль 1824 распознавания транспортных средств и т.п., фотографируемый объект, такой как лицо, тело человека или транспортное средство в изображении видео. Мобильный терминал может определить состояние движения фотографируемого объекта путем сравнения местоположения одного и того же фотографируемого объекта в двух или более последовательных кадрах изображений.
Когда расстояние движения одного и того же фотографируемого объекта между двумя или более кадрами изображений больше, чем первое пороговое значение расстояния, мобильный терминал может определить то, что состоянием движения фотографируемого объекта является состояние сильного движения.
Когда расстояние движения одного и того же фотографируемого объекта между двумя или более кадрами изображений находится между первым пороговым значением расстояния и вторым пороговым значением расстояния, мобильный терминал может определить то, что состоянием движения фотографируемого объекта является состояние среднего движения.
Когда расстояние движения одного и того же фотографируемого объекта между двумя или более кадрами изображений меньше, чем второе пороговое значение расстояния, мобильный терминал может определить то, что состоянием движения фотографируемого объекта является состояние слабого движения.
На фиг.20 показана схематичная блок-схема последовательности операций способа записи управления частотой кадров согласно варианту осуществления настоящей заявки. Как показано на фиг.20, способ управления частотой кадров записи может включать в себя следующие этапы.
S2001: Мобильный терминал принимает первый пользовательский ввод.
Первым вводом может быть операция 1719 ввода, показанная на фиг.17А. Для конкретного содержания следует обратиться к вышеизложенному варианту осуществления, показанному на фиг.17А. Подробности в данном документе повторно не описываются.
S2002: В ответ на первый пользовательский ввод мобильный терминал начинает запись видео.
Для получения подробной информации следует обратиться к вышеизложенному варианту осуществления, показанному на фиг.17B. Подробности в данном документе повторно не описываются.
S2003: Мобильный терминал выполняет сбор N видеокадров сценария фотографирования на первой частоте кадров.
Первая частота кадров может составлять 30 кадров в секунду, но она не ограничивается 30 кадрами в секунду. В данном документе этот случай не является ограничением. Сценарий фотографирования может быть сценарием фотографирования, показанным на фиг.17A-17F. Например, когда пользователь использует мобильный терминал для записи видео ночью, пользователь сначала фотографирует члена семьи при свете комнаты, то есть сценарием фотографирования мобильного терминала сначала является сценарий, когда мобильный терминал находится в здании. Затем объектив поворачивают на улицу без освещения и продолжают снимать ночную сцену на улице. В этом случае сценарий фотографирования мобильного терминала переключается на сценарий на открытом воздухе.
S2004: Мобильный терминал определяет интенсивность света в сценарии фотографирования на основе собранных N видеокадров и автоматически регулирует частоту кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования.
Мобильный терминал может определить, меньше ли параметры экспозиции N видеокадров, чем первое пороговое значение параметра экспозиции; и, если "Да", мобильный терминал определяет то, что интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света. Мобильный терминал может определить то, больше ли параметры экспозиции N видеокадров, чем второе пороговое значение параметра экспозиции; и, если "Да", мобильный терминал определяет то, что интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света. Например, параметр экспозиция может быть ISO, и первый пороговый показатель экспозиции (например, 800) меньше, чем второе пороговое значение параметра экспозиции (например, 2000). Первое пороговое значение интенсивности света (например, 1000 Люкс) больше, чем второе пороговое значение интенсивности света (например, 100 Люкс). Приведенные выше примеры используются просто для объяснения настоящей заявки, и они не являются ограничением в данном документе.
В примере реализации, мобильный терминал настраивает частоту кадров записи мобильного терминала на вторую частоту кадров, когда интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света (например, 2000 Люкс), где вторая частота кадров (например, 60 кадров в секунду) больше, чем первая частота кадров (например, 30 кадров в секунду). Таким образом, когда интенсивность света в сценарии фотографирования является относительно высокой, экспозиция видеокадра, снятого мобильным терминалом, является адекватной, и мобильный терминал может увеличить частоту кадров снимаемого видео. Из-за увеличения частоты кадров, количество кадров изображений, снятых мобильным терминалом в секунду увеличивается, и видео становится более плавным. Динамическая регулировка частоты кадров на основе интенсивности света в случае фотографирования позволяет повысить яркость изображения видео, снятого мобильным терминалом в относительно темном сценарии фотографирования, и повысить плавность изображения видео, снятого мобильным терминалом в относительно светлом сценарии фотографирования, для повышения качества видеоизображения.
В реализации мобильный терминал настраивает частоту кадров записи мобильного терминала на третью частоту кадров, когда интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света (например, 100 Люкс), где третья частота кадров (например, 24 кадра в секунду) больше, чем первая частота кадров (например, 30 кадров в секунду). Таким образом, когда интенсивность света в сценарии фотографирования является относительно маленькой, экспозиция видео, снятого мобильным терминалом, является неадекватной, и мобильный терминал может уменьшить частоту кадров снимаемого видео. Из-за уменьшения частоты кадров период времени экспозиции каждого видеокадра на мобильном терминале увеличивается, и яркость видеоизображения может быть повышена.
В реализации, когда мобильный терминал выполняет сбор видеокадра сценария фотографирования на второй частоте кадров (например, 60 кадров в секунду), мобильный терминал может определить, больше ли параметр экспозиции (например, значение ISO) текущего собранного видеокадра, чем третье пороговое значение параметра экспозиции (например, 900), и меньше ли он, чем второе пороговое значение параметра экспозиции (например, 2000). Если "Да", мобильный терминал настраивает частоту кадров записи мобильного терминала на первую частоту кадров (например, 30 кадров в секунду). Первое пороговое значение параметра экспозиции (например, 800) меньше, чем третье пороговое значение параметра экспозиции (например, 900), и третье пороговое значение параметра экспозиции меньше, чем второе пороговое значение параметра экспозиции (например, 2000). Таким образом, можно избежать частого переключения частоты кадров записи между первой частотой кадров и второй частотой кадров, когда параметр экспозиции видеокадра изменяется около первого порогового значения параметра экспозиции.
В примере реализации, когда мобильный терминал выполняет сбор видеокадра сценария фотографирования на третьей частотой кадров (например, 24 кадра в секунду), мобильный терминал может определить то, меньше ли параметр экспозиции (например, значение ISO) текущего собранного видеокадра, чем четвертое пороговое значение параметра экспозиции (например, 1900), и больше ли он, чем первое пороговое значение параметра экспозиции (например, 800). Если "Да", мобильный терминал настраивает частоту кадров записи мобильного терминала на первую частоту кадров (например, 30 кадров в секунду). Первое пороговое значение параметра экспозиции (например, 800) меньше, чем четвертое пороговое значение параметра экспозиции (например, 1900), и четвертое пороговое значение параметра экспозиции меньше, чем второе пороговое значение параметра экспозиции (например, 2000). Таким образом, можно избежать частого переключения частоты кадров записи между первой частотой кадров и третьей частотой кадров, если параметр экспозиции видеокадра изменяется около второго порогового значения параметра экспозиции.
В реализации мобильный терминал может определить то, больше ли интенсивность света в сценарии фотографирования, чем первое пороговое значение интенсивности света (например, 1000 Люкс), и больше ли смещение, вызванное движением мобильного терминала, чем первое пороговое значение расстояния (например, 1 метр), или определить то, больше ли интенсивность света в сценарии фотографирования, чем первое пороговое значение интенсивности света, и скорость движения мобильного терминала превышает первое пороговое значение скорости (например, 1 метр в секунду); и, если "Да", мобильный терминал настраивает частоту кадров записи мобильного терминала на вторую частоту кадров (например, 60 кадров в секунду), где вторая частота кадров (например, 60 кадров в секунду) больше, чем первая частота кадров (для например, 30 кадров в секунду).
Мобильный терминал может определить то, меньше ли интенсивность света в сценарии фотографирования, чем второе пороговое значение интенсивности света (например, 100 Люкс), меньше ли смещение, вызванное движением мобильного терминала, чем второе пороговое значение расстояния (например, 0,5 метра), и меньше ли скорость движения, чем второе пороговое значение скорости (например, 0,5 метра в секунду). Если "Да", мобильный терминал настраивает частоту кадров записи мобильного терминала на третью частоту кадров (например, 24 кадра в секунду), где третья частота кадров (например, 24 кадра в секунду) меньше первой частоты кадров (например, 30 кадров в секунду). Второе пороговое значение расстояния (например, 0,5 метра) меньше первого порогового значения расстояния (например, 1 метр в секунду), и второе пороговое значение скорости (например, 0,5 метра в секунду) меньше первого порогового значения скорости (например, 1 метр в секунду). Для конкретной реализации измерения смещения, вызванного движением мобильного терминала, и скорости движения мобильного терминала следует обратиться к вышеизложенному содержанию определения состояния движения мобильным терминалом. Подробности в данном документе повторно не описываются.
Таким образом, когда мобильный терминал сильно движется, частота кадров записи увеличивается, период времени экспозиции каждого кадра изображения, снятого мобильным терминалом, уменьшается, и размытость видеоизображения, вызванная движением мобильного терминала, уменьшается. Таким образом, размытость при движении видео, снятого мобильным терминалом в состоянии сильного движения, может быть уменьшена для повышения плавности видео и качества видеоизображения.
В одном варианте осуществления изобретения мобильный терминал может определить то, является ли интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света (например, 1000 Люкс), и больше ли смещение одного и того же фотографируемого объекта в любых двух из видеокадров N, чем третье пороговое значение расстояния (например, 1 сантиметр). Если "Да", мобильный терминал настраивает частоту кадров записи мобильного терминала на вторую частоту кадров (например, 60 кадров в секунду), где вторая частота кадров (например, 60 кадров в секунду) больше, чем первая частота кадров (например, 30 кадров в секунду).
Мобильный терминал может определить, меньше ли интенсивность света в сценарии фотографирования, чем второе пороговое значение интенсивности света (например, 100 Люкс), и меньше ли смещение одного и того же фотографируемого объекта в любых двух из N видеокадров, чем четвертое пороговое значение расстояния (например, 1 сантиметр). Если "Да", мобильный терминал настраивает частоту кадров записи мобильного терминала на третью частоту кадров (например, 24 кадра в секунду), где третья частота кадров (например, 24 кадра в секунду) меньше первой частоты кадров (например, 30 кадров в секунду). Для конкретной реализации измерения смещения фотографируемого объекта мобильным терминалом следует обратиться к вышеизложенному содержанию определения состояния движения фотографируемого объекта на снятом мобильным терминалом изображении. Подробности в данном документе повторно не описываются.
Таким образом, так как частота кадров записи увеличивается тогда, когда сфотографированный объект сильно движется, период времени экспозиции каждого кадра изображения, сфотографированного мобильным терминалом, уменьшается, и размытие видеоизображения, вызванное движением фотографируемым объектом, уменьшается. Так как частота кадров записи уменьшается тогда, когда фотографируемый объект немного смещается, количество кадров изображений, снимаемых в секунду, уменьшается, и период времени экспозиции каждого кадра изображения увеличивается. Таким образом, можно обеспечить яркость изображения снятого видео и уменьшить потребление энергии, вызванное обработкой мобильным терминалом снятых изображений. Таким образом, размытость изображения при движении на видео, снятом, когда фотографируемый объект находится в состоянии сильного движения, может быть уменьшена для повышения плавности видео и качества видеоизображения.
В реализации мобильный терминал может определить то, выполняется ли следующее условие: интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света (например, 1000 Люкс), и смещение, вызванное движением мобильного терминала, больше, чем первое пороговое значение расстояния (например, 1 метр), или скорость движения мобильного терминала больше, чем первое пороговое значение скорости (например, 1 метр в секунду); или интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света (например, 1000 Люкс), и смещение одного и того же фотографируемого объекта в любых двух из N видеокадров меньше, чем третье пороговое значение расстояния (например, 2 сантиметра). Если "Да", мобильный терминал настраивает частоту кадров записи мобильного терминала на вторую частоту кадров (например, 60 кадров в секунду), где вторая частота кадров (например, 60 кадров в секунду) больше, чем первая частота кадров (например, 30 кадров в секунду).
Мобильный терминал может определить то, выполняется ли следующее условие: интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света (например, 100 Люкс), и смещение, вызванное движением мобильного терминала, меньше, чем второе пороговое значение расстояния (например, 0,5 метра), и смещение одного и того же фотографируемого объекта в любых двух из N видеокадров меньше, чем четвертое пороговое значение расстояния (например, 1 сантиметр); или интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света (например, 100 Люкс), скорость движения мобильного терминала меньше, чем второе пороговое значение скорости (например, 0,5 метра в секунду), и смещение одного и того же фотографируемого объекта в любых двух из N видеокадров меньше, чем четвертое пороговое значение расстояния (например, 1 сантиметр). Если "Да", мобильный терминал настраивает частоту кадров записи мобильного терминала на третью частоту кадров (например, 24 кадра в секунду).
Таким образом, так как частота кадров записи является высокой, когда интенсивность света в сценарии фотографирования является высокой, и мобильный терминал находится в состоянии сильного движения, количество кадров изображений, снимаемых мобильным терминалом в секунду, увеличивается, и период времени экспозиции каждого кадра изображения уменьшается. Таким образом, размытость видеоизображения при движении, вызванная сильным движением мобильного терминала, может быть уменьшена для повышения плавности видео. Кроме того, так как интенсивность света в сценарии фотографирования является высокой, даже если частота кадров записи является высокой, каждый кадр изображения будет относительно ярким. Так как частота кадров записи является низкой, когда интенсивность света в сценарии фотографирования является маленькой, и мобильный терминал находится в состоянии слабого движения, количество кадров изображений, снимаемых мобильным терминалом в секунду, уменьшается, и период времени экспозиции каждого кадра изображения увеличивается. Таким образом, повышается яркость изображения видео в условиях низкой яркости. Таким образом, с учетом интенсивности окружающего света и состояния движения мобильного терминала, яркость изображения видео и плавность видео в сценарии с высокой яркостью повышаются за счет управления на нескольких уровнях частоты кадров.
S2005: Мобильный терминал продолжает сбор видеокадра сценария фотографирования на основе частоты кадров записи, полученной после регулировки.
S2006: Мобильный терминал генерирует видеофайл на основе видеокадров, которые собираются на первой частоте кадров, и видеокадра, который собирается на основе частоты кадров записи, полученной после регулировки.
Для процесса, в котором мобильный терминал генерирует видеофайл, следует обратиться к вышеизложенному варианту осуществления, показанному на фиг.18. Подробности в данном документе повторно не описываются.
В данном варианте осуществления настоящей заявки частотой кадров записи мобильного терминала можно управлять на основе одного или нескольких из следующих трех факторов: интенсивности света в сценарии фотографирования во время видеозаписи, выполняемой мобильным терминалом, состояния движения мобильного терминала и состояния движения фотографируемого объекта. Мобильный терминал автоматически регулирует частоту кадров записи на основе интенсивности света в сценарии фотографирования, чтобы повысить яркость видеоизображения в сценарии с низкой яркостью и плавность видео в сценарии с высокой яркостью. Мобильный терминал управляет частотой кадров на основе состояния движения мобильного терминала, чтобы повысить плавность видео, снятого мобильным терминалом во время движения. Мобильный терминал управляет частотой кадров на основе состояния движения фотографируемого объекта, чтобы повысить плавность изображения, когда на видеоизображении присутствует движущийся объект, и уменьшить размытость движения, вызванную движением фотографируемого объекта на снятом изображении. Таким образом, частота кадров записи мобильного терминала регулируется автоматически, и повышается качество видеоизображения.
В заключение, вышеизложенные варианты осуществления предназначены просто для описания технических решений настоящей заявки, но не для ограничения настоящей заявки. Хотя настоящая заявка подробно описана со ссылкой на вышеизложенные варианты осуществления, специалисты в данной области техники должны понимать, что они все еще могут вносить изменения в технические решения, описанные в вышеизложенных вариантах осуществления, или производить эквивалентные замены некоторых их технических характеристик. Эти модификации или замены не выводят сущность соответствующих технических решений за рамки технических решений вариантов осуществления настоящей заявки.
Изобретение относится к мобильным оконечным устройствам захвата изображения. Техническим результатом является повышение качества видеоизображения за счет автоматического регулирования частоты кадров, используемой во время видеозаписи. Результат достигается тем, что мобильный терминал принимает первый пользовательский ввод и мобильный терминал начинает запись видео в ответ на первый пользовательский ввод. Затем мобильный терминал выполняет сбор N видеокадров сценария фотографирования на первой частоте кадров. Затем мобильный терминал определяет интенсивность света в сценарии фотографирования на основе собранных N видеокадров и автоматически регулирует частоту кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования, где частота кадров записи, полученная после регулировки, отличается от первой частоты кадров, и N является положительным целым числом, большим 2. Кроме того, мобильный терминал продолжает сбор видеокадра сценария фотографирования на основе частоты кадров записи, полученной после регулировки. Наконец, мобильный терминал генерирует видеофайл на основе видеокадров, которые собираются на первой частоте кадров, и видеокадра, который собирается на основе частоты кадров записи, полученной после регулировки. 3 н. и 12 з.п. ф-лы, 37 ил. 
1. Способ управления частотой кадров записи, содержащий этапы, на которых:
принимают, с помощью мобильного терминала, первый пользовательский ввод;
запускают, с помощью мобильного терминала, видеозапись в ответ на первый пользовательский ввод;
собирают, с помощью мобильного терминала, N видеокадров сценария фотографирования с первой частотой кадров;
определяют, с помощью мобильного терминала, интенсивность света в сценарии фотографирования на основе собранных N видеокадров и осуществляют автоматическую регулировку частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования, причем частота кадров записи, полученная после регулировки, отличается от первой частоты кадров, где N является положительным целым числом, большим 2;
продолжают собирать, с помощью мобильного терминала, видеокадры сценария фотографирования на основе частоты кадров записи, полученной после регулировки;
регулируют, с помощью мобильного терминала, яркость изображения видеокадра в соответствии с яркостью изображения соответствующей отрегулированной частоты кадров записи; и
формируют, с помощью мобильного терминала, видеофайл на основе видеокадров, собранных с первой частотой кадров, и видеокадров, собранных на основе частоты кадров записи, полученной после регулировки.
2. Способ по п.1, в котором этап определения, с помощью мобильного терминала, интенсивности света в сценарии фотографирования на основе собранных N видеокадров содержит подэтапы, на которых:
определяют, с помощью мобильного терминала, меньше ли параметры экспозиции N видеокадров, чем пороговое значение первого параметра экспозиции; и, если "Да", определяют, с помощью мобильного терминала, что интенсивность света в сценарии фотографирования больше первого порогового значения интенсивности света.
3. Способ по п.1 или 2, в котором этап определения, с помощью мобильного терминала, интенсивности света в сценарии фотографирования на основе собранных N видеокадров содержит подэтапы, на которых:
определяют, с помощью мобильного терминала, превышают ли параметры экспозиции N видеокадров второе пороговое значение параметра экспозиции; и, если "Да", определяют, с помощью мобильного терминала, что интенсивность света в сценарии фотографирования меньше второго порогового значения интенсивности света.
4. Способ по п.1 или 2, в котором этап осуществления автоматической регулировки частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования содержит подэтапы, на которых:
осуществляют настройку, с помощью мобильного терминала, частоты кадров записи мобильного терминала на вторую частоту кадров, когда интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света, причем вторая частота кадров больше, чем первая частота кадров.
5. Способ по любому из пп.1, 3 или 4, в котором этап осуществления автоматической регулировки частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования содержит подэтап, на котором:
осуществляют настройку, с помощью мобильного терминала, частоты кадров записи мобильного терминала на третью частоту кадров, когда интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света, причем третья частота кадров меньше первой частоты кадров и второе пороговое значение интенсивности света меньше первого порогового значения интенсивности света.
6. Способ по п.4, дополнительно содержащий, при выполнении, с помощью мобильного терминала, сбора видеокадров сценария фотографирования со второй частотой кадров, подэтапы, на которых:
определяют, с помощью мобильного терминала, больше ли параметр экспозиции собираемого в данный момент видеокадра, чем третье пороговое значение параметра экспозиции, и меньше ли он, чем второе пороговое значение параметра экспозиции; и, если "Да", выполняют, с помощью мобильного терминала, настройку частоты кадров записи мобильного терминала на первую частоту кадров, причем первое пороговое значение параметра экспозиции меньше третьего порогового значения параметра экспозиции, и третье пороговое значение параметра экспозиции меньше второго порогового значения параметра экспозиции.
7. Способ по п.5, дополнительно содержащий, при выполнении, с помощью мобильного терминала, сбора видеокадров сценария фотографирования с третьей частотой кадров, этапы, на которых:
определяют, с помощью мобильного терминала, меньше ли параметр экспозиции собранного на данный момент видеокадра, чем четвертое пороговое значение параметра экспозиции, и больше ли он, чем первое пороговое значение параметра экспозиции; и, если "Да", выполняют настройку, с помощью мобильного терминала, частоты кадров записи мобильного терминала на первую частоту кадров, причем первое пороговое значение параметра экспозиции меньше, чем четвертое пороговое значение параметра экспозиции, и четвертое пороговое значение параметра экспозиции меньше, чем второе пороговое значение параметра экспозиции.
8. Способ по п.1 или 2, в котором этап выполнения автоматической регулировки частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования содержит подэтапы, на которых:
определяют, с помощью мобильного терминала, больше ли интенсивность света в сценарии фотографирования, чем первое пороговое значение интенсивности света, и больше ли смещение мобильного терминала, чем первое пороговое значение расстояния; или определяют, с помощью мобильного терминала, больше ли интенсивность света в сценарии фотографирования, чем первое пороговое значение интенсивности света, и больше ли скорость движения мобильного терминала, чем первое пороговое значение скорости; и, если "Да", выполняют настройку, с помощью мобильного терминала, частоты кадров записи мобильного терминала на вторую частоту кадров, причем вторая частота кадров больше, чем первая частота кадров.
9. Способ по любому из пп.1, 3 или 8, в котором этап выполнения автоматической регулировки частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования содержит подэтапы, на которых:
определяют, с помощью мобильного терминала, меньше ли интенсивность света в сценарии фотографирования, чем второе пороговое значение интенсивности света, и меньше ли смещение, вызванное движением мобильного терминала, чем второе пороговое значение расстояния, и меньше ли скорость движения мобильного терминала, чем второе пороговое значение скорости; и, если "Да", выполняют настройку, с помощью мобильного терминала, частоты кадров записи мобильного терминала на третью частоту кадров, причем третья частота кадров меньше первой частоты кадров.
10. Способ по п.1 или 2, в котором этап выполнения автоматической регулировки частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования содержит подэтапы, на которых:
определяют, с помощью мобильного терминала, больше ли интенсивность света в сценарии фотографирования, чем первое пороговое значение интенсивности света, и больше ли смещение одного и того же фотографируемого объекта в любых двух из N видеокадров, чем третье пороговое значение расстояния; и, если "Да", выполняют настройку, с помощью мобильного терминала, частоты кадров записи мобильного терминала на вторую частоту кадров, причем вторая частота кадров больше, чем первая частота кадров.
11. Способ по любому из пп.1, 3 или 10, в котором этап выполнения автоматической регулировки частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования содержит подэтапы, на которых:
определяют, с помощью мобильного терминала, меньше ли интенсивность света в сценарии фотографирования, чем второе пороговое значение интенсивности света, и меньше ли смещение одного и того же фотографируемого объекта в любых двух из N видеокадров, чем четвертое пороговое значение расстояния; и, если "Да", выполняют настройку, с помощью мобильного терминала, частоты кадров записи мобильного терминала на третью частоту кадров, причем третья частота кадров меньше первой частоты кадров.
12. Способ по п.1 или 2, в котором этап выполнения автоматической регулировки частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования содержит подэтапы, на которых:
определяют, с помощью мобильного терминала, выполняется ли условие, заключающееся в том, что:
интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света, и смещение, вызванное движением мобильного терминала, больше, чем первое пороговое значение расстояния, или скорость движения мобильного терминала больше, чем первое пороговое значение скорости; или
интенсивность света в сценарии фотографирования больше, чем первое пороговое значение интенсивности света, и смещение одного и того же фотографируемого объекта в любых двух из N видеокадров больше, чем третье пороговое значение расстояния; и
если "Да", то выполняют настройку, с помощью мобильного терминала, частоты кадров записи мобильного терминала на вторую частоту кадров, причем вторая частота кадров больше, чем первая частота кадров.
13. Способ по любому из пп.1, 3 или 12, в котором этап выполнения автоматической регулировки частоты кадров записи мобильного терминала на основе интенсивности света в сценарии фотографирования содержит подэтапы, на которых:
определяют, с помощью мобильного терминала, выполняется ли условие, заключающееся в том, что:
интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света, смещение, вызванное движением мобильного терминала, меньше, чем второе пороговое значение расстояния, и смещение одного и того же фотографируемого объекта в любых двух из N видеокадров меньше, чем четвертое пороговое значение расстояния; или
интенсивность света в сценарии фотографирования меньше, чем второе пороговое значение интенсивности света, скорость движения мобильного терминала меньше, чем второе пороговое значение скорости, и смещение одного и того же фотографируемого объекта в любых двух из N видеокадров меньше, чем четвертое пороговое значение расстояния; и
если "Да", то выполняют настройку, с помощью мобильного терминала, частоты кадров записи мобильного терминала на третью частоту кадров, причем третья частота кадров меньше первой частоты кадров, первое пороговое значение интенсивности света больше второго порогового значения интенсивности света, первое пороговое значение расстояния меньше второго порогового значения расстояния, первое пороговое значение скорости больше второго порогового значения скорости, и четвертое пороговое значение расстояния меньше третьего порогового значения расстояния.
14. Мобильный терминал, содержащий: сенсорный экран, фотокамеру, один или более процессоров и одно или более запоминающих устройств, причем одно или более запоминающих устройств соединены с одним или более процессорами, при этом одно или более запоминающих устройств выполнены с возможностью хранения компьютерного программного кода, содержащего компьютерные инструкции, вызывающие, при исполнении одним или более процессорами, выполнение мобильным терминалом способа управления частотой кадров записи по любому из пп.1-13.
15. Машиночитаемый носитель информации, хранящий инструкции, вызывающие, при исполнении компьютером, выполнение компьютером способа управления частотой кадров записи по любому из пп.1-13.
| US 20060072031 A1, 2006.04.06 | |||
| СПОСОБ ИНКАПСУЛЯЦИИ ФЕНБЕНДАЗОЛА | 2013 |
|
RU2538660C1 |
| EP 2993888 A1, 2016.03.09 | |||
| EP 3062511 A1, 2016.08.31 | |||
| CN 104683691 A, 2015.06.03 | |||
| US 2009147122 A1, 2009.06.11 | |||
| US 2015373293 A1, 2015.12.24 | |||
| МАЛОКАДРОВАЯ СИСТЕМА ВИДЕОНАБЛЮДЕНИЯ ДЛЯ КОНТРОЛЯ ПРОТЯЖЕННЫХ РУБЕЖЕЙ ОХРАНЫ | 2012 |
|
RU2517042C2 |
