СПОСОБ КОДИРОВАНИЯ ИЗОБРАЖЕНИЙ, СПОСОБ ДЕКОДИРОВАНИЯ ИЗОБРАЖЕНИЙ, УСТРОЙСТВО КОДИРОВАНИЯ ИЗОБРАЖЕНИЙ, УСТРОЙСТВО ДЕКОДИРОВАНИЯ ИЗОБРАЖЕНИЙ И УСТРОЙСТВО КОДИРОВАНИЯ И ДЕКОДИРОВАНИЯ ИЗОБРАЖЕНИЙ Российский патент 2017 года по МПК H04N19/50 

Область техники, к которой относится изобретение

[0001] Настоящее изобретение относится к способу кодирования изображений с использованием арифметического кодирования.

Уровень техники

[0002] Предусмотрены технологии, описанные в непатентном документе (NPL) 1 и NPL 2, которые связаны со способом кодирования изображений с использованием арифметического кодирования.

Список библиографических ссылок

Непатентные документы

[0003]

[NPL 1] ISO/IEC 14496-10 "MPEG-4 Part 10 Advanced Video Coding"

[NPL 2] Frank Bossen, "Common test conditions and software reference configurations", JCTVC-H1100, Joint Collaborative Team on Video Coding (JCT-VC) of ITU-T SG16 WP3 and ISO/IEC JTC1/SC29/WG11 8th Meeting, San Jose, CA, USA, 1-10 февраля 2012 года, http://phenix.it-sudparis.eu/jct/doc_end_user/documents/8_San%20Jose/wg11/JCTVC-H1100-v1.zip

Сущность изобретения

Техническая проблема

[0004] Тем не менее, когда кодирование выполняется с плохой эффективностью обработки, трудно подавлять задержку обработки, которая возникает во время кодирования.

[0005] С учетом вышеизложенного, настоящее изобретение предоставляет способ кодирования изображений, который дает возможность кодирования с высокой эффективностью кодирования.

Решение проблемы

[0006] Способ кодирования изображений согласно аспекту настоящего изобретения включает в себя: выполнение контекстного арифметического кодирования для того, чтобы последовательно кодировать (i) первую информацию, указывающую то, выполнять ли обработку адаптивного к выборке смещения (SAO) для первой области изображения, и (ii) вторую информацию, указывающую то, использовать ли, при SAO-обработке для первой области, информацию относительно SAO-обработки для области, отличной от первой области, причем контекстное арифметическое кодирование является арифметическим кодированием с использованием переменной вероятности, SAO-обработка является обработкой смещения в отношении пиксельного значения; и выполнение обходного арифметического кодирования для того, чтобы кодировать другую информацию, которая является информацией относительно SAO-обработки для первой области и отличается от первой информации или второй информации, после того как кодируются первая информация и вторая информация, причем обходное арифметическое кодирование является арифметическим кодированием с использованием фиксированной вероятности.

[0007] Следует отметить, что общие и конкретные аспекты, раскрытые выше, могут быть реализованы с использованием системы, устройства, интегральной схемы, компьютерной программы или энергонезависимого считываемого компьютером носителя записи, такого как CD-ROM, либо любой комбинации систем, устройств, способов, интегральных схем, компьютерных программ и носителей записи.

Преимущества изобретения

[0008] Способ кодирования изображений согласно настоящему изобретению дает возможность кодирования с высокой эффективностью кодирования.

Краткое описание чертежей

[0009] Фиг. 1 является блок-схемой, которая иллюстрирует пример конфигурации устройства кодирования изображений согласно варианту 1 осуществления.

Фиг. 2 является блок-схемой, которая иллюстрирует пример конфигурации устройства декодирования изображений согласно варианту 1 осуществления.

Фиг. 3 является схематичным видом, который иллюстрирует пример смещения края согласно варианту 1 осуществления.

Фиг. 4 является схематичным видом, который иллюстрирует категории смещения края согласно варианту 1 осуществления.

Фиг. 5 является схематичным видом, который иллюстрирует типы смещения края согласно варианту 1 осуществления.

Фиг. 6 является схематичным видом, который иллюстрирует пример смещения полосы согласно варианту 1 осуществления.

Фиг. 7 является схематичным видом, который иллюстрирует категории смещения полосы согласно варианту 1 осуществления.

Фиг. 8 является схематичным видом, который иллюстрирует целевую информацию кодирования смещения полосы согласно варианту 1 осуществления.

Фиг. 9A является схематичным видом, который иллюстрирует пример процесса разделения области согласно варианту 1 осуществления.

Фиг. 9B является схематичным видом, который иллюстрирует пример результата разделения области согласно варианту 1 осуществления.

Фиг. 10 является блок-схемой, иллюстрирующей пример конфигурации модуля контурной фильтрации в устройстве кодирования изображений согласно варианту 1 осуществления.

Фиг. 11 является блок-схемой, иллюстрирующей пример конфигурации модуля контурной фильтрации в устройстве декодирования изображений согласно варианту 1 осуществления.

Фиг. 12 является блок-схемой последовательности операций способа, иллюстрирующей пример операций модуля контурной фильтрации в устройстве кодирования изображений согласно варианту 1 осуществления.

Фиг. 13 является блок-схемой последовательности операций способа, иллюстрирующей пример операций модуля контурной фильтрации в устройстве декодирования изображений согласно варианту 1 осуществления.

Фиг. 14 является схематичным видом, который иллюстрирует пример выделения битов числовым индексам, указывающим способ классификации пикселей согласно варианту 1 осуществления.

Фиг. 15 является схематичным видом, который иллюстрирует пример кодированного потока согласно варианту 1 осуществления.

Фиг. 16A является схематичным видом, который иллюстрирует пример синтаксиса (aps_sao_param) в APS согласно варианту 1 осуществления.

Фиг. 16B является схематичным видом, который иллюстрирует пример синтаксиса (sao_unit_vlc) в APS согласно варианту 1 осуществления.

Фиг. 16C является схематичным видом, который иллюстрирует пример синтаксиса (sao_offset_vlc) в APS согласно варианту 1 осуществления.

Фиг. 17A является схематичным видом, который иллюстрирует пример синтаксиса (slice_data) в данных среза (вырезки) согласно варианту 1 осуществления.

Фиг. 17B является схематичным видом, который иллюстрирует пример синтаксиса (sao_unit_cabac) в данных среза согласно варианту 1 осуществления.

Фиг. 17C является схематичным видом, который иллюстрирует пример синтаксиса (sao_offset_cabac) в данных среза согласно варианту 1 осуществления.

Фиг. 18 является схематичным видом, который иллюстрирует пример областей, между которыми совместно используется информация смещения, согласно варианту 1 осуществления.

Фиг. 19 является блок-схемой последовательности операций способа, которая иллюстрирует пример кодирования числового индекса, который указывает способ классификации пикселей согласно варианту 1 осуществления.

Фиг. 20 является блок-схемой последовательности операций способа, которая иллюстрирует пример декодирования числового индекса, который указывает способ классификации пикселей согласно варианту 1 осуществления.

Фиг. 21 является блок-схемой, иллюстрирующей пример конфигурации модуля контурной фильтрации в устройстве кодирования изображений согласно варианту 2 осуществления.

Фиг. 22 является блок-схемой, иллюстрирующей пример конфигурации модуля контурной фильтрации в устройстве декодирования изображений согласно варианту 2 осуществления.

Фиг. 23 является блок-схемой последовательности операций способа, иллюстрирующей пример операций модуля контурной фильтрации в устройстве кодирования изображений согласно варианту 2 осуществления.

Фиг. 24 является блок-схемой последовательности операций способа, иллюстрирующей пример операций модуля контурной фильтрации в устройстве декодирования изображений согласно варианту 2 осуществления.

Фиг. 25 является схематичным видом, который иллюстрирует пример выделения битов числовым индексам, указывающим способ классификации пикселей согласно варианту 2 осуществления.

Фиг. 26 является схематичным видом, который иллюстрирует другой пример выделения битов числовым индексам, указывающим способ классификации пикселей согласно варианту 2 осуществления.

Фиг. 27A является схематичным видом, который иллюстрирует пример синтаксиса (sao_unit_vlc) в APS согласно варианту 2 осуществления.

Фиг. 27B является схематичным видом, который иллюстрирует пример синтаксиса (sao_offset_vlc) в APS согласно варианту 2 осуществления.

Фиг. 27C является схематичным видом, который иллюстрирует пример выделения индекса контекста для информации смещения в APS согласно варианту 2 осуществления.

Фиг. 27D является блок-схемой последовательности операций способа, которая иллюстрирует пример кодирования информации смещения в APS согласно варианту 2 осуществления

Фиг. 27E является блок-схемой последовательности операций способа, которая показывает пример декодирования информации смещения в APS согласно варианту 2 осуществления.

Фиг. 28A является схематичным видом, который иллюстрирует пример синтаксиса (sao_unit_cabac) в данных среза согласно варианту 2 осуществления.

Фиг. 28B является схематичным видом, который иллюстрирует пример синтаксиса (sao_offset_cabac) в данных среза согласно варианту 2 осуществления.

Фиг. 28C является схематичным видом, который иллюстрирует пример выделения индекса контекста для информации смещения в данных среза согласно варианту 2 осуществления.

Фиг. 28D является блок-схемой последовательности операций способа, которая иллюстрирует пример кодирования информации смещения в данных среза согласно варианту 2 осуществления.

Фиг. 28E является блок-схемой последовательности операций способа, которая показывает пример декодирования информации смещения в данных среза согласно варианту 2 осуществления.

Фиг. 29 является блок-схемой последовательности операций способа, которая иллюстрирует пример кодирования числового индекса, который указывает способ классификации пикселей согласно варианту 2 осуществления.

Фиг. 30 является блок-схемой последовательности операций способа, которая иллюстрирует пример декодирования числового индекса, который указывает способ классификации пикселей согласно варианту 2 осуществления.

Фиг. 31A является схематичным видом, который иллюстрирует пример выделения индекса контекста для информации смещения согласно варианту 3 осуществления.

Фиг. 31B является схемой, которая показывает целевую производительность устройства кодирования изображений и устройства декодирования изображений согласно варианту 3 осуществления.

Фиг. 32 является блок-схемой, которая иллюстрирует пример конфигурации модуля кодирования информации смещения согласно варианту 3 осуществления.

Фиг. 33 является блок-схемой, которая иллюстрирует пример конфигурации модуля декодирования информации смещения согласно варианту 3 осуществления.

Фиг. 34 является блок-схемой последовательности операций способа, которая иллюстрирует пример операций модуля кодирования информации смещения согласно варианту 3 осуществления.

Фиг. 35 является блок-схемой последовательности операций способа, которая иллюстрирует пример операций модуля декодирования информации смещения согласно варианту 3 осуществления.

Фиг. 36 является блок-схемой последовательности операций способа, которая иллюстрирует пример особенности кодирования согласно варианту 3 осуществления.

Фиг. 37 является блок-схемой последовательности операций способа, которая иллюстрирует пример особенности декодирования согласно варианту 3 осуществления.

Фиг. 38 показывает общую конфигурацию системы предоставления контента для реализации услуг распространения контента.

Фиг. 39 показывает общую конфигурацию цифровой широковещательной системы.

Фиг. 40 показывает блок-схему, иллюстрирующую пример конфигурации телевизионного приемника.

Фиг. 41 показывает блок-схему, иллюстрирующую пример конфигурации модуля воспроизведения/записи информации, который считывает и записывает информацию с и на носитель записи, который является оптическим диском.

Фиг. 42 показывает пример конфигурации носителя записи, который является оптическим диском.

Фиг. 43A показывает пример сотового телефона.

Фиг. 43B является блок-схемой, показывающей пример конфигурации сотового телефона.

Фиг. 44 иллюстрирует структуру мультиплексированных данных.

Фиг. 45 схематично показывает то, как каждый поток мультиплексируется в мультиплексированных данных.

Фиг. 46 показывает то, как видеопоток сохраняется в потоке PES-пакетов.

Фиг. 47 показывает структуру TS-пакетов и исходных пакетов в мультиплексированных данных.

Фиг. 48 показывает структуру данных PMT.

Фиг. 49 показывает внутреннюю структуру информации мультиплексированных данных.

Фиг. 50 показывает внутреннюю структуру информации атрибутов потока.

Фиг. 51 показывает этапы для идентификации видеоданных.

Фиг. 52 показывает пример конфигурации интегральной схемы для реализации способа кодирования движущихся изображений и способа декодирования движущихся изображений согласно каждому из вариантов осуществления.

Фиг. 53 показывает конфигурацию для переключения между частотами возбуждения.

Фиг. 54 показывает этапы для идентификации видеоданных и переключения между частотами возбуждения.

Фиг. 55 показывает пример таблицы поиска, в которой стандарты видеоданных ассоциированы с частотами возбуждения.

Фиг. 56A является схемой, показывающей пример конфигурации для совместного использования модуля процессора сигналов.

Фиг. 56B является схемой, показывающей другой пример конфигурации для совместного использования модуля процессора сигналов.

Подробное описание вариантов осуществления

[0010] Базовая основа формирования знаний настоящего изобретения

Авторы изобретения обнаружили проблему в способе кодирования изображений с использованием арифметического кодирования, которая описывается в разделе "Уровень техники". Далее описываются подробности.

[0011] Устройство кодирования изображений согласно системе кодирования изображений, представленной посредством стандарта ITU-T, называемого H.26x, и стандарта ISO/IEC, называемого MPEG-X, разделяет изображение на предварительно определенные единицы и выполняет кодирование посредством единицы. Например, устройство кодирования изображений согласно стандарту H.264/MPEG-4 AVC (см. непатентный документ (NPL) 1) выполняет процесс посредством единицы, называемой макроблоком, имеющим 16 горизонтальных пикселов (по горизонтали) и 16 вертикальных пикселов (по вертикали).

[0012] Устройство кодирования изображений разделяет макроблок на субблоки (имеющие, по меньшей мере, 4 горизонтальных пикселя и 4 вертикальных пикселя) при выполнении компенсации движения. Устройство кодирования изображений выполняет компенсацию движения с использованием вектора движения, который отличается для каждого из субблоков, выполняет преобразование частоты в отношении разностного сигнала между исходным сигналом и сигналом прогнозирования, собирает информацию относительно разностного сигнала в области низких частот и выполняет квантование, тем самым сжимая информацию.

[0013] Известно, что решетчатое искажение, называемое искажением блочности, возникает на границе блоков согласно способу для кодирования изображения на поблочной основе с использованием ортогонального преобразования, такого как DCT, которое собирает информацию относительно разностного сигнала в области низких частот. Устройство кодирования изображений допускает сокращение искажения в виде блочности посредством выполнения обработки фильтрации для удаления блочности.

[0014] Тем не менее, в системе, которая обрабатывает только границу блока, аналогично вышеописанному фильтру удаления блочности, возникает сложность при снижении ухудшения качества кодирования кроме искажения в виде блочности.

[0015] С учетом вышеизложенного, способ кодирования изображений согласно аспекту настоящего изобретения включает в себя: выполнение контекстного арифметического кодирования для того, чтобы последовательно кодировать (i) первую информацию, указывающую то, выполнять ли обработку адаптивного к выборке смещения (SAO) для первой области изображения, и (ii) вторую информацию, указывающую то, использовать ли, при SAO-обработке для первой области, информацию относительно SAO-обработки для области, отличной от первой области, причем контекстное арифметическое кодирование является арифметическим кодированием с использованием переменной вероятности, SAO-обработка является обработкой смещения в отношении пиксельного значения; и выполнение обходного арифметического кодирования для того, чтобы кодировать другую информацию, которая является информацией относительно SAO-обработки для первой области и отличается от первой информации или второй информации, после того как кодируются первая информация и вторая информация, причем обходное арифметическое кодирование является арифметическим кодированием с использованием фиксированной вероятности.

[0016] Вследствие этого, контекстное арифметическое кодирование последовательно выполняется в отношении информации относительно SAO-обработки для повышения качества изображений. Более конкретно, частое переключение между контекстным арифметическим кодированием и обходным арифметическим кодированием подавляется, и процессы идентичного типа последовательно выполняются. Таким образом, повышается эффективность обработки.

[0017] Например, при выполнении обходного арифметического кодирования, может быть кодирована другая информация, которая включает в себя (i) третью информацию, указывающую то, является ли SAO-обработка для первой области обработкой смещения края или обработкой смещения полосы, и (ii) четвертую информацию, указывающую абсолютное значение значения смещения, причем обработка смещения края выполняется согласно краю, обработка смещения полосы выполняется согласно пиксельному значению.

[0018] Вследствие этого, множество информационных элементов кодируется посредством обходного арифметического кодирования после контекстного арифметического кодирования. В общем, процессы идентичного типа совместно выполняются. Таким образом, повышается эффективность обработки.

[0019] Помимо этого, например, при выполнении обходного арифметического кодирования, когда SAO-обработка для первой области является обработкой смещения полосы, может быть кодирована другая информация, которая включает в себя (i) пятую информацию, указывающую то, является ли значение смещения положительным или отрицательным, и (ii) шестую информацию, указывающую область (диапазон) применения значения смещения.

[0020] Вследствие этого, дополнительное множество информационных элементов кодируется посредством обходного арифметического кодирования согласно состоянию, после контекстного арифметического кодирования. Таким образом, повышается эффективность обработки.

[0021] Помимо этого, например, при выполнении контекстного арифметического кодирования, может быть кодирована вторая информация, которая включает в себя по меньшей мере одну из (i) информации, указывающей то, используется ли информация относительно SAO-обработки для левой области при SAO-обработке для первой области, и (ii) информации, указывающей то, используется ли информация относительно SAO-обработки для верхней области при SAO-обработке для первой области, причем левая область является смежной с первой областью и располагается слева от первой области, верхняя область является смежной с первой областью и располагается сверху от первой области.

[0022] Вследствие этого, при контекстном арифметическом кодировании, которое последовательно выполняется, информация, указывающая многократное использование сверху или слева, надлежащим образом кодируется.

[0023] Помимо этого, способ декодирования изображений согласно аспекту настоящего изобретения может быть способом декодирования изображений, который включает в себя: выполнение контекстного арифметического декодирования для того, чтобы последовательно декодировать (i) первую информацию, указывающую то, выполнять ли обработку адаптивного к выборке смещения (SAO) для первой области изображения, и (ii) вторую информацию, указывающую то, использовать ли, при SAO-обработке для первой области, информацию относительно SAO-обработки для области, отличной от первой области, причем контекстное арифметическое декодирование является арифметическим декодированием с использованием переменной вероятности, SAO-обработка является обработкой смещения в отношении пиксельного значения; и выполнение обходного арифметического декодирования для того, чтобы декодировать другую информацию, которая является информацией относительно SAO-обработки для первой области и отличается от первой информации или второй информации, после того как декодируются первая информация и вторая информация, причем обходное арифметическое декодирование является арифметическим декодированием с использованием фиксированной вероятности.

[0024] Вследствие этого, контекстное арифметическое декодирование последовательно выполняется в отношении информации относительно SAO-обработки для повышения качества изображений. Более конкретно, частое переключение между контекстным арифметическим декодированием и обходным арифметическим декодированием подавляется, и процессы идентичного типа последовательно выполняются. Таким образом, повышается эффективность обработки.

[0025] Например, при выполнении обходного арифметического декодирования, может быть декодирована другая информация, которая включает в себя (i) третью информацию, указывающую то, является ли SAO-обработка для первой области обработкой смещения края или обработкой смещения полосы, и (ii) четвертую информацию, указывающую абсолютное значение значения смещения, причем обработка смещения края выполняется согласно краю, обработка смещения полосы выполняется согласно пиксельному значению.

[0026] Вследствие этого, множество информационных элементов декодируется посредством обходного арифметического декодирования после контекстного арифметического декодирования. В общем, процессы идентичного типа выполняются совместно. Таким образом, повышается эффективность обработки.

[0027] Помимо этого, например, при выполнении обходного арифметического декодирования, когда SAO-обработка для первой области является обработкой смещения полосы, может быть декодирована другая информация, которая включает в себя (i) пятую информацию, указывающую то, является ли значение смещения положительным или отрицательным, и (ii) шестую информацию, указывающую область применения значения смещения.

[0028] Вследствие этого, дополнительное множество информационных элементов декодируется посредством обходного арифметического декодирования согласно состоянию после контекстного арифметического декодирования. Таким образом, повышается эффективность обработки.

[0029] Помимо этого, например, при выполнении контекстного арифметического декодирования, может быть декодирована вторая информация, которая включает в себя по меньшей мере одну из (i) информации, указывающей то, используется ли информация относительно SAO-обработки для левой области при SAO-обработке для первой области, и (ii) информации, указывающей то, используется ли информация относительно SAO-обработки для верхней области при SAO-обработке для первой области, причем левая область является смежной с первой областью и располагается слева от первой области, верхняя область является смежной с первой областью и располагается сверху от первой области.

[0030] Вследствие этого, при контекстном арифметическом декодировании, которое последовательно выполняется, информация, указывающая многократное использование сверху или слева при контекстном арифметическом декодировании, надлежащим образом декодируется.

[0031] Следует отметить, что общие и конкретные аспекты, раскрытые выше, могут быть реализованы с использованием системы, устройства, интегральной схемы, компьютерной программы или энергонезависимого считываемого компьютером носителя записи, к примеру, CD-ROM или любая комбинация систем, устройств, интегральных схем способов, компьютерных программ или носителей записи.

[0032] Далее подробно описываются варианты осуществления со ссылкой на чертежи. Следует отметить, что каждый из вариантов осуществления, описанных ниже, показывает общий или конкретный пример. Числовые значения, формы, материалы, структурные элементы, компоновка и соединение структурных элементов, этапы, порядок обработки этапов и т.д., показанные в следующих вариантах осуществления, являются просто примерами, и, следовательно, не ограничивают объем настоящего изобретения. Следовательно, из структурных элементов в следующих вариантах осуществления, структурные элементы, не изложенные в любом из независимых пунктов формулы изобретения, описываются как произвольные структурные элементы.

[0033] Помимо этого, термин "кодирование" в нижеприведенном описании может быть использован для того, чтобы означать "кодирование".

[0034] Первый вариант осуществления

Фиг. 1 иллюстрирует конфигурацию устройства кодирования изображений согласно варианту 1 осуществления. Устройство 100 кодирования изображений, проиллюстрированное на фиг. 1, включает в себя модуль 110 управления и модуль 120 кодирования. Модуль 120 кодирования включает в себя: модуль 121 вычитания; модуль 122 преобразования частоты; модуль 123 квантования; модуль 124 энтропийного кодирования; модуль 125 обратного квантования; модуль 126 обратного преобразования частоты; сумматор 127; модуль 128 контурной фильтрации; модуль 129 хранения; модуль 130 внутреннего прогнозирования; модуль 131 компенсации движения; модуль 132 оценки движения; и переключатель 133.

[0035] Модуль 120 кодирования кодирует изображение 141 на поблочной основе, чтобы формировать кодированный поток 142. В это время, модуль 121 вычитания в модуле 120 кодирования вычитает пиксельный блок, имеющий несколько пиксельных значений прогнозного изображения, из пиксельного блока, имеющего несколько пиксельных значений изображения 141. Модуль 122 преобразования частоты преобразует пиксельный блок, полученный в результате вычитания, в блок коэффициентов, имеющий несколько частотных коэффициентов. Модуль 123 квантования квантует блок коэффициентов, полученный из модуля 122 преобразования частоты.

[0036] Между тем, модуль 132 оценки движения обнаруживает вектор движения с использованием пиксельного блока изображения 141. Модуль 131 компенсации движения выполняет межкадровое прогнозирование (внешнее прогнозирование) с использованием опорного изображения в модуле 129 хранения и вектора движения, обнаруженного посредством модуля 132 оценки движения. Модуль 130 внутреннего прогнозирования выполняет внутрикадровое прогнозирование (внутреннее прогнозирование) с использованием пиксельного блока, полученного из сумматора 127, согласно режиму внутреннего прогнозирования. Переключатель 133 вводит пиксельный блок прогнозного изображения, полученный в результате внутрикадрового прогнозирования или межкадрового прогнозирования, в модуль 121 вычитания и сумматор 127.

[0037] Модуль 124 энтропийного кодирования выполняет энтропийное кодирование в отношении информации сегментов блока, типа прогнозирования, вектора движения, режима прогнозирования (режима внутрикадрового прогнозирования), параметра квантования, блока квантованных коэффициентов и т.д., чтобы формировать кодированный поток 142.

[0038] Помимо этого, модуль 125 обратного квантования выполняет обратное квантование в отношении блока квантованных коэффициентов. Помимо этого, модуль 126 обратного преобразования частоты преобразует блок коэффициентов, в отношении которого выполняется обратное квантование, в пиксельный блок. Сумматор 127 суммирует пиксельный блок прогнозного изображения с пиксельным блоком, полученным из модуля 126 обратного преобразования частоты. Модуль 128 контурной фильтрации подавляет искажение в пиксельном блоке, полученном в сумматоре 127, и сохраняет пиксельный блок в качестве опорного изображения в модуле 129 хранения.

[0039] Кроме того, модуль 110 управления управляет модулем 120 кодирования.

[0040] Устройство 100 кодирования изображений кодирует изображение 141 посредством операции, описанной выше. Помимо этого, устройство 100 кодирования изображений уменьшает объем данных кодированного потока 142 через множество процессов, таких как преобразование частоты, квантование, внутрикадровое прогнозирование, межкадровое прогнозирование, энтропийное кодирование, контурная фильтрация и т.д.

[0041] Фиг. 2 иллюстрирует конфигурацию устройства 200 декодирования изображений, соответствующего устройству 100 кодирования изображений, проиллюстрированному на фиг.1. Устройство 200 декодирования изображений, проиллюстрированное на фиг.2, включает в себя модуль 210 управления и модуль 220 декодирования. Модуль 220 декодирования включает в себя: модуль 224 энтропийного декодирования; модуль 225 обратного квантования; модуль 226 обратного преобразования частоты; сумматор 227; модуль 228 контурной фильтрации; модуль 229 хранения; модуль 230 внутрикадрового прогнозирования; модуль 231 компенсации движения; и переключатель 233.

[0042] Модуль 220 декодирования декодирует, на поблочной основе, изображение 241, включенное в кодированный поток 242. В это время, модуль 224 энтропийного декодирования в модуле 220 декодирования выполняет энтропийное декодирование в отношении кодированного потока 242, тем самым получая информацию сегментов блока, тип прогнозирования, вектор движения, режим внутрикадрового прогнозирования, параметр квантования, блок квантованных коэффициентов и т.д.

[0043] Затем, модуль 210 управления управляет работой, выполняемой посредством модуля 220 декодирования.

[0044] Модуль 225 обратного квантования в модуле 220 декодирования выполняет обратное квантование в отношении блока квантованных коэффициентов. Модуль 226 обратного преобразования частоты преобразует блок коэффициентов, в отношении которого выполняется обратное квантование, в пиксельный блок.

[0045] Сумматор 227 суммирует пиксельный блок прогнозного изображения с пиксельным блоком, полученным из модуля 226 обратного преобразования частоты. Модуль 228 контурной фильтрации подавляет искажение в пиксельном блоке, полученном из сумматора 227. Затем, модуль 228 контурной фильтрации сохраняет опорное изображение, включающее в себя пиксельные блоки, в модуле 229 хранения. Кроме того, модуль 228 контурной фильтрации выводит изображение 241, включающее в себя пиксельные блоки.

[0046] Когда тип прогнозирования является внутрикадровым прогнозированием, модуль 230 внутреннего прогнозирования выполняет внутрикадровое прогнозирование с использованием пиксельного блока, полученного из сумматора 227, согласно режиму внутреннего прогнозирования. Когда тип прогнозирования является межкадровым прогнозированием, модуль 231 компенсации движения выполняет межкадровое прогнозирование с использованием вектора движения и опорного изображения в модуле 229 хранения. Переключатель 233 вводит пиксельный блок прогнозного изображения, полученный в результате внутрикадрового прогнозирования или межкадрового прогнозирования, в сумматор 227.

[0047] Модуль 200 декодирования изображений декодирует, на поблочной основе, изображение 241, включенное в кодированный поток 242, посредством операции, соответствующей операции, выполняемой посредством устройства 100 кодирования изображений.

[0048] Далее подробнее описывается контурная фильтрация. Контурная фильтрация является обработкой для снижения ухудшения качества кодирования в восстановленном сигнале, и согласно стандарту H.264/MPEG-4 AVC (см. непатентный документ (NPL) 1), выполняется фильтрация для удаления блочности для уменьшения искажения в виде блочности, которое возникает на границе макроблока.

[0049] Тем не менее, фильтрация для удаления блочности не разрешает ухудшение качества кодирования, возникающее в макроблоке. С учетом этого, выполняется обработка смещения для снижения ухудшения качества кодирования согласно этому варианту осуществления. Обработка смещения суммирует значение смещения с пикселем, включенным в текущий блок, который должен быть обработан, в восстановленном сигнале, за счет этого уменьшая искажение от исходного сигнала.

[0050] Кроме того, при обработке смещения, пиксели в текущем блоке классифицируются на множество категорий, и используется значение смещения, которое является общим для каждой категории. Способы классификации пикселей включают в себя (i) способ классификации пикселей на основе смещения края, который выполняется посредством сравнения целевого пикселя для классификации со смежным пикселем, и (ii) способ классификации пикселей на основе смещения полосы, который выполняется согласно пиксельному значению целевого пикселя для классификации. Смещение края является смещением, выполняемым согласно краю, и смещение полосы является смещением, выполняемым согласно пиксельному значению.

[0051] В нижеприведенном описании, использование способа классификации пикселей на основе смещения края описывается как то, что способ классификации пикселей является смещением края, или как использование смещения края для способа классификации пикселей в некоторых случаях. Аналогично, использование способа классификации пикселей на основе смещения полосы описывается как то, что способ классификации пикселей является смещением полосы, или как использование смещения полосы для способа классификации пикселей в некоторых случаях.

[0052] Фиг. 3 является схематичным видом, иллюстрирующим пример способа классификации пикселей с использованием смещения края. При смещении края классификация выполняется с использованием соотношения абсолютных величин между текущим пикселем c, который должен быть классифицирован, и смежными пикселями c1 и c2, расположенными слева и справа, соответственно, от пикселя c.

[0053] Фиг. 4 является схематичным видом, иллюстрирующим пример классификации блока, который должен быть обработан, на пять категорий посредством смещения края. Например, когда пиксельное значение c превышает пиксельное значение c1 и равно пиксельному значению c2, текущий пиксель классифицируется на категорию 3, и прибавляется значение Offset [3] смещения, выделенное категории 3.

[0054] Помимо этого, как проиллюстрировано на фиг. 5, пиксели, которые сравниваются с целевым пикселем, который должен быть классифицирован при смещении края, являются правым и левым смежными пикселями (EO(0)), верхним и нижним смежными пикселями (EO(1)), смежными по диагонали пикселями (EO(2) или EO(3)), их комбинацией (EO(4) или EO(5)) и т.д.

[0055] Фиг. 6 является схематичным видом, иллюстрирующим пример способа классификации пикселей с использованием смещения полосы. Здесь, градации, которые, возможно, принимает текущее пиксельное значение, которое должно быть обработано, равномерно разделяются на M. M равно, например, 32. Сегменты градации, полученные в результате разделения, представляют категории. Текущий пиксель, который должен быть обработан, классифицируется на категорию, в которую включается пиксельное значение.

[0056] Фиг. 7 является схематичным видом, иллюстрирующим пример классификации блоков, которые должны быть обработаны, на 16 классов посредством смещения полосы. Например, когда пиксельное значение c превышает или равно R9 и меньше R10, текущий пиксель, который должен быть обработан, классифицируется на категорию 9, и прибавляется значение Offset [9] смещения, выделенное категории 9.

[0057] Помимо этого, необязательно выделять значение смещения для всех категорий, и, как проиллюстрировано на фиг. 8, устройство 100 кодирования изображений допускает кодирование только значения смещения для категории, имеющей высокий эффект смещения. В это время, устройство 100 кодирования изображений совместно кодирует числовой индекс категории, который указывает категорию кодированного значения смещения.

[0058] Помимо этого, адаптивное к выборке смещение (SAO) определяет оптимальный способ классификации пикселей и оптимальное значение смещения для единицы целевой области, которая должна быть обработана, которое получается посредством иерархического разделения блока, как проиллюстрировано на фиг. 9A. Фиг. 9B иллюстрирует пример шаблона разделения.

[0059] Фиг. 10 является блок-схемой, иллюстрирующей пример конфигурации модуля 128 контурной фильтрации в устройстве 100 кодирования изображений согласно этому варианту осуществления.

[0060] Модуль 128 контурной фильтрации включает в себя: модуль 151 получения сигналов; модуль 152 вычисления информации смещения; процессор 153 смещения; модуль 154 кодирования информации смещения; и модуль 155 вывода сигналов.

[0061] Модуль 151 получения сигналов получает восстановленный пиксельный сигнал в целевой области, которая должна быть обработана.

[0062] Модуль 152 вычисления информации смещения вычисляет информацию смещения для использования при обработке смещения, такую как шаблон разделения, способ классификации пикселей, значение смещения и т.д.

[0063] Процессор 153 смещения классифицирует, на категории, пиксели в целевой области, которая должна быть обработана, с использованием информации смещения и выполняет обработку смещения для каждой из категорий.

[0064] Модуль 154 кодирования информации смещения выводит информацию смещения в модуль 124 энтропийного кодирования, проиллюстрированный на фиг. 1. Следует отметить, что модуль 154 кодирования информации смещения может кодировать информацию смещения. Помимо этого, модуль 154 кодирования информации смещения может быть включен в модуль 124 энтропийного кодирования.

[0065] Модуль 155 вывода сигналов выводит пиксельный сигнал в целевой области, в отношении которого выполняется обработка смещения.

[0066] Фиг. 11 является блок-схемой, иллюстрирующей пример конфигурации модуля 228 контурной фильтрации в устройстве 200 декодирования изображений согласно этому варианту осуществления.

[0067] Модуль 228 контурной фильтрации включает в себя: модуль 251 получения сигналов; модуль 252 декодирования информации смещения; процессор 253 смещения; и модуль 254 вывода сигналов.

[0068] Модуль 251 получения сигналов получает восстановленный пиксельный сигнал в целевой области, которая должна быть обработана.

[0069] Модуль 252 декодирования информации смещения получает информацию смещения для использования при обработке смещения, такую как шаблон разделения, способ классификации пикселей, значение смещения и т.д. Следует отметить, что модуль 252 декодирования информации смещения может декодировать информацию смещения. Помимо этого, модуль 252 декодирования информации смещения может быть включен в модуль 224 энтропийного декодирования.

[0070] Процессор 253 смещения классифицирует, на категории, пиксели в целевой области, которая должна быть обработана, с использованием информации смещения и выполняет обработку смещения для каждой из категорий.

[0071] Модуль 254 вывода сигналов выводит пиксельный сигнал в целевой области, в отношении которой выполняется обработка смещения.

[0072] Фиг. 12 является блок-схемой последовательности операций способа, иллюстрирующей операции, выполняемые, главным образом, посредством модуля 128 контурной фильтрации, проиллюстрированного на фиг. 10, устройства 100 кодирования изображений, проиллюстрированного на фиг. 1.

[0073] Во-первых, модуль 151 получения сигналов получает, из сумматора 127, восстановленный пиксельный сигнал в целевой области, которая должна быть обработана. Затем, модуль 152 вычисления информации смещения вычисляет информацию смещения для использования при обработке смещения, такую как шаблон разделения, способ классификации пикселей, значение смещения и т.д. (этап S152). Затем, процессор 153 смещения разделяет область на основе информации смещения, классифицирует пикселы в разделенной области на категории и прибавляет значение смещения для каждой из категорий (этап S153).

[0074] Затем, модуль 154 кодирования информации смещения выводит, в модуль 124 энтропийного кодирования, информацию смещения, такую как шаблон разделения, способ классификации пикселей, числовой индекс категории, значение смещения и т.д. Модуль 124 энтропийного кодирования кодирует информацию смещения и вставляет кодированную информацию смещения в кодированный поток (этап S154). Следует отметить, что модуль 154 кодирования информации смещения может кодировать информацию смещения и вставлять кодированную информацию смещения в кодированный поток.

[0075] Затем, модуль 155 вывода сигналов выводит, в модуль 129 хранения, пиксельный сигнал в целевой области, в отношении которого выполняется обработка смещения (этап S155).

[0076] Фиг. 13 является блок-схемой последовательности операций способа, иллюстрирующей операции, выполняемые посредством модуля 228 контурной фильтрации, проиллюстрированного на фиг. 11, устройства 200 декодирования изображений, проиллюстрированного на фиг. 2.

[0077] Во-первых, модуль 251 получения сигналов получает, из сумматора 227, восстановленный пиксельный сигнал в целевой области, которая должна быть обработана (этап S251).

[0078] Затем, модуль 224 энтропийного декодирования декодирует, из кодированного потока, информацию смещения, такую как шаблон разделения, способ классификации пикселей, числовой индекс категории, значение смещения и т.д. и модуль 252 декодирования информации смещения получает декодированную информацию смещения (этап S252). Следует отметить, что модуль 252 декодирования информации смещения может декодировать информацию смещения из кодированного потока.

[0079] Затем, процессор 253 смещения разделяет область на основе информации смещения, классифицирует пиксели в разделенной области на категории и прибавляет значение смещения для каждой из категорий (этап S253). Затем, модуль 254 вывода сигналов выводит, в модуль 229 хранения, пиксельный сигнал в целевой области, в отношении которого выполняется обработка смещения (этап S254).

[0080] Здесь подробнее описывается кодирование и декодирование информации смещения в модуле 154 кодирования информации смещения и модуле 252 декодирования информации смещения. Способы классификации пикселей при обработке смещения включают в себя, например, пять типов способов EO(0), EO(1), EO(2) и EO(3) для смещения края и BO(0) для смещения полосы.

[0081] Фиг. 14 иллюстрирует пример выделения числовых индексов, который иллюстрирует соответствующие способы классификации пикселей. На фиг. 14, числовые индексы преобразуются в двоичную форму таким образом, что небольшое значение имеет небольшую длину в битах, а большое значение имеет большую длину в битах, и максимальная длина в битах указывается как пять битов. Тем не менее, способ выделения не ограничивается этим. Например, максимальная длина в битах не может указываться, и вместо этого, всем числовым индексам могут выделяться биты, так что последний бит равен 0.

[0082] Помимо этого, информация, указывающая, что обработка смещения не должна быть выполнена для текущего блока, который должен быть обработан, выделяется числовому индексу 0.

[0083] Устройство 100 кодирования изображений согласно варианту 1 осуществления формирует кодированный поток посредством кодирования видео. Как проиллюстрировано на фиг. 15, кодированный поток включает в себя часть заголовка, такую как SPS (набор параметров последовательности), PPS (набор параметров изображения) и т.д. и данные изображений, т.е. кодированные данные изображений.

[0084] Данные изображений дополнительно включают в себя заголовок среза (SH) и данные среза. Данные среза включают в себя кодированные данные изображений, включенные в срез. Данные среза дополнительно включают в себя заголовок блока (BH) и данные блока. Данные блока включают в себя кодированные данные изображений, включенные в блок.

[0085] Кроме того, кодированный поток включает в себя APS (набор параметров адаптации), в котором сохраняется параметр, который должен быть использован в другом одном или более срезах, помимо вышеуказанного. Числовой индекс aps_idx выделяется для APS, и устройство 100 кодирования изображений может вставлять, в заголовок среза, числовой индекс aps_idx для вызова APS, который должен быть использован.

[0086] Информация смещения кодируется посредством модуля 154 кодирования информации смещения (или модуля 124 энтропийного кодирования) и вставляется в любое из SPS, PPS, SH, данных среза, BH, данных блока и APS. Помимо этого, информация смещения получается из любого из SPS, PPS, SH, данных среза, BH, данных блока и APS и декодируется посредством модуля 252 декодирования информации смещения (или модуля 224 энтропийного декодирования).

[0087] Примеры вставки информации смещения в APS показаны на фиг. 16A, 16B и 16C. Устройство 100 кодирования изображений допускает совместную вставку информации смещения всех блоков в срезе, и устройство 200 декодирования изображений допускает совместное получение информации смещения от APS.

[0088] Примеры вставки информации смещения в данные среза показаны на фиг. 17A, 17B и 17C. Устройство 100 кодирования изображений допускает вставку информации смещения на поблочной основе в данных среза, и устройство 200 декодирования изображений допускает получение информации смещения на поблочной основе в данных среза.

[0089] Согласно этому варианту осуществления, информация смещения может быть совместно использована между множеством целевых областей, которые должны быть обработаны в устройстве 100 кодирования изображений (устройстве 200 декодирования изображений), как показано на фиг. 18. Сплошные линии на фиг. 18 показывают границы сегментов целевых областей для обработки смещения, а пунктирные линии показывают границы сегментов областей, между которыми совместно используется информация смещения. Здесь, устройство 100 кодирования изображений вставляет, в кодированный поток, не информацию смещения, указывающую значение смещения и т.п., а информацию, указывающую совместное использование значения смещения и т.п., за счет этого подавляя увеличение числа битов, вызываемое посредством обработки смещения.

[0090] Например, устройство 100 кодирования изображений может кодировать флаг, указывающий то, что информация смещения совместно используется всеми блоками в срезе, к примеру, sao_one_lima_unit_flag, sao_one_cr_unit_flag и sao_one_cb_unit_flag на фиг. 16A. Помимо этого, устройство 100 кодирования изображений может кодировать флаг, указывающий то, что информация смещения для одной строки должна быть скопирована из строки непосредственно выше, к примеру, sao_repeat_row_flag на фиг. 16A.

[0091] Кроме того, устройство 100 кодирования изображений может кодировать параметр, указывающий число целевых областей, которые должны быть обработаны, между которыми совместно используется информация смещения, к примеру, saoRun и sao_run_diff на фиг. 16B. Помимо этого, устройство 100 кодирования изображений может кодировать sao_merge_left_flag или sao_merge_up_flag, который указывает то, что информация смещения должна быть скопирована из области, расположенной слева, или области, расположенной выше, как показано на фиг. 16B и 17B.

[0092] Фиг. 19 является блок-схемой последовательности операций способа, указывающей операцию кодирования, из элементов информации смещения, числового индекса, который указывает способ классификации пикселей, выполняемый посредством модуля 154 кодирования информации смещения.

[0093] Во-первых, модуль 154 кодирования информации смещения определяет то, выполняется ли обработка смещения (этап S1541). Модуль 152 вычисления информации смещения вычисляет информацию смещения, такую как шаблон разделения, способ классификации пикселей, числовой индекс категории, значение смещения и т.д. Модуль 152 вычисления информации смещения определяет то, что обработка смещения не должна быть выполнена, когда число битов, требуемое для информации смещения, превышает величину коррекции ухудшения качества кодирования. В этом случае, процессор 153 смещения не выполняет обработку смещения.

[0094] Здесь, модуль 154 кодирования информации смещения получает информацию относительно того, выполнена ли обработка смещения, из модуля 152 вычисления информации смещения или процессора 153 смещения. Когда обработка смещения не выполнена ("Нет" на этапе S1541), модуль 154 кодирования информации смещения кодирует числовой индекс 0, который указывает способ классификации пикселей (этап S1542).

[0095] Когда обработка смещения выполняется ("Да" на этапе S1541), модуль 154 кодирования информации смещения определяет то, является ли способ классификации пикселей смещением EO(0) края (этап S1543). Когда способ классификации пикселей является смещением EO(0) края ("Да" на этапе S1543), модуль 154 кодирования информации смещения кодирует числовой индекс 1, который указывает способ классификации пикселей (этап S1544).

[0096] Когда способ классификации пикселей не является смещением EO(0) края ("Нет" на этапе S1543), модуль 154 кодирования информации смещения определяет то, является ли способ классификации пикселей смещением EO(1) края (этап S1545). Когда способ классификации пикселей является смещением EO(1) края ("Да" на этапе S1545), модуль 154 кодирования информации смещения кодирует числовой индекс 2, который указывает способ классификации пикселей (этап S1546).

[0097] Когда способ классификации пикселей не является смещением EO(1) края ("Нет" на этапе S1545), модуль 154 кодирования информации смещения определяет то, является ли способ классификации пикселей смещением EO(2) края (этап S1547). Когда способ классификации пикселей является смещением EO(2) края ("Да" на этапе S1547), модуль 154 кодирования информации смещения кодирует числовой индекс 3, который указывает способ классификации пикселей (этап S1548).

[0098] Когда способ классификации пикселей не является смещением EO(2) края ("Нет" на этапе S1547), модуль 154 кодирования информации смещения определяет то, является ли способ классификации пикселей смещением EO(3) края (этап S1549). Когда способ классификации пикселей является смещением EO(3) края ("Да" на этапе S1549), модуль 154 кодирования информации смещения кодирует числовой индекс 4, который указывает способ классификации пикселей (этап S1550).

[0099] Когда способ классификации пикселей не является смещением EO(3) края ("Нет" на этапе S1549), модуль 154 кодирования информации смещения кодирует числовой индекс 5, который указывает способ классификации пикселей (этап S1551).

[0100] Фиг. 20 является блок-схемой последовательности операций способа, указывающей операцию, выполняемую посредством модуля 252 декодирования информации смещения для того, чтобы декодировать, из элементов информации смещения, числовой индекс, который указывает способ классификации пикселей, и операцию, выполняемую посредством процессора 253 смещения для того, чтобы выполнять обработку смещения.

[0101] Во-первых, процессор 253 смещения определяет то, равен ли числовой индекс, декодированный посредством модуля 252 декодирования информации смещения, 0 (этап S2521). Когда числовой индекс равен 0 ("Да" на этапе S2521), процессор 253 смещения не выполняет обработку смещения (этап S2522).

[0102] Когда числовой индекс не равен 0 ("Нет" на этапе S2521), процессор 253 смещения определяет то, равен ли числовой индекс, декодированный посредством модуля 252 декодирования информации смещения, 1 (этап S2523). Когда числовой индекс равен 1 ("Да" на этапе S2523), процессор 253 смещения выполняет смещение края EO(0) (этап S2524).

[0103] Когда числовой индекс не равен 1 ("Нет" на этапе S2523), процессор 253 смещения определяет то, равен ли числовой индекс, декодированный посредством модуля 252 декодирования информации смещения, 2 (этап S2525). Когда числовой индекс равен 2 ("Да" на этапе S2525), процессор 253 смещения выполняет смещение края EO(1) (этап S2526).

[0104] Когда числовой индекс не равен 2 ("Нет" на этапе S2525), процессор 253 смещения определяет то, равен ли числовой индекс, декодированный посредством модуля 252 декодирования информации смещения, 3 (этап S2527). Когда числовой индекс равен 3 ("Да" на этапе S2527), процессор 253 смещения выполняет смещение EO(2) края (этап S2528).

[0105] Когда числовой индекс не равен 3 ("Нет" на этапе S2527), процессор 253 смещения определяет то, равен ли числовой индекс, декодированный посредством модуля 252 декодирования информации смещения, 4 (этап S2529). Когда числовой индекс равен 4 ("Да" на этапе S2529), процессор 253 смещения выполняет смещение края EO(3) (этап S2530).

[0106] Когда числовой индекс не равен 4 ("Нет" на этапе S2529), процессор 253 смещения выполняет смещение BO(0) полосы (этап S2531).

[0107] Посредством процессов, описанных выше, устройство 100 кодирования изображений и устройство 200 декодирования изображений суммируют, с сигналом восстановленного изображения, значение смещения для формирования разности между исходным сигналом и сигналом восстановленного изображения. Это позволяет формировать восстановленный сигнал, аналогичный исходному сигналу.

[0108] Второй вариант осуществления

Согласно варианту 1 осуществления, можно совместно использовать информацию смещения между множеством областей. Тем не менее, с учетом уменьшения задержки обработки или понижения объема запоминающего устройства, области, которые должны быть совместно использованы, ограничены смежными областями. Например, задержка обработки сокращается посредством ограничения областей, которые должны быть совместно использованы, смежными областями слева и выше. Кроме того, объем запоминающего устройства для сохранения информации смещения в обработанной области сокращается посредством ограничения областей, которые должны быть совместно использованы, смежной областью слева.

[0109] С другой стороны, ограничение областей, которые должны быть совместно использованы, затрудняет совместное использование информации смещения в большой области. Именно по этой причине частота кодирования информации смещения растет, а число битов увеличивается. Здесь, как показано на фиг. 16C или 17C, при смещении полосы, категория sao_band_position начала кодирования смещения полосы кодируется в качестве параметра. Таким образом, число битов превышает число битов смещения края. Соответственно, с точки зрения увеличения числа битов, преимущественнее использовать смещение края.

[0110] С учетом вышеизложенного, устройство кодирования изображений согласно этому варианту осуществления уменьшает число битов, требуемое при использовании смещения полосы, чтобы корректировать недостатки смещения полосы по сравнению со смещением края. Следует отметить, что категория sao_band_position начала кодирования смещения полосы является примером информации, которая указывает область применения значения смещения.

[0111] Далее описывается устройство кодирования изображений согласно настоящему варианту осуществления и устройство декодирования изображений, соответствующее устройству кодирования изображений.

[0112] Фиг. 21 является блок-схемой, иллюстрирующей конфигурацию модуля контурной фильтрации в устройстве кодирования изображений согласно этому варианту осуществления. Остальная конфигурация устройства кодирования изображений согласно этому варианту осуществления является, по сути, эквивалентной конфигурации устройства 100 кодирования изображений, проиллюстрированного на фиг. 1. Фиг. 22 является блок-схемой, иллюстрирующей конфигурацию модуля контурной фильтрации в устройстве декодирования изображений согласно этому варианту осуществления. Остальная конфигурация устройства декодирования изображений согласно этому варианту осуществления является, по сути, эквивалентной конфигурации устройства 200 декодирования изображений, проиллюстрированного на фиг. 2.

[0113] Фиг. 23 является блок-схемой последовательности операций способа, иллюстрирующей операции, выполняемые посредством модуля 300 контурной фильтрации (модуля контурной фильтрации устройства кодирования изображений), проиллюстрированного на фиг. 21. Фиг. 24 является блок-схемой последовательности операций способа, иллюстрирующей операции, выполняемые посредством модуля 400 контурной фильтрации (модуля контурной фильтрации устройства декодирования изображений), проиллюстрированного на фиг. 22.

[0114] Во-первых, описывается конфигурация и работа модуля 300 контурной фильтрации (модуля контурной фильтрации устройства кодирования изображений), проиллюстрированного на фиг. 21. Модуль 300 контурной фильтрации включает в себя: модуль 301 получения сигналов; модуль 302 вычисления информации смещения; процессор 303 смещения; модуль 304 вывода сигналов; модуль 305 кодирования информации смещения; и модуль 306 управления. Описание для перекрывающихся частей с вариантом 1 осуществления опускается, и описываются отличия, т.е. модуль 306 управления на фиг. 21, модуль 305 кодирования информации смещения на фиг. 21 и этап S304 на фиг. 23.

[0115] Модуль 306 управления управляет модулем 305 кодирования информации смещения таким образом, чтобы уменьшать число битов информации смещения для смещения полосы, когда способ классификации пикселей является смещением полосы.

[0116] Модуль 305 кодирования информации смещения выполняет кодирование для того, чтобы уменьшать числовое значение числового индекса, указывающего то, что способ классификации пикселей является смещением полосы.

[0117] На этапе S304 по фиг. 23, модуль 305 кодирования информации смещения выделяет числовой индекс для способа классификации пикселей и кодирует информацию смещения. В это время, модуль 305 кодирования информации смещения выделяет числовой индекс таким образом, что числовой индекс, который указывает смещение BO(0) полосы, меньше четырех смещений EO(0), EO(1), EO(2) и EO(3) края. Затем, модуль 305 кодирования информации смещения вставляет кодированную информацию смещения в кодированный поток.

[0118] Далее описывается конфигурация и работа модуля 400 контурной фильтрации (модуля контурной фильтрации устройства декодирования изображений), проиллюстрированного на фиг. 22. Модуль 400 контурной фильтрации включает в себя: модуль 401 получения сигналов; модуль 402 декодирования информации смещения; процессор 403 смещения; модуль 404 вывода сигналов; и модуль 405 управления. Описание для перекрывающихся частей с вариантом 1 осуществления опускается, и описываются отличия, т.е. модуль 405 управления на фиг. 22, модуль 402 декодирования информации смещения на фиг. 22 и этап S402 на фиг. 24.

[0119] Модуль 405 управления управляет модулем 402 декодирования информации смещения таким образом, что информация смещения для смещения полосы декодируется с помощью небольшого числа битов, когда способ классификации пикселей является смещением полосы.

[0120] Модуль 402 декодирования информации смещения декодирует числовой индекс с небольшим числовым значением в качестве числового индекса, указывающего то, что способ классификации пикселей является смещением полосы.

[0121] На этапе S402 по фиг. 24, модуль 402 декодирования информации смещения выделяет числовой индекс для способа классификации пикселей и декодирует информацию смещения. В это время, модуль 402 декодирования информации смещения выделяет числовой индекс таким образом, что числовой индекс, который указывает смещение BO(0) полосы, меньше четырех смещений EO(0), EO(1), EO(2) и EO(3) края.

[0122] Здесь подробнее описывается кодирование и декодирование информации смещения, выполняемое посредством модуля 305 кодирования информации смещения и модуля 402 декодирования информации смещения. Для способов классификации пикселей при обработке смещения используются смещения EO(0), EO(1), EO(2) и EO(3) края и смещение BO(0) полосы, аналогично варианту 1 осуществления. В этом случае, разность между наименьшим числом битов и наибольшим числом битов, которые соответствуют числовому индексу, указывающему способ классификации пикселей, составляет три бита за исключением числового индекса 0 для случая, когда обработка смещения не выполняется.

[0123] В варианте 1 осуществления наибольшее число битов выделяется смещению полосы, как показано на фиг. 14. Когда число категорий смещения полосы равно 32, разность самое большее в восемь битов и, по меньшей мере, в пять битов, включающая в себя sao_band_position, формируется между смещением полосы и смещением края.

[0124] По этой причине, согласно этому варианту осуществления, бит, меньший бита в случае смещения края, выделяется числовому индексу, указывающему смещение полосы, как показано на фиг. 25. Вследствие этого, разность числа битов между смещением полосы и смещением края составляет самое большее четыре бита и по меньшей мере два бита, корректируя недостатки смещения полосы по сравнению со смещением края.

[0125] Следует отметить, что, как показано на фиг. 26, флаг активации/деактивации обработки смещения (флаг обработки смещения) может быть независимым, в качестве sao_on_flag, от числового индекса sao_type_idx, который указывает способ классификации пикселей.

[0126] На фиг. 26, смещение полосы выделяется числовому индексу 0. Числовые индексы преобразуются в двоичную форму таким образом, что небольшое значение имеет небольшую длину в битах, а большое значение имеет большую длину в битах, и максимальная длина в битах указывается как четыре бита. Тем не менее, способ выделения не ограничивается вышеуказанным. Например, максимальная длина в битах не может указываться, и вместо этого, всем числовым индексам могут выделяться биты, так что последний бит равен 0. Затем, приводится описание на основе выделения битов, показанного на фиг. 26.

[0127] Примеры вставки информации смещения в APS показаны на фиг. 27A и фиг. 27B. Флаг sao_on_flag активации/деактивации обработки смещения, который является независимым от индекса, который указывает способ классификации пикселей, заново предоставляется в sao_unit_vlc, показанном на фиг. 27A. Помимо этого, наименьший бит выделяется смещению полосы в sao_type_idx для sao_offset_vlc на фиг. 27B.

[0128] Фиг. 27C является схемой, которая показывает пример контекстов информации смещения в APS. Фиг. 27D является блок-схемой последовательности операций способа, которая показывает пример кодирования информации смещения в APS. Фиг. 27E является блок-схемой последовательности операций способа, которая показывает пример декодирования информации смещения в APS.

[0129] Помимо этого, примеры вставки информации смещения в данные среза показаны на фиг. 28A и 28B. Флаг sao_on_flag активации/деактивации обработки смещения заново предоставляется в sao_unit_cabac, показанном на фиг. 28A. Помимо этого, наименьший бит выделяется смещению полосы в sao_type_idx для sao_offset_cabac, показанном на фиг. 28B.

[0130] Фиг. 28C является схематичным видом, иллюстрирующим пример контекстов информации смещения в данных среза. Фиг. 28D является блок-схемой последовательности операций способа, которая показывает пример кодирования информации смещения в данных среза. Фиг. 28E является блок-схемой последовательности операций способа, которая показывает пример декодирования информации смещения в данных среза.

[0131] Фиг. 29 является блок-схемой последовательности операций способа, указывающей операцию кодирования, из элементов информации смещения, числового индекса, который указывает способ классификации пикселей, выполняемый посредством модуля 305 кодирования информации смещения.

[0132] Во-первых, модуль 305 кодирования информации смещения определяет то, выполняется ли обработка смещения (этап S3051). Модуль 302 вычисления информации смещения вычисляет информацию смещения, такую как шаблон разделения, способ классификации пикселей, числовой индекс категории, значение смещения и т.д. Модуль 302 вычисления информации смещения определяет то, что обработка смещения не должна быть выполнена, когда число битов, требуемое для информации смещения, превышает величину коррекции ухудшения качества кодирования. В этом случае, процессор 303 смещения не выполняет обработку смещения.

[0133] Здесь, модуль 305 кодирования информации смещения получает информацию относительно того, выполнена ли обработка смещения, из модуля 302 вычисления информации смещения или процессора 303 смещения. Когда обработка смещения не выполнена ("Нет" на этапе S3051), модуль 305 кодирования информации смещения кодирует флаг активации/деактивации обработки смещения в качестве 0 (этап S3052).

[0134] Когда обработка смещения выполнена ("Да" на этапе S3051), модуль 305 кодирования информации смещения кодирует флаг активации/деактивации обработки смещения в качестве 1 (этап S3053). Затем, модуль 305 кодирования информации смещения определяет то, является ли способ классификации пикселей смещением BO(0) полосы (этап S3054).

[0135] Когда способ классификации пикселей является смещением BO(0) полосы ("Да" на этапе S3054), модуль 305 кодирования информации смещения кодирует числовой индекс 0, который указывает способ классификации пикселей (этап S3055). Когда способ классификации пикселей не является смещением BO(0) полосы ("Нет" на этапе S3054), модуль 305 кодирования информации смещения определяет то, является ли способ классификации пикселей смещением EO(0) края (этап S3056).

[0136] Когда способ классификации пикселей является смещением EO(0) края ("Да" на этапе S3056), модуль 305 кодирования информации смещения кодирует числовой индекс 1, который указывает способ классификации пикселей (этап S3057). Когда способ классификации пикселей не является смещением EO(0) края ("Нет" на этапе S3056), модуль 305 кодирования информации смещения определяет то, является ли способ классификации пикселей смещением EO(1) края (этап S3058).

[0137] Когда способ классификации пикселей является смещением EO(1) края ("Да" на этапе S3058), модуль 305 кодирования информации смещения кодирует числовой индекс 2, который указывает способ классификации пикселей (этап S3059). Когда способ классификации пикселей не является смещением EO(1) края ("Нет" на этапе S3058), модуль 305 кодирования информации смещения определяет то, является ли способ классификации пикселей смещением EO(2) края (этап S3060).

[0138] Когда способ классификации пикселей является смещением EO(2) края ("Да" на этапе S3060), модуль 305 кодирования информации смещения кодирует числовой индекс 3, который указывает способ классификации пикселей (этап S3061). Когда способ классификации пикселей не является смещением EO(2) края ("Нет" на этапе S3060), модуль 305 кодирования информации смещения кодирует числовой индекс 4, который указывает способ классификации пикселей (этап S3062).

[0139] Фиг. 30 является блок-схемой последовательности операций способа, указывающей операцию, выполняемую посредством модуля 402 декодирования информации смещения для того, чтобы декодировать, из элементов информации смещения, числовой индекс, который указывает способ классификации пикселей, и операцию, выполняемую посредством процессора 403 смещения для того, чтобы выполнять обработку смещения.

[0140] Во-первых, процессор 403 смещения определяет то, равен ли флаг активации/деактивации обработки смещения, декодированный посредством модуля 402 декодирования информации смещения, 0 (этап S4021). Когда флаг активации/деактивации обработки смещения равен 0 ("Да" на этапе S4021), процессор 403 смещения не выполняет обработку смещения (этап S4022).

[0141] Когда флаг активации/деактивации обработки смещения не равен 0 ("Нет" на этапе S4021), модуль 402 декодирования информации смещения декодирует числовой индекс (этап S4023). Затем, процессор 403 смещения определяет то, равен ли числовой индекс, декодированный посредством модуля 402 декодирования информации смещения, 0 (этап S4024).

[0142] Когда числовой индекс равен 0 ("Да" на этапе S4024), процессор 403 смещения выполняет смещение BO(0) полосы (этап S4025). Когда числовой индекс не равен 0 ("Нет" на этапе S4024), процессор 403 смещения определяет то, равен ли числовой индекс, декодированный посредством модуля 402 декодирования информации смещения, 1 (этап S4026).

[0143] Когда числовой индекс равен 1 ("Да" на этапе S4026), процессор 403 смещения выполняет смещение EO(0)) края (этап S4027). Когда числовой индекс не равен 1 ("Нет" на этапе S4026), процессор 403 смещения определяет то, равен ли числовой индекс, декодированный посредством модуля 402 декодирования информации смещения, 2 (этап S4028).

[0144] Когда числовой индекс равен 2 ("Да" на этапе S4028), процессор 403 смещения выполняет смещение края EO(1) (этап S4029). Когда числовой индекс не равен 2 ("Нет" на этапе S4028), процессор 403 смещения определяет то, равен ли числовой индекс, декодированный посредством модуля 402 декодирования информации смещения, 3 (этап S4030).

[0145] Когда числовой индекс равен 3 ("Да" на этапе S4030), процессор 403 смещения выполняет смещение EO(2) края (этап S4031). Когда числовой индекс не равен 3 ("Нет" на этапе S4030), процессор 403 смещения выполняет смещение края EO(3) (этап S4032).

[0146] Посредством процессов, описанных выше, устройство кодирования изображений и устройство декодирования изображений уменьшают разность в числе битов, требуемом для кодирования информации смещения между смещением полосы и смещением края. Это дает возможность устройству кодирования изображений и устройству декодирования изображений выполнять надлежащую обработку смещения для каждой из целевых областей, которые должны быть обработаны. Следовательно, повышается эффективность кодирования и субъективное качество изображений.

[0147] Следует отметить, что устройство кодирования изображений и устройство декодирования изображений могут выделять небольшое число битов для числового индекса смещения края, когда обработка смещения выполняется для сигнала яркости. Кроме того, устройство кодирования изображений и устройство декодирования изображений могут выделять небольшое число битов для числового индекса смещения полосы, когда обработка смещения выполняется для сигнала цветности. Это упрощает использование способа классификации пикселей, который является более подходящим для особенности сигнала, который должен быть обработан. Следовательно, дополнительно повышается эффективность кодирования и субъективное качество изображений.

[0148] Помимо этого, устройство кодирования изображений и устройство декодирования изображений могут обращаться к коэффициенту преобразования частоты и выделять небольшое число битов для числового индекса смещения края в области, которая должна быть обработана, которая имеет небольшую низкочастотную компоненту. Кроме того, устройство кодирования изображений и устройство декодирования изображений могут выделять небольшое число битов для числового индекса смещения полосы в области, которая должна быть обработана, которая имеет большую низкочастотную компоненту. Это упрощает использование способа классификации пикселей, который является более подходящим для особенности сигнала, который должен быть обработан. Следовательно, дополнительно повышается эффективность кодирования и субъективное качество изображений.

[0149] Помимо этого, для определения того, является число вышеописанных низкочастотных компонент большим или небольшим, пороговое значение может быть использовано, или пороговое значение может быть кодировано.

[0150] Здесь, арифметическое кодирование описывается в качестве способа для кодирования и декодирования информации смещения, выполняемого посредством модуля 305 кодирования информации смещения и модуля 402 декодирования информации смещения. При арифметическом кодировании устройство кодирования изображений сначала преобразует (преобразует в двоичную форму) текущий сигнал, который должен быть кодирован, из многозначного сигнала в двоичный сигнал (ячейка, сигнал 0 или 1) и выполняет арифметическое кодирование в отношении двоичного сигнала с тем, чтобы формировать поток битов. Один пример арифметического кодирования является контекстным арифметическим кодированием (контекстно-адаптивным арифметическим кодированием), в котором арифметическое кодирование выполняется с использованием адаптивной вероятности возникновения символов.

[0151] При контекстном арифметическом кодировании устройство кодирования изображений выбирает контекст для каждого из сигналов, которые должны быть кодированы, и определяет вероятность возникновения символов согласно контексту. Более конкретно, при контекстном арифметическом кодировании, устройство кодирования изображений сначала загружает контекст и выполняет арифметическое кодирование в отношении текущего сигнала, который должен быть кодирован, на основе вероятности возникновения символов для контекста. Затем, устройство кодирования изображений обновляет вероятность возникновения символов, соответствующую контексту, согласно значению текущего сигнала, который кодируется.

[0152] При кодировании флага sao_on_flag активации/деактивации обработки смещения в сигнале яркости, сигнале Cb цветности и сигнале Cr цветности, может быть использован общий контекст, либо контексты могут изменяться для каждого из сигналов, как показано на фиг. 27C или 28C.

[0153] Фиг. 28D является блок-схемой последовательности операций способа, которая показывает пример использования трех контекстов, когда модуль 305 кодирования информации смещения кодирует и вставляет в данные среза флаг sao_on_flag активации/деактивации обработки смещения.

[0154] Во-первых, модуль 305 кодирования информации смещения определяет то, является ли текущий сигнал, который должен быть обработан, сигналом яркости (этап S3041). Модуль 305 кодирования информации смещения использует cIdx, проиллюстрированный на фиг. 28A, для определения сигнала яркости. Здесь, когда cIdx=0, текущий сигнал является сигналом яркости.

[0155] Когда текущий сигнал является сигналом яркости ("Да" на этапе S3041), модуль 305 кодирования информации смещения выбирает и загружает контекст 1 (этап S3042). Когда текущий сигнал не является сигналом яркости ("Нет" на этапе S3041), модуль 305 кодирования информации смещения определяет то, является ли текущий сигнал сигналом Cb цветности (этап S3043). Модуль 305 кодирования информации смещения использует cIdx для определения сигнала Cb цветности, идентично определению сигнала яркости (этап S3041). Здесь, когда cIdx=1, текущий сигнал является сигналом Cb цветности.

[0156] Когда текущий сигнал является сигналом Cb цветности ("Да" на этапе S3043), модуль 305 кодирования информации смещения выбирает и загружает контекст 2 (этап S3044). Когда текущий сигнал не является сигналом Cb цветности ("Нет" на этапе S3043), модуль 305 кодирования информации смещения выбирает и загружает контекст 3 (этап S3045).

[0157] Затем, модуль 305 кодирования информации смещения кодирует флаг sao_on_flag активации/деактивации обработки смещения с использованием контекста, который выбирается и загружается (этап S3046).

[0158] Следует отметить, что блок-схема последовательности операций способа, проиллюстрированная на фиг. 27D, которая показывает пример случая, в котором флаг sao_on_flag активации/деактивации обработки смещения кодируется и вставляется в APS, является идентичной блок-схеме последовательности операций способа, проиллюстрированной на фиг. 28, описанной выше, и в силу этого ее описание опускается.

[0159] Фиг. 28E является блок-схемой последовательности операций способа, которая показывает пример использования трех контекстов, когда модуль 402 декодирования информации смещения декодирует флаг sao_on_flag активации/деактивации обработки смещения, который вставляется в данные среза.

[0160] Во-первых, модуль 402 декодирования информации смещения определяет то, является ли текущий сигнал, который должен быть обработан, сигналом яркости (этап S4021). Модуль 402 декодирования информации смещения использует cIdx, проиллюстрированный на фиг. 28A, для определения сигнала яркости. Здесь, когда cIdx=0, текущий сигнал является сигналом яркости.

[0161] Когда текущий сигнал является сигналом яркости ("Да" на этапе S4021), модуль 402 декодирования информации смещения выбирает и загружает контекст 1 (этап S4022). Когда текущий сигнал не является сигналом яркости ("Нет" на этапе S4021), модуль 402 декодирования информации смещения определяет то, является ли текущий сигнал сигналом Cb цветности (этап S4023). Модуль 402 декодирования информации смещения использует cIdx для определения сигнала Cb цветности, идентично определению сигнала яркости (этап S4021). Здесь, когда cIdx=1, текущий сигнал является сигналом Cb цветности.

[0162] Когда текущий сигнал является сигналом Cb цветности ("Да" на этапе S4023), модуль 402 декодирования информации смещения выбирает и загружает контекст 2 (этап S4024). Когда текущий сигнал не является сигналом Cb цветности ("Нет" на этапе S4023), модуль 402 декодирования информации смещения выбирает и загружает контекст 3 (этап S4025).

[0163] Затем, модуль 402 декодирования информации смещения декодирует флаг sao_on_flag активации/деактивации обработки смещения с использованием контекста, который выбирается и загружается (этап S4026).

[0164] Следует отметить, что блок-схема последовательности операций способа, проиллюстрированная на фиг. 27E, которая показывает пример случая, в котором флаг sao_on_flag активации/деактивации обработки смещения, который вставляется в APS, декодируется, является идентичной блок-схеме последовательности операций способа, проиллюстрированной на фиг. 28E, описанной выше, и в силу этого ее описание опускается.

[0165] Посредством процессов, описанных выше, устройство кодирования изображений и устройство декодирования изображений используют различный контекст для каждого из сигнала яркости, сигнала Cb цветности и сигнала Cr цветности, тем самым выделяя вероятность возникновения символов согласно особенности каждого из сигналов. Таким образом, устройство кодирования изображений и устройство декодирования изображений допускают подавление объема кода флага sao_on_flag активации/деактивации обработки смещения.

[0166] Следует отметить, что устройство кодирования изображений и устройство декодирования изображений могут сокращать число контекстов, которые должны быть использованы для кодирования и декодирования, до двух (сигнал яркости и сигнал цветности) посредством совместного использования контекста сигналами Cb и Cr цветности.

[0167] Третий вариант осуществления

Согласно варианту 2 осуществления, устройство кодирования изображений кодирует информацию, указывающую то, выполнять ли обработку смещения для каждой из областей, которые должны быть обработаны, в качестве флага sao_on_flag активации/деактивации обработки смещения, в начале информации смещения независимо от способа sao_type_idx классификации пикселей. Когда обработка смещения не должна быть выполнена, устройство кодирования изображений не выполняет кодирование для sao_merge_left_flag или sao_merge_up_flag, который указывает то, копировать ли информацию смещения из области слева или выше, соответственно.

[0168] Вследствие этого, можно подавлять число битов. Устройство кодирования изображений согласно этому варианту осуществления дополнительно позволяет повышать пропускную способность посредством интегрирования или упрощения арифметического кодирования в отношении каждого элемента информации смещения.

[0169] Примеры арифметического кодирования включают в себя обходное арифметическое кодирование в дополнение к контекстному арифметическому кодированию, описанному в варианте 2 осуществления. Контекстное арифметическое кодирование использует адаптивную вероятность возникновения символов. С другой стороны, при обходном арифметическом кодировании, арифметическое кодирование выполняется с использованием вероятности возникновения символов, которая составляет 50%. Вследствие этого, устройство кодирования изображений не должно загружать и обновлять контекст при обходном арифметическом кодировании, и за счет этого можно ускорять процессы.

[0170] Фиг. 31A иллюстрирует пример комбинации типов арифметического кодирования для использования в каждом элементе синтаксиса информации смещения.

[0171] Здесь, синтаксисы для кодирования и декодирования информации смещения являются идентичными синтаксисам в варианте 2 осуществления, проиллюстрированном на фиг. 28A и 28B. Помимо этого, выделение битов флагу sao_on_flag активации/деактивации обработки смещения и способу sao_type_idx классификации пикселей является эквивалентным выделению согласно варианту 2 осуществления, проиллюстрированному на фиг. 26. Тем не менее, выделение синтаксиса или бита не ограничивается этим.

[0172] Например, на фиг. 28B, значение смещения ± знак sao_offset_sign и категория sao_band_position начала кодирования смещения полосы последовательно кодируются (декодируются), чтобы подавлять число условных переходов, соответствующих операторам "if". Тем не менее, порядок кодирования (декодирования) не ограничивается этим. Помимо этого, при выделении бита способу sao_type_idx классификации пикселей, проиллюстрированному на фиг. 26, наибольшее число битов может выделяться смещению полосы.

[0173] Имеется сильная тенденция в отношении вероятности возникновения символов флага sao_on_flag активации/деактивации обработки смещения, флага sao_merge_left_flag копирования информации смещения влево и флага sao_merge_up_flag копирования информации смещения вверх. По этой причине, используется контекстное арифметическое кодирование.

[0174] С другой стороны, имеется слабая тенденция в отношении вероятности возникновения символов для способа sao_type_idx классификации пикселей, абсолютного значения sao_offset смещения, значения смещения ± знака sao_offset_sign и категории sao_band_position начала кодирования смещения полосы. По этой причине, используется обходное арифметическое кодирование.

[0175] Следует отметить, что устройство кодирования изображений согласно варианту 2 осуществления использует различный контекст для каждого из сигнала яркости, сигнала Cb цветности и сигнала Cr цветности во флаге sao_on_flag активации/деактивации обработки смещения и флаге sao_merge_left_flag копирования информации смещения влево. Вследствие этого, устройство кодирования изображений повышает эффективность кодирования.

[0176] С другой стороны, аналогично вышеописанной информации смещения, устройство кодирования изображений согласно этому варианту осуществления может совместно использовать контекст между сигналом яркости, сигналом Cb цветности и сигналом Cr цветности, идентично флагу sao_merge_up_flag копирования информации смещения вверх. Вследствие этого, можно сокращать число контекстов и емкость запоминающего устройства.

[0177] Фиг. 31B является таблицей, которая показывает объективную производительность устройства кодирования изображений и устройства декодирования изображений согласно этому варианту осуществления. Фиг. 31B является индексом на основе NPL 2 и показывает, что имеется незначительное снижение объективной производительности. Подробности объективной производительности описываются ниже.

[0178] В этом варианте осуществления, операции, выполняемые посредством модуля 305 кодирования информации смещения и модуля 402 декодирования информации смещения, отличаются по сравнению с устройством кодирования изображений и устройством декодирования изображений, описанными в варианте 2 осуществления. Другие операции являются идентичными операциям в варианте 2 осуществления. Далее описываются отличия.

[0179] Фиг. 32 иллюстрирует конфигурацию модуля 307 кодирования информации смещения, который кодирует информацию смещения в устройстве кодирования изображений согласно этому варианту осуществления. Модуль 307 кодирования информации смещения включает в себя: модуль 3071 управления арифметическим кодированием; модуль 3072 контекстного арифметического кодирования; и модуль 3073 обходного арифметического кодирования.

[0180] Модуль 3071 управления арифметическим кодированием переключается между контекстным арифметическим кодированием и обходным арифметическим кодированием, которое должно быть использовано, согласно информации смещения. Следует отметить, что модуль 3071 управления арифметическим кодированием может быть включен в модуль 110 управления устройства 100 кодирования изображений, проиллюстрированного на фиг. 1. Модуль 3072 контекстного арифметического кодирования загружает контекст согласно информации смещения для того, чтобы выполнять кодирование. Модуль 3073 обходного арифметического кодирования выполняет кодирование с использованием вероятности возникновения символов, которая составляет 50%.

[0181] Фиг. 33 иллюстрирует конфигурацию модуля 406 декодирования информации смещения, который декодирует информацию смещения в устройстве декодирования изображений согласно этому варианту осуществления. Модуль 406 декодирования информации смещения включает в себя: модуль 4061 управления арифметическим декодированием; модуль 4062 контекстного арифметического декодирования; и модуль 4063 обходного арифметического декодирования.

[0182] Модуль 4061 управления арифметическим декодированием переключается между контекстным арифметическим декодированием (контекстно-адаптивным арифметическим декодированием) и обходным арифметическим декодированием, которое должно быть использовано, согласно информации смещения. Следует отметить, что модуль 4061 управления арифметическим декодированием может быть включен в модуль 210 управления устройства 200 декодирования изображений, проиллюстрированного на фиг. 2. Модуль 4062 контекстного арифметического декодирования загружает контекст согласно информации смещения для того, чтобы выполнять декодирование. Модуль 4063 обходного арифметического декодирования выполняет декодирование с использованием вероятности возникновения символов, которая составляет 50%.

[0183] Фиг. 34 является блок-схемой последовательности операций способа, иллюстрирующей пример кодирования информации смещения с использованием арифметического кодирования, выполняемого посредством модуля 307 кодирования информации смещения.

[0184] Во-первых, после начала обработки посредством модуля 307 кодирования информации смещения, модуль 3071 управления арифметическим кодированием задает контекстное арифметическое кодирование в качестве способа кодирования (этап S3070).

[0185] Затем, модуль 3072 контекстного арифметического кодирования загружает контекст для флага sao_on_flag активации/деактивации обработки смещения и кодирует флаг sao_on_flag активации/деактивации обработки смещения с использованием контекста (этап S3071).

[0186] Затем, модуль 3071 управления арифметическим кодированием определяет то, указывает ли флаг sao_on_flag активации/деактивации обработки смещения 1 (этап S3072). Здесь, он указывает то, что обработка смещения не должна быть выполнена в отношении целевой области, которая должна быть обработана, когда sao_on_flag указывает 0, и он указывает то, что обработка смещения должна быть выполнена в отношении целевой области, когда sao_on_flag указывает 1.

[0187] Когда флаг sao_on_flag активации/деактивации обработки смещения указывает 1 ("Да" на этапе S3072), модуль 3071 управления арифметическим кодированием определяет то, размещается ли целевая область в левом конце среза или мозаичного фрагмента (этап S3073). Информация смещения копируется только из области в идентичном срезе и идентичном мозаичном фрагменте. По этой причине, вышеописанное определение выполняется до кодирования флага sao_merge_left_flag копирования информации смещения влево.

[0188] Когда целевая область не размещается в левом конце ("Нет" на этапе S3073), модуль 3072 контекстного арифметического кодирования загружает контекст для флага sao_merge_left_flag копирования информации смещения влево. Затем, модуль 3072 контекстного арифметического кодирования кодирует флаг sao_merge_left_flag копирования информации смещения влево (этап S3074).

[0189] Когда целевая область размещается в левом конце ("Да" на этапе S3073) или после кодирования sao_merge_left_flag (этап S3074), модуль 3071 управления арифметическим кодированием определяет то, равен ли sao_merge_left_flag 0 (этап S3075). Здесь, sao_merge_left_flag, равный 0, указывает то, что информация смещения не копируется из левой области, и sao_merge_left_flag, равный 1, указывает то, что информация смещения копируется из левой области.

[0190] Следует отметить, что когда кодирование sao_merge_left_flag (этап S3074) не выполняется, значение sao_merge_left_flag не существует. В этом случае, значения sao_merge_left_flag обрабатываются в качестве 0. Помимо этого, модуль 307 кодирования информации смещения может обеспечивать запоминающее устройство для sao_merge_left_flag во время начала процесса и задавать начальное значение 0.

[0191] Затем, когда sao_merge_left_flag указывает 0 ("Да" на этапе S3075), модуль 3071 управления арифметическим кодированием определяет то, размещается ли целевая область в верхнем конце среза или мозаичного фрагмента (этап S3076). Поскольку информация смещения копируется только из области в идентичном срезе и в идентичном мозаичном фрагменте, что и согласно определению для левого конца (этап S3073), вышеописанное определение выполняется до кодирования флага sao_merge_up_flag копирования информации смещения вверх.

[0192] Когда целевая область не размещается в верхнем конце ("Нет" на этапе S3076), модуль 3072 контекстного арифметического кодирования загружает контекст для флага sao_merge_up_flag копирования информации смещения вверх. Затем, модуль 3072 контекстного арифметического кодирования кодирует флаг sao_merge_up_flag копирования информации смещения вверх (этап S3077).

[0193] Когда целевая область размещается в верхнем конце ("Да" на этапе S3076) или после кодирования sao_merge_up_flag (этап S3077), модуль 3071 управления арифметическим кодированием определяет то, равен ли sao_merge_up_flag 0 (этап S3078). Здесь, sao_merge_up_flag, равный 0, указывает то, что информация смещения не копируется из верхней области, и sao_merge_up_flag, равный 1, указывает то, что информация смещения копируется из верхней области.

[0194] Следует отметить, что когда кодирование sao_merge_up_flag (этап S3077) не выполняется, значение sao_merge_up_flag не существует. В этом случае, значение sao_merge_up_flag обрабатывается в качестве 0. Помимо этого, модуль 307 кодирования информации смещения может обеспечивать запоминающее устройство для sao_merge_up_flag во время начала процесса и задавать начальное значение 0.

[0195] Затем, когда sao_merge_up_flag указывает 0 ("Да" на этапе S3078), модуль 3071 управления арифметическим кодированием переключает способ кодирования на обходное арифметическое кодирование (этап S3079). Вследствие этого, обходное арифметическое кодирование используется на всех последующих этапах кодирования.

[0196] Затем, модуль 3073 обходного арифметического кодирвания кодирует способ sao_type_idx классификации пикселей и абсолютное значение sao_offset смещения (этап S3080). Здесь, в этом варианте осуществления, число абсолютных значений sao_offset смещения составляет четыре в любом из способов классификации пикселей. Тем не менее, модуль 3073 обходного арифметического кодирования может кодировать абсолютные значения смещения, которые отличаются по числу для каждого из способов классификации пикселей.

[0197] Затем, модуль 3071 управления арифметическим кодированием определяет то, является ли способ классификации пикселей смещением полосы (этап S3081). Здесь, модуль 3071 управления арифметическим кодированием использует способ sao_type_idx классификации пикселей для определения.

[0198] Согласно этому варианту осуществления, смещению полосы выделяется 0 в качестве значения sao_type_idx. По этой причине, модуль 3071 управления арифметическим кодированием определяет то, что способ классификации пикселей является смещением полосы, когда sao_type_idx равен 0, и что способ классификации пикселей не является смещением полосы, когда sao_type_idx отличается от 0.

[0199] Когда способ классификации пикселей является смещением полосы ("Да" на этапе S30841), модуль 3073 обходного арифметического кодирования кодирует значение смещения ± знак sao_offset_sign и категорию sao_band_position начала кодирования смещения полосы (этап S3082).

[0200] Следует отметить, что в этом варианте осуществления, модуль 3073 обходного арифметического кодирования кодирует значение смещения ± знак sao_offset_sign только в случае смещения полосы. Тем не менее, модуль 3073 обходного арифметического кодирования также может кодировать значение смещения ± знак sao_offset_sign в случае смещения края. В этом случае, значение смещения ± знак sao_offset_sign кодируется на этапе S3080.

[0201] Дополнительно в этом случае, на этапе S3080, абсолютное значение sao_offset смещения и значение смещения ± знак sao_offset_sign могут быть интегрированы и кодированы в качестве значения смещения.

[0202] Фиг. 35 является блок-схемой последовательности операций способа, которая показывает пример декодирования информации смещения с использованием арифметического декодирования, выполняемого посредством модуля 406 декодирования информации смещения.

[0203] Во-первых, после начала обработки посредством модуля 406 декодирования информации смещения, модуль 4061 управления арифметическим декодированием задает контекстное арифметическое декодирование в качестве способа декодирования (этап S4060).

[0204] Затем, модуль 4062 контекстного арифметического декодирования загружает контекст для флага sao_on_flag активации/деактивации обработки смещения и декодирует флаг sao_on_flag активации/деактивации обработки смещения с использованием контекста (этап S4061).

[0205] Затем, модуль 4061 управления арифметическим декодированием определяет то, указывает ли флаг sao_on_flag активации/деактивации обработки смещения 1 (этап S4062). Здесь, он указывает то, что обработка смещения не должна быть выполнена в отношении целевой области, которая должна быть обработана, когда sao_on_flag указывает 0, и он указывает то, что обработка смещения должна быть выполнена в отношении целевой области, когда sao_on_flag указывает 1.

[0206] Затем, когда sao_on_flag указывает 1 ("Да" на этапе S4062), модуль 4061 управления арифметическим декодированием определяет то, размещается ли целевая область в левом конце среза или мозаичного фрагмента (этап S4063). Информация смещения копируется только из области в идентичном срезе и идентичном мозаичном фрагменте. По этой причине, вышеописанное определение выполняется до декодирования флага sao_merge_left_flag копирования информации смещения влево.

[0207] Когда целевая область не размещается в левом конце ("Нет" на этапе S4063), модуль 4062 контекстного арифметического декодирования загружает контекст для флага sao_merge_left_flag копирования информации смещения влево. Затем, модуль 4062 контекстного арифметического декодирования декодирует флаг sao_merge_left_flag копирования информации смещения влево (этап S4064).

[0208] Когда целевая область размещается в левом конце ("Да" на этапе S4063) или после декодирования sao_merge_left_flag (этап S4064), модуль 4061 управления арифметическим декодированием определяет то, равен ли sao_merge_left_flag 0 (этап S4065). Здесь, sao_merge_left_flag, равный 0, указывает то, что информация смещения не копируется из левой области, и sao_merge_left_flag, равный 1, указывает то, что информация смещения копируется из левой области.

[0209] Следует отметить, что когда декодирование sao_merge_left_flag (этап S4064) не выполняется, значение sao_merge_left_flag не существует. В этом случае, значения sao_merge_left_flag обрабатываются в качестве 0. Помимо этого, модуль 406 декодирования информации смещения может обеспечивать запоминающее устройство для sao_merge_left_flag во время начала процесса и задавать начальное значение 0.

[0210] Затем, когда sao_merge_left_flag указывает 0 ("Да" на этапе S4065), модуль 4061 управления арифметическим декодированием определяет то, размещается ли целевая область в верхнем конце среза или мозаичного фрагмента (этап S4066). Поскольку информация смещения копируется только из области в идентичном срезе и в идентичном мозаичном фрагменте, что и согласно определению для левого конца (этап S4063), вышеописанное определение выполняется до декодирования флага sao_merge_up_flag копирования информации смещения вверх.

[0211] Когда целевая область не размещается в верхнем конце ("Нет" на этапе S4066), модуль 4062 контекстного арифметического декодирования загружает контекст для флага sao_merge_up_flag копирования информации смещения вверх. Затем, модуль 4062 контекстного арифметического декодирования декодирует флаг sao_merge_up_flag копирования информации смещения вверх (этап S4067).

[0212] Когда целевая область размещается в верхнем конце ("Да" на этапе S4066) или после декодирования sao_merge_up_flag (этап S4067), модуль 4061 управления арифметическим декодированием определяет то, равен ли sao_merge_up_flag 0 (этап S4068). Здесь, sao_merge_up_flag, равный 0, указывает то, что информация смещения не копируется из верхней области, и sao_merge_up_flag, равный 1, указывает то, что информация смещения копируется из верхней области.

[0213] Следует отметить, что когда декодирование sao_merge_up_flag (этап S4067) не выполняется, значение sao_merge_up_flag не существует. В этом случае, значение sao_merge_up_flag обрабатывается в качестве 0. Помимо этого, модуль 406 декодирования информации смещения может обеспечивать запоминающее устройство для sao_merge_up_flag во время начала процесса и задавать начальное значение 0.

[0214] Затем, когда sao_merge_up_flag указывает 0 ("Да" на этапе S4068), модуль 4061 управления арифметическим декодированием переключает способ декодирования на обходное арифметическое декодирование (этап S4069). Вследствие этого, обходное арифметическое декодирование используется на всех последующих этапах декодирования.

[0215] Затем, модуль 4063 обходного арифметического декодирования декодирует способ sao_type_idx классификации пикселей и абсолютное значение sao_offset смещения (этап S4070). Здесь, в этом варианте осуществления, число абсолютных значений sao_offset смещения составляет четыре в любом из способов классификации пикселей. Тем не менее, модуль 4063 обходного арифметического декодирования может декодировать абсолютные значения смещения, которые отличаются по числу для каждого из способов классификации пикселей.

[0216] Затем, модуль 4061 управления арифметическим декодированием определяет то, является ли способ классификации пикселей смещением полосы (этап S4071). Здесь, модуль 4061 управления арифметическим декодированием использует способ sao_type_idx классификации пикселей для определения.

[0217] Согласно этому варианту осуществления, смещению полосы выделяется 0 в качестве значения sao_type_idx. По этой причине, модуль 4061 управления арифметическим декодированием определяет то, что способ классификации пикселей является смещением полосы, когда sao_type_idx равен 0, и что способ классификации пикселей не является смещением полосы, когда sao_type_idx отличается от 0.

[0218] Когда способ классификации пикселей является смещением полосы ("Да" на этапе S4071), модуль 4063 обходного арифметического декодирования декодирует значение смещения ± знак sao_offset_sign и категорию sao_band_position начала кодирования смещения полосы (этап S4072).

[0219] Следует отметить, что в этом варианте осуществления, модуль 4063 обходного арифметического декодирования декодирует значение смещения ± знак sao_offset_sign только в случае смещение полосы. Тем не менее, модуль 4063 обходного арифметического декодирования также может декодировать значение смещения ± знак sao_offset_sign в случае смещения края. В этом случае, значение смещения ± знак sao_offset_sign декодируется на этапе S4070.

[0220] Дополнительно в этом случае, на этапе S4070, абсолютное значение sao_offset смещения и значение смещения ± знак sao_offset_sign могут быть интегрированы и декодированы в качестве значения смещения.

[0221] Как описано выше, обходное арифметическое кодирование и обходное арифметическое декодирование используются для кодирования и декодирования всех параметров после трех первых параметров из флага sao_on_flag активации/деактивации обработки смещения, флага sao_merge_left_flag копирования информации смещения влево и флага sao_merge_up_flag копирования информации смещения вверх. Это исключает необходимость для устройства кодирования изображений и устройств декодирования изображений загружать и обновлять контексты везде. Следовательно, повышается пропускная способность.

[0222] Фиг. 36 является блок-схемой последовательности операций способа, которая показывает пример особенности вышеописанного кодирования. Во-первых, модуль 3072 контекстного арифметического кодирования последовательно кодирует первую информацию и вторую информацию посредством контекстного арифметического кодирования (этап S511). Контекстное арифметическое кодирование является арифметическим кодированием, которое использует переменную вероятность. Первая информация указывает то, выполнять ли для первой области изображения обработку адаптивного к выборке смещения (SAO), которая является обработкой смещения в отношении пиксельного значения. Вторая информация указывает то, использовать ли, при SAO-обработке для первой области, информацию SAO-обработки для области, отличной от первой области.

[0223] Затем, модуль 3073 обходного арифметического кодирования, после того как кодируется первая информация и вторая информация, кодирует другую информацию посредством обходного арифметического кодирования (этап S512). Обходное арифметическое кодирование является арифметическим кодированием, которое использует фиксированную вероятность. Другая информация является информацией относительно SAO-обработки для первой области и отличается от первой информации или второй информации.

[0224] Фиг. 37 является блок-схемой последовательности операций способа, которая показывает пример особенности вышеописанного декодирования. Во-первых, модуль 4062 контекстного арифметического декодирования последовательно декодирует первую информацию и вторую информацию посредством контекстного арифметического декодирования (этап S521). Контекстное арифметическое декодирование является арифметическим декодированием, которое использует переменную вероятность. Первая информация указывает то, выполнять ли для первой области изображения обработку адаптивного к выборке смещения (SAO), которая является обработкой смещения в отношении пиксельного значения. Вторая информация указывает то, использовать ли, при SAO-обработке для первой области, информацию SAO-обработки для области, отличной от первой области.

[0225] Затем, модуль 4063 обходного арифметического декодирования, после того как декодируется первая информация и вторая информация, декодирует другую информацию посредством обходного арифметического декодирования (этап S522). Обходное арифметическое декодирование является арифметическим декодированием, которое использует фиксированную вероятность. Другая информация является информацией относительно SAO-обработки для первой области и отличается от первой информации или второй информации.

[0226] Следует отметить, что либо первая информация, либо вторая информация может кодироваться первой. Аналогично, либо первая информация, либо вторая информация может декодироваться первой.

[0227] Помимо этого, порядок кодирования является порядком, в котором информация записывается в кодированный поток в качестве знака (кода), а порядок декодирования порядок, в котором знак (код) считывается из кодированного потока в качестве информации. Таким образом, порядок кодирования и декодирования, проиллюстрированный выше в отношении нескольких схем, соответствует порядку информации в кодированном потоке. Помимо этого, порядок элементов синтаксиса, проиллюстрированных выше в отношении нескольких схем, соответствует порядку информации в кодированном потоке и порядку кодирования и декодирования.

[0228] Помимо этого, устройство кодирования изображений может быть устройством, которое выполняет только процессы, проиллюстрированные на фиг. 36. Аналогично, устройство декодирования изображений может быть устройством, которое выполняет только процессы, проиллюстрированные на фиг. 37. Другие процессы могут быть выполнены посредством других устройств.

[0229] Фиг. 31B иллюстрирует результат на основе условий испытания, указываемых в HEVC-стандарте (см. NPL 2) в качестве объективной производительности.

[0230] На фиг. 31B, конфигурация указывает условия настройки параметров кодирования. BD-показатель указывает целевой индекс, вычисленный из пикового отношения "сигнал-шум" (PSNR) восстановленного изображения и объема кода кодированного потока. Отрицательный BD-показатель указывает повышение объективной производительности, и положительный BD-показатель указывает снижение объективной производительности. Следует отметить, что BD-показатель на фиг. 31B указывает повышение или снижение объективной производительности этого варианта осуществления на основе сравнения с вариантом 1 осуществления.

[0231] Как проиллюстрировано на фиг. 31B, BD-показатель попадает в диапазон ±0,1. Это указывает то, что объективная производительность этого варианта осуществления является, по сути, эквивалентной объективной производительности варианта 1 осуществления. Более конкретно, в этом варианте осуществления, имеется незначительное снижение объективной производительности, и повышается пропускная способность.

[0232] Как описано выше, устройство кодирования изображений согласно этому варианту осуществления допускает кодирование изображения с высокой эффективностью обработки. Помимо этого, устройство декодирования изображений согласно этому варианту осуществления допускает декодирование изображения с высокой эффективностью обработки.

[0233] Каждый из структурных элементов в каждом из вышеописанных вариантов осуществления может быть сконфигурирован в форме полностью аппаратного продукта или может быть реализован посредством выполнения программы, подходящей для структурного элемента. Каждый из структурных элементов может быть реализован посредством модуля выполнения программ, такого как CPU и процессор, считывающий и выполняющий программу, записанную на носителе записи, таком как жесткий диск или полупроводниковое запоминающее устройство.

[0234] Другими словами, устройство кодирования изображений и устройство декодирования изображений включают в себя схему управления и устройство хранения, которое электрически соединено со схемой управления (которое является доступным из схемы управления). Схема управления включает в себя по меньшей мере одно из полностью аппаратного продукта и модуля выполнения программ. Помимо этого, когда схема управления включает в себя модуль выполнения программ, устройство хранения сохраняет программу, которая выполняется посредством модуля выполнения программ.

[0235] Здесь, программное обеспечение, которое осуществляет устройство кодирования изображений согласно каждому из вышеописанных вариантов осуществления, является программой, как пояснено ниже.

[0236] Более конкретно, эта программа побуждает компьютер осуществлять способ кодирования изображений, который включает в себя: выполнение контекстного арифметического кодирования для того, чтобы последовательно кодировать (i) первую информацию, указывающую то, выполнять ли обработку адаптивного к выборке смещения (SAO) для первой области изображения, и (ii) вторую информацию, указывающую то, использовать ли, при SAO-обработке для первой области, информацию относительно SAO-обработки для области, отличной от первой области, причем контекстное арифметическое кодирование является арифметическим кодированием с использованием переменной вероятности, SAO-обработка является обработкой смещения в отношении пиксельного значения; и выполнение обходного арифметического кодирования для того, чтобы кодировать другую информацию, которая является информацией относительно SAO-обработки для первой области и отличается от первой информации или второй информации, после того как кодируются первая информация и вторая информация, причем обходное арифметическое кодирование является арифметическим кодированием с использованием фиксированной вероятности.

[0237] Помимо этого, эта программа может побуждать компьютер осуществлять способ декодирования изображений, который включает в себя: выполнение контекстного арифметического декодирования для того, чтобы последовательно декодировать (i) первую информацию, указывающую то, выполнять ли обработку адаптивного к выборке смещения (SAO) для первой области изображения, и (ii) вторую информацию, указывающую то, использовать ли, при SAO-обработке для первой области, информацию относительно SAO-обработки для области, отличной от первой области, причем контекстное арифметическое декодирование является арифметическим декодированием с использованием переменной вероятности, SAO-обработка является обработкой смещения в отношении пиксельного значения; и выполнение обходного арифметического декодирования для того, чтобы декодировать другую информацию, которая является информацией относительно SAO-обработки для первой области и отличается от первой информации или второй информации, после того как декодируются первая информация и вторая информация, причем обходное арифметическое декодирование является арифметическим декодированием с использованием фиксированной вероятности.

[0238] Помимо этого, каждый из структурных элементов может быть схемой. Схемы могут быть сконфигурированы как одна схема в целом или могут быть взаимно различными схемами. Помимо этого, каждый из структурных элементов может быть реализован как процессор общего назначения или как специализированный процессор.

[0239] Устройство кодирования изображений и т.п. согласно одному или более аспектов описано выше на основе вариантов осуществления. Тем не менее, настоящее изобретение не ограничено этими вариантами осуществления. Специалисты в данной области техники должны легко принимать во внимание, что различные модификации могут выполняться в варианте осуществления, и другие варианты осуществления могут получаться посредством произвольного комбинирования некоторых из структурных элементов различных вариантов осуществления без фактического отступления от принципов и сущности настоящего изобретения.

[0240] Например, устройство кодирования и декодирования изображений может включать в себя устройство кодирования изображений и устройство декодирования изображений. Помимо этого, процессы, выполняемые посредством конкретного модуля обработки, могут выполняться посредством другого модуля обработки. Кроме того, порядок, в котором выполняются процессы, может быть изменен, или множество процессов может выполняться параллельно. Кроме того, выделенный или общий модуль хранения для сохранения множества информационных элементов может добавляться в конфигурацию.

[0241] Четвертый вариант осуществления

Обработка, описанная в каждом из вариантов осуществления, может быть реализована просто в независимой компьютерной системе, посредством записи, на носителе записи, программы для реализации конфигураций способа кодирования движущихся изображений (способа кодирования изображений) и способа декодирования движущихся изображений (способа декодирования изображений), описанных в каждом из вариантов осуществления. Носители записи могут быть любыми носителями записи при условии, что программа может записываться, такими как магнитный диск, оптический диск, магнитооптический диск, IC-карта и полупроводниковое запоминающее устройство.

[0242] В дальнейшем в этом документе описываются варианты применения к способу кодирования движущихся изображений (способу кодирования изображений) и способу декодирования движущихся изображений (способу декодирования изображений), описанных в каждом из вариантов осуществления, и к системам с их использованием. Система имеет признак наличия устройства кодирования и декодирования изображений, которое включает в себя устройство кодирования изображений с использованием способа кодирования изображений и устройство декодирования изображений с использованием способа декодирования изображений. Другие конфигурации в системе могут быть изменены надлежащим образом в зависимости от случаев применения.

[0243] Фиг. 38 иллюстрирует общую конфигурацию системы ex100 предоставления контента для реализации услуг распространения контента. Область для предоставления услуг связи разделяется на соты требуемого размера, и базовые станции ex106, ex107, ex108, ex109 и ex110, которые являются стационарными беспроводными станциями, размещаются в каждой из сот.

[0244] Система ex100 предоставления контента подключается к таким устройствам, как компьютер ex111, персональное цифровое устройство (PDA) ex112, камера ex113, сотовый телефон ex114 и игровая машина ex115, через Интернет ex101, поставщика ex102 Интернет-услуг, телефонную сеть ex104, а также базовые станции ex106-ex110, соответственно.

[0245] Тем не менее, конфигурация системы ex100 предоставления контента не ограничена конфигурацией, показанной на фиг. 38, и комбинация, в которой подключаются любые из элементов, является допустимой. Помимо этого, каждое устройство может подключаться к телефонной сети ex104 непосредственно, а не через базовые станции ex106-ex110, которые являются стационарными беспроводными станциями. Кроме того, устройства могут быть подключены друг к другу через беспроводную связь ближнего действия и т.п.

[0246] Камера ex113, такая как цифровая видеокамера, допускает захват видео. Камера ex116, такая как цифровая камера, допускает захват как неподвижных изображений, так и видео. Кроме того, сотовый телефон ex114 может быть телефоном, который удовлетворяет любому из таких стандартов, как глобальная система мобильной связи (GSM) (зарегистрированная торговая марка), множественный доступ с кодовым разделением каналов (CDMA), широкополосный множественный доступ с кодовым разделением каналов (W-CDMA), стандарт долгосрочного развития (LTE) и высокоскоростной пакетный доступ (HSPA). Альтернативно, сотовый телефон ex114 может соответствовать стандарту системы персональных мобильных телефонов (PHS).

[0247] В системе ex100 предоставления контента сервер ex103 потоковой передачи подключается к камере ex113 и т.п. через телефонную сеть ex104 и базовую станцию ex109, которая предоставляет распространение изображений трансляции в прямом эфире и т.п. При таком распределении, контент (например, видео музыкального концерта в прямом эфире), захватываемый пользователем с использованием камеры ex113, кодируется так, как описано выше в каждом из вариантов осуществления (т.е. камера выступает в качестве устройства кодирования изображений согласно аспекту настоящего изобретения), и кодированный контент передается на сервер ex103 потоковой передачи. С другой стороны, сервер ex103 потоковой передачи выполняет потоковое распространение передаваемых данных контента в клиенты при запросах. Клиенты включают в себя компьютер ex111, PDA ex112, камеру ex113, сотовый телефон ex114 и игровую машину ex115, которые допускают декодирование вышеуказанных кодированных данных. Каждое из устройств, которое принимает распределенные данные, декодирует и воспроизводит кодированные данные (т.е. выступает в качестве устройства декодирования изображений согласно аспекту настоящего изобретения).

[0248] Захватываемые данные могут кодироваться посредством камеры ex113 или сервера ex103 потоковой передачи, который передает данные, или процессы кодирования могут быть совместно использованы камерой ex113 и сервером ex103 потоковой передачи. Аналогично, распространенные данные могут быть декодированы посредством клиентов или сервера ex103 потоковой передачи, или процессы декодирования могут быть совместно использованы клиентами и сервером ex103 потоковой передачи. Кроме того, данные неподвижных изображений и видео, захватываемых не только посредством камеры ex113, но также и камеры ex116, могут быть переданы на сервер ex103 потоковой передачи через компьютер ex111. Процессы кодирования могут выполняться посредством камеры ex116, компьютера ex111 или сервера ex103 потоковой передачи или совместно использоваться ими.

[0249] Кроме того, процессы кодирования и декодирования могут выполняться посредством LSI ex500, в общем, включенной в каждый из компьютера ex111 и устройств. LSI ex500 может быть сконфигурирована из одного кристалла или множества кристаллов. Программное обеспечение для кодирования и декодирования видео может быть интегрировано в определенный тип носителя записи (такой как CD-ROM, гибкий диск и жесткий диск), который является читаемым посредством компьютера ex111 и т.п., и процессы кодирования и декодирования могут выполняться с использованием программного обеспечения. Кроме того, когда сотовый телефон ex114 содержит камеру, могут передаваться видеоданные, полученные посредством камеры. Видеоданные – это данные, кодированные посредством LSI ex500, включенной в сотовый телефон ex114.

[0250] Кроме того, сервер ex103 потоковой передачи может состоять из серверов и компьютеров и может децентрализовать данные и обрабатывать децентрализованные данные, записывать или распространять данные.

[0251] Как описано выше, клиенты могут принимать и воспроизводить кодированные данные в системе ex100 предоставления контента. Другими словами, клиенты могут принимать и декодировать информацию, передаваемую пользователем, и воспроизводить декодированные данные в режиме реального времени в системе ex100 предоставления контента, так что пользователь, который не имеет конкретных прав и оборудования, может реализовывать персональную широковещательную передачу.

[0252] Помимо примера системы ex100 предоставления контента, по меньшей мере, одно из устройства кодирования движущихся изображений (устройства кодирования изображений) и устройства декодирования движущихся изображений (устройства декодирования изображений), описанных в каждом из вариантов осуществления, может быть реализовано в цифровой широковещательной системе ex200, проиллюстрированной на фиг. 39. Более конкретно, широковещательная станция ex201 сообщает или передает по радиоволнам в широковещательный спутник ex202 мультиплексированные данные, полученные посредством мультиплексирования аудиоданных и т.п. в видеоданные. Видеоданные являются данными, кодированными посредством способа кодирования движущихся изображений, описанного в каждом из вариантов осуществления (т.е. данными, кодированными посредством устройства кодирования изображений согласно аспекту настоящего изобретения). При приеме мультиплексированных видеоданных широковещательный спутник ex202 передает радиоволны для широковещательной передачи. Затем, антенна ex204 для домашнего применения с функцией приема спутниковой широковещательной передачи принимает радиоволны. Далее такое устройство, как телевизионный приемник (приемное устройство) ex300 и абонентская приставка (STB) ex217, декодирует принятые мультиплексированные данные и воспроизводит декодированные данные (т.е. выступает в качестве устройства декодирования изображений согласно аспекту настоящего изобретения).

[0253] Кроме того, модуль ex218 считывания/записи (i) считывает и декодирует мультиплексированные данные, записанные на носителе ex215 записи, таком как DVD и BD, или (i) кодирует видеосигналы на носителе ex215 записи, и в некоторых случаях записывает данные, полученные посредством мультиплексирования аудиосигнала, в кодированные данные. Модуль ex218 считывания/записи может включать в себя устройство декодирования движущихся изображений или устройство кодирования движущихся изображений, как показано в каждом из вариантов осуществления. В этом случае, воспроизведенные видеосигналы отображаются на мониторе ex219 и могут быть воспроизведены посредством другого устройства или системы с использованием носителя ex215 записи, на котором записываются мультиплексированные данные. Также можно реализовывать устройство декодирования движущихся изображений в абонентской приставке ex217, подключенной к кабелю ex203 для кабельного телевидения или к антенне ex204 для спутниковой и/или наземной широковещательной передачи, с тем чтобы отображать видеосигналы на мониторе ex219 телевизионного приемника ex300. Устройство декодирования движущихся изображений может быть реализовано не в абонентской приставке, а в телевизионном приемнике ex300.

[0254] Фиг. 40 иллюстрирует телевизионный приемник (приемное устройство) ex300, который использует способ кодирования движущихся изображений и способ декодирования движущихся изображений, описанные в каждом из вариантов осуществления. Телевизионный приемник ex300 включает в себя: тюнер ex301, который получает или предоставляет мультиплексированные данные, полученные посредством мультиплексирования аудиоданных в видеоданные, через антенну ex204 или кабель ex203 и т.д., который принимает широковещательную передачу; модуль ex302 модуляции/демодуляции, который демодулирует принятые мультиплексированные данные или модулирует данные в мультиплексированные данные, которые должны подаваться наружу; и модуль ex303 мультиплексирования/демультиплексирования, который демультиплексирует модулированные мультиплексированные данные в видеоданные и аудиоданные или мультиплексирует видеоданные и аудиоданные, кодированные посредством процессора ex306 сигналов, в данные.

[0255] Телевизионный приемник ex300 дополнительно включает в себя: процессор ex306 сигналов, включающий в себя процессор ex304 аудиосигналов и процессор ex305 видеосигналов, которые декодируют аудиоданные и видеоданные и кодируют аудиоданные и видеоданные, соответственно (которые выступают в качестве устройства кодирования изображений и устройства декодирования изображений согласно аспектам настоящего изобретения); и модуль ex309 вывода, включающий в себя динамик ex307, который предоставляет декодированный аудиосигнал, и модуль ex308 отображения, который отображает декодированный видеосигнал, такой как дисплей. Кроме того, телевизионный приемник ex300 включает в себя интерфейсный модуль ex317, включающий в себя модуль ex312 функционального ввода, который принимает ввод пользовательской операции. Кроме того, телевизионный приемник ex300 включает в себя модуль ex310 управления, который осуществляет общее управление каждым составляющим элементом телевизионного приемника ex300, и модуль ex311 схемы электропитания, который предоставляет питание в каждый из элементов. Кроме модуля ex312 функционального ввода, интерфейсный модуль ex317 может включать в себя: мост ex313, который подключается к внешнему устройству, такому как модуль ex218 считывания/записи; модуль ex314 гнезда для предоставления возможности присоединения носителя ex216 записи, такого как SD-карта; драйвер ex315 для того, чтобы подключаться к внешнему носителю записи, такому как жесткий диск; и модем ex316 для того, чтобы подключаться к телефонной сети. Здесь, носитель ex216 записи может электрически записывать информацию с использованием элемента энергонезависимого/энергозависимого полупроводникового запоминающего устройства для хранения. Составляющие элементы телевизионного приемника ex300 подключены друг к другу через синхронную шину.

[0256] Во-первых, описывается конфигурация, в которой телевизионный приемник ex300 декодирует мультиплексированные данные, полученные снаружи через антенну ex204 и т.п., и воспроизводит декодированные данные. В телевизионном приемнике ex300, при пользовательской операции через удаленный контроллер ex220 и т.п., модуль ex303 мультиплексирования/ демультиплексирования демультиплексирует мультиплексированные данные, демодулированные посредством модуля ex302 модуляции/демодуляции, под управлением модуля ex310 управления, включающего в себя CPU. Кроме того, процессор ex304 аудиосигналов декодирует демультиплексированные аудиоданные, и процессор ex305 видеосигналов декодирует демультиплексированные видеоданные с использованием способа декодирования, описанного в каждом из вариантов осуществления, в телевизионном приемнике ex300. Модуль ex309 вывода предоставляет декодированный видеосигнал и аудиосигнал наружу, соответственно. Когда модуль ex309 вывода предоставляет видеосигнал и аудиосигнал, сигналы могут временно сохраняться в буферах ex318 и ex319 и т.п. так, что сигналы воспроизводятся синхронно друг с другом. Кроме того, телевизионный приемник ex300 может считывать мультиплексированные данные не через широковещательную передачу и т.п., а из носителей ex215 и ex216 записи, таких как магнитный диск, оптический диск и SD-карта. Далее описывается конфигурация, в которой телевизионный приемник ex300 кодирует аудиосигнал и видеосигнал и передает данные наружу или записывает данные на носитель записи. В телевизионном приемнике ex300, при пользовательской операции через удаленный контроллер ex220 и т.п., процессор ex304 аудиосигналов кодирует аудиосигнал, и процессор ex305 видеосигналов кодирует видеосигнал под управлением модуля ex310 управления с использованием способа кодирования, как описано в каждом из вариантов осуществления. Модуль ex303 мультиплексирования/ демультиплексирования мультиплексирует кодированный видеосигнал и аудиосигнал и предоставляет результирующий сигнал наружу. Когда модуль ex303 мультиплексирования/демультиплексирования мультиплексирует видеосигнал и аудиосигнал, сигналы могут временно сохраняться в буферах ex320 и ex321 и т.п. так, что сигналы воспроизводятся синхронно друг с другом. Здесь, буферов ex318, ex319, ex320 и ex321 может быть множество, как проиллюстрировано, или, по меньшей мере, один буфер может быть совместно использован в телевизионном приемнике ex300. Кроме того, данные могут быть сохранены в буфере, так что может не допускаться переполнение и опустошение в системе, например, между модулем ex302 модуляции/демодуляции и модулем ex303 мультиплексирования/демультиплексирования.

[0257] Кроме того, телевизионный приемник ex300 может включать в себя конфигурацию для приема AV-ввода из микрофона или камеры, отличную от конфигурации для получения аудио- и видеоданных из широковещательной передачи или носителя записи, и может кодировать полученные данные. Хотя телевизионный приемник ex300 может кодировать, мультиплексировать и предоставлять наружу данные в описании, он может допускать только прием, декодирование и предоставление наружу данных, а не кодирование, мультиплексирование и предоставление наружу данных.

[0258] Кроме того, когда модуль ex218 считывания/записи считывает или записывает мультиплексированные данные с или на носитель записи, один из телевизионного приемника ex300 и модуля ex218 считывания/записи может декодировать или кодировать мультиплексированные данные, и телевизионный приемник ex300 и модуль ex218 считывания/записи могут совместно использовать декодирование или кодирование.

[0259] В качестве примера, фиг. 41 иллюстрирует конфигурацию модуля ex400 воспроизведения/записи информации, когда данные считываются или записываются с или на оптический диск. Модуль ex400 воспроизведения/записи информации включает в себя составляющие элементы ex401, ex402, ex403, ex404, ex405, ex406 и ex407, которые описаны ниже. Оптическая головка ex401 испускает лазерное пятно на поверхности для записи носителя ex215 записи, который является оптическим диском, чтобы записывать информацию, и обнаруживает отраженный свет от поверхности для записи носителя ex215 записи, чтобы считывать информацию. Модуль ex402 модуляционной записи электрически возбуждает полупроводниковый лазер, включенный в оптическую головку ex401, и модулирует лазерное излучение согласно записанным данным. Модуль ex403 демодуляции при воспроизведении усиливает сигнал воспроизведения, полученный посредством электрического обнаружения отраженного света от поверхности для записи, с использованием фотодетектора, включенного в оптическую головку ex401, и демодулирует сигнал воспроизведения посредством разделения компоненты сигнала, записанного на носитель ex215 записи, чтобы воспроизводить необходимую информацию. Буфер ex404 временно хранит информацию, которая должна записываться на носитель ex215 записи, и информацию, воспроизведенную из носителя ex215 записи. Дисковый электромотор ex405 вращает носитель ex215 записи. Модуль ex406 сервоуправления перемещает оптическую головку ex401 в заранее определенную информационную дорожку при одновременном управлении вращательным приводом дискового электромотора ex405, чтобы следовать лазерному пятну. Модуль ex407 управления системой осуществляет общее управление модулем ex400 воспроизведения/записи информации. Процессы считывания и записи могут реализовываться посредством модуля ex407 управления системой с использованием различной информации, хранимой в буфере ex404, и формирования и добавления новой информации по мере необходимости, и посредством модуля ex402 модуляционной записи, модуля ex403 демодуляции при воспроизведении и модуля ex406 сервоуправления, которые записывают и воспроизводят информацию через оптическую головку ex401 при координированном управлении. Модуль ex407 управления системой включает в себя, например, микропроцессор и выполняет обработку посредством инструктирования компьютеру выполнять программу для считывания и записи.

[0260] Хотя в описании оптическая головка ex401 испускает лазерное пятно, она может выполнять запись с высокой плотностью с использованием света в поле в ближней зоне.

[0261] Фиг. 42 иллюстрирует носитель ex215 записи, который является оптическим диском. На поверхности для записи носителя ex215 записи, направляющие канавки формируются по спирали, и информационная дорожка ex230 записывает, заранее, информацию адреса, указывающую абсолютную позицию на диске, согласно изменению в форме направляющих канавок. Информация адреса включает в себя информацию для определения позиций блоков ex231 записи, которые являются единицей для записи данных. Воспроизведение информационной дорожки ex230 и считывание информации адреса в устройстве, которое записывает и воспроизводит данные, может приводить к определению позиций блоков записи. Кроме того, носитель ex215 записи включает в себя зону ex233 записи данных, зону ex232 внутренней окружности и зону ex234 внешней окружности. Зона ex233 записи данных является зоной для использования при записи пользовательских данных. Зона ex232 внутренней окружности и зона ex234 внешней окружности, которые находятся внутри и снаружи зоны ex233 записи данных, соответственно, предназначены для конкретного применения за исключением записи пользовательских данных. Модуль 400 воспроизведения/записи информации считывает и записывает кодированное аудио, кодированные видеоданные или мультиплексированные данные, полученные посредством мультиплексирования кодированного аудио и кодированных видеоданных, из и в зону ex233 записи данных носителя ex215 записи.

[0262] Хотя оптический диск, имеющий слой, такой как DVD и BD, описывается в качестве примера в описании, оптический диск не ограничен таким образом и может быть оптическим диском, имеющим многослойную структуру и допускающим запись на часть, отличную от поверхности. Кроме того, оптический диск может иметь структуру для многомерной записи/воспроизведения, к примеру, записи информации с использованием света цветов с различными длинами волн в одной части оптического диска и для записи информации, имеющей различные слои, с различных углов.

[0263] Кроме того, автомобиль ex210, имеющий антенну ex205, может принимать данные из спутника ex202 и т.п. и воспроизводить видео на устройстве отображения, таком как автомобильная навигационная система ex211, установленная в автомобиле ex210, в цифровой широковещательной системе ex200. Здесь, конфигурация автомобильной навигационной системы ex211 является конфигурацией, например, включающей в себя приемный GPS-модуль, из конфигурации, проиллюстрированной на фиг. 40. То же применимо для конфигурации компьютера ex111, сотового телефона ex114 и т.п.

[0264] Фиг. 43A иллюстрирует сотовый телефон ex114, который использует способ кодирования движущихся изображений и способ декодирования движущихся изображений, описанные в вариантах осуществления. Сотовый телефон ex114 включает в себя: антенну ex350 для передачи и приема радиоволн через базовую станцию ex110; модуль ex365 камеры, допускающий захват движущихся и неподвижных изображений; и модуль ex358 отображения, к примеру, жидкокристаллический дисплей для отображения данных, таких как декодированное видео, захватываемое посредством модуля ex365 камеры или принимаемое посредством антенны ex350. Сотовый телефон ex114 дополнительно включает в себя: модуль основного корпуса, включающий в себя модуль ex366 функциональных клавиш; модуль ex357 аудиовывода, к примеру, динамик для вывода аудио; модуль ex356 аудиоввода, к примеру, микрофон для ввода аудио; запоминающее устройство ex367 для сохранения захваченного видео или неподвижных изображений, записанного аудио, кодированных или декодированных данных принимаемого видео, неподвижных изображений, почтовых сообщений и т.п.; и модуль ex364 гнезда, который является интерфейсным модулем для носителя записи, который сохраняет данные таким же образом, как запоминающее устройство ex367.

[0265] Далее описывается пример конфигурации сотового телефона ex114 со ссылкой на фиг. 43B. В сотовом телефоне ex114 главный модуль ex360 управления, спроектированный с возможностью полностью управлять каждым модулем основного корпуса, включающим в себя модуль ex358 отображения, а также модуль ex366 функциональных клавиш, взаимно соединяется, через синхронную шину ex370, с модулем ex361 схемы электропитания, модулем ex362 управления функциональным вводом, процессором ex355 видеосигналов, модулем ex363 интерфейса камеры, модулем ex359 управления жидкокристаллическим дисплеем (ЖК-дисплеем), модулем ex352 модуляции/демодуляции, модулем ex353 мультиплексирования/ демультиплексирования, процессором ex354 аудиосигналов, модулем ex364 гнезда и запоминающим устройством ex367.

[0266] Когда клавиша завершения вызова или клавиша включения питания включается посредством пользовательской операции, модуль ex361 схемы электропитания предоставляет в соответствующие модули питание из аккумуляторной батареи с тем, чтобы активировать сотовый телефон ex114.

[0267] В сотовом телефоне ex114 процессор ex354 аудиосигналов преобразует аудиосигналы, собираемые посредством модуля ex356 аудиоввода в режиме речевой связи, в цифровые аудиосигналы под управлением главного модуля ex360 управления, включающего в себя CPU, ROM и RAM. Затем, модуль ex352 модуляции/демодуляции выполняет обработку с расширенным спектром для цифровых аудиосигналов, и приемо-передающий модуль ex351 выполняет цифро-аналоговое преобразование и преобразование частоты для данных, с тем чтобы передавать результирующие данные через антенну ex350. Так же, в сотовом телефоне ex114, приемо-передающий модуль ex351 усиливает данные, принимаемые посредством антенны ex350 в режиме речевой связи, и выполняет преобразование частоты и аналого-цифровое преобразование для данных. Затем, модуль ex352 модуляции/демодуляции выполняет обработку с обратным расширенным спектром для данных, и процессор ex354 аудиосигналов преобразует их в аналоговые аудиосигналы, с тем чтобы выводить их через модуль ex357 аудиовывода.

[0268] Кроме того, когда передается электронная почта в режиме передачи данных, текстовые данные электронной почты, введенные посредством операций с модулем ex366 функциональных клавиш и т.п. основного корпуса, отправляются в главный модуль ex360 управления через модуль ex362 управления функциональным вводом. Главный модуль ex360 управления инструктирует модулю ex352 модуляции/демодуляции выполнять обработку с расширенным спектром для текстовых данных, и приемо-передающий модуль ex351 выполняет цифро-аналоговое преобразование и преобразование частоты для результирующих данных, чтобы передавать данные в базовую станцию ex110 через антенну ex350. Когда принимается почтовое сообщение, обработка, которая является приблизительно обратной относительно обработки для передачи почтового сообщения, выполняется для принимаемых данных, и результирующие данные предоставляются в модуль ex358 отображения.

[0269] Когда передается видео, неподвижные изображения либо видео и аудио в режиме передачи данных, процессор ex355 видеосигналов сжимает и кодирует видеосигналы, предоставляемые из модуля ex365 камеры, с использованием способа кодирования движущихся изображений, показанного в каждом из вариантов осуществления (т.е. выступает в качестве устройства кодирования изображений согласно аспекту настоящего изобретения), и передает кодированные видеоданные в модуль ex353 мультиплексирования/ демультиплексирования. В отличие от этого, в течение времени, когда модуль ex365 камеры захватывает видео, неподвижные изображения и т.п., процессор ex354 аудиосигналов кодирует аудиосигналы, собранные посредством модуля ex356 аудиоввода, и передает кодированные аудиоданные в модуль ex353 мультиплексирования/демультиплексирования.

[0270] Модуль ex353 мультиплексирования/ демультиплексирования мультиплексирует кодированные видеоданные, подаваемые из процессора ex355 видеосигналов, и кодированные аудиоданные, подаваемые из процессора ex354 аудиосигналов, с использованием предварительно определенного способа. Затем, модуль ex352 модуляции/демодуляции (модуль схемы модуляции/демодуляции) выполняет обработку с расширенным спектром для мультиплексированных данных, и приемо-передающий модуль ex351 выполняет цифро-аналоговое преобразование и преобразование частоты для данных с тем, чтобы передавать результирующие данные через антенну ex350.

[0271] При приеме данных видеофайла, который связывается с веб-страницей и т.п., в режиме передачи данных или при приеме почтового сообщения с присоединенным видео и/или аудио, чтобы декодировать мультиплексированные данные, принятые через антенну ex350, модуль ex353 мультиплексирования/демультиплексирования демультиплексирует мультиплексированные данные в поток битов видеоданных и поток битов аудиоданных и предоставляет в процессор ex355 видеосигналов кодированные видеоданные, а в процессор ex354 аудиосигналов кодированные аудиоданные через синхронную шину ex370. Процессор ex355 видеосигналов декодирует видеосигнал с использованием способа декодирования движущихся изображений, соответствующего способу кодирования движущихся изображений, показанному в каждом из вариантов осуществления (т.е. выступает в качестве устройства декодирования изображений согласно аспекту настоящего изобретения), и затем модуль ex358 отображения отображает, например, видеоизображения и неподвижные изображения, включенные в видеофайл, связанный с веб-страницей, через модуль ex359 управления ЖК-дисплеем. Кроме того, процессор ex354 аудиосигналов декодирует аудиосигнал, и модуль ex357 аудиовывода предоставляет аудио.

[0272] Кроме того, аналогично телевизионному приемнику ex300, терминал, такой как сотовый телефон ex114, вероятно, имеет 3 типа реализованных конфигураций, включающих в себя не только (i) приемо-передающий терминал, включающий в себя как устройство кодирования, так и устройство декодирования, но также и (ii) передающий терминал, включающий в себя только устройство кодирования, и (iii) приемный терминал, включающий в себя только устройство декодирования. Хотя в описании цифровая широковещательная система ex200 принимает и передает мультиплексированные данные, полученные посредством мультиплексирования аудиоданных в видеоданные в описании, мультиплексированные данные могут быть данными, полученными посредством мультиплексирования не аудиоданных, а символьных данных, связанных с видео, в видеоданные, и могут быть не мультиплексированными данными, а самими видеоданными.

[0273] По сути, способ кодирования движущихся изображений и способ декодирования движущихся изображений в каждом из вариантов осуществления могут использоваться в любых из описанных устройств и систем. Таким образом, могут быть получены преимущества, описанные в каждом из вариантов осуществления.

[0274] Кроме того, настоящее изобретение не ограничивается вышеописанными вариантами осуществления, и различные модификации и версии могут быть сделаны в любом из вариантов осуществления в настоящем изобретении без фактического отступления от объема настоящего изобретения.

[0275] Пятый вариант осуществления

Видеоданные могут быть сформированы посредством переключения, по мере необходимости, между (i) способом кодирования движущихся изображений или устройством кодирования движущихся изображений, показанными в каждом из вариантов осуществления, и (ii) способом кодирования движущихся изображений или устройством кодирования движущихся изображений в соответствии с другим стандартом, таким как MPEG-2, MPEG-4 AVC и VC-1.

[0276] Здесь, когда множество видеоданных, которые соответствуют различным стандартам, формируются, а затем декодируются, способы декодирования должны быть выбраны таким образом, что они соответствуют различным стандартам. Тем не менее, поскольку не может быть определено то, какому стандарту каждые из множества из видеоданных, которые должны быть декодированы, соответствуют, надлежащий способ декодирования не может быть выбран.

[0277] С учетом этого, мультиплексированные данные, полученные путем мультиплексирования аудиоданных и других данных в видеоданные, имеют структуру, включающую в себя идентификационную информацию, указывающую то, какому стандарту соответствуют видеоданные. Далее описывается конкретная структура мультиплексированных данных, включающих в себя видеоданные, сформированные в способе кодирования движущихся изображений и посредством устройства кодирования движущихся изображений, показанных в каждом из вариантов осуществления. Мультиплексированные данные являются цифровым потоком в формате транспортных потоков MPEG-2.

[0278] Фиг. 44 иллюстрирует структуру мультиплексированных данных. Как проиллюстрировано на фиг. 44, мультиплексированные данные могут быть получены посредством мультиплексирования, по меньшей мере, одного из видеопотока, аудиопотока, потока презентационной графики (PG) и потока интерактивной графики. Видеопоток представляет первичное видео и вторичное видео фильма, аудиопоток (IG) представляет часть первичного аудио и часть вторичного аудио, которая должна смешиваться с частью первичного аудио, а поток презентационной графики представляет субтитры фильма. Здесь, первичное видео является обычным видео, которое должно отображаться на экране, а вторичное видео является видео, которое должно отображаться в меньшем окне в первичном видео. Кроме того, поток интерактивной графики представляет интерактивный экран, который должен быть сформирован посредством размещения GUI-компонентов на экране. Видеопоток кодируется в способе кодирования движущихся изображений или посредством устройства кодирования движущихся изображений, показанных в каждом из вариантов осуществления, либо в способе кодирования движущихся изображений или посредством устройства кодирования движущихся изображений в соответствии с традиционным стандартом, таким как MPEG-2, MPEG-4 AVC и VC-1. Аудиопоток кодируется в соответствии с таким стандартом, как AC-3 Dolby, Dolby Digital Plus, MLP, DTS, DTS-HD и линейная PCM.

[0279] Каждый поток, включенный в мультиплексированные данные, идентифицируется посредством PID. Например, 0x1011 выделяется видеопотоку, который должен быть использован для видео фильма, 0x1100-0x111F выделяются аудиопотокам, 0x1200-0x121F выделяются потокам презентационной графики, 0x1400-0x141F выделяются потокам интерактивной графики, 0x1B00-0x1B1F выделяются видеопотокам, которые должны быть использованы для вторичного видео фильма, и 0x1A00-0x1A1F выделяются аудиопотокам, которые должны быть использованы для вторичного аудио, которое должно смешиваться с первичным аудио.

[0280] Фиг. 45 схематично иллюстрирует то, как мультиплексируются данные. Во-первых, видеопоток ex235, состоящий из видеокадров, и аудиопоток ex238, состоящий из аудиокадров, преобразуются в поток PES-пакетов ex236 и поток PES-пакетов ex239 и дополнительно в TS-пакеты ex237 и TS-пакеты ex240, соответственно. Аналогично, данные потока ex241 презентационной графики и данные потока ex244 интерактивной графики преобразуются в поток PES-пакетов ex242 и поток PES-пакетов ex245 и дополнительно в TS-пакеты ex243 и TS-пакеты ex246, соответственно. Эти TS-пакеты мультиплексируются в поток, чтобы получать мультиплексированные данные ex247.

[0281] Фиг. 46 иллюстрирует то, как видеопоток сохраняется в потоке PES-пакетов. Первая панель на фиг. 46 показывает поток видеокадров в видеопотоке. Вторая панель показывает поток PES-пакетов. Как указано посредством стрелок, обозначенных как yy1, yy2, yy3 и yy4 на фиг. 46, видеопоток разделяется на изображения, такие как I-изображения, B-изображения и P-изображения, каждое из которых является единицей видеопредставления, и изображения сохраняются в рабочих данных каждого из PES-пакетов. Каждый из PES-пакетов имеет PES-заголовок, и PES-заголовок сохраняет временную метку представления (PTS), указывающую время отображения изображения, и временную метку декодирования (DTS), указывающую время декодирования изображения.

[0282] Фиг. 47 иллюстрирует формат TS-пакетов, которые должны быть в итоге записаны в мультиплексированные данные. Каждый из TS-пакетов является 188-байтовым пакетом фиксированной длины, включающим в себя 4-байтовый TS-заголовок, имеющий такую информацию, как PID для идентификации потока, и 184-байтовые рабочие TS-данные для сохранения данных. PES-пакеты разделяются и сохраняются в рабочих данных TS, соответственно. Когда используется BD-ROM, каждому из TS-пакетов присваивается 4-байтовый TP_Extra_Header, тем самым приводя к 192-байтовым исходным пакетам. Исходные пакеты записываются в мультиплексированные данные. TP_Extra_Header хранит такую информацию, как Arrival_Time_Stamp (ATS). ATS показывает время начала передачи, в которое каждый из TS-пакетов должен быть передан в PID-фильтр. Исходные пакеты размещаются в мультиплексированных данных, как показано в нижней части фиг. 47. Номера, увеличивающиеся с заголовка мультиплексированных данных, называются номерами исходных пакетов (SPN).

[0283] Каждый из TS-пакетов, включенных в мультиплексированные данные, включает в себя не только потоки аудио, видео, субтитров и т.п., но также и таблицу ассоциаций программ (PAT), таблицу структуры программ (PMT) и временную отметку программ (PCR). PAT показывает то, что указывает PID в PMT, используемой в мультиплексированных данных, и PID самого PAT регистрируется как нуль. PMT сохраняет PID потоков видео, аудио, субтитров и т.п., включенных в мультиплексированные данные, и информацию атрибутов потоков, соответствующих PID. PMT также имеет различные дескрипторы, связанные с мультиплексированными данными. Дескрипторы имеют такую информацию, как информация управления копированием, показывающая то, разрешено или нет копирование мультиплексированных данных. PCR сохраняет информацию STC-времени, соответствующую ATS, показывающей, когда PCR-пакет передается в декодер, чтобы достигать синхронизации между таймером поступления (ATC), т.е. временной осью ATS, и системным таймером (STC), т.е. временной осью PTS и DTS.

[0284] Фиг. 48 подробно поясняет структуру данных PMT. PMT-заголовок располагается в верхней части PMT. PMT-заголовок описывает длину данных, включенных в PMT, и т.п. Множество дескрипторов, связанных с мультиплексированными данными, располагается после PMT-заголовка. Информация, такая как информация управления копированием, описывается в дескрипторах. После дескрипторов располагается множество фрагментов информации потока, связанных с потоками, включенными в мультиплексированные данные. Каждый фрагмент информации потока включает в себя дескрипторы потоков, каждый из которых описывает такую информацию, как тип потока для идентификации кодека сжатия потока, PID потока и информация атрибутов потока (такая как частота кадров или соотношение сторон). Дескрипторы потоков по числу равны числу потоков в мультиплексированных данных.

[0285] Когда мультиплексированные данные записываются на носителе записи и т.д., они записываются вместе с файлами информации мультиплексированных данных.

[0286] Каждый из файлов информации мультиплексированных данных является управляющей информацией мультиплексированных данных, как показано на фиг. 49. Файлы информации мультиплексированных данных находятся в соответствии "один-к-одному" с мультиплексированными данными, и каждый из файлов включает в себя информацию мультиплексированных данных, информацию атрибутов потока и карту вхождений.

[0287] Как проиллюстрировано на фиг. 49, информация мультиплексированных данных включает в себя системную скорость, время начала воспроизведения и время завершения воспроизведения. Системная скорость указывает максимальную скорость передачи, на которой декодер системных целевых объектов, который должен быть описан ниже, передает мультиплексированные данные в PID-фильтр. Интервалы ATS, включенные в мультиплексированные данные, задаются не больше системной скорости. Время начала воспроизведения указывает PTS в видеокадре в заголовке мультиплексированных данных. Интервал одного кадра добавляется к PTS в видеокадре в конце мультиплексированных данных, и PTS задается равным времени завершения воспроизведения.

[0288] Как показано на фиг. 50, фрагмент информации атрибутов регистрируется в информации атрибутов потока для каждого PID каждого потока, включенного в мультиплексированные данные. Каждый фрагмент информации атрибутов имеет различную информацию в зависимости от того, является соответствующий поток видеопотоком, аудиопотоком, потоком презентационной графики или потоком интерактивной графики. Каждый фрагмент информации атрибутов видеопотока переносит информацию, включающую в себя то, какой кодек сжатия используется для сжатия видеопотока, а также разрешение, соотношение сторон и частоту кадров фрагментов данных изображений, которые включаются в видеопоток. Каждый фрагмент информации атрибутов аудиопотока переносит информацию, включающую в себя то, какой кодек сжатия используется для сжатия аудиопотока, сколько каналов включается в аудиопоток, какой язык поддерживает аудиопотока, и насколько высокой является частота дискретизации. Информация атрибутов видеопотока и информация атрибутов аудиопотока используются для инициализации декодера до того, как проигрыватель воспроизводит информацию.

[0289] В настоящем варианте осуществления мультиплексированные данные, которые должны быть использованы, имеют тип потока, включенный в PMT. Кроме того, когда мультиплексированные данные записываются на носителе записи, используется информация атрибутов видеопотока, включенная в информацию мультиплексированных данных. Более конкретно, способ кодирования движущихся изображений или устройство кодирования движущихся изображений, описанные в каждом из вариантов осуществления, включают в себя этап или модуль для выделения уникальных видеоданных, указывающих информацию, сформированную посредством способа кодирования движущихся изображений или устройства кодирования движущихся изображений в каждом из вариантов осуществления, для типа потока, включенного в PMT, или информации атрибутов видеопотока. При этой конфигурации, видеоданные, сформированные посредством способа кодирования движущихся изображений или устройства кодирования движущихся изображений, описанных в каждом из вариантов осуществления, могут отличаться от видеоданных, которые соответствуют другому стандарту.

[0290] Кроме того, фиг. 51 иллюстрирует этапы способа декодирования движущихся изображений согласно настоящему варианту осуществления. На этапе exS100, тип потока, включенный в PMT или информацию атрибутов видеопотока, включенную в информацию мультиплексированных данных, получается из мультиплексированных данных. Затем, на этапе exS101, определяется то, указывает ли тип потока либо информация атрибутов видеопотока то, что мультиплексированные данные формируются посредством способа кодирования видео или устройства кодирования видео в каждом из вариантов осуществления. Когда определяется то, что тип потока или информация атрибутов видеопотока указывают то, что мультиплексированные данные формируются посредством способа кодирования движущихся изображений или устройства кодирования движущихся изображений в каждом из вариантов осуществления, на этапе exS102, декодирование выполняется посредством способа декодирования движущихся изображений в каждом из вариантов осуществления. Кроме того, когда тип потока или информация атрибутов видеопотока указывает соответствие традиционным стандартам, таким как MPEG-2, MPEG-4 AVC и VC-1, на этапе exS103, декодирование выполняется посредством способа декодирования движущихся изображений в соответствии с традиционными стандартами.

[0291] Также, выделение нового уникального значения для типа потока или информации атрибутов видеопотока обеспечивает определение того, могут или нет выполнять декодирование способ декодирования движущихся изображений или устройство декодирования движущихся изображений, которые описываются в каждом из вариантов осуществления. Даже когда вводятся мультиплексированные данные, которые соответствуют различному стандарту, может быть выбран надлежащий способ или устройство декодирования. Таким образом, появляется возможность декодировать информацию без ошибок. Кроме того, способ или устройство кодирования движущихся изображений либо способ или устройство декодирования движущихся изображений в настоящем варианте осуществления могут быть использованы в устройствах и системах, описанных выше.

[0292] Шестой вариант осуществления

Каждый из способа кодирования движущихся изображений, устройства кодирования движущихся изображений, способа декодирования движущихся изображений и устройства декодирования движущихся изображений в каждом из вариантов осуществления типично осуществляется в форме интегральной схемы или большой интегральной (LSI) схемы. В качестве примера LSI, фиг. 52 иллюстрирует конфигурацию LSI ex500, которая состоит из одного кристалла. LSI ex500 включает в себя элементы ex501, ex502, ex503, ex504, ex505, ex506, ex507, ex508 и ex509, которые должны быть описаны ниже, и элементы соединяются друг с другом через шину ex510. Модуль ex505 схемы электропитания активируется посредством предоставления питания в каждый из элементов, когда модуль ex505 схемы электропитания включается.

[0293] Например, когда выполняется кодирование, LSI ex500 принимает AV-сигнал из микрофона ex117, камеры ex113 и т.п. через AV-ввод/вывод ex509 под управлением модуля ex501 управления, включающего в себя CPU ex502, контроллер ex503 запоминающего устройства, потоковый контроллер ex504 и модуль ex512 управления частотой возбуждения. Принимаемый AV-сигнал временно сохраняется во внешнем запоминающем устройстве ex511, к примеру, SDRAM. Под управлением модуля ex501 управления, сохраненные данные сегментируются на части данных согласно объему и скорости обработки так, что они передаются в процессор ex507 сигналов. Затем, процессор ex507 сигналов кодирует аудиосигнал и/или видеосигнал. Здесь, кодирование видеосигнала является кодированием, описанным в каждом из вариантов осуществления. Кроме того, процессор ex507 сигналов иногда мультиплексирует кодированные аудиоданные и кодированные видеоданные, и потоковый ввод-вывод ex506 предоставляет мультиплексированные данные наружу. Предоставляемый поток битов передается в базовую станцию ex107 или записывается на носителе ex215 записи. Когда наборы данных мультиплексируются, данные должны временно сохраняться в буфере ex508 так, что наборы данных являются синхронизированными друг с другом.

[0294] Хотя запоминающее устройство ex511 является элементом за пределами LSI ex500, оно может быть включено в LSI ex500. Буфер ex508 не ограничен одним буфером, а может состоять из буферов. Кроме того, LSI ex500 может состоять из одного кристалла или множества кристаллов.

[0295] Кроме того, хотя модуль ex501 управления включает в себя CPU ex502, контроллер ex503 запоминающего устройства, потоковый контроллер ex504, модуль ex512 управления частотой возбуждения, конфигурация модуля ex501 управления не ограничена этой. Например, процессор ex507 сигналов дополнительно может включать в себя CPU. Включение другого CPU в процессор ex507 сигналов может повышать скорость обработки. Кроме того, в качестве другого примера, CPU ex502 может выступать в качестве или быть частью процессора ex507 сигналов и, например, может включать в себя процессор аудиосигналов. В таком случае, модуль ex501 управления включает в себя процессор ex507 сигналов или CPU ex502, включающий в себя часть процессора ex507 сигналов.

[0296] Используемым здесь названием является LSI, но она также может называться IC, системной LSI, супер-LSI или ультра-LSI в зависимости от степени интеграции.

[0297] Кроме того, способы достигать интеграции не ограничены LSI, и специальная схема или процессор общего назначения и т.д. также позволяет достигать интеграции. Программируемая пользователем вентильная матрица (FPGA), которая может программироваться после изготовления LSI, или реконфигурируемый процессор, который дает возможность переконфигурирования подключения или конфигурации LSI, может использоваться для аналогичной цели. Такое программируемое логическое устройство может типично выполнять способ кодирования движущихся изображений и/или способ декодирования движущихся изображений согласно любому из вышеописанных вариантов осуществления путем загрузки или считывания из запоминающего устройства и т.п. одной или более программ, которые включаются в программное обеспечение или микропрограммное обеспечение.

[0298] В будущем, с развитием полупроводниковых технологий совершенно новая технология может заменять LSI. Функциональные блоки могут быть интегрированы с использованием этой технологии. Имеется возможность того, что настоящее изобретение применимо к биотехнологии.

[0299] Седьмой вариант осуществления

Когда декодируются видеоданные, сформированные в способе кодирования движущихся изображений или посредством устройства кодирования движущихся изображений, описанных в каждом из вариантов осуществления, по сравнению с тем, когда декодируются видеоданные, которые соответствуют традиционному стандарту, такому как MPEG-2, MPEG-4 AVC и VC-1, объем обработки, вероятно, возрастает. Таким образом, LSI ex500 должна задаваться на частоте возбуждения, превышающей частоту CPU ex502, которая должна быть использована, когда видеоданные декодируются в соответствии с традиционным стандартом. Однако когда частота возбуждения задается более высокой, растет потребление мощности.

[0300] C этой точки зрения, устройство декодирования движущихся изображений, такое как телевизионный приемник ex300 и LSI ex500, выполнено с возможностью определять то, какому стандарту соответствуют видеоданные, и переключаться между частотами возбуждения согласно определенному стандарту. Фиг. 53 иллюстрирует конфигурацию ex800 в настоящем варианте осуществления. Модуль ex803 переключения частоты возбуждения задает частоту возбуждения равной высокой частоте возбуждения, когда видеоданные формируются посредством способа кодирования движущихся изображений или устройства кодирования движущихся изображений, описанных в каждом из вариантов осуществления. Затем, модуль ex803 переключения частоты возбуждения инструктирует процессору ex801 декодирования, который осуществляет способ декодирования движущихся изображений, описанный в каждом из вариантов осуществления, декодировать видеоданные. Когда видеоданные соответствуют традиционному стандарту, модуль ex803 переключения частоты возбуждения задает частоту возбуждения равной меньшей частоте возбуждения, чем частота возбуждения видеоданных, сформированных посредством способа кодирования движущихся изображений или устройства кодирования движущихся изображений, описанных в каждом из вариантов осуществления. Затем, модуль ex803 переключения частоты возбуждения инструктирует процессору ex802 декодирования, который соответствует традиционному стандарту, декодировать видеоданные.

[0301] Более конкретно, модуль ex803 переключения частоты возбуждения включает в себя CPU ex502 и модуль ex512 управления частотой возбуждения на фиг. 52. Здесь, каждый из процессора ex801 декодирования, который осуществляет способ декодирования движущихся изображений, описанный в каждом из вариантов осуществления, и процессора ex802 декодирования, который соответствует традиционному стандарту, соответствует процессору ex507 сигналов на фиг. 52. CPU ex502 определяет то, какому стандарту соответствуют видеоданные. Затем, модуль ex512 управления частотой возбуждения определяет частоту возбуждения на основе сигнала из CPU ex502. Кроме того, процессор ex507 сигналов декодирует видеоданные на основе сигнала из CPU ex502. Например, идентификационная информация, описанная в варианте 5 осуществления, вероятно, используется для идентификации видеоданных. Идентификационная информация не ограничена идентификационной информацией, описанной в варианте 5 осуществления, а может быть любой информацией при условии, что информация указывает то, какому стандарту соответствуют видеоданные. Например, когда то, какому стандарту соответствуют стандартные видеоданные, может быть определено на основе внешнего сигнала для определения того, что видеоданные используются для телевизионного приемника или диска и т.д., определение может выполняться на основе такого внешнего сигнала. Кроме того, CPU ex502 выбирает частоту возбуждения на основе, например, таблицы поиска, в которой стандарты видеоданных ассоциированы с частотами возбуждения, как показано на фиг. 55. Частота возбуждения может быть выбрана посредством сохранения таблицы поиска в буфере ex508 и внутреннем запоминающем устройстве LSI и при обращении к таблице поиска посредством CPU ex502.

[0302] Фиг. 54 иллюстрирует этапы для осуществления способа в настоящем варианте осуществления. Во-первых, на этапе exS200, процессор ex507 сигналов получает идентификационную информацию из мультиплексированных данных. Затем, на этапе exS201, CPU ex502 определяет на основе идентификационной информации то, формируются или нет видеоданные посредством способа кодирования и устройства кодирования, описанных в каждом из вариантов осуществления. Когда видеоданные формируются посредством способа кодирования движущихся изображений и устройства кодирования движущихся изображений, описанных в каждом из вариантов осуществления, на этапе exS202, CPU ex502 передает сигнал для задания частоты возбуждения равной большей частоте возбуждения в модуль ex512 управления частотой возбуждения. Затем, модуль ex512 управления частотой возбуждения задает частоту возбуждения равной большей частоте возбуждения. С другой стороны, когда идентификационная информация указывает то, что видеоданные соответствуют традиционному стандарту, такому как MPEG-2, MPEG-4 AVC и VC-1, на этапе exS203, CPU ex502 передает сигнал для задания частоты возбуждения равной меньшей частоте возбуждения в модуль ex512 управления частотой возбуждения. Затем, модуль ex512 управления частотой возбуждения задает частоту возбуждения равной меньшей частоте возбуждения, чем частота возбуждения в случае, если видеоданные формируются посредством способа кодирования движущихся изображений и устройства кодирования движущихся изображений, описанных в каждом из вариантов осуществления.

[0303] Кроме того, наряду с переключением частот возбуждения, энергосберегающий эффект может быть повышен посредством изменения напряжения, которое должно прикладываться к LSI ex500 или к устройству, включающему в себя LSI ex500. Например, когда частота возбуждения задается меньшей, напряжение, которое должно прикладываться к LSI ex500 или к устройству, включающему в себя LSI ex500, вероятно, задается равным напряжению, меньшему напряжения в случае, если частота возбуждения задается большей.

[0304] Кроме того, когда объем обработки для декодирования больше, частота возбуждения может задаваться большей, а когда объем обработки для декодирования меньше, частота возбуждения может задаваться меньшей в качестве способа для задания частоты возбуждения. Таким образом, способ задания не ограничен способами, описанными выше. Например, когда объем обработки для декодирования видеоданных в соответствии с MPEG-4 AVC превышает объем обработки для декодирования видеоданных, сформированных посредством способа кодирования движущихся изображений и устройства кодирования движущихся изображений, описанных в каждом из вариантов осуществления, частота возбуждения, вероятно, задается в обратном порядке относительно задания, описанного выше.

[0305] Кроме того, способ для задания частоты возбуждения не ограничен способом для задания частоты возбуждения меньшей. Например, когда идентификационная информация указывает то, что видеоданные формируются посредством способа кодирования движущихся изображений и устройства кодирования движущихся изображений, описанных в каждом из вариантов осуществления, напряжение, которое должно прикладываться к LSI ex500 или к устройству, включающему в себя LSI ex500, вероятно, задается большим. Когда идентификационная информация указывает то, что видеоданные соответствуют традиционному стандарту, такому как MPEG-2, MPEG-4 AVC и VC-1, напряжение, которое должно прикладываться к LSI ex500 или к устройству, включающему в себя LSI ex500, вероятно, задается меньшим. В качестве другого примера, когда идентификационная информация указывает то, что видеоданные формируются посредством способа кодирования движущихся изображений и устройства кодирования движущихся изображений, описанных в каждом из вариантов осуществления, возбуждение CPU ex502, вероятно, не должно приостанавливаться. Когда идентификационная информация указывает то, что видеоданные соответствуют традиционному стандарту, такому как MPEG-2, MPEG-4 AVC и VC-1, возбуждение CPU ex502, вероятно, приостанавливается в данное время, поскольку CPU ex502 имеет дополнительную производительность обработки. Даже когда идентификационная информация указывает то, что видеоданные формируются посредством способа кодирования движущихся изображений и устройства кодирования движущихся изображений, описанных в каждом из вариантов осуществления, в случае если CPU ex502 имеет дополнительную производительность обработки, возбуждение CPU ex502, вероятно, приостанавливается в данное время. В таком случае, время приостановки, вероятно, задается меньшим времени приостановки в случае, когда идентификационная информация указывает то, что видеоданные соответствуют традиционному стандарту, такому как MPEG-2, MPEG-4 AVC и VC-1.

[0306] Соответственно, энергосберегающий эффект может быть повышен посредством переключения между частотами возбуждения согласно стандарту, которому соответствуют видеоданные. Кроме того, когда LSI ex500 или устройство, включающее в себя LSI ex500, возбуждается с использованием аккумулятора, время работы от аккумулятора может быть продлено за счет энергосберегающего эффекта.

[0307] Восьмой вариант осуществления

Возникают случаи, когда множество видеоданных, которые соответствуют различным стандартам, предоставляются в устройства и системы, такие как телевизионный приемник и сотовый телефон. Чтобы обеспечивать декодирование множества видеоданных, которые соответствуют различным стандартам, процессор ex507 сигналов LSI ex500 должен соответствовать различным стандартам. Тем не менее, увеличение масштаба схемы LSI ex500 и рост затрат возникают при отдельном использовании процессоров ex507 сигналов, которые соответствуют соответствующим стандартам.

[0308] С этой точки зрения, задумана конфигурация, в которой частично совместно используются процессор декодирования для реализации способа декодирования движущихся изображений, описанного в каждом из вариантов осуществления, и процессор декодирования, который соответствует традиционному стандарту, такому как MPEG-2, MPEG-4 AVC и VC-1. Ex900 на фиг. 56A показывает пример конфигурации. Например, способ декодирования движущихся изображений, описанный в каждом из вариантов осуществления, и способ декодирования движущихся изображений, который соответствует MPEG-4 AVC, имеют, частично совместно, сведения по обработке, такой как энтропийное кодирование, обратное квантование, фильтрация для удаления блочности и прогнозирование с компенсацией движения. Сведения по обработке, которая должна совместно использоваться, вероятно, включают в себя использование процессора ex902 декодирования, который соответствует MPEG-4 AVC. В отличие от этого, выделенный процессор ex901 декодирования, вероятно, используется для другой обработки, которая является уникальной для аспекта настоящего изобретения и не удовлетворяет MPEG-4 AVC. Поскольку аспект настоящего изобретения отличается посредством энтропийного декодирования, в частности, например, выделенный процессор ex901 декодирования используется для энтропийного декодирования. В противном случае, процессор декодирования, вероятно, совместно используется для одного из обратного квантования, фильтрации для удаления блочности и компенсации движения или всей обработки. Процессор декодирования для реализации способа декодирования движущихся изображений, описанного в каждом из вариантов осуществления, может быть совместно использован для обработки, которая должна совместно использоваться, и выделенный процессор декодирования может использоваться для обработки, уникальной для MPEG-4 AVC.

[0309] Кроме того, ex1000 на фиг. 56B показывает другой пример, в котором обработка совместно используется частично. Этот пример использует конфигурацию, включающую в себя выделенный процессор ex1001 декодирования, который поддерживает обработку, уникальную для аспекта настоящего изобретения, выделенный процессор ex1002 декодирования, который поддерживает обработку, уникальную для другого традиционного стандарта, и процессор ex1003 декодирования, который поддерживает обработку, которая должна совместно использоваться способом декодирования движущихся изображений согласно аспекту настоящего изобретения и традиционным способом декодирования движущихся изображений. Здесь, выделенные процессоры ex1001 и ex1002 декодирования не обязательно являются специализированными для обработки согласно аспекту настоящего изобретения и обработки по традиционному стандарту, соответственно, и могут быть процессорами, допускающими реализацию общей обработки. Кроме того, конфигурация настоящего варианта осуществления может быть реализована посредством LSI ex500.

[0310] Так же, уменьшение масштаба схемы LSI и сокращение затрат возможно за счет совместного использования процессора декодирования для обработки, которая должна совместно использоваться способом декодирования движущихся изображений согласно аспекту настоящего изобретения и способом декодирования движущихся изображений в соответствии с традиционным стандартом.

Промышленная применимость

[0311] Способ кодирования изображений и способ декодирования изображений согласно настоящему изобретению обеспечивают преимущества предотвращения ухудшения качества изображений и повышения эффективности обработки и являются применимыми для множества назначений, таких как накопление, передача и обмен изображениями. Способ кодирования изображений и способ декодирования изображений согласно настоящему изобретению могут использоваться, например, для устройства отображения или устройства захвата информации высокого разрешения, такого как телевизионный приемник, цифровое записывающее видеоустройство, автомобильная навигационная система, сотовый телефон, цифровая камера, цифровая видеокамера и т.д., и являются полезными.

Список номеров ссылок

[0312] 100 – устройство кодирования изображений

110, 210, 306, 405 – модуль управления

120 – модуль кодирования

121 – модуль вычитания

122 – модуль преобразования частоты

123 – модуль квантования

124 – модуль энтропийного кодирования

125, 225 – модуль обратного квантования

126, 226 – модуль обратного преобразования частоты

127 227 – сумматор

128, 228, 300, 400 – модуль контурной фильтрации

129, 229 – модуль хранения

130, 230 – модуль внутреннего прогнозирования

131, 231 – модуль компенсации движения

132 – модуль оценки движения

133, 233 – переключатель

141, 241 – изображение

142, 242 – кодированный поток

151, 251, 301, 401 – модуль получения сигналов

152, 302 – модуль вычисления информации смещения

153, 253, 303, 403 – процессор смещения

154, 305, 307 – модуль кодирования информации смещения

155, 254, 304, 404 – модуль вывода сигналов

200 – устройство декодирования изображений

220 – модуль декодирования

224 – модуль энтропийного декодирования

252, 402, 406 – модуль декодирования информации смещения

3071 – модуль управления арифметическим кодированием

3072 – модуль контекстного арифметического кодирования

3073 – модуль обходного арифметического кодирования

4061 – модуль управления арифметическим декодированием

4062 – модуль контекстного арифметического декодирования

4063 – модуль обходного арифметического декодирования

Изобретение относится к области кодирования изображений с использованием арифметического кодирования. Техническим результатом является высокая эффективность кодирования. Способ кодирования изображений содержит: выполнение контекстного арифметического кодирования для того, чтобы последовательно кодировать (i) первую информацию, указывающую то, выполнять ли обработку адаптивного к выборке смещения (SAO) для первой области изображения, и (ii) вторую информацию, указывающую то, использовать ли, при SAO-обработке для первой области, информацию относительно SAO-обработки для области, отличной от первой области, причем контекстное арифметическое кодирование является арифметическим кодированием с использованием переменной вероятности, SAO-обработка является обработкой смещения в отношении пиксельного значения; и выполнение обходного арифметического кодирования для того, чтобы кодировать другую информацию, которая является информацией относительно SAO-обработки для первой области и отличается от первой информации или второй информации, после того как кодируются первая информация и вторая информация, причем обходное арифметическое кодирование является арифметическим кодированием с использованием фиксированной вероятности. 5 н. и 6 з.п. ф-лы, 72 ил.

1. Способ кодирования изображений, содержащий:

- выполнение контекстного арифметического кодирования для того, чтобы последовательно кодировать (i) первую информацию, указывающую то, выполнять ли обработку адаптивного к выборке смещения (SAO) для первой области изображения, и (ii) вторую информацию, указывающую то, использовать ли, при SAO-обработке для первой области, информацию относительно SAO-обработки для области, отличной от первой области, причем контекстное арифметическое кодирование является арифметическим кодированием с использованием переменной вероятности, SAO-обработка является обработкой смещения в отношении пиксельного значения; и

- выполнение обходного арифметического кодирования для того, чтобы кодировать другую информацию, которая является информацией относительно SAO-обработки для первой области и отличается от первой информации или второй информации, после того как кодируются первая информация и вторая информация, причем обходное арифметическое кодирование является арифметическим кодированием с использованием фиксированной вероятности.

2. Способ кодирования изображений по п. 1,

в котором, при выполнении обходного арифметического кодирования, кодируется другая информация, которая включает в себя (i) третью информацию, указывающую то, является ли SAO-обработка для первой области обработкой смещения края или обработкой смещения полосы, и (ii) четвертую информацию, указывающую абсолютное значение значения смещения, причем обработка смещения края выполняется согласно краю, обработка смещения полосы выполняется согласно пиксельному значению.

3. Способ кодирования изображений по п. 2,

в котором, при выполнении обходного арифметического кодирования, когда SAO-обработка для первой области является обработкой смещения полосы, кодируется другая информация, которая включает в себя (i) пятую информацию, указывающую то, является ли значение смещения положительным или отрицательным, и (ii) шестую информацию, указывающую область применения значения смещения.

4. Способ кодирования изображений по любому из пп. 1-3,

в котором, при выполнении контекстного арифметического кодирования, кодируется вторая информация, которая включает в себя по меньшей мере одну из (i) информации, указывающей то, используется ли информация относительно SAO-обработки для левой области при SAO-обработке для первой области, и (ii) информации, указывающей то, используется ли информация относительно SAO-обработки для верхней области при SAO-обработке для первой области, причем левая область является смежной с первой областью и располагается слева от первой области, верхняя область является смежной с первой областью и располагается сверху от первой области.

5. Способ декодирования изображений, содержащий:

- выполнение контекстного арифметического декодирования для того, чтобы последовательно декодировать (i) первую информацию, указывающую то, выполнять ли обработку адаптивного к выборке смещения (SAO) для первой области изображения, и (ii) вторую информацию, указывающую то, использовать ли, при SAO-обработке для первой области, информацию относительно SAO-обработки для области, отличной от первой области, причем контекстное арифметическое декодирование является арифметическим декодированием с использованием переменной вероятности, SAO-обработка является обработкой смещения в отношении пиксельного значения; и

- выполнение обходного арифметического декодирования для того, чтобы декодировать другую информацию, которая является информацией относительно SAO-обработки для первой области и отличается от первой информации или второй информации, после того как декодируются первая информация и вторая информация, причем обходное арифметическое декодирование является арифметическим декодированием с использованием фиксированной вероятности.

6. Способ декодирования изображений по п. 5,

в котором, при выполнении обходного арифметического декодирования, декодируется другая информация, которая включает в себя (i) третью информацию, указывающую то, является ли SAO-обработка для первой области обработкой смещения края или обработкой смещения полосы, и (ii) четвертую информацию, указывающую абсолютное значение значения смещения, причем обработка смещения края выполняется согласно краю, обработка смещения полосы выполняется согласно пиксельному значению.

7. Способ декодирования изображений по п. 6,

в котором, при выполнении обходного арифметического декодирования, когда SAO-обработка для первой области является обработкой смещения полосы, декодируется другая информация, которая включает в себя (i) пятую информацию, указывающую то, является ли значение смещения положительным или отрицательным, и (ii) шестую информацию, указывающую область применения значения смещения.

8. Способ декодирования изображений по любому из пп. 5-7,

в котором, при выполнении контекстного арифметического декодирования, декодируется вторая информация, которая включает в себя по меньшей мере одну из (i) информации, указывающей то, используется ли информация относительно SAO-обработки для левой области при SAO-обработке для первой области, и (ii) информации, указывающей то, используется ли информация относительно SAO-обработки для верхней области при SAO-обработке для первой области, причем левая область является смежной с первой областью и располагается слева от первой области, верхняя область является смежной с первой областью и располагается сверху от первой области.

9. Устройство кодирования изображений, содержащее:

схему управления и

устройство хранения, доступное из схемы управления,

при этом схема управления

- выполняет контекстное арифметическое кодирование для того, чтобы последовательно кодировать (i) первую информацию, указывающую то, выполнять ли обработку адаптивного к выборке смещения (SAO) для первой области изображения, и (ii) вторую информацию, указывающую то, использовать ли, при SAO-обработке для первой области, информацию относительно SAO-обработки для области, отличной от первой области, причем контекстное арифметическое кодирование является арифметическим кодированием с использованием переменной вероятности, SAO-обработка является обработкой смещения в отношении пиксельного значения; и

- выполняет обходное арифметическое кодирование для того, чтобы кодировать другую информацию, которая является информацией относительно SAO-обработки для первой области и отличается от первой информации или второй информации, после того как кодируются первая информация и вторая информация, причем обходное арифметическое кодирование является арифметическим кодированием с использованием фиксированной вероятности.

10. Устройство декодирования изображений, содержащее:

схему управления и

устройство хранения, доступное из схемы управления,

при этом схема управления

- выполняет контекстное арифметическое декодирование для того, чтобы последовательно декодировать (i) первую информацию, указывающую то, выполнять ли обработку адаптивного к выборке смещения (SAO) для первой области изображения, и (ii) вторую информацию, указывающую то, использовать ли, при SAO-обработке для первой области, информацию относительно SAO-обработки для области, отличной от первой области, причем контекстное арифметическое декодирование является арифметическим декодированием с использованием переменной вероятности, SAO-обработка является обработкой смещения в отношении пиксельного значения; и

- выполняет обходное арифметическое декодирование для того, чтобы декодировать другую информацию, которая является информацией относительно SAO-обработки для первой области и отличается от первой информации или второй информации, после того как декодируются первая информация и вторая информация, причем обходное арифметическое декодирование является арифметическим декодированием с использованием фиксированной вероятности.

11. Устройство кодирования и декодирования изображений, содержащее:

устройство кодирования изображений по п. 9 и

устройство декодирования изображений по п. 10.