Область техники, к которой относится изобретение
Настоящая технология относится к устройству передачи и способу передачи, устройству приема, способу приема, устройству отображения и способу отображения и, более конкретно, например, к устройству передачи, выполненному с возможностью выполнения фотоэлектрического преобразования видеоданных с высоким динамическим диапазоном, сжатия диапазона уровня и передачи полученных в результате данных.
Уровень техники
В прошлом известна гамма-коррекция, представляющая собой коррекцию гамма-характеристики монитора путем приема данных, имеющих противоположную характеристику, чем характеристика монитора. Например, в патентном документе 1 раскрыта технология передачи видеопотока, генерируемого путем кодирования видеоданных передачи, полученных путем применения фотоэлектрического преобразования для видеоданных с большим динамическим диапазоном (HDR), имеющих уровень от 0 до 100%*N (N больше, чем 1).
Список литературы
Непатентный документ
Непатентный документ 1: High Efficiency Video Coding (HEVC) text specification draft 10 (for FDIS & Last Call)
Раскрытие сущности изобретения
Задачи, решаемые изобретением
Если диапазон, имеющий совместимость с характеристикой фотоэлектрического преобразования предшествующего уровня техники будет расширен, диапазон, в котором получают эффекты HDR, уменьшается. С другой стороны, в характеристике фотоэлектрического преобразования, применяемой для видеоданных HDR, если диапазон, в котором получают эффекты HDR, будет расширен, диапазон, имеющий совместимость с характеристикой фотоэлектрического преобразования предшествующего уровня техники, уменьшается. Как описано выше, при простой характеристике фотоэлектрического преобразования трудно одновременно удовлетворять совместимости с предшествующим уровнем техники и богатой характеристикой выражения HDR. В то же время, в общем, потребность градации изображения HDR отличается в соответствии с каждым изображением.
Цель настоящей технологии состоит в том, чтобы обеспечить технологию, позволяющую выполнять соответствующее фотоэлектрическое преобразование видеоданных HDR, в соответствии с содержанием изображения, и передачу получаемых в результате данных.
Решения задачи
Концепция настоящей технологией находится в устройстве передачи, включающем в себя:
модуль обработки, который выполняет фотоэлектрическое преобразование входных видеоданных, имеющих диапазон уровня от 0% до 100%*N (N представляет собой число больше 1), и получает видеоданные передачи;
модуль передачи, который передает контейнер, включающий в себя видеопоток, получаемый путем кодирования видеоданных передачи; и
модуль вставки информации, который вставляет информацию о характеристике электрооптического преобразования каждого заданного модуля видеоданных передачи на уровне видеопотока и/или на уровне контейнера.
В существующей технологии модуль обработки выполняет фотоэлектрическое преобразование входных видеоданных, имеющих диапазон уровня от 0% до 100%*N (N представляет собой число больше 1), и получает видеоданные передачи. Модуль передачи передает контейнер, включающий в себя видеопоток, полученный путем кодирования видеоданных передачи. Например, контейнер может представлять собой поток транспортирования (MPEG 2 TS), используемый в стандарте цифровой широковещательной передачи. Кроме того, например, контейнер может представлять собой МР4, используемый при доставке через Интернет и т.п., или контейнер любого другого формата.
Модуль вставки информации вставляет информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи на уровне видеопотока и/или уровне контейнера. Например, заданный модуль может представлять собой модуль сцены или модуль программы. Кроме того, например, информация характеристики электрооптического преобразования может представлять собой информацию типа, обозначающую тип характеристики электрооптического преобразования. Кроме того, например, информация характеристики электрооптического преобразования может представлять собой параметр для получения кривой характеристики электрооптического преобразования.
Как описано выше, в настоящей технологии, информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи вставляют на уровень видеопотока и/или уровень контейнера. Таким образом, становится возможным выполнить фотоэлектрическое преобразование видеоданных HDR в заданных модулях путем избирательного применения соответствующей характеристики фотоэлектрического преобразования, в соответствии с содержанием изображения, и передавать полученные в результате данные.
Кроме того, другая концепция настоящей технологии содержится в устройстве приема, включающем в себя:
модуль приема, который принимает контейнер заданного формата, включающий в себя видеопоток, получаемый в результате кодирования видеоданных передачи,
видеоданные передачи получают путем выполнения фотоэлектрического преобразования входных видеоданных, имеющих диапазон уровня от 0% до 100%*N (N представляет собой число больше 1),
информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи вставляют на уровне видеопотока и/или уровне контейнера; и
модуль обработки, который обрабатывает видеопоток, включенный в контейнер, принятый модулем приема.
В настоящей технологии модуль приема принимает контейнер заданного формата, включающий в себя видеопоток, полученный путем кодирования видеоданных передачи. Видеоданные передачи получают путем выполнения фотоэлектрического преобразования входных видеоданных, имеющих диапазон уровня от 0% до 100%*N (N представляет собой число больше 1). Кроме того, информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи вставляют на уровне видеопотока и/или уровне контейнера. Модуль обработки обрабатывает видеопоток, включенный в контейнер, принятый модулем приема.
Например, модуль обработки может включать в себя модуль декодирования, который декодирует видеопоток и получает видеоданные передачи, и модуль электрооптического преобразования, который выполняет электрооптическое преобразование видеоданных передачи, полученных модулем декодирования, на основе информации характеристики электрооптического преобразования каждого заданного модуля, и получает выходные видеоданные. Таким образом, становится возможным воспроизводить видеоданные HDR, которые не подвергают фотоэлектрическому преобразованию на стороне передачи, и отлично отображать изображение HDR.
В этом случае, например, информация характеристики электрооптического преобразования может представлять собой информацию типа, которая обозначает тип характеристики электрооптического преобразования, и модуль электрооптического преобразования может выполнять электрооптическое преобразование видеоданных передачи на основе кривой характеристики электрооптического преобразования в соответствии с типом, обозначенным информацией типа. Кроме того, в этом случае, например, информация характеристики электрооптического преобразования может представлять собой параметр для получения кривой характеристики электрооптического преобразования, и модуль электрооптического преобразования может выполнять электрооптическое преобразование для видеоданных передачи на основе кривой характеристики электрооптического преобразования, полученной по параметру.
В этом случае, например, кривая характеристики электрооптического преобразования, используемая модулем электрооптического преобразования, может быть получена на основе параметра и информации о максимальном уровне отображения, и максимальный уровень выходных видеоданных может быть ограничен информацией о максимальном уровне отображения. Таким образом, возможно превосходно отображать изображение HDR без возникновения коллапса белого и т.п. в модуле дисплея (дисплей).
Кроме того, модуль обработки может включать в себя модуль декодирования, который декодирует видеопоток, включенный в контейнер, и получает видеоданные передачи, и модуль передачи, который передает видеоданные передачи, полученные модулем декодирования, и информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи во внешнее устройство, в ассоциации друг с другом. Таким образом, внешнее устройство может выполнять электрооптическое преобразование видеоданных передачи на основе информации характеристики электрооптического преобразования каждого заданного модуля, воспроизводить видеоданные HDR, которые не подвергаются электрооптическому преобразованию на стороне передачи, и превосходно отображать изображение HDR.
В этом случае, например, модуль передачи может передавать видеоданные передачи во внешнее устройство через дифференциальный сигнал, используя заданное количество каналов, и может вставлять информацию характеристики электрооптического преобразования в период гашения обратного хода луча видеоданных передачи и может передавать информацию характеристики электрооптического преобразования во внешнее устройство.
Кроме того, другая концепция, в соответствии с настоящей технологией, находится в устройстве дисплея, включающем в себя:
модуль приема, который принимает видеоданные передачи и информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи, ассоциированных с видеоданными передачи из внешнего устройства; и
модуль электрооптического преобразования, который выполняет электрооптическое преобразование для видеоданных передачи, принятых модулем приема на основе информации характеристики электрооптического преобразования каждого заданного модуля и получает выходные видеоданные.
В настоящей технологии модуль приема принимает видеоданные передачи и информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи, ассоциированные с видеоданными передачи, из внешнего устройства. Модуль электрооптического преобразования выполняет электрооптическое преобразование видеоданных передачи, принимаемых модулем приема на основе информации характеристики электрооптического преобразования каждого заданного модуля, и получает выходные видеоданные. Таким образом, становится возможным воспроизводить видеоданные HDR, которые не подвергаются электрооптическому преобразованию, и превосходно отображать изображение HDR.
В этом случае, например, информация характеристики электрооптического преобразования может представлять собой информацию типа, обозначающую тип характеристики электрооптического преобразования, и модуль электрооптического преобразования может выполнять электрооптическое преобразование для видеоданных передачи на основе кривой характеристики электрооптического преобразования для типа, обозначенного информацией типа. Кроме того, в этом случае, например, информация характеристики электрооптического преобразования может представлять собой параметр для получения кривой характеристики электрооптического преобразования, и модуль электрооптического преобразования может выполнять электрооптическое преобразование для видеоданных передачи на основе кривой характеристики электрооптического преобразования, полученной по параметру.
В этом случае, например, кривая характеристики электрооптического преобразования, используемая модулем электрооптического преобразования, может быть получена на основе параметра и информации о максимальном уровне отображения, и максимальный уровень выходных видеоданных может быть ограничен информацией о максимальном уровне отображения. Таким образом, возможно превосходно отображать изображение HDR без возникновения коллапса белого и т.п. в модуле дисплея (дисплей).
Кроме того, другая концепция настоящей технологии находится в устройстве передачи, включающем в себя:
первый модуль передачи, который передает контейнер, включающий в себя видеопоток, включающий в себя кодированные данные видеоданных передачи, полученные путем выполнения фотоэлектрического преобразования входных видеоданных, имеющих диапазон уровня от 0% до 100%*N (N представляет собой число больше 1); и
второй модуль передачи, который передает метафайл, включающий в себя информацию для обеспечения для стороны приема возможности получения видеопотока,
в котором информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи вставляют в видеопоток и/или метафайл.
В настоящей технологии первый модуль передачи передает контейнер, включающий в себя видеопоток, включающий в себя кодированные данные видеоданных передачи, получаемые путем выполнения фотоэлектрического преобразования входных видеоданных, имеющих диапазон уровня от 0% до 100%*N (N представляет собой число больше 1). Второй модуль передачи передает метафайл, включающий в себя информацию для обеспечения для стороны приема возможности получать видеопоток. Кроме того, информацию о характеристике электрооптического преобразования каждого заданного модуля видеоданных передачи вставляют в видеопоток и/или метафайл.
Как описано выше, в настоящей технологии, информацию о характеристике электрооптического преобразования каждого заданного модуля видеоданных передачи вставляют в видеопоток и/или метафайл. Таким образом, становится возможным выполнить фотоэлектрическое преобразование видеоданных HDR в заданных модулях, путем избирательного применения соответствующей характеристики фотоэлектрического преобразования в соответствии с содержанием изображения и передавать полученные в результате данные.
Кроме того, другая концепция настоящей технологии находится в устройстве передачи, включающем в себя:
модуль передачи, который передает контейнер, включающий в себя видеопоток, включающий в себя кодированные данные видеоданных передачи, полученные путем выполнения фотоэлектрического преобразование входных видеоданных, имеющих диапазон уровня от 0% до 100%*N (N представляет собой число больше 1),
в котором информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи вставляют на уровень видеопотока и/или уровень контейнера.
Результаты изобретения
В соответствии с настоящей технологией, возможно выполнять соответствующее фотоэлектрическое преобразование видеоданных HDR, в соответствии с содержанием изображения, и передавать полученные в результате данные. Эффект, описанный здесь, представляет собой просто пример и не ограничен этим, и может быть включен дополнительный эффект.
Краткое описание чертежей
На фиг. 1 показана блок-схема, поясняющая примерную конфигурацию приемопередающей системы.
На фиг. 2 показана блок-схема, поясняющая примерную конфигурацию устройства передачи.
На фиг. 3 представлена схема, иллюстрирующая пример фотоэлектрической характеристики преобразования.
На фиг. 4 представлена схема, иллюстрирующая первое устройство доступа GOP, когда схема кодирования представляет собой HEVC.
На фиг. 5(a) и 5(b) представлены схемы, иллюстрирующие примерную структуру информации HDR_EOTF сообщения SEI.
На фиг. 6 представлена схема, иллюстрирующая примерную структуру "HDR_EOTF information_data ()."
На фиг. 7 представлена схема, иллюстрирующая основное содержание в примерной структуре "HDR_EOTF information_data ()."
На фиг. 8 представлена схема, иллюстрирующая примерную структуру дескриптора HDR.
На фиг. 9 представлена схема, иллюстрирующая примерную конфигурацию транспортного потока.
На фиг. 10 показана блок-схема, поясняющая примерную конфигурацию телевизионной приставки.
На фиг. 11 представлена схема, иллюстрирующая примерную структуру пакета InfoFrame, определяемого поставщиком HDMI.
На фиг. 12 представлена схема, иллюстрирующая примерную структуру пакета InfoFrame, определяемого поставщиком HDMI.
На фиг. 13 представлена схема, иллюстрирующая примерную конфигурацию устройства дисплея.
На фиг. 14 представлена схема, иллюстрирующая пример электрооптической характеристики преобразования.
На фиг. 15 представлена схема, иллюстрирующая пример электрооптической характеристики преобразования.
На фиг. 16 показана блок-схема, поясняющая другую примерную конфигурацию приемо-передающей системы.
На фиг. 17 показана блок-схема, поясняющая примерную конфигурацию устройства приема.
На фиг. 18 показана блок-схема, поясняющая примерную конфигурацию приемопередающей системы на основе MPEG-DASH.
На фиг. 19 показана схема для описания вновь определенной схемы.
На фиг. 20 представлена схема, иллюстрирующая примерное описание файла MPD информации характеристики электрооптического преобразования.
На фиг. 21 представлена схема, иллюстрирующая примерную конфигурацию фрагментированного потока МР4.
На фиг. 22 показана блок-схема, поясняющая другую примерную конфигурацию приемо-передающей системы на основе MPEG-DASH.
Подробное описание изобретения
Далее будут описаны режимы (ниже называются "вариантами осуществления") для выполнения изобретения. Описание будет представлено в следующем порядке.
1. Вариант осуществления
2. Модифицированный пример
1. Вариант осуществления
Конфигурация приемо-передающей системы
На фиг. 1 показана примерная конфигурация приемо-передающей системы 10, в соответствии с вариантом осуществления. Приемо-передающая система 10 включает в себя устройство 100 передачи, телевизионную приставку (STB) 200 и устройство 300 дисплея (монитор). Телевизионная приставка 200 и устройство 300 дисплея соединены друг с другом через кабель 400 мультимедийного интерфейса высокой четкости (HDMI).
Устройство 100 передачи генерирует транспортный поток TS MPEG 2, используемый, как контейнер, и передает транспортный поток TS посредством волны широковещательной передачи или сетевого пакета. Транспортный поток TS включает в себя видеопоток, получаемый путем кодирования видеоданных передачи.
Видеоданные передачи получают путем избирательного применения соответствующей характеристики фотоэлектрического преобразования для видеоданных HDR, используемых как входные видеоданные, в соответствии с содержанием изображения в заданных модулях, и выполнения фотоэлектрического преобразования. В этом случае, например, входные видеоданные имеют диапазон уровня от 0% до N% (N>100), тогда как видеоданные передачи имеют диапазон уровня от 0% до 100%. Здесь значение "%" представляет собой относительное значение, например, когда 100 кд/м2 установлены, как 100%. Заданный модуль представляет собой модуль сцены, программный модуль и т.п.
Устройство 100 передачи вставляет информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи на уровень видеопотока и/или уровень транспортного потока (контейнер). Характеристика электрооптического преобразования, в общем, представляет собой обратную характеристику для характеристики фотоэлектрического преобразования, но может не обязательно точно представлять обратную характеристику. Здесь информация характеристики электрооптического преобразования, например, представляет собой информацию типа, обозначающую тип характеристики электрооптического преобразования параметра для получения кривой характеристики электрооптического преобразования и т.п.
Телевизионная приставка 200 принимает транспортный поток TS, который передают посредством волны широковещательной передачи или сетевого пакета из устройства 100 передачи. Транспортный поток TS включает в себя видеопоток, получаемый путем кодирования видеоданных передачи. Телевизионная приставка 200 выполняет обработку декодирования видеопотока, и получает видеоданные передачи.
Телевизионная приставка 200 получает информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи, вставляемого в уровень видеопотока и/или уровень транспортного потока (контейнер). Телевизионная приставка 200 передает видеоданные передачи с информацией характеристики электрооптического преобразования в устройство 300 дисплея в ассоциации друг с другом.
В этом случае телевизионная приставка 200 передает видеоданные передачи и информацию характеристики электрооптического преобразования в устройство 300 дисплея через кабель 400 HDMI. Другими словами, телевизионная приставка 200 передает видеоданные передачи через канал TMDS, и вставляет информацию характеристики электрооптического преобразования, например, в период гашения обратного хода луча видеоданных передачи, и затем передает получаемые в результате видеоданные передачи.
Устройство 300 дисплея принимает видеоданные передачи и информацию характеристики электрооптического преобразования, которую передают из телевизионной приставки 200 через кабель 400 HDMI. Устройство 300 дисплея получает выходные видеоданные путем выполнения электрооптического преобразования для видеоданных передачи на основе информации характеристики электрооптического преобразования каждого заданного модуля. Затем устройство 300 дисплея отображает изображение HDR на основе выходных видеоданных через модуль дисплея (дисплей).
В этом случае, когда информация характеристики электрооптического преобразования представляет собой информацию типа, устройство 300 дисплея выполняет электрооптическое преобразование видеоданных передачи на основе кривой характеристики электрооптического преобразования для типа, обозначенного информацией типа. В этом случае, когда информация характеристики электрооптического преобразования представляет собой параметр для получения кривой характеристики электрооптического преобразования, устройство 300 дисплея выполняет электрооптическое преобразование для видеоданных передачи на основе кривой характеристики электрооптического преобразования, полученной по параметру. В этом случае, например, путем получения ее на основе параметра и на основе информации максимального уровня отображения, возможно ограничить максимальный уровень выходных видеоданных до информации максимального уровня отображения.
Конфигурация устройства передачи
На фиг. 2 иллюстрируется пример конфигурации устройства 100 передачи. Устройство 100 передачи включает в себя модуль 101 управления, камеру 102, модуль 103 фотоэлектрического преобразования, видеокодер 104, кодер 105 системы и модуль 106 передачи. В модуле 101 управления установлено центральное процессорное устройство (CPU), и оно управляет операциями соответствующих модулей устройства 100 передачи на основе программы управления, сохраненной в накопителе (не представлен).
Камера 102 получает изображение субъекта, и выводит видеоданные (видеоданные HDR) в виде изображения с высоким динамическим диапазоном (HDR). Видеоданные имеет уровни диапазона от 0 до 100%*N, такие как от 0 до 400% или от 0 до 800%. Здесь уровень 100% соответствует значению яркости 100 кд/м2 для белого цвета
Модуль 103 фотоэлектрического преобразования выполняет фотоэлектрическое преобразование для видеоданных HDR, получаемых камерой 102 в заданных модулях, например, в модулях сцен или в модулях программ, путем избирательного применения характеристики электрооптического преобразования в соответствии с содержанием изображения, и генерирует видеоданные передачи. Здесь характеристика фотоэлектрического преобразования, которая должна применяться, может быть выбрана автоматически на основе анализа содержания изображения или вручную с помощью операции пользователя. В этом случае, например, когда входные видеоданные модуля 103 фотоэлектрического преобразования обозначены 12 или больше битами, видеоданные передачи, которые подвергаются фотоэлектрическому преобразованию, обозначены 10 или меньше битами.
На фиг. 3 иллюстрируется пример характеристики фотоэлектрического преобразования. Кривая "HDR: Тип 1" имеет совместимость с гамма-характеристикой существующих устройств от 0 до S1. Кривая "HDR: Тип 2" имеет совместимость с гамма-характеристикой существующих устройств от 0 до S2. Кривая "HDR: Тип 3" имеет совместимость с гамма-характеристикой существующих устройств от 0 до S3. Характеристики фотоэлектрического преобразования, которые могут быть выбраны модулем 103 фотоэлектрического преобразования, не ограничены этими тремя характеристиками.
Снова обращаясь к фиг. 2, видеокодер 104 кодирует видеоданные передачи, генерируемые модулем 103 фотоэлектрического преобразования, например, в соответствии с MPEG4-AVC, MPEG 2 video, или высокоэффективным кодированием видеоданных (HEVC), и получает кодированные видеоданные. Видеокодер 104 генерирует видеопоток (элементарный видеопоток), включающий в себя кодированные видеоданные через блок форматирования потока (не представлен), установленный на последующем этапе.
В это время видеокодер 104 вставляет информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи на уровень видеопотока. В общем, информация характеристики электрооптического преобразования включает в себя инверсную характеристику для характеристики фотоэлектрического преобразования, получаемой модулем 103 фотоэлектрического преобразования, но обязательно должна идеально соответствовать инверсной характеристике. Например, информация характеристики электрооптического преобразования представляет собой информацию типа, обозначающую тип характеристики электрооптического преобразования, или параметра для получения кривой характеристики электрооптического преобразования. Видеокодер 104 вставляет информацию характеристики электрооптического преобразования, например, в модулях групп изображений (GOP), используемых как модуль доступа дисплея, включающих в себя прогнозируемое изображение.
Кодер 105 системы генерирует транспортный поток TS, включающий в себя видеопоток, сгенерированный видеокодером 104. Затем модуль 106 передачи передает транспортный поток TS в телевизионную приставку 200 по волне широковещательной передачи или посредством сетевого пакета.
В это время кодер 105 системы вставляет информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи на уровень транспортного потока (контейнер), аналогично вставке на уровень видеопотока. В этом случае кодер 105 системы вставляет информацию характеристики электрооптического преобразования, например, так, чтобы она находилась ниже элементарного видеоконтура (видеоконтур ES) таблицы отображения программы (РМТ), включенной в транспортный поток TS.
Далее будет кратко описана работа устройства 100 передачи, представленного на фиг. 2. Видеоданные (видеоданные HDR) изображения HDR, полученного путем формирования изображений камеры 102, поступают в модуль 103 фотоэлектрического преобразования. Модуль 103 фотоэлектрического преобразования выполняет фотоэлектрическое преобразование для видеоданных HDR в заданных единицах, например, в единицах сцен или в единицах программ, путем избирательного применения характеристики электрооптического преобразования, в соответствии с содержанием изображения, и генерирует видеоданные передачи.
Видеоданные передачи, сгенерированные модулем 103 фотоэлектрического преобразования, как описано выше, подают в видеокодер 104. Видеокодер 104 кодирует видеоданные передачи, например, в соответствии с HEVC, и генерирует видеопоток (элементарный видеопоток), включающий в себя кодированные видеоданные. В это время, видеокодер 104 вставляет информацию характеристики электрооптического преобразования каждой заданной единицы видеоданных передачи на уровень видеопотока.
Видеопоток, сгенерированный видеокодером 104, поступает в кодер 105 системы. Кодер 105 системы генерирует транспортный поток TS MPEG 2, включающий в себя видеопоток: В это время, кодер 105 системы вставляет информацию характеристики электрооптического преобразования каждой заданной единицы видеоданных передачи на уровень транспортного потока (контейнер), аналогично вставке на уровень видеопотока. Модуль 106 передачи передает транспортный поток TS в телевизионную приставку 200 посредством волны широковещательной передачи или сетевого пакета.
Информация характеристики электрооптического преобразования и конфигурация TS
Как описано выше, информацию характеристики электрооптического преобразования вставляют на уровень видеопотока. Например, когда схема кодирования представляет собой HEVC, информацию характеристики электрооптического преобразования вставляют на участок "SEI" модуля доступа (AU), как информацию HDR EOTF сообщения SEI (сообщение HDR_EOTF_information SEI).
На фиг. 4 иллюстрируется первый модуль доступа группы изображения (GOP), когда схема кодирования представляет собой HEVC. В случае схемы кодирования HEVC группа сообщений SEI "Prefix_SEI" для декодирования размещается перед срезами, включающими в себя кодированные данные пикселя, и группа сообщения SEI "Suffix_SEI" для отображения размещается после срезов. Сообщение SEI информации HDR EOTF размещается, как группа сообщений SEI "Suffix_SEI".
На фиг. 5(a) иллюстрируется примерная структура (синтаксис) "сообщения HDR_EOTF_information SEI". "uuid_iso_iec_11578" имеет значение UUID, описанное в "ISO/IEC 11578:1996 AnnexA." Информация "HDR_EOTF_ information()" вставлена в поле "user_data_payload_byte". На фиг. 5 (b) иллюстрируется примерная структура (синтаксис) "HDR_EOTF_information()", и "HDR_EOTF_information_data()", используемую, как информация характеристики электрооптического преобразования, вставляют в информацию "HDR_EOTF_information()M. "userdata_id" представляет собой идентификатор информации характеристики электрооптического преобразования, обозначенный 16 битами без знака. 8-битное поле "HDR_EOTF_information_length" обозначает длину байта "HDR_EOTF_information_data ()" после этого поля.
На фиг. 6 иллюстрируется примерная структура (синтаксис) информации характеристики электрооптического преобразования "HDR_EOTF information_data ()". На фиг. 7 иллюстрируется содержание (семантика) информации в примерной структуре, представленной на фиг. 6. 16-битное поле "uncompressed_peak_level" представляет собой процентное значение (относительное значение, когда 100 кд/м2 установлены, как 100%) максимального уровня данных изображения источника (видеоданные HDR). "eotf_flag" представляет собой 1-битную информацию флага и обозначает, является или нет информация характеристики электрооптического преобразования информацией типа. "1" обозначает, что информация характеристики электрооптического преобразования представляет собой информацию типа, обозначающую тип характеристики электрооптического преобразования. "0" обозначает, что информация характеристики электрооптического преобразования представляет собой параметр для получения кривой характеристики электрооптического преобразования.
Когда "eotf_flag=1", присутствует 8-битное поле "eotf_type". Таким образом, поле обозначает тип характеристики электрооптического преобразования. С другой стороны, когда "eotf_flag=0", присутствует следующая информация. 16-битное поле "compressed_peak_level" обозначает процентное значение (относительное значение для 100 кд/м2) максимального уровня кодированных данных изображения (видеоданные передачи). 8-битное поле "number_of_mapping_periods" обозначает количество соединенных кривых отображения уровня.
16-битное поле "compressed_mapping_level” обозначает положение изменения кривой отображения уровня на оси сжатия уровня, используя процентное значение, в котором "compressed_peak_level" установлено равным 100%. 16-битное поле "uncompressed_mapping_level" обозначает положение изменения кривой отображения уровня на оси распаковки уровня, используя процентное значение, в котором "uncompressed_peak_level" установлен 100%.
Как описано выше, информацию характеристики электрооптического преобразования вставляют на уровень транспортного потока. В данном варианте осуществления дескриптор HDR, используемый, как дескриптор, включающий в себя информацию характеристики электрооптического преобразования, вставляют, например, так, чтобы он находился ниже таблицы отображения программы (РМТ).
На фиг. 8 иллюстрируется примерная структура (синтаксис) дескриптора HDR. Хотя подробное описание изобретения не представлено, та же информация, что и в отношении информации характеристики электрооптического преобразования "HDR_EOTF information_data ()" в сообщении SEI информации HDR EOTF, включена в дескриптор HDR. 8-битное поле "HDR descriptor_tag" обозначает тип дескриптора и обозначает, что дескриптор здесь является дескриптором HDR. 8-битное поле "HDR descriptor_length" обозначает длину (размер) дескриптора, то есть, обозначает количество последующих байтов, в качестве длины дескриптора.
На фиг. 9 иллюстрируется примерная конфигурация транспортного потока TS. Пакет PES "PID1: video PES1" элементарного видеопотока включен в транспортный поток TS. Сообщение SEI информации HDR EOTF (сообщение HDR_EOTF_information SEI) вставляют в элементарный видеопоток.
Транспортный поток TS включает в себя таблицу отображения программы (РМТ), как информацию, относящуюся к программе (PSI). PSI представляет собой информацию, описывающую программу, ассоциированную с каждым элементарным потоком, включенным в транспортный поток. Транспортный поток TS включает в себя таблицу информации события (EIT), используемую как обслуживаемая информация (SI), для администрирования модулем события (программы).
РМТ включает в себя элементарный контур, имеющий информацию, ассоциированную с каждым элементарным потоком. В данной примерной конфигурации включен элементарный видеоконтур (Video ES loop). Информация, такая как тип потока и идентификатор пакета (PID) и информация, описывающая дескриптор, ассоциированная с элементарным видеопотоком, размещены в элементарном видеоконтуре, в ассоциации с элементарным видеопотоком. Дескриптор HDR размещен ниже элементарного видеоконтура (видеоконтур ES) РМТ.
Конфигурация телевизионной приставки
На фиг. 10 иллюстрируется примерная конфигурация телевизионной приставки 200, Телевизионная приставка 200 включает в себя модуль 201 управления, модуль 202 приема, декодер 203 системы, видеодекодер 204, модуль 205 передачи мультимедийного интерфейса высокой четкости (HDMI), и терминал 206 HDMI. "HDMI" представляет собой зарегистрированный товарный знак.
В модуле 201 управления установлено центральное процессорное устройство (CPU), и оно управляет операциями соответствующих модулей телевизионной приставки 200 на основе программы управления, сохраненной в накопителе (не представлен).
Модуль 202 приема принимает транспортный поток TS, передаваемый из устройства 100 передачи посредством волны широковещательной передачи или сетевого пакета. Декодер 203 системы выделяет видеопоток (элементарный поток) из транспортного потока TS. Декодер 203 системы выделяет различную информацию, вставленную на уровень транспортного потока TS, как описано выше, и передает выделенную информацию в модуль 201 управления. Информация также включает в себя дескриптор HDR с информацией характеристики электрооптического преобразования.
Видеодекодер 204 выполняет обработку декодирования для видеопотока, выделенного декодером 203 системы, и получает видеоданные передачи (видеоданные в основной полосе пропускания). Видеодекодер 204 выделяет сообщение SEI, вставленное в видеопоток, и передает выделенное сообщение SEI в модуль 201 управления. Сообщение SEI включает в себя сообщение SEI информации HDR EOTF с информацией характеристики электрооптического преобразования.
Модуль 205 передачи HDMI передает видеоданные передачи, полученные видеодекодером 204, в устройство потребителя HDMI, то есть, в устройство 300 дисплея в данном варианте осуществления через разъем 206 HDMI, используя передачу данных, соответствующую HDMI. Модуль 205 передачи HDMI передает информацию характеристики электрооптического преобразования каждого заданного модуля (например, модуля сцены, модуля программы и т.п.) видеоданных передачи, подаваемых из модуля 201 управления в устройство 300 дисплея, в ассоциации с видеоданными передачи.
В этом случае, например, информацию характеристики электрооптического преобразования вставляют в период гашения обратного хода луча видеоданных передачи и передают в ассоциации с видеоданными передачи. Способ передачи информации характеристики электрооптического преобразования не ограничен способом вставки ее в период гашения обратного хода луча, как описано выше. Например, также рассматриваются передача с использованием линии СЕС или канала HDMI Ethernet (НЕС).
Когда информацию характеристики электрооптического преобразования вставляют в период гашения обратного хода луча видеоданных передачи и передают, рассматривается способ использования пакета информации, размещенного в период гашения обратного хода луча данных изображения, например, InfoFrame, определяемый поставщиком HDMI (VS_Info).
На фиг. 11 иллюстрируется примерная структура пакета InfoFrame, определяемого поставщиком HDMI. InfoFrame, определяемый поставщиком HDMI определен в СЕА-861-D, и, таким образом, подробное его описание здесь не представлено. Примерная структура пакета на фиг. 11 иллюстрирует пример, в котором информация характеристики электрооптического преобразования представляет собой информацию типа, обозначающую тип характеристики электрооптического преобразования.
Информация флага "Hdr_INFOFLAG", обозначающая, вставлена или нет информация характеристики электрооптического преобразования, размещена в 0-ом бите 5-ого байта (РВ5). Когда информация характеристики электрооптического преобразования вставлена, установлен "Hdr_INFOFLAG=1". Информация флага "Eotf_flag", обозначающая, является или нет информация характеристики электрооптического преобразования информацией типа, размещена в 3-ем бите 7-го байта (РВ7). В случае примера на фиг. 11, установлен "Eotf_flag=1" для обозначения, что информация характеристики электрооптического преобразования представляет собой информацию типа.
Когда информация характеристики электрооптического преобразования представляет собой информацию типа, как описано выше, 16-битная информация "uncompressed_peak_level" размещена в 8-ом байте (РВ8) и в 9-ом байте (РВ9). В этом случае, верхние 8 битов размещены в 8-ом байте, и нижние 8 битов размещены в 9-ом байте. Кроме того, 8-битная информация "eotf_type" размещена в 10-ом байте (РВ10).
На фиг. 12 иллюстрируется примерная структура пакета InfoFrame, определяемого поставщиком HDMI. Примерная структура пакета на фиг. 12 иллюстрирует пример, в котором информация характеристики электрооптического преобразования представляет собой параметр для получения кривой характеристики электрооптического преобразования. В случае такого примера, "Eotf_flag=0" установлен для обозначения того, что информация характеристики электрооптического преобразования представляет собой параметр.
Когда информация характеристики электрооптического преобразования представляет собой параметр, как описано выше, 16-битная информация "uncompressed_peak_level" размещена в 8-ом байте (РВ8) и в 9-ом байте (РВ9). В этом случае, верхние 8 битов размещены в 8-ом байте, и нижние 8 битов размещены в 9-ом байте. 16-битная информация "compressed_peak_level" размещена в 10-ом байте (РВ10) и в 11-ом байте (РВ11). В этом случае верхние 8 битов размещены в 10-ом байте, и нижние 8 битов размещены в 11-ом байте.
8-битная информация "number_of_mapping_periods" размещена в 12-ом байте (РВ12). 16-битная информация "compressed_mapping_level” размещена в 13-ом байте (РВ13) и в 14-ом байте (РВ14). В этом случае, верхние 8 битов размещены в 13-ом байте, и нижние 8 битов размещены в 14-ом байте. 16-битная информация "uncompressed_mapping_level" размещена в 15-ом байте (РВ15) и в 16-ом байте (РВ16). В этом случае верхние 8 битов размещены в 15-ом байте, и нижние 8 битов размещены в 16-ом байте. Затем та же информация, что и в 13-ом - 16-ом байтах размещена с повторением в "number_of_mapping_periods".
Конфигурация устройства дисплея
На фиг. 13 иллюстрируется примерная конфигурация устройства 300 дисплея. Устройство 300 дисплея включает в себя модуль 301 управления, разъем 302 HDMI, модуль 303 приема HDMI, модуль 304 электрооптического преобразования и модуль 305 дисплея. В модуле 301 управления установлено центральное процессорное устройство (CPU), и оно управляет операциями соответствующих модулей устройства 300 дисплея на основе программы управления, сохраненной в накопителе (не представлен).
Модуль 303 приема HDMI принимает видеоданные передачи и информацию характеристики электрооптического преобразования каждого заданного модуля (например, модуля сцены, модуля программы и т.п.) видеоданных передачи через разъем 302 HDMI из устройства источника HDMI, то есть, из телевизионной приставки 200 в данном варианте осуществления, используя передачу данных, соответствующую HDMI. Модуль 303 приема HDMI передает принятую информацию характеристики электрооптического преобразования в модуль 301 управления.
Модуль 304 электрооптического преобразования выполняет электрооптическое преобразование для видеоданных передачи, принятых модулем 303 приема HDMI на основе информации характеристики электрооптического преобразования каждого заданного модуля, предоставляемого из модуля 301 управления, и получает выходные видеоданные. Модуль 305 дисплея отображает изображение HDR на основе выходных видеоданных. В этом случае, например, когда входные видеоданные модуля 304 электрооптического преобразования обозначены 10 или меньше битами, выходные видеоданные модуля 304 электрооптического преобразования обозначены 12 или больше битами.
Когда информация характеристики электрооптического преобразования представляет собой информацию типа, модуль 304 электрооптического преобразования выполняет электрооптическое преобразование для видеоданных передачи на основе кривой характеристики электрооптического преобразования типа, обозначенного информацией типа. На фиг. 14 иллюстрируется пример характеристики электрооптического преобразования. Кривая “HDR: Тип 1” имеет совместимость с существующей гамма-характеристикой от 0 до V1. Кривая “HDR: Тип 2” имеет совместимость с существующей гамма-характеристикой от 0 до V2. Кривая “HDR: Тип 3” имеет совместимость с существующей гамма-характеристикой от 0 до V3. Характеристики фотоэлектрического преобразования, которые могут быть выбраны модулем 304 электрооптического преобразования, не ограничены тремя характеристиками.
Кроме того, когда информация характеристики электрооптического преобразования представляет собой параметр для получения кривой характеристики электрооптического преобразования, модуль 304 электрооптического преобразования выполняет электрооптическое преобразование для видеоданных передачи на основе кривой характеристики электрооптического преобразования, полученной по параметру. В этом случае, поскольку данные координат для положения изменения кривой отображения соединенного уровня заданы, как параметр, кривую характеристики электрооптического преобразования получают для передачи через ее положение координат или положение рядом с ним. Затем модуль 304 электрооптического преобразования выполняет электрооптическое преобразование на основе кривой характеристики электрооптического преобразования.
Когда кривую характеристики электрооптического преобразования получают, используя параметр, как описано выше, путем получения кривой характеристики электрооптического преобразования на основе параметра и информации максимального уровня отображения, возможно ограничить максимальный уровень выходных видеоданных по информации максимального уровня отображения. На фиг. 15 иллюстрируется пример характеристики электрооптического преобразования. Как кривая “HDR: Тип 1”, так и кривая “HDR: Тип 1'” имеют совместимость с существующей гамма-характеристикой от 0 до V1, и максимальный уровень кривой “HDR: Тип 1” составляет S'w, тогда как максимальный уровень кривой “HDR: Тип 1'” ограничен S'w2, используя максимальный уровень отображения.
Как кривая "HDR: Тип 2", так и кривая “HDR: Тип 2'” имеют совместимость с существующей гамма-характеристикой от 0 до V2, и максимальный уровень кривой “HDR: Тип 2” составляет S'w, в то время как максимальный уровень кривой “HDR: Тип 2'” ограничен S'w2, используемым как максимальный уровень отображения. Как кривая “HDR: Тип 3”, так и кривая “HDR: Тип 3'” обладают совместимостью с существующей гамма-характеристикой от 0 до V3, и максимальный уровень кривой “HDR: Тип 3” составляет S'w, в то время как максимальный уровень кривой “HDR: Тип 3'” ограничен S'w2, используемым, как максимальный уровень отображения.
Работа устройства 300 дисплея, представленная на фиг. 13, будет кратко описана ниже. Модуль 303 приема HDMI принимает видеоданные стороны передачи и информацию характеристики электрооптического преобразования каждого заданного модуля (например, модуля сцены, модуля программы и т.п.) видеоданных передачи из телевизионной приставки 200 через разъем 302 HDMI. Информацию характеристики электрооптического преобразования передают в модуль 301 управления. Видеоданные передачи подают в модуль 304 электрооптического преобразования.
Модуль 304 электрооптического преобразования выполняет электрооптическое преобразование на основе информации характеристики электрооптического преобразования каждого заданного модуля, предоставляемой из модуля 301 управления, и получает выходные видеоданные. В этом случае, когда информация характеристики электрооптического преобразования представляет собой информацию типа, электрооптическое преобразование выполняется для видеоданных передачи на основе кривой характеристики электрооптического преобразования типа, обозначенного информацией типа. В этом случае, когда информация характеристики оптического преобразования представляет собой параметр для получения кривой характеристики электрооптического преобразования, электрооптическое преобразование выполняют для видеоданных передачи на основе кривой характеристики электрооптического преобразования, полученной по параметру.
Видеоданные передачи, полученные модулем 304 электрооптического преобразования, подают в модуль 305 дисплея. Изображение HDR, основанное на выходных видеоданных, отображается в модуле 305 дисплея.
Как описано выше, в приемо-передающей системе 10, представленной на фиг. 1, устройство 100 передачи вставляет информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи на уровень видеопотока и уровень контейнера. Таким образом, становится возможным выполнить фотоэлектрическое преобразование видеоданных HDR в заданных модулях путем выбора соответствующей характеристики фотоэлектрического преобразования, в соответствии с содержанием изображения, и передать полученные в результате данные.
Кроме того, в приемо-передающей системе 10, представленной на фиг. 1, устройство 300 дисплея выполняет электрооптическое преобразование для видеоданных передачи, принятых из телевизионной приставки 200, на основе информации характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи, и получает выходные видеоданные. Таким образом, становится возможным воспроизвести видеоданные HDR, которые не подвергались фотоэлектрическому преобразованию в устройстве 100 передачи, и превосходно отображает изображение HDR.
Кроме того, в приемо-передающей системе 10, представленной на фиг. 1, когда информация характеристики электрооптического преобразования представляет собой параметр для получения кривой характеристики электрооптического преобразования, устройство 300 дисплея может получать кривую характеристики электрооптического преобразования на основе параметра, и информацию максимального уровня отображения, и ограничивать максимальный уровень выходных видеоданных, принятых из модуля 304 электрооптического преобразования в информации максимального уровня отображения. Таким образом, становится возможным превосходно отображать изображение HDR без возникновения коллапса белого и т.п. в модуле 305 дисплея (дисплей).
Кроме того, в приемо-передающей системе 10, представленной на фиг. 1, телевизионная приставка 200 вставляет информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи в период гашения обратного хода луча видеоданных передачи, и передает полученные в результате данные в устройство 300 дисплея. Таким образом, становится возможным легко передавать информацию характеристики электрооптического преобразования в ассоциации с видеоданными передачи.
2. Модифицированный пример
Представленный выше вариант осуществления был описан в связи с примером, в котором информацию характеристики электрооптического преобразования вставляют на уровень видеопотока и уровень транспортного потока (контейнер), но информация характеристики электрооптического преобразования может быть вставлена в любой один из уровня видеопотока и уровня транспортного потока (контейнер). Кроме того, с последовательностью процентных значений обращаются, как с относительным значением по сравнению с опорным уровнем, где яркость 100 кд/м2 установлена, как 100%, но относительное значение не обязательно должно быть фиксированным на этом уровне. 100% опорного уровня может быть установлено, как другая яркость, чем 100 кд/м2. В таком случае необходимо отдельно установить ассоциацию между значением кд/м2 и процентами.
В представленном выше варианте осуществления приемо-передающая система 10 выполнена с устройством 100 передачи, телевизионной приставкой 200 и устройством 300 Дисплея. Однако, также считается, что приемо-передающая система 10А может быть выполнена с устройством 100 передачи и устройством 200А приема, в которое встроен модуль дисплея, как представлено на фиг. 16.
На фиг. 17 иллюстрируется примерная конфигурация устройства 200А приема. На фиг. 17 компоненты, соответствующие представленным на фиг. 10 и 13, обозначены теми же номерами ссылочных позиций, и подробное их описание будет соответствующим образом исключено. Устройство 200А приема включает в себя модуль 201А управления, модуль 202 приема, декодер 203 системы, видеодекодер 204, модуль 304 электрооптического преобразования и модуль 305 дисплея. Модуль 304 электрооптического преобразования выполняет электрооптическое преобразование видеоданных передачи, полученных видеодекодером 204, на основе информации характеристики электрооптического преобразования каждого заданного модуля, предоставляемой из модуля 201А управления, и получает выходные видеоданные. Модуль 305 дисплея отображает изображение HDR на основе выходных видеоданных.
В представленном выше варианте осуществления телевизионная приставка 200 и устройство дисплея 300 соединены через цифровой интерфейс HDMI. Однако, даже когда телевизионная приставка 200 и устройство 300 дисплея соединены через цифровой интерфейс (который включает в себя как беспроводный интерфейс, так и кабельный интерфейс), аналогично цифровому интерфейсу HDMI, настоящая технология может применяться аналогично.
Приемо-передающая система на основе MPEG-DASH
Настоящая технология также может применяться в приемо-передающей системе на основе MPEG-DASH. На фиг. 18 иллюстрируется примерная конфигурация системы 10В на основе MPEG-DASH. Приемо-передающая система 10В выполнена таким образом, что N приемников 403 соединены с сервером 401 файла потока DASH и сервером 402 DASH MPD через сеть 404, такую как Интернет.
Сервер 401 файла потока DASH генерирует сегмент потока (ниже, соответственно, называется "сегментом DASH") в соответствии со спецификацией DASH, основанной на мультимедийных данных (видеоданные, аудиоданные, данные субтитров и т.п.) заданного содержания, и передает сегмент заданного потока в приемник 403 источника запроса, в соответствии с запросом, подаваемым из приемника 403.
Сервер 402 DASH MPD генерирует файл MPD для получения сегмента DASH, сгенерированного в сервере 401 файла потока DASH. Сервер 402 DASH MPD генерирует файл MPD на основе метаданных содержания, принимаемых из сервера администрирования содержанием (не представлен) и адреса (url) сегмента, генерируемого в сервере 401 файла потока DASH. Сервер 402 MPD DASH передает файл MPD в приемник 403 источника запроса, в соответствии с запросом, поданным приемником 403.
В формате MPD набор адаптации, описывающий информацию, относящуюся к кодированию видеоданных или аудиоданных, определен для каждого потока видеоданных или аудиоданных, и каждый атрибут описан ниже. Например, когда видеоданные, включенные в сегмент DASH, соответствуют кодированным данным видеоданных передачи в представленном выше варианте осуществления и представляют собой данные, полученные путем выполнения фотоэлектрического преобразования для видеоданных HDR в заданных модулях (например, в модулях сцен или в модулях программ), путем избирательного применения характеристики фотоэлектрического преобразования в соответствии с содержанием изображения, информация характеристики электрооптического преобразования, соответствующая характеристике фотоэлектрического преобразования, описана в файле MPD. Это соответствует вставке дескриптора HDR на уровень транспортного потока TS в представленном выше варианте осуществления.
В этом случае информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных вставляют в видеоданные (видеопоток), включенные в сегмент DASH, аналогично видеопотоку в представленном выше варианте осуществления. Например, когда схема кодирования представляет собой HEVC, информацию характеристики электрооптического преобразования вставляют на участок "SEI" модуля доступа (AU), как информацию HDR EOTF сообщения SEI (сообщения HDR_EOTF_information SEI).
Например, схема, представленная на фиг. 19, вновь определена в файле MPD для описания информации характеристики электрооптического преобразования. "service_video:high_dynamic_range" обозначает, что видеодисплей имеет высокий динамический диапазон (HDR). "0" обозначает, что видеодисплей не является HDR, и "1" обозначает, что видеодисплей представляет собой HDR.
"service_video:high_dynamic_range:eotf_compatible" обозначает, обладает или нет характеристика электрооптического преобразования совместимостью с существующей гамма-характеристикой. "О" обозначает, что характеристика электрооптического преобразования HDR имеет частичную совместимость с существующей гамма-характеристикой. " 1" обозначает, что характеристика электрооптического преобразования HDR не имеет совместимости с существующей гамма-характеристикой. "2" обозначает, что гамма-характеристика представляет собой существующую гамма-характеристику.
"service_video:high_dynamic_range:eotf_type" обозначает тип характеристики электрооптического преобразования. "0" обозначает "type_1", "1” обозначает "type_2", и "2" обозначает "type_3". "service_video:high_dynamic_range:compressed_peak_level" обозначает процентное значение (относительное значение, когда 100 кд/м2 установлены, например, как 100%) максимального уровня кодированных данных изображения (видеоданных передачи). “service_video:high_dynarnic_range:nurnber_of_mapping_periods" обозначает количество соединенных кривых отображения уровня.
В "service_video:high_dynamic_range:compressed_mapping_level" положение изменения кривой отображения уровня на оси сжатия уровня обозначено процентным значением, в котором "compressed_peak_level" установлен равным 100%. В "service_video:high_dynamic_range:uncompressed_mapping_level" положение изменения кривой отображения уровня на оси распаковки уровня обозначено процентным значением, в котором "uncompressed_peak_level" установлен равным 100%.
На фиг. 20 иллюстрируется примерное описание файла MPD, включающего в себя информацию характеристики электрооптического преобразования. Например, предполагается, что видеодисплей является видеодисплеем с высоким динамическим диапазоном (HDR) из описания "service_video:high_dynamic_range<1>". Например, понимают, что характеристика электрооптического преобразования HDR имеет совместимость с существующей гамма-характеристикой из описания "service_video:high_dynamic_range<0>". Например, тип характеристики
электрооптического преобразования понимают, как "type_2" из описания " service_video: high_dynamic_range: eotf_type<1>".
На фиг. 21 иллюстрируется примерная конфигурация фрагментированного потока МР4. Фрагментированный поток МР4 видеоданных включает в себя FragmentedMP4, полученный путем упаковки видеопотока. Заданное изображение видопотока вставляют на участок "mdat" FragmentedMP4. Аналогично представленному выше варианту осуществления, пример сообщения информации SEI HDR EOTF (сообщение HDR_EOTF_information SEI) вставляют в видеопоток каждого GOP.
Аналогично представленному выше варианту осуществления, приемник 403 выполняет электрооптическое преобразование для принятых видеоданных на основе информации характеристики электрооптического преобразования, включенной в сообщение SEI информация HDR EOTF, или информации характеристики электрооптического преобразования, описанной в файле MPD. Таким образом, например, возможно воспроизводить видеоданные HDR, которые не подвергаются фотоэлектрическому преобразованию на стороне передачи, и можно превосходно отображать изображение HDR. Поскольку приемник 403 заранее получает файл MPD, приемник 403 может заранее подготовить характеристики модуля электрооптического преобразования на основе информации характеристики электрооптического преобразования, также включенной в файл MPD.
Приемо-передающая система 10В, представленная на фиг. 18, передает сегмент заданного потока, сгенерированный сервером 401 файла потока DASH, или файл MPD, сгенерированный сервером 402 DASH MPD, в приемник 403 через сеть 404. Однако, как представлено на фиг. 22, аналогично возможно конфигурировать приемо-передающую систему ЮС, в которой сегмент с заданным потоком, сгенерированный сервером 401 файла потока DASH, или файл MPD, сгенерированный сервером 402 DASH MPD, передают из станции 405 широковещательной передачи в приемник 403 посредством волны широковещательной передачи.
Настоящая технология может иметь следующую конфигурацию.
(1) Устройство передачи, включающее в себя:
модуль обработки, который выполняет фотоэлектрическое преобразование входных видеоданных, имеющих диапазон уровня от 0% до 100%*N (N представляет собой число больше 1), и получает видеоданные передачи;
модуль передачи, который передает контейнер, включающий в себя видеопоток, получаемый путем кодирования видеоданных передачи; и
модуль вставки информации, который вставляет информацию о характеристике электрооптического преобразования каждого заданного модуля видеоданных передачи на уровне видеопотока и/или на уровне контейнера.
(2) Устройство передачи по (1),
в котором заданный модуль представляет собой модуль сцены или модуль программы.
(3) Устройство передачи по (1) или (2),
в котором информация характеристики электрооптического преобразования представляет собой информацию типа, обозначающую тип характеристики электрооптического преобразования.
(4) Устройство передачи по (1) или (2),
в котором информация характеристики электрооптического преобразования представляет собой параметр для получения кривой характеристики электрооптического преобразования.
(5) Способ передачи, включающий в себя:
этап обработки модуль обработки для выполнения фотоэлектрического преобразования входных видеоданных, имеющих диапазон уровня от 0% до 100%*N (N представляет собой число больше 1), и получения видеоданных передачи;
этап передачи для передачи, модулем передачи контейнера, включающего в себя видеопоток, полученный путем кодирования видеоданных передачи; и
этап вставки информации для вставки информации характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи на уровне видеопотока и/или уровне контейнера.
(6) Устройство приема, включающее в себя:
модуль приема, который принимает контейнер заданного формата, включающий в себя видеопоток, получаемый в результате кодирования видеоданных передачи,
видеоданные передачи получают путем выполнения фотоэлектрического преобразования входных видеоданных, имеющих диапазон уровня от 0% до 100%*N (N представляет собой число больше 1),
информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи вставляют на уровне видеопотока и/или уровне контейнера; и
модуль обработки, который обрабатывает видеопоток, включенный в контейнер, принятый модулем приема.
(7) Устройство приема в соответствии с (6),
в котором модуль обработки включает в себя
модуль декодирования, который декодирует видеопоток и получает видеоданные передачи, и
модуль электрооптического преобразования, который выполняет электрооптическое преобразование видеоданных передачи, полученных модулем декодирования, на основе информации характеристики электрооптического преобразования каждого заданного модуля, и получает выходные видеоданные.
(8) Устройство приема в соответствии с (7),
в котором информация характеристики электрооптического преобразования представляет собой информацию типа, которая обозначает тип характеристики электрооптического преобразования, и
модуль электрооптического преобразования выполняет электрооптическое преобразование видеоданных передачи на основе кривой характеристики электрооптического преобразования в соответствии с типом, обозначенным информацией типа.
(9) Устройство приема по (7),
в котором информация характеристики электрооптического преобразования представляет собой параметр для получения кривой характеристики электрооптического преобразования, и
модуль электрооптического преобразования выполняет электрооптическое преобразование для видеоданных передачи на основе кривой характеристики электрооптического преобразования, полученной по параметру.
(10) Устройство приема по (9),
в котором кривая характеристики электрооптического преобразования, используемая модулем электрооптического преобразования, может быть получена на основе параметра и информации о максимальном уровне отображения; и
максимальный уровень выходных видеоданных может быть ограничен информацией о максимальном уровне отображения.
(11) Устройство приема в соответствии с (6),
в котором модуль обработки включает в себя
модуль декодирования, который декодирует видеопоток, включенный в контейнер, и получает видеоданные передачи; и
модуль передачи, который передает видеоданные передачи, полученные модулем декодирования, и информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи во внешнее устройство, в ассоциации друг с другом.
(12) Устройство приема в соответствии с (11),
в котором модуль передачи передает видеоданные передачи во внешнее устройство через дифференциальный сигнал, используя заданное количество каналов, и вставляет информацию характеристики электрооптического преобразования в период гашения обратного хода луча видеоданных передачи и передает информацию характеристики электрооптического преобразования во внешнее устройство.
(13) Способ приема, включающий в себя:
этап приема для приема модулем приема контейнера заданного формата, включающего в себя видеопоток, получаемый в результате кодирования видеоданных передачи,
видеоданные передачи получают путем выполнения фотоэлектрического преобразования входных видеоданных, имеющих диапазон уровня от 0% до 100%*N (N представляет собой число больше 1),
информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи вставляют на уровне видеопотока и/или уровне контейнера; и
этап обработки для обработки видеопотока, включенного в контейнер, принятый на этапе приема.
(14) Устройство дисплея, включающее в себя:
модуль приема, который принимает видеоданные передачи и информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи, ассоциированных с видеоданными передачи из внешнего устройства; и
модуль электрооптического преобразования, который выполняет электрооптическое преобразование для видеоданных передачи, принятых модулем приема на основе информации характеристики электрооптического преобразования каждого заданного модуля и получает выходные видеоданные.
(15) Устройство дисплея в соответствии с (14),
в котором информация характеристики электрооптического преобразования представляет собой информацию типа, которая обозначает тип характеристики электрооптического преобразования; и
модуль электрооптического преобразования может выполнять электрооптическое преобразование для видеоданных передачи на основе кривой характеристики электрооптического преобразования в соответствии с типом, обозначенным информацией типа.
(16) Устройство дисплея в соответствии с (14),
в котором информация характеристики электрооптического преобразования представляет собой параметр для получения кривой характеристики электрооптического преобразования, и
модуль электрооптического преобразования выполняет электрооптическое преобразование для видеоданных передачи на основе кривой характеристики электрооптического преобразования, полученной по параметру.
(17) Устройство дисплея в соответствии с (16),
в котором кривая характеристики электрооптического преобразования, используемая модулем электрооптического преобразования, может быть получена на основе параметра и информации о максимальном уровне отображения; и
максимальный уровень выходных видеоданных может быть ограничен информацией о максимальном уровне отображения.
(18) Способ отображения, включающий в себя:
этап приема для приема модулем приема видеоданных передачи и информации характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи, ассоциированных с видеоданными передачи из внешнего устройства; и
этап электрооптического преобразования для электрооптического преобразования видеоданных передачи, принятых на этапе приема на основе информации характеристики электрооптического преобразования каждого заданного модуля и получает выходные видеоданные.
(19) Устройство передачи, включающее в себя:
первый модуль передачи, который передает контейнер, включающий в себя видеопоток, включающий в себя кодированные данные видеоданных передачи, полученные путем выполнения фотоэлектрического преобразования входных видеоданных, имеющих диапазон уровня от 0% до 100%*N (N представляет собой число больше 1); и
второй модуль передачи, который передает метафайл, включающий в себя информацию для обеспечения для стороны приема возможности получения видеопотока,
в котором информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи вставляют в видеопоток и/или метафайл.
(20) Устройство передачи, включающее в себя:
модуль передачи, который передает контейнер, включающий в себя видеопоток, включающий в себя кодированные данные видеоданных передачи, получаемые путем выполнения фотоэлектрического преобразования входных видеоданных, имеющих диапазон уровня от 0% до 100%*N (N представляет собой число больше 1),
в котором информацию о характеристике электрооптического преобразования каждого заданного модуля видеоданных передачи вставляют на уровне видеопотока и/или на уровне контейнера.
Одно из основных свойств настоящей технологии находится в том, что информацию характеристики электрооптического преобразования каждого заданного модуля видеоданных передачи вставляют на уровень видеопотока или на уровень контейнера, и, таким образом, сторона передачи может выполнять фотоэлектрическое преобразование для видеоданных HDR в заданных модулях путем избирательного применения соответствующей характеристики фотоэлектрического преобразования в соответствии с содержанием изображения (см. фиг. 9).
СПИСОК НОМЕРОВ ССЫЛОЧНЫХ ПОЗИЦИЙ
10, 10А-10С Приемо-передающая система
100 Устройство передачи
101 Модуль управления
102 Камера
103 Модуль фотоэлектрического преобразования
104 Видеокодер
105 Кодер системы
106 Модуль передачи
200 Телевизионная приставка
200А Устройство приема
201, 201А Модуль управления
202 Модуль приема
203 Декодер системы
204 Видеодекодер
205 Модуль передачи HDMI
206 Терминал HDMI
300 Устройство дисплея
301 Модуль управления
302 Терминал HDMI
303 Модуль приема HDMI
304 Модуль электрооптического преобразования
305 Модуль дисплея
401 Сервер файла потока DASH
402 Сервер DASH MPD
403 Приемник
404 Сеть
405 Станция широковещательной передачи
Изобретение относится к области техники передачи и приема видеоданных для выполнения фотоэлектрического преобразования видеоданных с высоким динамическим диапазоном (HDR), сжатия диапазона уровня и передачи полученных в результате данных. Технический результат заключается в обеспечении фотоэлектрического преобразования видеоданных HDR в соответствии с содержанием изображения. Предложено выполнять соответствующее фотоэлектрическое преобразование видеоданных с HDR в соответствии с контекстом изображения и передать полученные в результате данные, при этом видеоданные передачи получают путем выполнения фотоэлектрического преобразования входных видеоданных, имеющих диапазон уровня от 0 до 100%*N, где N больше 1. Передают контейнер, включающий в себя видеопоток, полученный путем кодирования видеоданных передачи. Информацию о характеристике электрооптического преобразования каждого заданного модуля видеоданных передачи вставляют на уровень видеопотока и/или уровень контейнера, а заданный модуль представляет собой модуль сцены или модуль программы. 7 н. и 12 з.п. ф-лы, 22 ил.
1. Устройство передачи, содержащее:
модуль обработки, выполненный с возможностью фотоэлектрического преобразования входных видеоданных, имеющих диапазон уровня от 0 до 100%*N, где N больше 1, и получения видеоданных передачи;
модуль передачи, выполненный с возможностью передачи контейнера, включающий в себя видеопоток, получаемый путем кодирования видеоданных передачи; и
модуль вставки информации, выполненный с возможностью вставки информации о характеристике электрооптического преобразования каждого заданного модуля видеоданных передачи на уровень видеопотока и/или на уровень контейнера,
при этом информация о характеристике электрооптического преобразования содержит информацию флага, указывающую, является ли информация о характеристике электрооптического преобразования информацией типа, указывающей тип характеристики электрооптического преобразования, а заданный модуль видеоданных представляет собой модуль группы изображений (GOP).
2. Устройство передачи по п. 1, в котором заданный модуль представляет собой модуль сцены или модуль программы.
3. Устройство передачи по п. 1, в котором информация о характеристике электрооптического преобразования представляет собой информацию типа, указывающую тип характеристики электрооптического преобразования.
4. Устройство передачи по п. 1, в котором информация о характеристике электрооптического преобразования представляет собой параметр для получения кривой характеристики электрооптического преобразования.
5. Способ передачи, содержащий:
этап обработки, на котором выполняют фотоэлектрическое преобразование входных видеоданных, имеющих диапазон уровня от 0 до 100%*N, где N больше 1, и получают видеоданные передачи;
этап передачи, на котором передают посредством модуля передачи контейнер, включающий в себя видеопоток, полученный путем кодирования видеоданных передачи; и
этап вставки информации, на котором вставляют информацию о характеристике электрооптического преобразования каждого заданного модуля видеоданных передачи на уровень видеопотока и/или уровень контейнера, при этом информация о характеристике электрооптического преобразования содержит информацию флага, указывающую, является ли информация о характеристике электрооптического преобразования информацией типа, указывающей тип характеристики электрооптического преобразования, а заданный модуль видеоданных представляет собой модуль группы изображений (GOP).
6. Устройство приема, содержащее:
модуль приема, выполненный с возможностью приема контейнера заданного формата, включающего в себя видеопоток, получаемый в результате кодирования видеоданных передачи,
при этом видеоданные передачи получены путем выполнения фотоэлектрического преобразования входных видеоданных, имеющих диапазон уровня от 0 до 100%*N, где N больше 1,
причем на уровень видеопотока и/или уровень контейнера вставлена информация о характеристике электрооптического преобразования каждого заданного модуля видеоданных передачи, при этом информация о характеристике электрооптического преобразования содержит информацию флага, указывающую, является ли информация о характеристике электрооптического преобразования информацией типа, указывающей тип характеристики электрооптического преобразования, а заданный модуль видеоданных представляет собой модуль группы изображений (GOP); и
модуль обработки, выполненный с возможностью обработки видеопотока, включенного в контейнер, принимаемый модулем приема.
7. Устройство приема по п. 6, в котором модуль обработки включает в себя модуль декодирования, выполненный с возможностью декодирования видеопотока и получения видеоданных передачи, и
модуль электрооптического преобразования, выполненный с возможностью электрооптического преобразования видеоданных передачи, полученных модулем декодирования, на основе информации о характеристике электрооптического преобразования каждого заданного модуля и получения выходных видеоданных.
8. Устройство приема по п. 7, в котором информация о характеристике электрооптического преобразования представляет собой информацию типа, указывающую тип характеристики электрооптического преобразования,
при этом модуль электрооптического преобразования выполнен с возможностью электрооптического преобразования видеоданных передачи на основе кривой характеристики электрооптического преобразования, относящийся к типу, указанному информацией типа.
9. Устройство приема по п. 7, в котором информация о характеристике электрооптического преобразования представляет собой параметр для получения кривой характеристики электрооптического преобразования,
при этом модуль электрооптического преобразования выполнен с возможностью электрооптического преобразования видеоданных передачи на основе кривой характеристики электрооптического преобразования, полученной на основе параметра.
10. Устройство приема по п. 9, в котором кривая характеристики электрооптического преобразования, используемая модулем электрооптического преобразования, получена на основе параметра и информации о максимальном уровне отображения;
при этом максимальный уровень выходных видеоданных ограничен информацией о максимальном уровне отображения.
11. Устройство приема по п. 6, в котором модуль обработки включает в себя модуль декодирования, выполненный с возможностью декодирования видеопотока, включенного в контейнер, и получения видеоданных передачи; и
модуль передачи, выполненный с возможностью передачи видеоданных передачи, получаемых модулем декодирования, и информации о характеристике электрооптического преобразования каждого заданного модуля видеоданных передачи во внешнее устройство в ассоциации друг с другом.
12. Устройство приема по п. 11, в котором модуль передачи выполнен с возможностью передачи видеоданных передачи во внешнее устройство посредством дифференциального сигнала с использованием заданного количества каналов, и
вставки информации о характеристиках электрооптического преобразования в период гашения видеоданных передачи и передачи информации о характеристиках электрооптического преобразования во внешнее устройство.
13. Способ приема, содержащий:
этап приема, на котором принимают посредством модуля приема контейнер заданного формата, включающий в себя видеопоток, полученный в результате кодирования видеоданных передачи,
при этом видеоданные передачи получены путем выполнения фотоэлектрического преобразования входных видеоданных, имеющих диапазон уровня от 0 до 100%*N, где N больше 1,
причем на уровень видеопотока и/или уровень контейнера вставлена информация о характеристике электрооптического преобразования каждого заданного модуля видеоданных передачи, при этом информация о характеристике электрооптического преобразования содержит информацию флага, указывающую, является ли информация о характеристике электрооптического преобразования информацией типа, указывающей тип характеристики электрооптического преобразования, а заданный модуль видеоданных представляет собой модуль группы изображений (GOP); и
этап обработки, на котором обрабатывают видеопоток, включенный в контейнер, принятый на этапе приема.
14. Устройство отображения, содержащее:
модуль приема, выполненный с возможностью приема от внешнего устройства видеоданных передачи и информации о характеристиках электрооптического преобразования каждого заданного модуля видеоданных передачи, связанной с видеоданными передачи; и
модуль электрооптического преобразования, выполненный с возможностью электрооптического преобразования видеоданных передачи, принимаемых модулем приема, на основе информации о характеристике электрооптического преобразования каждого заданного модуля и получения выходных видеоданных, при этом информация о характеристике электрооптического преобразования содержит информацию флага, указывающую, является ли информация о характеристике электрооптического преобразования информацией типа, указывающей тип характеристики электрооптического преобразования, а заданный модуль видеоданных представляет собой модуль группы изображений (GOP).
15. Устройство отображения по п. 14, в котором информация о характеристиках электрооптического преобразования представляет собой информацию типа, указывающую тип характеристики электрооптического преобразования;
при этом модуль электрооптического преобразования выполнен с возможностью электрооптического преобразования видеоданных передачи на основе кривой характеристики электрооптического преобразования в соответствии с типом, указанным информацией типа.
16. Устройство отображения по п. 14, в котором информация о характеристике электрооптического преобразования представляет собой параметр для получения кривой характеристики электрооптического преобразования,
при этом модуль электрооптического преобразования выполнен с возможностью электрооптического преобразования видеоданных передачи на основе кривой характеристики электрооптического преобразования, полученной на основе параметра.
17. Устройство отображения по п. 16, в котором кривая характеристики электрооптического преобразования, используемая модулем электрооптического преобразования, получена на основе параметра и информации о максимальном уровне отображения;
причем максимальный уровень выходных видеоданных ограничен информацией о максимальном уровне отображения.
18. Способ отображения, содержащий:
этап приема, на котором принимают от внешнего устройства посредством модуля приема видеоданные передачи и информацию о характеристике электрооптического преобразования каждого заданного модуля видеоданных передачи, связанную с видеоданными передачи; и
этап электрооптического преобразования, на котором выполняют электрооптическое преобразование видеоданных передачи, принятых на этапе приема, на основе информации о характеристике электрооптического преобразования каждого заданного модуля и получают выходные видеоданные, при этом информация о характеристике электрооптического преобразования содержит информацию флага, указывающую, является ли информация о характеристике электрооптического преобразования информацией типа, указывающей тип характеристики электрооптического преобразования, а заданный модуль видеоданных представляет собой модуль группы изображений (GOP).
19. Устройство передачи, содержащее:
первый модуль передачи, выполненный с возможностью передачи контейнера, включающего в себя видеопоток, включающий в себя кодированные данные видеоданных передачи, получаемых путем выполнения фотоэлектрического преобразования входных видеоданных, имеющих диапазон уровня от 0 до 100%*N, где N больше 1; и
второй модуль передачи, выполненный с возможностью передачи метафайла, включающего в себя информацию для обеспечения получения видеопотока стороной приема,
при этом в видеопоток и/или в метафайл вставлена информация о характеристике электрооптического преобразования каждого заданного модуля видеоданных передачи, причем информация о характеристике электрооптического преобразования содержит информацию флага, указывающую, является ли информация о характеристике электрооптического преобразования информацией типа, указывающей тип характеристики электрооптического преобразования, а заданный модуль видеоданных представляет собой модуль группы изображений (GOP).
WO 2013046096 A1, 2013-04-04 | |||
WO 2010021705 A1, 2010-02-25 | |||
WO 2012153224 A1, 2012-11-15 | |||
WO 2013046095 A1, 2013-04-04 | |||
WO 2013039730 A2, 2013-03-21 | |||
WO 2014002901 A1, 2014-01-03 | |||
РАСШИРЕНИЕ ДИНАМИЧЕСКОГО ДИАПАЗОНА ИЗОБРАЖЕНИЙ | 2008 |
|
RU2433477C1 |
Авторы
Даты
2018-09-17—Публикация
2015-01-13—Подача