УСТРОЙСТВА И СПОСОБЫ ДЛЯ ОПРЕДЕЛЕНИЯ ЦВЕТОВЫХ РЕЖИМОВ Российский патент 2016 года по МПК G06T1/00 G06T7/00 G06T9/00 

ОБЛАСТЬ ТЕХНИКИ ИЗОБРЕТЕНИЯ

Изобретение относится к способу добавления определяющей изображение информации во входной сигнал изображения, устройству анализа изображения для добавления определяющей изображение информации в информацию пикселей изображения входного сигнала изображения, и подобным образом, соответствующим тому, что этот способ и устройство делают на стороне создания изображения, способу обработки входного сигнала изображения, который должен воспроизводиться на основании определяющей изображение информации, имеющей отношение к входному сигналу изображения, устройству для обработки входного сигнала изображения, который должен воспроизводиться на основании определяющей изображение информации, имеющей отношение к входному сигналу изображения, и для координации требуемого воспроизведения на стороне создания изображения и фактического воспроизведения на стороне отображения, сигнал изображения содержит описания цветовых режимов, которые типично будут стандартизованы, например, в пределах стандартизации MPEG (Экспертной группы по киноизображению).

УРОВЕНЬ ТЕХНИКИ ИЗОБРЕТЕНИЯ

На заре цветовоспроизведения, например, для отображения телевизионных программ, взаимосвязь между стороной создания контента (например, кинооператором) и стороной цветовоспроизведения (например, отображения на телевизионном или компьютерном устройстве отображения), была проста и устанавливалась жесткими техническими принципами. Было определено так называемое стандартное устройство отображения на ЭЛТ (электронно-лучевой трубке, CRT), которое имело конкретные люминофоры, определенные кривые воспроизведения оттенков показателя контрастности 2,2, с 256 визуально приблизительно равноотстоящими ступенями возбуждения, и т.д. Есть некоторое количество фундаментальных вопросов цветопередачи, в ответ на которые таким образом были приняты меры, в том числе, должна ли система цветовоспроизведения оптимизироваться под (наилучшего) человека-зрителя, и что еще более важно, должны ли возможности цветовоспроизведения (и, в частности, стандарт описания/передачи цветов) предписываться/определяться (главным образом) стороной (камеры) цветосъемки или стороной (устройства отображения) цветовоспроизведения. Ряд приближений был введен в то время в качестве основополагающих правил для телевизионной колориметрии на будущие десятилетия. Учитывая физические ограничения отображения эры первого цветного телевидения, первые устройства отображения и отображаемые сигналы были оптимизированы так, чтобы они давали идеальный кинокадр зрителю, при условии размера, яркости, и т.д., у ЭЛТ, имеющихся в распоряжении в то время (NTSC, в конце 1940-х, начале 1950-ых: в то время, разрешение, достаточно высокое для типичного расстояния просмотра, достаточное количество ступеней возбуждения, чтобы порог различимости [JND] по восприятию производил впечатление хорошего, неразличимый черный цвет, начиная с яркостей белого цвета, и т.д.). Тогда, при условии такого стандартного устройства отображения того времени, которое было небольшой тусклой ЭЛТ, правила для стороны создания контента были изложены для преобразования снятых сцен во вполне приемлемо выглядящие кинокадры на устройстве отображения для большинства сцен (подобные соображения имели место в мире аналоговой фотографии, в которой сцена должна была воспроизводиться на зачастую низкокачественном фотоснимке, который никогда не имел контрастности выше 100:1, имел неидеальные цвета, и т.д.). Например, даже если теоретически была бы нужна спектральная камера для измерения сцены в истинных цветах (при условии ее переменного освещения), в качестве приближения, если известно, на каком устройстве должен отображаться цвет, могут быть определены кривые чувствительности камеры. В таком случае, предполагается, что изображения, снятые с такими кривыми чувствительности камеры, должны реконструировать подобным образом выглядящий кинокадр на устройстве отображения, в то же время, по меньшей мере имитирующего освещение сцены на стороне съемки, но на практике, будут погрешности. Более того, эти кривые камеры будут иметь негативные области, и, хотя, можно было бы попытаться воспроизводить эти теоретические оптимальные кривые точно с помощью комбинаций оптических фильтров, на практике (также при условии, что зритель не знает, какие цвета в точности встречаются в сцене), матрицирования хватит, чтобы заставить цвета выглядеть приемлемыми. Некоторые профессиональные специалисты стороны создания контента, подобные кинооператору и специалисту по выравниванию цветов/цветокорректору, должны действовать с параметрическими преобразованиями, чтобы заставить окончательно кодированные изображения выглядеть оптимальными, когда они отображаются. Например, то, что обычно делается цветокорректором [в мире видео, где комбинируются разные видеоматериалы], состоит в том, что они смотрят на точки белого разных входных сигналов (один из глобальных, довольно серьезных типов колориметрической погрешности изображения) и приводят в соответствие, например, посредством легкого увеличения вклада синего цвета пикселей, также наряду с рассмотрением критичных цветов, аналогичных лицам. В киноматериале, могут быть привлечены дополнительные художественные соображения, например, может приводиться слегка синеватый вид для ночных сцен, который если еще не создан главным образом посредством цветового фильтра, согласующего характеристики пленки, будет создаваться на завершающем этапе создания, специалистом по выравниванию цветов. Еще один пример - который типично также может привлекать тонкую настройку кривых воспроизведения оттенков - состоит в том, чтобы заставить кинофильм выглядеть более ненасыщенным, чтобы придать ему, например, унылый вид.

Даже более высокую важность имеет необходимость позаботиться о режиме показателя контрастности кривых воспроизведения оттенков. Можно было бы считать, что будет достаточно только применения отрицательной коррекции показателя контрастности со значением 0,45 для кодирования снятых данных линейного датчика, но кроме того больший динамический диапазон типичной сцены всегда должен быть, тем или иным образом, отображен в интервал [0-255]. Тонкая настройка кривых воспроизведения оттенков также, например, будет давать в результате более крупнозернистый высоко контрастный вид, более темные или более заметные тени, и т.д. Кинооператор типично имеет подходящие настраиваемые кривые отрицательного показателя контрастности, в которых он может устанавливать точки излома и уступа, и т.д., так что снятая сцена имеет хороший внешний вид (например, кто-нибудь смотрит на отснятую сцену на контрольном мониторе, который имеет обыкновение быть ЭЛТ, а сейчас, например, ЖКД (жидкокристаллическим дисплеем, LCD)). Во влажной фотографии, то же самое может осуществляться «аппаратной» обработкой, например, такой как условия печати и проявки, например, чтобы отображать лица в зону VI зональной системы Адамса, но в наши дни, зачастую есть цифровая промежуточная форма, которая подвергается обработке. Даже кинематографисты, которые любят съемку на классической кинопленке, в наши дни имеют, доступные им, цифровые вспомогательные видеопотоки (которые могут быть очень полезны в направлении возросшей промышленной киносъемки, в которой большая часть действия, например, может происходить перед зеленым экраном). Таким образом, подводя итог вышесказанному, помимо принятия реальных комнатных условий на стороне зрителя, данностью, которая должна игнорироваться, система цветной съемки в целом конструируется вокруг «калиброванного идеального устройства отображения», что учитывается в качестве точно установленного исходного факта, когда создатель контента создает свои изображения.

Проблема состоит в том, что это было еще очень приблизительным в те дни. Рассуждения были подобны тому, что «если мы занимаемся безнадежным делом, воспроизводя сцену кое-как, например, на фотобумаге, мы можем ослабить все требования касательно точности и применять более субъективное определение технического отображения от сцены до воспроизведения, принимая во внимание такие принципы, как приемлемая распознаваемость изображенных сцен, воспринимаемое потребителем воспроизведение ярких цветов, и т.д.». Однако эта технология кодирования изображений (например, предписанная в системе телевизионного вещания стандарта ПАЛ (PAL), или MPEG2) будет пониматься в качестве сосуществующей с некоторым количеством критических вопросов, таких как: «что если изменить освещение снятой сцены, будь то яркость или точка белого, или пространственное распределение, или специальные характеристики», «что можно сказать о погрешностях, привнесенных вследствие различий в освещении сцены и среды просмотра, особенно когда видны в свете человека-зрителя, адаптированного к сцене в сопоставлении со средой просмотра», и т.д.

Эти проблемы и получающиеся в результате погрешности стали усугубленными, когда устройства отображения начали переход от стандарта ЭЛТ в стандартном жилом помещении, к диапазону очень разных устройств отображения и сред просмотра (например, увеличилась пиковая яркость белого устройств отображения).

СУЩНОСТЬ ИЗОБРЕТЕНИЯ

Приведенные ниже технические решения имеют целью сделать создание изображений (в частности, цифрового видео, которое также может быть оцифрованным материалом кинопленки, снятым ли в последнее время, или обновлением старого материала) более универсальным, чтобы учесть настоящие и будущие изменения в производстве изображения/видео/фильмов и, в частности будущих устройств отображения. Поскольку развитие в кинотеатрах было до некоторой степени более медленным, стала возникать проблема, что реальные устройства отображения в жилом помещении зрителя стали ЖКД, и изменили свои свойства отображения, такие как основные цвета, воспроизведение оттенков, и т.д. Решение, однако, состояло в том, чтобы быть верными жесткому стандарту и заставить ЖКД вести себя подобно стандартной ЭЛТ вновь посредством использования справочных таблиц преобразования кривых воспроизведения оттенков, и т.д. Однако с появлением устройств отображения с высоким динамически диапазоном (HDR), такое решение стало неосуществимым: безусловно никто не может использовать как предлог, что первое устройство отображения, которое физически (в отношении уровня черного, управляемости уровня серого, яркости пикового белого, и т.д.), сильно отличается от другого второго устройства отображения «можно заставить действовать в точности подобно такому второму (идеальному) устройству отображения. Это могло бы работать, если бы кто-то реально захотел в точности имитировать на современном высококачественном устройстве отображения с высоким динамическим диапазоном поведение низкокачественного устройства отображения 50-ых, но это не то, каким образом люди желают использовать возможности высококачественных устройств отображения (зачем покупать высококачественное устройство отображения, если оно показывает всего лишь низкокачественный выходной сигнал). Типично, осуществляется ли автоматически алгоритмами оптимизации кинокадра ТВ (телевизора, TV) или зрителем, изменяющим свойства или предпочтения просмотра кинокадра на своем пульте дистанционного управления, этим телевизорам требуется доводить до максимума свой эффектный внешний вид, что может касаться таких вещей, как увеличение яркости и насыщенности кинокадров, но это может иметь несколько визуальных недостатков касательно фактического внешнего вида окончательно воспроизводимых кинокадров, например, неподобающую темноту или черные области, карикатуризацию контента чрезмерно увеличенной насыщенностью, ступенчатые структуры в плавных переходах одного цвета в другой, таких как небо, обусловленные тем обстоятельством, что чрезмерно растягиваются немногие имеющиеся в распоряжении коды в сигнале изображения/видео, и т.д.

Если понимаешь, что это не только проблема единственного устройства отображения HDR, но скорее то, что мир телевидения(/кино) является изменяющимся (больше потребителей смотрят кинофильмы, например, не только на своих низкокачественных дорожных компьютерах с ЖКД, но даже на небольших портативных устройствах отображения, подобных мобильным телефонам, и тому подобному), осознаешь, что может быть полезным иметь более управляемую связь между тем, как предполагалось должен выглядеть реальный контент (в частности, что определимо на стороне создателя, которая имеет в распоряжении не только исходную сцену, но также намерения художников/режиссера по фотографии, например, в отношении того, какой внешний вид должна иметь сцена [плохо освещенный, мистический,...]), и как он выглядел бы фактически на устройстве 730 отображения стороны приемника, если не делалось никакой «правильной» обработки, или даже «неправильной» обработки устройства отображения, которая может ухудшать получающийся в результате внешний вид.

В прошлом, всегда хотелось решить эту проблему посредством использования некоторой постоянной калибровочной цепи (то есть, создания новых лучших значений для данных пикселей), «раз и навсегда хорошего» решения, которое может дать в результате «средний» внешний вид, который фактически реально не хорош ни для кого, в частности, теперь, когда устройства отображения стали хорошими настолько, что никакие артефакты не могут стать неприятно различимыми. Другая тенденция состоит в том, что дополнительные части кинофильмов становятся настраиваемыми под пользователя (например, половина научно-фантастического кинофильма может быть сформирована в компьютерной графике, а другая половина может содержать добавленные специальные эффекты), которые, в свою очередь, предпочтительно навязывают, чтобы также на стороне съемки снималось большее количество снимков реальной среды (например, распределения освещения в качестве задаваемом сценой). Этот момент особенно интересен как тип мышления: современное формирование изображений снимает - даже пренебрегая вышеприведенной аппроксимацией цветового кодирования - слишком мало реальных сцен. Достаточное количество снимается для распознаваемых объектов (но которые уже в значительной степени были бы реализованы двоичными штриховыми рисунками), но не для прекрасно воспроизводимых кинокадров (относится ли этот критерий к реалистичности, влиянию цвета, и т.д.). Наконец, поскольку по достаточным основаниям (например, переподготовки высокоспециализированных кинооператоров), технические стандарты устойчивы к изменениям, исчезающий стандарт ПАЛ больше не будет обновляться, однако, новые стандарты будут выходить с учетом измененной среды воспроизведения изображений, принимая во внимание полезность стандарта с видом на будущее, такое как неизменно повышающееся качество камер (в настоящее время ±14 бит, также, конечно, зависящее от объективов) и устройств отображения (и, например, даже такие простые потребители используют камеры постоянно повышающегося качества, которые могут со своими алгоритмами автоматической оптимизации в будущем давать - помимо художественного входного сигнала - лучшие результаты, чем какие выдавал кинооператор прошлых времен, и они могут пожелать смотреть свои кинокадры хроники прошлого на своем устройстве отображения HDR, как если бы они все еще находились там). Поэтому настоящее изобретение и его варианты осуществления предлагают в надлежащее время решения для дополнительного улучшения управляемости того, что художник хотел бы, чтобы видели люди, в отличие от того, что отображалось бы, например, на бытовом телевизоре (и это может принимать несколько форм в зависимости от того, что собой представляет художник и его предпочтения, от «Я, по большей части, ничего не хочу делать, позволяя зрителю или производителю телевизора выполнение управления просмотром», в которой, например, запрещаются только серьезные модификации контента, в качестве воспроизводимого в заключение устройством воспроизведения, с одной стороны разнообразия вариантов управления, до, с другой стороны, попыток привести воспроизведение как можно ближе к идеальному репродуцированию того, что намечал художник, при условии ограничений воспроизводящей стороны). Для этой цели, в дополнение к нормальному (как можно было бы осмыслить его в качестве «линейного, один к одному» кодирования, которое фактически является тем, что, например, делает набор датчиков ПЗС (приборов с зарядовой связью, CCD), основанному на пикселях кодированию изображения, требуется иметь дополнительные метаданные, указывающие, что такие данные пикселей в действительности означают, и что предполагается должна делать с ними приемная сторона, например, касательно обработки изображения перед воспроизведением. Должно быть понятно, что линейное кодирование пикселей, хотя и очень мощное по своей универсальности для кодирования каждой сцены, также является относительно ненужным (другая сторона медали) по той причине, что больше может быть сказано о «вслепую» кодированных пикселях. Это может быть выполнено посредством введения «цветовых режимов». Поэтому важно понять, что режим не обязательно вновь является (слепым) числовым представлением действующего «затенения объекта» в определенной области, но чем-то дополнительным в сцене, что, например, может зависеть от того, какие разные классы вещей (объектов, пространственных областей, категорий освещения, и т.д.) есть в сцене, или даже каким образом художественная личность видела бы реальную снятую или улучшенную с художественной точки зрения сцену. В этом смысле, должно быть понятно, что все создатели могут использовать это изобретение, как кинооператор (в действительности комментирующий свойства снятой в тот момент сцены), так и более поздний обработчик последнего этапа создания, например, подобный специалисту по выравниванию цветов (который, например, может повторно интерпретировать с художественной точки зрения снятую сцену). Концепции легче усваиваются, если пояснены несколькими иллюстративными примерами. Даже если всегда будут иметься примеры, что реальное кодирование пикселей (особенно, в пределах [0, 255], но даже возможно в кодировках HDR) может влечь за собой значения пикселей, которые не отражают в точности объект лежащий в основе сцены, и его цветовые характеристики [термин цвет будет использоваться исключительно свободно, в качестве также включающего в себя яркость/степень интенсивности цвета] (например белый 255 может представлять белую стену в до некоторой степени более темной области кинокадра, а также отражение лампы в глазу, а также внутреннюю часть очень яркой лампы, или даже рваное синее небо), можно пожелать обозначить объект или область пикселей в качестве определенного типа информации об изображении, которой должно соответствовать определенное действие воспроизведения стороны отображения. Например, согласно новой кодификации, как требуется создателем контента, определенная темная область должна отображаться таким образом, чтобы, до определенного момента времени, «ужасное чудовище» было (почти) скрыто в темноте, но после некоторого момента времени оно становилось видимым до известной степени, какой режим может быть обозначен в качестве «скрытый темнотой» («dark_hidden»). Можно точно детализировать, насколько большая часть, например, человека, скрытого в темноте, появляется, например, 25% его тела, или даже в точности часть его лица. Можно представить себе, если это делается вслепую, большая или меньшая часть, чем требуется создателем контента, может быть реально видимой на стороне воспроизведения, например, вследствие увеличения подсветки, отражения света от лицевой панели устройства отображения, и т.д. Только при узнавании посредством совместного кодирования, что было намечено, сторона воспроизведения может - зная все свои локальные ограничения - позаботиться о реальном достижении или приближении к намеченному воспроизведению (которое не может выполняться, при простом наличии кодировки пикселей или чего-то подобного. Еще один пример состоит в том, что, если знать, какие цвета типично являются цветами отражения средней освещенности в качестве кодированных в сцене, было бы можно воспроизводить их, так чтобы они имели координированную яркость в качестве реальных цветов отражения средней освещенности в окружении жилого помещения зрителя. Цель вариантов осуществления настоящего изобретения может быть реализована получением способа добавления определяющей изображение информации во входной сигнал (I) изображения, содержащего:

- показ входного изображения (I) человеку-оператору;

- прием через пользовательский интерфейс (303, 308) описательных данных (D) от человека-оператора, описательные данные (D) включают в себя по меньшей мере значения яркости и/или информацию о геометрической форме с одной стороны, и описатель (rd) режима с другой стороны;

- кодирование в выходной сигнал (DDO) данных описания, связываемый с выходным сигналом (O) изображения на основании входного сигнала (I) изображения, описательных данных (D) в техническом формате, стандартизованном, чтобы предназначаться для использования приемным устройством отображения для управления его обработкой изображения для изменения цветовых свойств его воспроизводимых изображений, и соответствующими устройствами на стороне создания изображения, и соответствующими способами и устройствами на стороне отображения, и, в частности, несколькими возможными сигналами координации для описания режимов и того, что система стороны отображения должна делать, чтобы приблизиться к намеченному желательному окончательному воспроизведению (которое, например, может быть как можно более близким приближением исходной сцены, но с учетом локальной среды места просмотра, такой как точка белого светильников помещения, и т.д.).

Таким образом, специалист по выравниванию цветов может по распоряжениям постановщика, внимательно изучать сцену и, например, идентифицировать часть светового короба коммерческой рекламы на стене (которая может быть детализирована в качестве приближенного местоположения и интенсивностей цвета, например, очерчиванием грубого эллипса на ней и дополнительного сегментирования) и обозначать, что это специальная область, но теперь также кодировать это в качестве того, какая специальная область, а именно, какой режим воспроизведения должен быть применен (например, создавать «горящие глаза» (rd) у человека на световом коробе и координировать освещение окружения, как лучше бы выглядело при заданной специфике воспроизводящего устройства отображения). Он, в таком случае, может обрабатывать входное изображение в кодированном выходном изображении O, которое, согласно вышеприведенной философии, было бы разновидностью усредненного внешнего вида (можно сравнить его с фотографической широтой, приводящей к хорошей распознаваемости большинства объектов в снятом кинокадре, но тогда, с дополнительными данными описания, детализирующими режимы, можно преобразовывать усредненное кодирование в гораздо лучше выглядящие кинокадры во всех разных местах просмотра). Алгоритмы обработки изображения на стороне отображения затем, например, могут применять отображения оттенков или другие операции обработки изображения, особенно для модификации внешнего вида локальных областей, к специфичным областям согласно описаниям режимов.

КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ

Эти и другие аспекты способа и устройства согласно изобретению будут очевидны из и пояснены со ссылкой на реализации и варианты осуществления, описанные в дальнейшем, и со ссылкой на прилагаемые чертежи, которые служат только в качестве неограничивающих специфичных иллюстраций, являющих собой пример более общей концепции, и на которых пунктиры используются для указания, что компонент является необязательным, непунктирные компоненты не обязательно являются необходимыми. Пунктиры также могут использоваться для указания тех элементов, которые получены, как обязательные, скрыты внутри объекта, или могут использоваться для нематериальных вещей, например, таких как подборки объектов/областей (и как они могут показываться на устройстве отображения).

На чертежах:

фиг. 1 схематически иллюстрирует несколько типичных режимов, которые были бы желательны и достижимы с использованием принципов нашего изобретения в примерной сцене кинофильма;

фиг. 2 схематически иллюстрирует, каким образом можно задавать сложный геометрический профиль несколькими областями отражения света, которым необходимо координироваться (друг с другом и с другими областями изображения);

фиг. 3 схематически иллюстрирует среду и ее устройства, предоставляющие создателю изображения/кинофильма возможность добавлять цветовые режимы в снятое изображение сцены;

фиг. 4 схематически иллюстрирует отображение пользовательского интерфейса того, что может видеть специалист по художественному цвету на стороне создания, в отношении композиции снятых изображений, и режимы, которые могут быть идентифицированы в них, и преобразования, которые могут быть применены к ним, и некоторые схематические примеры графических интерфейсных элементов, которые могут использоваться для свободного взаимодействия с данными и создания описания режима;

фиг. 5 схематически иллюстрирует еще одну среду с устройствами и подблоками, предоставляющими возможность создания и контроля детализаций режимов;

фиг. 6 схематически иллюстрирует сигнал изображения, который может использоваться для передачи пожеланий воспроизведения со стороны создания на сторону отображения посредством детализаций цветовых режимов; и

фиг. 7 схематически иллюстрирует систему отображения на приемной/воспроизводящей стороне, а также устройства и компоненты для извлечения детализации режимов и управления обработкой изображений для окончательного воспроизведения на основе таковой.

ПОДРОБНОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ

Фигура 1 показывает пример кинофильма про Бэтмена и некоторые эффекты, которые были реализованы на устройстве отображения HDR настоящим изобретением. На данный момент, устройства отображения HDR могут использовать всю свою внутреннюю обработку, которая должна «оптимизировать» изображение, что, однако, так часто передается в максимизацию светового выхода (или подъем насыщенности). Поэтому кинокадр может показываться совсем не оптимально, может быть даже воспроизводиться безобразным нереалистичным образом (например, светящиеся бананы), по меньшей мере не тем, каким изначально наметил художник. Типично усиления - даже когда параметрические и зависят от свойств изображения, таких как гистограммы - имеют тип «натягивания на все», усиливая все пиксели аналогичным образом (однако, например, при усилении некоторых дорожных фонарей, можно не просто пожелать, чтобы серая дорога вокруг них становилась в большей степени яркой аналогичным образом: более реалистичное воспроизведение может зависеть от распределения интенсивностей цвета по дороге - или даже ее пространственного анализа/ анализа свойств, подобных текстуре - и, например, делать капельки на дороге в большей степени яркими вместе с фонарями в изображении, но не настолько, насколько диффузно отражающие части дороги). Или, в компьютерной игре, например, показывающей темный подвал, в действительности можно пожелать усилить мощность некоторых фонарей, но делать нечто, совершенно другое, для теневых областей, темно-серых колонн, и т.д. (фактически, оптимальная обработка областей может быть нелинейной настолько, что никакая глобальная обработка, или даже равно никакая функция, выведенная исключительно на стороне отображения/приемника, не будет хорошо работать). Чтобы избежать этой проблемы, создающий художник может детализировать «цветовые режимы», которые могут быть немногими и простыми, или многими со сложными подробностями, но предоставляющими создателю возможность участвовать в обсуждении вопроса в отношении того, что может, должно или, в качестве альтернативы, не должно происходить для окончательного внешнего вида (то есть, типично имея ввиду обработку, применяемую устройством отображения над принятыми входными сигналами для пикселей в разных его областях).

В простом варианте, художник будет снабжать примечаниями области гистограммы изображения (пространственные подобласти кинокадра, но они, например, также могут быть только яркостью или интенсивностями цветов для кадра из следующих друг за другом кинокадров), и присваивать им код, указывающий, к какому режиму они соответствуют (который может быть простым указанием того, что означают эти области). Хотя могут применяться сложные описатели распределений многомодальной пространственной гистограммы в области, мы поясним здесь более простой случай, в котором художник задает только диапазон яркости для области. В начале, типично есть диапазон яркостей (или цветов) в кодированном изображении (которое будет передаваться на приемную сторону [по телевизионному кабелю, в запоминающем устройстве, таком как диск формата Bluray, и т.д.] и служить там в качестве входного изображения [отметим, что выходное изображение O стороны создания типично является входным изображением на приемной стороне]), который, например, будет находиться между минимальной и максимальной яркостью в (произвольно профилированной) области 101, выбранной художником в этом входном изображении. В соответствии с интервалом в кинокадре, на стороне воспроизведения, также будет по меньшей мере один выходной интервал яркости, например, в качестве воспроизводимого исходящего света из устройства отображения, или модифицированное обработкой изображения изображение возбуждение для пикселей ЖКД. Например, минимальная яркость может иметь добавленное смещение, и диапазон может растягиваться мультипликативным коэффициентом 2. Однако, (предпочтительный) сценарий воспроизведения может быть более сложным (например, для двухмодальной гистограммы - так как область 101 содержит в себе главным образом два «вида» объекта, несколько более темные и нормальной яркости - можно пожелать детализировать нелинейные функции отображения, которые, например, сохраняют соотношение между средними яркостями подгистограмм, так чтобы их отношение не становилось визуально нереалистичным). Фактически, отображение диапазона яркости обычно рассматривалось в качестве проблемы переполнения всех пикселей входного диапазона в выходном диапазоне, обычно с техническим ограничением кадрирования (или подобным образом, не заботясь об ограничениях видимости для темных значений, делая их практически невидимыми зрителю, так как они ниже отражений экрана), которое выполняется одним из многих эвристических алгоритмов отображения оттенков с развитой логикой. Однако, если имеется (действительное или художественное в отношении того, какие пиксели кодировать) значение для всех подобластей гистограммы, соответствующих объектам, можно осуществлять гораздо более разумное распределение оптимальных выходных яркостей по областям пикселей, не только чтобы придавать всему изображению сбалансированный вид, но в большей степени, в качестве (параметрической) скоординированной иерархии более изящно наложенных связанных с объектами диапазонов, даже с оптимальной расстановкой интенсивностей цвета области пикселей в пределах одиночного выбранного объекта с конкретным значением. Например, можно представить себе, что хочется координировать воспроизведение и, в частности, распределение диапазонов яркости первых пикселей, соответствующих лампе внутри магазина, с другими пикселями, видимыми через витрину магазина, с одной стороны, и лампами снаружи магазина, с другой стороны, например, зная, что такие соотношения координации будут настраивать визуальное впечатление. Область 101 определяет (предпочтительно все, хотя она также может быть функцией в качестве области свойств цвета/текстуры для обучения приемника, каким образом он может сегментировать все подобные области) пиксели, которые должны кодироваться в качестве «средне серых», которые, в этом случае, являются плоской серой дорогой. Отметим, что, в этом тексте, мы будем для простоты часто говорить о приемном устройстве 730 отображения, выполняющем обработку воспроизведения, но специалист далее будет осознавать, что другие устройства, такие как считыватель дисков формата Bluray, телевизионная абонентская приставка или персональный компьютер, мобильные устройства, и т.д., могут выполнять всю или некоторую из обработки сигналов, дающей окончательное изображение, которое должно отображаться, IR. Поскольку телевизор по-прежнему может выполнять свою собственную дополнительную обработку, производится разграничение между выходным сигналом IR', например, проигрывателя дисков формата Bluray и IR, окончательно отображаемом на мониторе, ТВ, проекторе, и т.д.; см. ниже. Связь между двумя устройствами для передачи их связанных с изображением физических свойств и измеренных свойств среды просмотра предпочтительно может иметься в распоряжении. Кодирование этой средне серой области в качестве имеющей конкретный тип имеет не только преимущество, что она может оптимально воспроизводиться (различимо, то есть, при не слишком высокой яркости - например, имеющей отношение к средней яркости серого в помещении зрителя - и имея низкую насыщенность, которая может включать в себя установление ограничения на параметры алгоритма усиления отображения, или даже требовать применения операции уменьшения насыщенности [вместо придания кинофильму более бледного вида для всех сценариев, это, таким образом, может делаться настраиваемым по устройству отображения/зрителю, то есть (частично) с учетом этого состояния аккомодации зрения, и т.д.], но также оно может оказывать помощь всем алгоритмам анализа/распознавания сцены на приемной стороне. Например, всегда было трудной задачей отделять освещение сцены от отражений объектов сцены, и выбор той серой зоны может помочь (он может рассматриваться в качестве эквивалента апостериорной программы контроля McBeth), в частности, она может совместно храниться в выходном сигнале изображения со снимающей стороны со свойствами света, измеренными на сцене, такими как, например, реальная яркость частей сцены, соответствующих, после проецирования, снятым местоположениям изображения, попадающим в выбранную область, дисбалансы подцветки (может быть, даже измеренные простым спектрометром), и т.д. Количественное определение, на что был похож серый в исходной сцене, и/или предпочтительно чему он должен выглядеть подобным при окончательном воспроизведении, затем, например, может использоваться для более оптимального воспроизведения других цветов, или изменения внешней засветки экрана (которая может быть типа рассеянного света, непосредственно окружающего устройство отображения, или световыми колонками, создающими освещение в нескольких местоположениях помещения синхронно с отображаемыми изображениями), и т.д.

Другими важными типами являются неуправляемые составляющие темных цветовых режимов (которые до сих пор почти совершенно игнорировались). Они могут присутствовать (и должны вести себя по-разному, то есть, приводить к разным обработке и воспроизведению устройства отображения) в нормальных световых сценариях, таких как на фиг. 1 [черные шины мотоцикла и плаща Бэтмена, но при нормальном освещении], или в темных сценах (подобных фильмам ужасов, в которых вся сцена оптимально обрабатывается, чтобы придать общий темноватый внешний вид, делая особый акцент, главным образом, на свойстве видимости (смотрите пример с коридором, приведенный ниже), и предпочтительно осуществляя координацию с освещением помещения, такую как понижение световых колонок и совместное управление ими контентом кинокадра). В этом примере, для удобства художника и для сохранения низких расходов на выравнивание цветов, используется одиночный код режима для темного режима, а именно «Глубокий черный» («DeepBlack»). В зависимости от свойств устройства отображения (и также, предпочтительно, измеренной среды просмотра, см. ниже), устройство отображения будет управляться для обработки этого сбалансированным образом, так чтобы, с одной стороны, область выглядела очень темной, но, с другой стороны, была возможность, чтобы она по-прежнему показывала текстуру. Для устройства отображения HDR высшего класса в кинематографически освещенном жилом помещении, это будет давать в результате иную обработку (а именно, отображение в темную область яркостей, в которой по-прежнему присутствует некоторое количество реально видимых едва заметных отличий (JND)), чем на типичном телевизоре и в жилом помещении, как в настоящее время, или даже находящемся на открытом воздухе мобильном устройстве отображения (которое будет только зажимать всю область в минимальный черный цвет, так чтобы внушался по меньшей мере замысел некоторой темноты).

Если начать «расширение» яркостей (или цветов) до по меньшей мере очень ярких, и, может быть, приятно темных, важно иметь некоторый опорный уровень (или по меньшей мере области, которые не изменяются слишком сильно). Для этой цели, художник может использовать коды «Средней сцены» («AverageScene»), из которых он может использовать единственный установленный по умолчанию (на который устройство отображения реагирует, как будто оно было, например, значением V Адамса, которое, например, может отображаться на устройстве отображения вокруг того, что имеет значение 18% максимального белого типичного низкого динамического диапазона, имеющего значение 500 нит; или равным умноженной на мультипликативный коэффициент средней яркости окружения просмотра, и т.д.), или он может использовать несколько вариантов (так что сложное распределение может выполняться по более темным серым, в отличие от более ярких серых, в большей степени соответствующих более яркому белому отображению, и т.д.; устройство отображения HDR, в таком случае, может использовать несколько серых цветов, тогда как менее качественное устройство отображение может осуществлять воспроизведение, как будто был только один опорный уровень серого). На фиг. 1 используется «Средняя сцена в городе» («AverageScene_city»), в которой художник может включать реальные сведения о типичных городах (они содержат кирпичи определенной отражательной способности), или свое намерение воспроизведения (дома могут иметь яркую краску на них, и специалист по выравниванию цветов может пожелать детализировать, что это воспроизводится на устройстве отображения с выходной яркостью между Lmin и LMax, и насыщенностью между Smin и SMax). Отметим, что, хотя художник может пожелать, чтобы дома выглядели действительно яркими, они по-прежнему являются частью фона, то есть, несмотря на украшение кинофильма, они не являются преобладающими объектами, поэтому, они также не должны становиться слишком доминирующими в отношении своих воспроизводимых цветов (например, яркостей), которыми художник может управлять посредством детализации, что, какой бы алгоритм не использует устройство отображения, они не должны заходить выше максимума (LMax, SMax). Конечно, могут быть заданы более сложные детализации воспроизведения, в которых художник может детализировать значения, подобные «аппроксимировать оптимально, чтобы придать среднему области значение LAopt - и максимальный пиксель LMopt», «в случае усиления, попытаться остаться ниже или около намеченной средней яркости для области LAint», «в любом случае оставаться ниже LAforb», и т.д. Это предоставляет возможность большей свободы касательно обработки цветов производителя устройств отображения (в построенных на основе последних технических достижений системах, художник даже может пожелать точно предписать, какую обработку выполняет конкретное устройство отображения - чтобы дать возможность режима «намеченного воспроизведения» - но, вообще, устройства отображения будут выполнять свою собственную обработку, которая может быть довольно простой (и не предоставлять возможность значительной настройки)). Например, «попытаться остаться около намеченного LMint максимального цвета», в таком случае будет достаточным для обеих сторон, создателя и производителя устройства отображения, и устройство отображения, например, может с предсказанием или многократно измерять, придало ли его воспроизведение области достаточно близкую яркость/цвет.

В HDR также важны более яркие области, в частности, важно, чтобы они могли координироваться относительно других областей (которые не все выглядят подсвеченными до одинаковой степени: в качестве руководящего указания для проведения различия, художник может использовать такие свойства, как локальная насыщенность цвета, длительность во времени отображения области [например, для создания специального эффекта яркой вспышки, когда область является облаком пламени] и т.д.), то есть, чтобы имелись в распоряжении правильные коды режима для проведения их различия. Область может иметь первый код режима для первого момента времени или промежутка времени и второй код режима для второго, например, «облако пламени» против «погасающего облака пламени». В примере фиг. 1, проведение различия производится с детализацией кода «Яркий свет» («BrightLights»), который может использоваться для лазерных лучей Бэтмена, и который имеет дополнительные параметры, указывающие, что замысел состоит в том, что устройство отображения воспроизводит их на приблизительно 98% максимально достижимой яркости (для того синего цвета). Уличные фонари, которые всегда включены в кадре и не должны давать такого отвлекающего энергичного эффекта (заметьте, что в реальной сцене зритель может смотреть на них по-другому, чем на устройстве отображения с небольшой диагональю, диагональ является фактором, который устройство отображения может использовать для определения их окончательной яркости, если требуется, также под управлением художника), поэтому, они будут задаваться другим кодом «Фонарь» режима, который будет воспроизводиться с яркостью, являющейся максимально достижимой яркостью, деленной на определенный коэффициент, например, k=4 (в зависимости от того, насколько ярким может быть устройство отображения, можно пожелать зарезервировать большее или меньшее количество пикселей для пикселей отражающего объекта сцены по отношению к, смещенных дальше от таковых, пикселей источников света).

Другой код освещения может использоваться для светлых областей пикселей, которые дают сценическое освещение, например, свет, светящий через окно в зимней сцене. Художник может пожелать дать только некоторым из освещенных окон код «Сценическое освещение» («Scenic_Illum»), например, имеющим сверхъестественный синеватый свет вместо нормального теплого, получаемого от ламп накаливания. Таковые затем могут повторно использоваться, например, для возбуждения окружающего освещения, которое теперь координируется не эвристическим средним того, что происходит на сцене, но реальным светом на сцене. Например, вычислитель внешней засветки экрана может использовать, в качестве входного сигнала, только теплые, освещаемые лампами накаливания области. Эта детализация режима может повторно использоваться, например, согласно изобретению проецирования узорчатого рассеянного света по W02007/113754, посредством создания цвета пятна света из окна (и если возможно, также геометрического распределения) и продолжения перемещать его за пределами устройства отображения со скоростью видео. Даже если лампы могут фактически не быть в точности такими же, как на видео, если художник выбирает типичное комнатное окно, этого будет достаточно для имитации окружающей среды. К тому же режимы Яркого света могут использоваться для вспыхивания, например, световых колонок, которые находятся под 90 градусов сбоку от зрителя, для имитации отражений на стенах жилого помещения зрителя, и т.д.

В заключение был показан пример, чтобы показать, что кодировки режимов не предназначены чисто для параметризации отображений мультипликативного типа (подобных смещению и масштабированию диапазона цветов), а что более сложное управление пространственными профилями может быть требуемым и совместимым с тем, чего в наши дни требуют специалисты по выравниванию цвета.

Металлическим частям рукояток мотоцикла задан код «Металлический» («Metallic»), чтобы указывать, что они ведут себя совсем по-другому в реальной среде, чем объекты рассеяния Ламберта, которые относительно легки, и так как, в особенности, параметрическая модификация может привносить артефакты, они предпочтительно должны обрабатываться иным образом, который разъяснен фиг. 2.

Фиг. 2 схематически показывает, что было бы видно на экране специалиста по выравниванию цвета, запускающего программное инструментальное средство для улучшения снятого видео и выполняющего детализацию цветового режима, и каким образом он может детализировать более сложное поведение цветовоспроизведения для металлических рукояток мотоцикла Бэтмена. Вид 201 показывает профиль яркости в поперечном разрезе, и что рукоятка (которая геометрически показана в качестве подкадра на виде 220) главным образом отражает усредненное окружение (которое не будет настолько критичным), но также зеркально одну лампу фонарей освещения, приводящую к выпуклости 205 профиля (зеркальный участок пикселей 224), и синие лазерные вспышки, приводящие к выпуклости 203 (участок 223). Было бы странно, если бы профиль обновлялся в координации со всей сценой, которая вероятно, будет координироваться с лампой столба освещения, но чтобы другие зеркальные отражения оставались приглушенными, хотя лазер ведет огонь вблизи. Предпочтительно, чтобы быть способным оптимально с художественной точки зрения координировать зеркальные объекты с разными воспроизведениями сцены отображения (например, пользователем, увеличивающим яркость), предусмотрено устройство для специалиста по выравниванию цвета (типично, программный модуль), которое выполнено с возможностью создавать и модифицировать профили яркости (и возможно, полного цвета, в том числе, цветности) областей пикселей. Это может делаться, например, посредством моделирования части профиля (явным образом в качестве значений соседних пикселей, либо посредством подгонки параметрических функций, например, подобных многоточечному гауссовому разложению) и предоставления специалисту по выравниванию цвета возможности настраивать это, например, изменять амплитуду выпуклости. Пример поведения программного обеспечения состоит в том, что специалист по выравниванию может указать диапазон 207, в котором выпуклость является визуально преобладающей и нуждается в изменении, какой диапазон может быть начерчен курсором 209 выбора. Затем, он может масштабировать исходный профиль выпуклости в новый растянутый профиль 211 ступенями, щелкая мышью на курсоре 213 выбора, так чтобы новый внешний вид гармонировал с измененной общей яркостью или яркостью бликов или освещения сцены. Он, например, может внимательно изучать результаты на высококачественном устройстве отображения HDR, и переключать его в несколько режимов имитации для более низкокачественных устройств отображения. Другие варианты выбора имеются в распоряжении. Настраиваемая функция (которая типично будет по меньшей мере иметь, в качестве параметра настройки, среднюю яркость одной из светлых зон столба освещения) может сохраняться в видеосигнале (метаданных), которые должны выводиться для использования (например, на диск в формате Bluray), и устройство отображения обязательно использует эту функцию в качестве обработки цветов для металлической области (в качестве функции предпочтений по яркости зрителя, и т.д.), или одна или более эталонных моделей (например, результирующие профили пикселей) сохраняются, чтобы устройство отображения использовало в качестве руководства при применении своих специальных цветовых алгоритмов. Например, пространственные (временные) профили для трех разновидностей устройств отображения и 4 уровней освещенности для устройства отображения высшего класса могут быть закодированы в качестве начальной точки, и устройство отображения HDR может копировать профиль наивысшей яркости (главным образом, растянутой выпуклости) в качестве начального сигнала, после чего, оно затем может применять ограниченный объем дополнительной обработки. Хотя это не является на 100% точным воспроизведением металлической области, оно, будучи управляемым, дает лучшие результаты, чем выполнение дела вслепую. В качестве альтернативы, для параметрического кодирования всех эффектов освещения на рукоятке, воспроизводящая сторона может рассчитывать оптимальную форму выпуклости для своей среды просмотра (характеристик устройства отображения, окружения, и т.д.). Еще одним примером потребности в/ и предоставления возможности способов/устройств по настоящим изобретениям пространственного управления цветовоспроизведением, являются отражения окружающие лампу, например, на кирпичной стене. Типично, в неуправляемых системах LDR, они будут осуществлять отображение куда-нибудь в действительный код в пределах [0, 255] (иногда 255), и тогда, заключительная обработка для формирования HDR в устройстве отображения может не распознавать их в качестве специфичных областей (потенциально, даже с передержкой), и масштабировать их подобно оставшейся части среднего фона вместо их совместного масштабирования воспроизведением повышенной яркости лампы. Это может достигаться предоставлением возможности детализации замысла воспроизведения пространственного подпрофиля в самом профиле «Фонаря» (например, совместного отображения со средней яркостью лампы, и параметром отражения, таким как коэффициент диффузного отражения, или применения параметризованной функции, подобной экспоненциальному падению), или может быть создан дополнительный профиль, а именно, «Отражение фонаря» («LightReflection»), свойства которого совместно настраиваются с таковыми у профиля «Фонаря» (например, система уже предлагает художнику воспроизведение для профиля отражения, который он может легко подвергать тонкой настройке параметрами управления).

Отметим, что эти примеры являются чисто иллюстративными, чтобы описать, какие разновидности управления желательны между стороной художника/съемки и обработкой и воспроизведением устройства отображения, и гораздо большее количество вариантов может быть включено в состав. В простой системе, фиксируется пара часто используемых сценариев, кодированных в стандарте (точно зная, что происходило бы для каждого сценария), но, конечно, стандарт передачи свойств изображения может быть обновляемым по той причине, что художник кодифицирует новый класс (например, «HamsterFur» или «RailingWood»), и детализирует его колориметрические свойства, может быть, свойства текстуры, величину модификации, которая может быть применена (например, до тех пор, пока внешний вид не становится нереалистичным: если делать более ярким темный лес, зернистая структура может стать карикатурной), и если требуется даже конкретные типы алгоритмов обработки, параметров, уравнений,... (например, алгоритм насыщения, основанное на производной растягивание локальной яркости, или другие алгоритмы обработки, подобные повышению разрешения, которые также ведут к разной зрительной полноте цвета, обработка шумов, и т.д.). То есть, описания режимов могут пополняться всеми разновидностями дополнительной информации касательно, каким образом следует воспроизводить, обрабатывать, модифицировать, улучшать, кодировать, и т.д., области. Другими примеры интересных кодов режима, например, являются «Пастельный» («Pastel») (часто чрезмерные подъемы насыщенности в устройствах отображения заставляют исчезать пастельные цвета, и, например, заход солнца может выглядеть неестественным; этот код может вынуждать их оставаться пастельными при их окончательном воспроизведении), «Подъем для коммерческой рекламы» («CommercialBoost») (который, например, предоставляет возможность во время коммерческой рекламы поднимать или даже, в зависимости от устройства отображения, по-другому воспроизводить определенные объекты, например: устройство с многочисленными основными цветами, которое способно создавать высоко насыщенные оранжевые цвета, может окрашивать изначально более желтоватый объект в яркий оранжевый цвет).

Фиг. 3 схематически показывает некоторые из устройств, присутствующих на (передающей) стороне создания, полезных для создания подходящего сигнала описания цветового режима. Мы описываем более сложный сценарий, где устройства объединены с классической пленочной камерой для целлулоидной пленки (отметим, что цифровое вспомогательное представление сцены будет полностью [в отношении значений пикселей аналоговых по отношению к цифровым записей] привязываемым к реально снятому целлулоидному кинокадру, только если модели калибровки киноматериала включены в состав для отображения этих двух (однако, проявка, в таком случае, все еще остается неизвестной переменной, которая может использоваться для этих целей), но даже без таковых, цифровая запись по-прежнему может давать очень ценную побочную информацию, например, например, если она геометрически совмещена со снимаемым на целлулоид окном видоискателя, можно определять области, и помимо снятых на целлулоид значений проявленных зерен, например, можно кодировать линейные значения реального вида сцены посредством цифровой съемки), так как специалист будет понимать, каким образом перегруппировать эти компоненты в полностью цифровую съемку или выравниванием цвета, или транскодером, делающий то же самое, например, для старого кинокадра Лореля и Харди.

Мы показываем присоединенным к камере цифровое устройство отображения 303 (которое, например, получает получает поданный материал из выровненного с объективом камеры ПЗС), однако, соединение 304 не обязано быть закрепленным, но также может быть передатчиком для некоторого количества отдельных устройств отображения (например, одного для кинооператора, и одного в просмотровом накопителе режиссера). После этого кинооператор или режиссер по фотографии может, например, очерчивать области 350, которые они уже откалибровали со своим сценическим освещением, в качестве темной части изображения, что может выполняться, например, световым пером 308, иди другим средством ввода пользовательского интерфейса [мы показываем только один пример, так как думаем, специалист вполне может понять, какие типы системы предоставляют пользователю возможность выдавать обратную связь в отображенном изображении]. Устройство отображения может сохранять добавленную информацию (например, детализации режимов) в памяти 306 (например, съемном модуле памяти) или передавать через систему 305 передачи. Оно также может принимать дополнительную информацию из устройства 230 анализа сцены на месте съемки фильма (которое может быть просто экспонометром или даже спектрометром с пространственной выборкой), через свою систему 321 передачи, которая также может осуществлять передачу в место сбора окончательных данных (то есть, 340). Более того, измерители 330 на сцене (например, локальные люксометры, для измерения насколько были освещены лица актеров, особенно когда при сильно изменчивом освещении; сферические системы, изучающие распределение окружающего освещения; и т.д.) могут передавать свои данные в любую часть системы через свои системы 331 передачи. Приемное устройство отображения затем может пытаться воспроизводить свет с его исходной яркостью, или по меньшей ее долей (или функцией), типично, в соответствии с некоторой психовизуальной моделью для создания подобного внешнего вида (типично, с координацией внешних видов разных режимов в дополнение к разным цветам в изображении).

Все данные собираются в устройстве 340 сбора данных с внутриплатной памятью, типично, компьютере (с системой 341 передачи).

Не обязательно присутствовать всем компонентам (простая цифровая копия на устройстве отображения 303 может быть всем, что требуется режиссеру, чтобы сделать некоторые простые примечания всего лишь для нескольких кодов режима), однако, как понимает специалист, система может быть расширена устройствами для подробного анализа всей среды (интенсивностей цвета, свойств освещения, таких как направление или спектр света, функций или текстур взаимного отражения объектов, и т.д.), которые полезны не только для вставки эффектов современной компьютерной графики, но как окончательное воспроизведение на устройстве отображения жилого помещения, так и окружающее освещение будут получать пользу, если большее количество подробностей сцены в отношении как отражающих или вообще взаимодействующих со светом объектов, так и действующего освещения совместно записываются с окончательным сигналом изображения (это предоставляет изменению освещения возможность становиться в большей степени гармонирующим со средой зрителя).

Фиг. 4 дает пример того, что устройство (или, типично, программное обеспечение) составления примечаний режима будет выполнено с возможностью показывать специалисту по выравниванию цвета или режиссеру по фотографии, например, из его беспроводным образом передаваемого материала из любой камеры, и предоставляет ему возможность составлять примечания и сохранять в выходном сигнал изображения в качестве метаданных. Показан коридор с сфотографированным солдатом и чудовищем (который может быть упрощенным воспроизведением элемента компьютерной графики, который будет добавлен позже) в зоне 401 просмотра кинокадра. Слева находятся кнопки кластера режимов, предоставляющие возможность быстро выбирать полезные режимы, например, кнопка 410 «Темные режимы» 410 («DarkRegimes»), кнопка 412 «Яркие режимы» («BrightRegimes»), кнопка 414 «Усредненные режимы сцены» («AverageSceneRegimes»), и кнопка 416 «Критичные цветовые режимы» («CriticalColorRegimes») (конечно, там может быть большее количество, это всего лишь концептуальная иллюстрация для разъяснения концепций изобретения и формулы изобретения). Когда щелкаешь кнопкой мыши по кнопке кластера режимов, иерархическое меню высвечивается на экране, показывающее дополнительные кнопки («Кнопка режима теневой 1» 422, 424, 426 («Shadow_1Regime button»)) с выбираемыми режимами для такого кластера. Например, что касается кластера «Темные режимы», оператор идентифицировал область 440, которая он хочет, чтобы имела значение «Теневой 1» («Shadow_1») (то есть, описатель rd режима описательных данных D имеет значение «Теневой 1», и этот код или другая кодификация, выведенная из нее, будут добавлены в сигнал DDO данных описания, получающийся в результате в качестве выходного сигнала), и типично позже будет переходить к детализации некоторого характеристических свойств воспроизведения и возможно дополнительной идентификации для нее (другой сценарий состоит в том, что только сам режим детализируется - в качестве набора яркостей либо области пикселей - и устройство отображения само по себе узнает, что делать с тенями, например, воспроизводить их как можно более темными, без необходимости какой бы то ни было дополнительной детализации свойств яркости или цветов), так что приемное устройство отображения будет знать, каким образом предпочтительно управлять его способом обработки/воспроизведения изображения (например, детализации, что никакие пиксели в такой области не должны показываться ярче, чем Lmax в жилом помещении зрителя, или в кинотеатре - последние являются повторно калибруемыми на по единственному контрольному кодированному числу в сигнале DDO данных описания, которое будет дополнительно преобразовано в используемое в месте нахождения значение (например, 100 кд/м2 могут изменяться в реальное измеренное в кинотеатре значение, и подобным образом для других значений), или кодируется действующее точное число, например, для театра или типа помещения просмотра). Может быть несколько детализаций для определения темных режимов и их окончательного воспроизведения. Например, можно учесть положение гистограммы темных пикселей и убедиться, что верхняя часть получает определенное положение, например, по сравнению с воспроизводимой яркостью средних серых пикселей в изображении, тогда как, с другой стороны, не слишком много пикселей плохо видны вследствие блеска отражений переднего экрана, и т.д., поэтому, может вызываться преобразование некоторых тонов, например, огрубление темной области. Система типично будет иметь режимы, предусматривающие минимальное взаимодействие с пользователем (так как время художника является очень дорогостоящим), и алгоритмы автоматического анализа изображения могут оказывать помощь в тонкой настройке (см. фиг. 5). Пользователь может очень точно очерчивать пространственную область в кинокадре, который он желает обработать, например, посредством перемещения светового пера 308 по точной границе того, где может быть начерчена неотчетливая область, но также может даваться грубое указание, подобное эллипсу или прямоугольнику 442. Так как наибольший уровень управления для детализации режимов для выбранных объектов или областей предложен, если пользователь может как работать над свойствами цвета/яркости (типично, гистограммами) и областями изображения, есть дополнительные информационные панели (450, 460, 470), которые не только отображают информацию о изображении, но являются графическими интерфейсными элементами, в которых пользователем может быть осуществлен дальнейший выбор (конечно, для многих вариантов устройств/программного обеспечения составления примечаний, несколько или меньшее количество этих компонентов может присутствовать для выполнения работы, например, только установка диапазонов яркости или только вычерчивание пространственных областей). Например, когда художник-колорист выбирает область 442 для детализации режима подсвечивания вокруг ручного фонаря в изображении, панель 450 отображения гистограммы будет показывать двухмодальную гистограмму, содержащую в себе яркие пиксели лампы и более темные пиксели темной окружающей стены. Построенная на основе последних технических достижений система будет моделировать функции 490 в отношении этого, и предоставлять художнику-колористу возможность анализировать, выбирать и/или модифицировать выбранные области и их пиксельный контент на основе этой комплексной информации, но в более простых системах (хотя модели по-прежнему могут присутствовать, так как они понимают пониманию колориста локальной структуры изображения/цветовых свойств, но тогда они не модифицируемы) художник-колорист, например, может использовать курсоры 485 для выбора диапазонов (483, 484), например, яркостей, чтобы детализировать, какие цвета, например, принадлежат режиму яркого света (кодированному описателем режима «Light 1»), глобально ли во всем кинокадре (если они не встречаются проблематично в других объектах в любом случае), или локально для такой совместно кодированной пространственной области. С соответствующими поправками для показа гистограммы выбранной области изображения, при выборе диапазона пикселей в (например, локальной) гистограмме, система может показывать соответствующую область(и) 481 художнику-колористу. Также можно работать курсорами локального измерения (инструментальное средство помощника взаимодействия с изображением, например, может содержать в себе курсор 420 с подзорной трубой, который, например, может устанавливать перекрестье 404, от которого будет отображаться значение на панели 470 яркости. Эта панель может содержать в себе кодированные во входном изображении яркости, или фактически измеренные яркости сцены, например, центра лампы Lc=5000, из вариантов выбора, где лампа является менее яркой (L1), будучи критичной для оптимальной детализации режима, если требуются конкретные алгоритмические преобразования, и т.д., окружения (L2), и т.д. Панель 470 яркости может иметь соответствующие панели, предоставляющие художнику-колористу возможность детализировать, какие измерения исходной сцены он желает, чтобы совместно сохранялись. Например, хотя лампа может иметь код 5000 в отснятом входном кинокадре I, она может иметь яркость 9000 кд/м² на реальной сцене, в то время как снимается в месте нахождения камеры, поэтому, это значение может совместно храниться с другими описательными данными D для области 442, или может храниться отношение, или другое выведенное свойство. Наоборот, курсор 480 выборки в представлениях свойств может осуществлять отображение в геометрическое изображение, например, посредством наведения перекрестья 404. Это является всего лишь простым примерным концептуальным описанием, специалист понимает, что сложные инструментальные средства могут быть сформированы, например, для указания подгистограмм и модификаций, отслеживания, что происходит само по себе при воспроизведении изображения, или количества выбранных пикселей или формы режима, и т.д., с многими взаимодействиями художника-колориста. Например, он может пожелать детализировать два вида режимов для яркого воспроизведения, один с более гладким градиентом, и один только с парой разных значений яркости (которые могут проявляться сильно связанными на качественном устройстве отображения, однако, не на мобильном находящемся на открытом воздухе устройстве отображения), таковые могут отображаться пространственными активизируемыми щелчком мыши индикаторами поверх кинокадра, так что он может быстро переключаться между ними (высококачественное устройство отображения для просмотра, в таком случае, может имитировать, например, типичный находящийся на открытом воздухе солнечный свет, понижающий качество изображения; посредством имитации, можно быстро просматривать, например, какая расстановка яркости - например, отношение средней яркости первой области, например, лампы, по отношению ко второй, например, стене вокруг нее - наилучшим образом работает в определенных ситуациях, перед кодированием некоторого или всего из этого). Так как кодировка режима часто может привязываться к воспроизведению диапазонов, соответствующих областям пикселей/объектам, которые могут быть или могут не быть фактически детализированными режимами, это также относится к преобразованиям этих режимов. Типично, с преобразование ли в представление изображения LDR или HDR, можно пожелать применить кривые отображения оттенков к областям пикселей. Что касается примера лампы, выбранного на 442, можно иметь уже предписанное отображение оттенков для значений стены, не обязательно окружающей лампу на 442, но типично значительное количество хорошо освещенных пикселей во всем изображении. Панель 460 модификации воспроизведения оттенков предоставляет возможность осуществления таких изменений (наряду со способностью оценивать результаты на устройстве 540 отображения с выравниванием) и для разумного выбора (например, световых) режимов (в частности, например, в какие диапазоны воспроизводимого цветового охвата приемного устройства отображения, таковые должны отображаться) в соответствии с внешним видом других областей/элементов изображения.

Так, в этом простом примере, специалист по выравниванию может пожелать детализировать, в качестве дополнительных данных идентификации области изображения в описательных данных D, данные прямоугольника 442 (координаты верхнего левого угла и размеры), и/или диапазон идентифицированных подгистограмм C1, идентифицированных специалистом по выравниванию (Lmin1, Lmax1). Устройство/программное обеспечение 500 анализа изображения как на стороне создания, так и в приемном устройстве отображения, или любое промежуточное устройство может дополнительно осуществлять тонкую настройку этой информации идентификации области, например, посредством модуля 522 сегментации, может определяться реальная эллиптическая форма фонаря (алгоритмам с развитой логикой может быть не нужна точная детализация диапазона в гистограмме яркости, поскольку они могут использовать таковые в качестве направляющей затравки в режиме, который, например, осуществляет сегментацию с учетом основных кромок изображения на границах объектов изображения). Более того, в отношении того, что приемное устройство отображения должно делать с идентифицированным режимом, как упомянуто выше, он может использовать специальное преобразование по умолчанию согласно всего лишь нескольким предопределенным стандартизованным режимам (например, делать лампы как можно более яркими), однако, художник может находить, что внешний вид чересчур неприятный, и более строго детализировать, если не фактическую обработку приемного устройства отображения, то по меньшей мере, какой окончательный вид воспроизведения (выходных цветов) давала бы в результате такая обработка. Например, с помощью кнопок 434, он может задавать множитель 435, который, например, устанавливает, что предпочтительно лампы не должны быть ярче, чем в 10 раз яркости областей изображения средней яркости (тех, которые типично оптимально освещены при съемке сцены, и на которые будет выделена большая часть цветового охвата LDR). Художник может детализировать яркости разных режимов по сравнению друг с другом, определенные в новых физических величинах, например, подобных воздействию или раздражению (например, в зависимости от яркости белого устройства отображения, участки определенного размера и яркости могут слишком сильно уводить в сторону от реального действия в кинофильме, поэтому, художник может, с помощью параметрического уравнения, детализировать свои абсолютные или относительные - например, по сравнению с окружающими областями изображения или окрестностями устройства отображения и/или локальной средней яркостью, и т.д. - уровни яркости, чтобы учесть эти величины, подобные раздражению. Таким образом, параметры, детализирующие воспроизведение на приемном устройстве отображения (то есть, типично, алгоритмы обработки изображения, которые оно будет выполнять), могут иметь разные типы, включающие в себя реальные параметры для функций математической обработки изображения, но также, например, параметры, кодирующие грубую форму аппроксимации, заданную отрезками 250 линий, под которую должна подпадать кривая, например, профиль отражения, как на фиг. 2 (оставляя некоторое пространство для другой обработки приемному устройству отображения, но не слишком много).

Более сложным примером является режим 426 «Показа скрытых элементов» («Unhide»), применяемый к идентифицированной области 441 чудовища (которую специалист по выравниванию очертил со средней точностью, то есть едва не эллипсом, но не с точностью до пикселя, и затем, модуль сегментации может располагать область 441 вместе с границами объекта, и модуль 524 отслеживания движения может отслеживать его в следующих друг за другом изображениях). Трудность здесь состоит, однако, в воспроизведении приемного устройства отображения. Цель состоит в том, чтобы воспроизведение чудовища было или не было едва видимым в темноте (художник-колорист, например, может детализировать, что его морда с трудом различима, а его тело еще нет), которое, среди прочего, зависит от точных окружающих пикселей (таким образом, пространственному профилю может быть необходимым применяться, и этом может быть должным тонко настраиваться с помощью панели 490/ модуля 590 выделения пространственного профиля). Для удобства пользователя в изменении намеченного воспроизведения, формы профилей могут детализироваться не только по яркостям, но и в других калиброванных единицах, таких как JND (для одного или нескольких типичных сценариях отображения). Для оптимального результата, это также зависит от калибровки изображений/видео для приемного устройства отображения в его среде. Например, после запуска кинофильма на оптическом диске, приложение работы с BD может спрашивать зрителя, желает ли он оптимального впечатления, и показывает ему пару темных участков, которые он еще должен различать со своим комнатным освещением, или кинотеатр может калиброваться, несколько раз или в несколько раз, например, с помощью камеры или других измерительных устройств для отображаемого контента позади кинотеатра, и т.д. Такие проблемы гораздо лучше контролируются специалистом по выравниванию, чем когда-либо кинооператором и режиссером по освещению (особенно, если привлечена манипуляция компьютерной графикой) [также см. ниже для некоторых дополнительных примеров того, что может достигаться этой системой, когда съемка классической камерой становится непрактичной, особенно для HDR].

В качестве других примеров, мы показываем, как режимы могут использоваться с подтипами для детализации различий воспроизведения, и чтобы приводить воспроизведение в соответствие с разными категориями устройств отображения. Предположим, мы имеем взрыв, который геометрически покрывает значительный процент площади изображения. Усиление такого взрыва в слишком большой степени может отвлечь от истории, или даже раздражать. Поэтому, величина усиления огня может зависеть от таких параметров, подобных площади, временной длительности представления, цвета, окружающих цветов (например, можно пожелать воспроизводить солнце очень ярким в научно-фантастическом кинофильме, где кто-то летит по направлению к солнцу, но менее ярким и больше полагаясь на теплые цвета, при воспроизведении его в небе в сцене пустыни; это могло бы кодироваться с помощью Brightlight_1 против Brighlight_2, разных режимов диапазонов воспроизведения с высокой яркостью), но она также может зависеть от структуры текстуры облака пламени, например, насколько темный дым покрывает его (если есть больше дыма, можно было бы сделать промежуточное зарево более ярким, или по меньшей мере психовизуально координировать колориметрию и особенно зависимость яркости этих двух подобластей). Таким образом, подклассами режима облака пламени, например, могли бы быть «Едва покрытое пламя» («Fire_Hardly_Covered») для покрытия 100-80%, «Частично покрытое пламя» («Fire_Partly_Covered») для покрытия 79-40% и «Сильно покрытое пламя» («Fire_Largely_Covered») для покрытия 39-10% темными подобластями. С такой дополнительной информацией характеризации режима (пространственными свойствами, свойствами текстуры, классами объектов, намерением художника, и т.д.), разные устройства отображения или устройства, использующие кодированное изображение, могут лучше настраивать свое окончательное воспроизведение или преобразования для него. К тому же, режимы могут использоваться для отображения в умело выделенные поддиапазоны яркости разных устройств отображения (например, несколько «светлых» и «белых», несколько «темных», и несколько характеристических/контрольных «серых», и т.д.). Например, возьмем воспроизведение сцены на двух устройствах отображения HDR, средних в ближайшем будущем, с яркостью белого в 1500 нит, высококачественном устройстве отображения с белым в 4000 нит, и «LDR/стандартном» устройстве отображения по умолчанию с белым в 500 нит. Можно рассматривать эти устройства отображения в качестве усовершенствованных исполнений, по той причине, что существует дополнительный диапазон(ы) яркости «эффекта/усиления» сверх возможностей менее качественного. Наивно, можно было бы вслепую усиливать все яркие зоны, например, вышеупомянутое облако пламени, или источник света, подобный солнцу, или уличный фонарь.

Тогда как эффект может быть мощным, но по-прежнему приемлемым на устройстве отображения 1500 нит, на устройстве отображения 4000 нит, воспроизведение этой области могло бы быть иметь слишком чрезмерную яркость. Поэтому, можно было бы использовать верхний край диапазона яркости устройства отображения 4000 нит для других разновидностей воспроизведений источников света (например, зажженных лазерных лучей) и ограничить облака пламени поддиапазоном меньшей яркости. В цветовом охвате устройства отображения 500 нит, нет пространства для всех этих разных типов световых режимов, поэтому, все они воспроизводятся в одном и том же поддиапазоне на краю высокой яркости его цветового охвата. Кодировка режима могла бы давать дополнительную специфику о том, каким образом осуществлять воспроизведение на разных разновидностях устройства отображения, например, давать указание имитировать иную яркость с другими свойствами света, например, делать свет слегка более желтоватым или синеватым.

Фиг. 5 показывает пример устройства 500 анализа изображения для предоставления пользователю (специалисту по выравниванию цветов, художнику-колористу, режиссеру по фотографии, художнику (по компьютерной графике), и т.д.) возможности создавать детализации цветового режима. Оно может быть специализированным устройством выравнивания цветов, или блок 501 обработки изображения также может быть процессором общего применения (ЦПУ, CPU), обычным компьютером, выполняющим программное обеспечение выравнивания цвета и создания режима. Типично, блок 501 обработки изображения будет иметь большой набор блоков анализа изображения (или программных инструментальных средств, или подключаемых модулей, например, детекторов контуров, характеризаторов текстуры, определителей людей-персонажей, и т.д.), предоставляющих возможность интеллектуального предварительного анализа входного изображения, предоставляющих возможность создания графических интерфейсных элементов быстрого взаимодействия с пользователем (например, перепрофилируемых сплайновых контуров), так что художник должен тратить минимальные усилия, определяя режимы, их смысл, может быть некоторое лингвистическое пояснение (которые, например, могут использоваться, если кинофильм позже должен обновляться, посредством осознания замысла художника), и то, что должно делать приемное устройство. Выходное изображение O, которое должно отправляться на приемное устройство отображения, может быть только копией входного изображения I с основной камеры 542, но также могло быть модифицировано (например, применением кривых модификации воспроизведения оттенков к выбранным областям) блоком 530 модификации изображения, в каком случае, результирующее изображение является тем, что художник желал бы видеть на своем калибровочном устройстве 540 отображения. В противоположность примеру фиг. 3, специалист по выравниванию цвета конечной фазы производства типично может иметь сложную панель 541 управления в качестве пользовательского средства взаимодействия. Обработчик 505 данных будет принимать пользовательский ввод, например, подобный щелчкам мышью по кнопке для перемещения курсора, и преобразования его в используемые описательные данные D, такие как выбранные местные образцовые цвета. Он будет поддерживать связь с другими модулями, например, процессором 520 гистограмм, который, затем, например, может, если выбран новый прямоугольник, повторно рассчитывать гистограммы всех пикселей внутри, отображать набор гауссовых функций в данные, и т.д. Поэтому обработчик 505 данных типично выполнен с возможностью осуществлять все взаимодействия пользовательского интерфейса, показывая результаты из анализа изображения пользователю понятным (например, подчеркивая или заранее представляя специальные области посредством автоматического анализа изображения по свойствам изображения, основанным не только она яркости, но также основанным на распознавании контента в более передовых вариантах осуществления) образом (например, заранее показывая области и их многомодальный контент посредством псевдоокрашивания геометрии снятого изображения, или псевдоокрашивания представлений свойств - таких как гистограммы или графики свойств классификации, такие как двухмерный график, например, показывающий протяженность области по числовым свойствам текстуры -), но также некоторым образом, который предоставляет возможность легкого взаимодействия с таковыми (например, показывая, какие дополнительные пиксели выбраны, или каким образом они должны приобретать другой колориметрический вид, если пользователь манипулирует гистограммой, и возвращая по обратной связи все пользовательское взаимодействие (не только для извлечения параметров режима, но также для перепрограммирования алгоритмов анализа изображения, например, модуля сегментации изображения, на основании пользовательского ввода нового семантического обозначения касательно контента и структуры изображения, и как оно должно выглядеть с художественной точки зрения).

Модуль 590 пространственной модификации предоставляет возможность выполнять все разновидности пространственного действия, например, он может применять параметрический (настраиваемый художником) профиль повторного затенения к выбранной области.

Кодировщик 510 данных форматирует набор описательных данных D в окончательный выходной сигнал DDO описательных данных, то есть, хотя могут использоваться сложные преобразования кодирования, он может просто копировать выбранные параметры свойств гистограммы/диапазона/цвета (например, минимальную и максимальную яркость, множители для детализации соотношения первой и второй яркости, например, определенные математической формулой для двух наборов пикселей, и т.д.), выбранную пространственную информацию (например, параметры для кодирования линейной цепочки выбранной области изображения), алгоритмы обработки (например, математическую кривую воспроизведения оттенков для применения к пикселям выбранной области), и т.д., непосредственно в сигнале DDO.

Типично, форматер 552 сигнала будет добавлять данные режима, содержащие в себе сигнал DDO, в (потенциально обработанные выходные) данные O сигнала изображения для создания окончательного сигнала S' кинокадра, который может сохраняться, например, на диске формата Bluray или другом запоминающем носителе 550. Но, конечно, если сигнал непосредственно передается/вещается (из отсека обработки телевизионной студии, где вмешательство колориметрического режима может быть простым, однако, по-прежнему происходить почти в реальном времени), то сигнал DDO также может передаваться, например, по отдельному каналу, нежели выпускаемые изображения O, например, через сеть Интернет, для выборочной группы зрителей, это является встраиваемым с обратной совместимостью (например, не осуществляющие оплату потребители могут получать только сигнал O более низкого цветового качества, однако, осуществляющие оплату потребители могут получать дополнительные данные DDO, предоставляющие им возможность иметь гораздо более совершенное - предполагаемое художником воспроизведение - на своем высококачественном устройстве отображения; или так же, как в масштабируемом сценарии, где возможны потоки изображения нескольких качеств, мобильный зритель может выбирать поток с меньшей битовой скоростью передачи по более низкой цене, но также набор режимов для предоставления ему возможности вызывать оптимальное воспроизведение). Вторая камера 543 (или оптическое измерительное устройство, например, спектрометрическая камера) может присутствовать для анализа деталей объекта 544 (например, свойства взаимодействия световой сущности, или дополнительные свойства объекта). При съемке высоко динамичных сцен, с одной стороны, может быть необходим избыточный объем данных кодификации изображения, а с другой стороны, можно снимать больше сцен, чем требуется (например, могут сниматься дефекты декора, которые художник не желает, чтобы воспроизводились, или воспроизведение является необязательно очень критичным/важным, или даже невозможным на некоторых устройствах отображения, например, в неосвещенных областях). Режимы также могут использоваться для изменения кодировок или кодировок более сложной колориметрической модификации лежащих в основе пиксельных изображений. Например, «плохая» камера (например, в существующем ранее кинофильме 60-ых) могла снимать темную неотчетливую область на стене с небольшой детальностью текстуры (в действительности, главным образом, шум). Однако на высококачественных устройствах отображения, можно испытывать желание/необходимость показать некоторую текстуру в такой области. Эти последние несколько битов могут быть добавлены с разным кодированием, например, структура компьютерной графики дефектов стены может кодироваться, чтобы добавляться в последние несколько битов лежащего в основе изображения стены (потенциально, также с учетом оптимизированного художником устранения шумов, которое может количественно определяться в сигнале DDO в качестве математического алгоритма устранения шумов, возможно, с остаточным профилем, либо самого геометрического профиля значений пикселей; приемное устройство отображения затем может учитывать это для настройки своих алгоритмов устранения шумов или другого улучшения изображения), и эта компьютерная графика или другое кодирование может определяться в реальных изменениях объекта сцены второй камерой/оптическим измерителем 543, например, окончательно измеряющим мелкозернистые текстуры и тонкие изменения отражательной способности. Код «Shadow_1» режима, в таком случае, может немедленно связываться с этими дополнительными данными для воспроизведения на приемном устройстве отображения. Обработчик 505 данных также может снабжать художника или оператора постобработки пользовательским интерфейсом для оказания влияния на окончательное кодирование изображения кинокадра (и потенциально, дополнительных данных), например, таким как, каким образом царапины на стене или любое структурное кодирование может кодироваться для предоставления возможности определенного внешнего вида или внешних видов на стороне приемного устройства отображения. Ради этой цели, устройство 500 сконструировано так, что обработчик данных может взаимодействовать с блоком 530 модификации изображения, так чтобы каждая повторная детализация художника-колориста (например, касательно важности темного режима, и его необходимость воспроизводиться более или менее реалистичным/ высококачественным/ визуально ошеломляющим/ и т.д., может непосредственно преобразовываться в повторную кодировку по меньшей мере некоторых областей выходного изображения O, и наоборот, любые повторные кодировки (например, понижение количества битов для кодирования области, возможно помещение некоторой из кодировки мелкозернистой текстуры во второй кодировке) могут, через обработчик данных или другие модули анализа изображения (некоторые из которых, например, могут моделировать характеристики воспроизведения типичного устройства отображения), показываться художнику в качестве выходного изображения с примечаниями A (например, пространственные наложения режимов в изображении O, которые могут отключаться, чтобы показывать реальный колориметрический вид для разных моделируемых типичных приемных устройств отображения).

Фиг. 6 схематически показывает возможный пример того, как сигнал изображения/видеосигнал (например, сжатый согласно стандарту MPEG, аналогичному (AVC) или VC1 MPEG4.10, и т.д. …) может быть улучшен описаниями режимов цветовоспроизведения. Специалист может представить себе, каким образом это может передаваться, например, через беспроводные или проводные сети связи, поэтому, опишем пример в свете сохранения на запоминающем носителе (например, оптическом диске, жестком диске, съемной карте памяти с видеокамеры (потребителя), и т.д.). Типично, само снятое видео (снятое ли без обработки или преобразованное, например, с помощью кривых воспроизведения оттенков), например, сохраняется в качестве (например, блоков значений пикселей, подвергнутых дискретному косинусному преобразованию (DCT)) сигнала 610 изображения для первой области по меньшей мере одного изображения, сигнала 611 изображения для второй области изображения (которая может быть наложением, например, нижней тиккерной лентой, но также более светлыми областями изображения, если первая часть кодирует только снятые яркости пикселей ниже верхнего значения LCmax), и может быть вспомогательный сигнал 612 (например, для обновления области (например, более высокой процентной ставки) битами более высокой точности).

В добавленной детализации режимов (которая может быть записана, например, в качестве данных управления диском на зарезервированном наборе дорожек на диске) есть по меньшей мере один (первый) 620, детализированный (например, для неоновых ламп в текущем кадре или сцене изображений) вместе со своими данными описания (какие его свойства находятся во введенном изображении на приемной стороне O, и что с ними делать, способом цветовоспроизведения, но также, например, обработка резкости может иметь влияние на цветовой внешний вид),

В простом примере сигнала, может быть информация 621 идентификации первой области, например, которая может быть прямоугольником, окружающим первую неоновую лампу (с верхней левой и нижней правой координатами (x1,y1) и (x2,y2)), но также информация, дающая возможность выбора диапазона яркостей (Lmin, Lmax), например, для дальнейшего выбора только наклонной полосы неоновой лампы в прямоугольнике. Также можно было бы осуществить непосредственное связывание, с помощью данных 628 связи, к частям в кодированном видео, например, посредством использования указателей po1, po2 на начало и конец набора блоков DCT. Можно было бы иметь такой прямоугольник для каждого из следующих один за другим изображений в кадре, что предоставляет возможность явного отслеживания движущихся объектов. Более сложные кодировки могут содержать в себе алгоритм выбора для F_sel_1(), чтобы выбирать область в одном или более следующих один за другим изображений (что может влечь за собой анализ кинокадра, такой как увеличение области, подгонка светловин, отслеживание движения с кодированными параметрами движения, и т.д.). Во-вторых, есть параметры 622 воспроизведения первого режима. Таковые, в простом варианте, могут содержать требуемый средний тон H1 и насыщенность s1 (и типично также яркость или освещенность Ld), характеризующие свет, и могут быть дополнительные детализации по допустимым отклонениям d(H1,s1,Ld), которые, например, могут быть пространственными отклонениями, отклонениями на воспроизводящее устройство отображение, чтобы учесть среду помещения для просмотра, и т.д.

В качестве альтернативы, сложные модели могут кодироваться в то, что устройство отображения предпочтительно или всегда должно делать с учетом различных параметров, например, максимально достижимой яркости приемного устройства отображения, потребительских настроек предпочтения (например, потребитель может предпочитать очень темное воспроизведение фильма ужасов, и тогда, «теневые режимы» могут выделяться и воспроизводиться по-разному, но также могут затемнятся нетеневые оставшиеся части изображения, или он может пожелать делать ярче теневые режимы, чтобы сделать его менее жутким [например, момент или постепенность, посредством которых чудовище становится видимым в коридоре, например, сохранять его видимым вне синхронизации с жуткой музыкой], и т.д. Параметры 623 воспроизведения второго режима могут использоваться для воспроизведения первой неоновой лампы разным способом, например, на разном устройстве отображения или с разными настройками. Универсальное предоставление возможности кодирования разных частей изображения в одном и том же режиме, посредством предоставления возможности информации 624 идентификации второго режима и параметров 625 воспроизведения третьего режима, например, предоставляет возможность делать нечто разное с красной и зеленой неоновой лампой, однако, по-прежнему сохраняя некоторую координацию (например, их цветности или пространственные профили могут обрабатываться по-разному, но они могут воспроизводиться со сходной воспринимаемой яркостью).

Более того, могут быть кодированные данные 626 настройки воспроизведения, такие как параметры p1, p2, p3,... для настраиваемых алгоритмов, подобных увеличителю насыщенности, или даже функций fl() обработки.

К тому же, могут быть данные 627 дополнительного улучшения, d1,d2,…, кодированные для улучшения декодированной области изображения, например, посредством добавления графической структуры (или любой дополнительной кодировки для добавления в декодированный локальный кинокадр), как в примере черной стены, приведенном выше, или выполнения некоторой фильтрации, изменяющей внешний вид, например, специализированной обработки артефактов, и т.д. Может быть второй режим 630, детализированный для того же самого изображения(ий), например, каким образом обрабатывать более темные области. Это вновь может выполняться добавлением информации 631 идентификации третьей области, например, цепного кода или контрольных точек для сплайна или другого кода (x13, y13) параметризованного контура, [могут использоваться другие геометрические детализации, например, покрытие иерархиями прямоугольников, и т.д.]…, данных характеристических свойств области пикселей в изображении O, соответствующем упомянутому режиму (например, цветов C1, C2, …, которые могут соответствовать конкретным цветам, таким как преимущественно появляющиеся цвета, или режимам гистограммы, или значениям T1 текстуры, …, например, которые могут использоваться в качестве затравочных величин или иным образом помогать в сегментации, которая может быть выполнена на приемной стороне, для извлечения области, которая должна воспроизводиться предписанным образом. Более того, могут быть функции 632 детализации режима, как для извлечения конкретной области F_sel_1(), так и для обработки ее, например, для ее воспроизведения на основном устройстве отображения (F_proc_1()), или получения из нее воспроизведения для вспомогательного устройства отображения (F_proc_2()). Параметры, относящиеся к усредненному намеченному цвету и отклонениям (622, 623), функциям ограничения, целевым функциям, функциям (F_proc_1()) обработки, и т.д., все приведены примером данных 650 детализации воспроизведения. В зависимости от того, насколько умело координируется алгоритмическая идентичность отправляющей и приемной стороны, могут содержаться коды 640 алгоритмической идентификации, например, оставаясь с идентификатором Alg_ID, какие алгоритмы или тип алгоритмов стороны приемника вовлечены, и каким образом - посредством идентификатора ACT действия - они должны координировать свое действие для намеченного воспроизведения (например, это может быть настолько же простым, как запрос художника, чтобы устранение шумов было выключено для определенного режима, или применялось с определенной интенсивностью; конечно, легче, например, если проигрыватель формата Bluray выполнен с возможностью соответствовать тому, что требует новое поколение дисков, и справляться со всей обработкой, но может быть предпочтительным по-прежнему управлять чем-то касательно дополнительной обработки устройства отображения в таком случае).

К тому же, может быт поле 633 описания, предоставляющее художнику возможность детализировать, каким было его намерение при воспроизведении режима («он должен выглядеть темным и непривлекательным»), как это может быть осуществлено в действительности психофизически, математически над лежащими в основе элементами сцены изображения («колонны должны быть видимы заметно, кроме того, более глубокие части подвала позади них должны воспроизводиться таинственным трудным для различения образом») и т.д. Эти описательные данные могут использоваться транскодером в более позднем удобном случае или транслироваться конечному зрителю через пользовательский интерфейс в качестве текстового описания намерений художника. Конечно, дополнительные кодировки могли бы добавляться к этому не более чем концептуальному иллюстративному примеру.

Фиг. 7 показывает примерную систему декодирования и отображения изображения на приемной стороне, например, в жилом помещении потребителя (специалист поймет, каким образом подобная система согласно принципам нашего изобретения будет выглядеть, например, в цифровом кинотеатре). Вариант осуществления устройства 701 обработки изображения цветовоспроизведения является телевизионная абонентская приставка с встроенным считывателем формата Bluray (но это также, например, может быть дорожный компьютер, или портативное устройство, подобное мобильному телефону, и т.д., то есть, устройство 701 может быть таким же небольшим, как сменная карта [до тех пор, пока оно способно считывать детализации режима и представлять возможность обработки цветов с помощью них], или настолько же большим, как профессиональная осуществляющая транскодирование киностудия) который способен принимать диск 702 Bluray с полным аннотированным режимом сигналом изображения, кодированным на нем, то есть, как сигналом O изображения, таки сигналом DDO данных описания, содержащим в себе описания разных встречающихся режимов (например, для нескольких критичных с художественной точки зрения кадров, например, где происходит действие ночного кошмара или разрывы взрывающихся космических кораблей, или последовательности ярких красочных сновидений, и т.д.). Подобным образом, однако, устройство может иметь первое соединение 703, например, с кабелем 703 передачи телевизионного сигнала (или антенной, или входом для цифровых фотографий на карте памяти, и т.д.; сигнал изображения также может в разное время означать, например, кодированный сигнал телевизионного стандарта, или необработанный файл изображения, и т.д.), который переносит (типично, кодированное со сжатием) входное изображение O. Данные DDO описания могут переходить на другой носитель через второй разъем 704, например, присоединенный к сети 705 Интернет и веб-странице, предоставляющей услугу улучшения изображения. Таким образом, DDO, имеющие отношение к O, означают, что, хотя они типично могут кодироваться в одном и том же хранилище, или быть принимаемыми посредством одной и той же передачи, есть только несколько средств для извлечения тех дополнительных данных DDO, которые, однако, соответствуют по меньшей мере некоторой области пикселей некоторого изображения из входного сигнала O изображения. Устройство 701 имеет ИС (интегральную схему, IC) которая содержит по меньшей мере извлекающее устройство 701, выполненное с возможностью извлекать из DDO данные кодирования режима и выводит их непосредственно, либо преобразовывать их в новые значения, более подходящие для выполнения управляемой обработки изображения блоком 712 обработки изображения. Это может быть воплощено настолько простым, чтобы применять только некоторые преобразования воспроизведения оттенков к пикселям, соответствующим специальному, подлежащему воспроизведению режиму, или иметь сложные алгоритмы, например, типично соответствующие любому из алгоритмов, которые могут применяться на стороне создания, например, алгоритм/блок сегментации и/или отслеживания. Проигрыватель 701 может выводить свое улучшенное намеченное выходное изображение 1R' воспроизведения на устройство отображения/телевизор через видеокабель 720 (например, HDMI), но, поскольку телевизор может выполнять (или подвергаться запросу, чтобы выполнять) дополнительную обработку (в своей ИС 731 анализа и/или обработки изображения), второе соединение 721 (кабельное или беспроводное) может присутствовать для сигналов CS управления (которые могут содержать любые данные из сигнала DDO и/или управляющих данных, выведенных из него). Типично, эти дополнительные сигналы управления могут добавляться по видеокабелю, например, посредством обновления (беспроводного) протокола HDMI. Устройство 723 также может отправлять сигналы цветности через соединение 723 на второе цветное устройство 740 отображения окружающей обстановки, которое также может получать свои предназначенные входные сигналы цветности воспроизведения через устройство 730 отображения. Примерное устройство отображения бывает с подсветкой 732 на СИД (светоизлучающих диодах, LED), идеальной для воспроизведения HDR. Могут присутствовать устройства измерения среды, подобные измерительному устройству 780, например, недорогая камера, которые могут контролировать окрестность телевизора, лампы в помещении, отражения на передней панели телевизора, видимость калибровочных шкал серого, и т.д., и они могут передавать эту информацию в устройство 701 и/или устройство 730 отображения, фактически, они могут вырабатывать входной сигнал для колориметрического управления (яркостью и/или цветностью) нескольких устройств в помещении, таких как устройства отображения, лампы, обтюраторные очки, и т.д.

Алгоритмические компоненты, раскрытые в этом тексте, могут быть (полностью или частично) осуществлены на практике в качестве аппаратных средств (например, частей специализированной ИС) или в качестве программного обеспечения, работающего на специальном цифровом сигнальном процессоре или универсальном процессоре, и т.д.

Специалисту должно быть понятно из нашего представления, какие компоненты могут быть необязательными улучшениями и могут быть реализованы в комбинации с другими компонентами, и какие (необязательные) этапы способов соответствуют соответственным средствам устройств, и наоборот. Слово «устройство» в этой заявке используется в своем самом широком смысле, а именно, группы средств, предоставляющих возможность реализации конкретной цели, а отсюда, например, может быть (небольшой частью) ИС или специализированным прибором (таким как прибор с устройством отображения), или частью сетевой системы, и т.д. «Система» также подразумевается используемой в самом широком смысле, так, она может, среди прочего, содержать одиночное устройство, часть устройства, набор из (частей) взаимодействующих устройств, и т.д.

Смысл компьютерного программного продукта должен пониматься охватывающим любую физическую реализацию набора команд, дающих возможность процессору общего применения или специального назначения возможность, после последовательности этапов загрузки (которые могут включать в себя этапы промежуточного преобразования, такие как трансляция на промежуточный язык и конечный язык процессора), вводить команды в процессор и выполнять любые из характеристических функций изобретения. В частности, компьютерный программный продукт может быть реализован в качестве данных на носителе, например, таком как диск или лента, данных, присутствующих в памяти, данных, перемещающихся через сетевое соединение - проводное или беспроводное -, или управляющей программы на бумаге. Кроме управляющей программы, характеристические данные, требуемые для программы, также могут быть воплощены в качестве компьютерного программного продукта.

Некоторые из этапов, требуемых для работы способа, уже могут присутствовать в функциональных возможностях процессора взамен описанных в компьютерном программном продукте, такие как этапы ввода и вывода данных.

Должно быть отмечено, что вышеупомянутые варианты осуществления скорее иллюстрируют, чем ограничивают изобретение. В тех случаях, когда специалист может легко осуществить отображение представленных примерах в другие области формулы изобретения, мы, ради краткости, не упоминали все эти углубленные возможные варианты. Кроме комбинаций элементов изобретения, которые комбинируются в формуле изобретения, возможны другие комбинации элементов. Любая комбинация элементов может быть реализована в едином специализированном элементе.

Любой символ ссылки в скобках в пункте формулы изобретения не предназначен для ограничения пункта формулы изобретения. Слово «содержащий» не исключает наличия элементов или аспектов, не перечисленных в пункте формулы изобретения. Использование единственного числа при описании элемента не исключает наличия множества таких элементов.

Изобретение относится к технологиям отображения изображений. Техническим результатом является повышение реалистичности изображения, за счет передачи семантических метаданных от стороны создателя контента. Предложен способ добавления информации детализации воспроизведения отображения во входное изображение из набора видеоизображений. Причем данная информация используется приемной стороной устройства обработки изображения цветовоспроизведения для управления воспроизведением яркостей области изображения соответствующих изображений для, по меньшей мере, двух отображений различных динамических диапазонов яркости. Способ включает в себя этап, на котором показывают входное изображение человеку-оператору, а также согласно способу принимают через пользовательский интерфейс описательные данные режима области во входном изображении от человека-оператора. При этом описательные данные включают в себя: информацию выбора области, чтобы позволить извлечение области пикселей на приемной стороне, причем информация выбора области содержит значение яркости, разделяющее пиксели, имеющие яркости соответственно выше или ниже указанного, или геометрическую информацию. 4 н. и 8 з.п. ф-лы, 7 ил.

1. Способ добавления информации (D) детализации воспроизведения отображения во входное изображение (I) из набора видеоизображений, причем информация используется приемной стороной устройства (701) обработки изображения цветовоспроизведения для управления воспроизведением яркостей области изображения соответствующих изображений для по меньшей мере двух отображений различных динамических диапазонов яркости, при этом способ содержит этапы, на которых:
а) показывают входное изображение (I) человеку-оператору;
б) принимают через пользовательский интерфейс (303, 308) описательные данные (D) режима области во входном изображении от человека-оператора, причем описательные данные (D) включают в себя: во-первых, информацию выбора области (F_sel()_1), чтобы позволить извлечение области пикселей на приемной стороне, причем информация выбора области содержит по меньшей мере одно значение яркости, разделяющее пиксели, имеющие яркости соответственно выше или ниже указанного, или геометрическую информацию, очерчивающую область пикселей, и во-вторых, описатель (rd) режима, который кодирует детализацию цветовоспроизведения для этой области пикселей для по меньшей мере двух разных видеоотображений приемной стороны, имеющих различные динамические диапазоны выходной яркости, причем описатель режима (rd) содержит параметрическую формулировку намеченного воспроизведения, как функции по меньшей мере яркости отображения белого, таким образом, что приемная сторона устройства 701 обработки изображения цветовоспроизведения может определить окончательное намеченное воспроизведение на основе фактического значения его яркости отображения белого и параметрической формулировки;
в) кодируют описательные данные (D), включающие в себя упомянутый описатель (rd) режима, в выходной сигнал (DDO) данных описания в сигнале (S′) кодирования передачи видео, подходящем для передачи видео в приемную сторону, таком как семейство кодирования MPEG, с изображением (О) пикселей, выведенным из входного изображения и кодирующимся в соответствии с кодированием передачи видео и описательными данными (D), кодирующимися в виде метаданных.

2. Способ добавления информации (D) детализации воспроизведения отображения во входное изображение (I) из набора видеоизображений по п. 1, причем описатель (rd) режима содержит детализацию намеченной выходной яркости на устройстве воспроизведения для яркости в изображении (О), которое выведено из входного изображения, причем намеченная выходная яркость параметрически определена как процент от максимальной яркости отображения.

3. Способ добавления информации (D) детализации воспроизведения отображения во входное изображение (I) из набора видеоизображений по любому из предыдущих пунктов, причем описательные данные (D) от человека-оператора включают в себя детализации того, каким образом отображать по меньшей мере одно подмножество значений изображения (О), выведенного из входного изображения (I) для поддиапазона отображения воспроизводимых интенсивностей цвета приемного устройства отображения.

4. Способ добавления информации, определяющей изображение, во входной сигнал изображения (I) по п. 3, в котором поддиапазон отображения яркости, соответствующий подмножеству пикселей в выходном сигнале (О) изображения, должен отображаться, и поддиапазон отображения яркости имеет тип, содержащий значения яркости пикселя с наивысшей яркостью, равной максимальной яркости и меньшей, чем полный диапазон яркости отображения, или поддиапазон отображения имеет тип, содержащий значения яркости пикселя с низшей яркостью, равной минимальной яркости и меньшей, чем полный диапазон яркости отображения, или поддиапазон отображения имеет тип, содержащий значения насыщенности ниже максимальной насыщенности.

5. Устройство (500) анализа изображения для добавления информации (D) детализации воспроизведения отображения во входное изображение (I) из набора видеоизображений,
причем информация используется приемной стороной устройства (701) обработки изображения цветовоспроизведения для управления воспроизведением яркостей области изображения соответствующих изображений для по меньшей мере двух отображений различных динамических диапазонов яркости, при этом устройство содержит:
а) устройство вывода изображения (502) для показа входного изображения (I) человеку-оператору;
б) устройство ввода данных (503) для приема команд пользовательского интерфейса (CU), и обработчик (505) данных, выполненный с возможностью преобразования команд пользовательского интерфейса (CU) в описательные данные (D) режима области во входном изображении, причем описательные данные (D) включают в себя: во-первых, информацию выбора области (F_sel()_1), чтобы позволить извлечение области пикселей на приемной стороне, причем информация выбора области содержит по меньшей мере одно значение яркости, разделяющее пиксели, имеющие яркости соответственно выше или ниже указанного, или геометрическую информацию, очерчивающую область пикселей, и во-вторых, описатель (rd) режима, который кодирует детализацию цветовоспроизведения для этой области пикселей для по меньшей мере двух различных видеоотображений приемной стороны, имеющих различные динамические диапазоны выходной яркости, причем описатель режима (rd) содержит параметрическую формулировку намеченного воспроизведения, как функции по меньшей мере яркости отображения белого, таким образом, что приемная сторона устройства 701 обработки изображения цветовоспроизведения может определить окончательное намеченное воспроизведение на основе фактического значения его яркости отображения белого и параметрической формулировки;
- в) кодировщик 510 данных, выполненный с возможностью кодирования описательных данных (D), включающих в себя упомянутый описатель (rd) режима, в выходной сигнал (DDO) данных описания, в качестве метаданных в сигнале (S′) кодирования передачи видео, подходящем для передачи видео в приемную сторону, таком как семейство кодирования MPEG, и выполненный с возможностью кодирования изображения (О) пикселей, выведенных из входного изображения, согласно определению кодирования передачи видео.

6. Устройство (500) анализа изображения по п. 5, дополнительно содержащее по меньшей мере одно из следующего:
модуль (520) анализа гистограмм, выполненный с возможностью формировать гистограммы подмножеств пикселей изображения;
модуль (522) сегментации, выполненный с возможностью сегментировать область пикселей в изображении на основе критериев, например, таких как диапазон яркости;
модуль (524) отслеживания движения, выполненный с возможностью отслеживать объект в последовательных изображениях.

7. Способ обработки входного сигнала (О) изображения, содержащего видеоизображения, и кодированного кодированием передачи видео, таким как MPEG, подходящим для передачи видео в сторону, потребляющую видео, причем видеоизображения должны воспроизводиться на одном из различных устройств отображения видео потребляющей стороны, имеющих различные динамические диапазоны выходной яркости на основе информации (D) детализации воспроизведения отображения, относящейся к видеоизображениям, причем способ содержит этапы на которых:
извлекают описательные данные (D), детализирующие цветовой режим из кодирования (DD0) информации детализации воспроизведения отображения, причем описательные данные содержат: во-первых, информацию выбора области (F_sel()_1), чтобы позволить извлечение области пикселей на приемной стороне, причем информация выбора области содержит по меньшей мере одно значение яркости, разделяющее пиксели, имеющие яркости соответственно выше или ниже указанного значения яркости, или геометрическую информацию, очерчивающую область пикселей, и во-вторых, описатель (rd) режима, который кодирует детализацию цветовоспроизведения для этой области пикселей для по меньшей мере двух различных видеоотображений приемной стороны, имеющих различные динамические диапазоны выходной яркости, причем описатель режима (rd) содержит параметрическую формулировку намеченного воспроизведения, как функции по меньшей мере яркости отображения белого, таким образом, что приемная сторона устройства (701) обработки изображения цветовоспроизведения может определить окончательное намеченное воспроизведение на основе фактического значения яркости отображения белого его приемной стороны и параметрической формулировки;
определяют значение яркости отображения белого; и
обрабатывают изображение входного изображения (О) для получения выходного изображения (IR), которое должно воспроизводиться, на основе обработки, определенной по значению отображения яркости белого приемной стороны и описателя (rd) режима.

8. Способ обработки входного сигнала (О) изображения, который должен воспроизводиться, по п. 7, причем способ дополнительно содержит этапы, на которых извлекают данные (650) детализации воспроизведения из кодирования (DDO), и выполняют обработку над по меньшей мере первой областью входного изображения (О) на основе данных (650) детализации воспроизведения.

9. Способ обработки входного сигнала (О) изображения, который должен воспроизводиться, по п. 7 или 8, в котором обработка содержит выделение диапазона яркости выходного изображения части входного изображения на основе описателя (rd) режима.

10. Способ обработки входного сигнала (О) изображения, который должен воспроизводиться, по п. 7 или 8, в котором обработка содержит применение отображения кривой воспроизведения оттенков к части входного изображения, определенной в описателе (rd) режима, которое отображает входные яркости пикселей части изображения в выходные яркости таких пикселей.

11. Устройство (701) для обработки входного сигнала (О) изображения, содержащего видеоизображения и кодированного кодированием передачи видео, таким как MPEG, подходящим для передачи видео и стороне, потребляющей видео, причем видеоизображения должны воспроизводиться на одном из различных устройств отображения стороны, потребляющей видео, имеющих различные динамические диапазоны выходной яркости на основе информации (D) детализации воспроизведения отображения, относящейся к видеоизображениям, причем устройство содержит:
извлекающее устройство, выполненное с возможностью извлечения описательных данных (D), детализирующих цветовой режим из кодирования (DDO) информации детализации воспроизведения отображения, причем описательные данные содержат: во-первых, информацию выбора области (F_sel()_1), чтобы позволить извлечение области пикселей на приемной стороне, причем информация выбора области содержит по меньшей мере одно значение яркости, разделяющее пиксели, имеющие яркости соответственно выше или ниже указанного, или геометрическую информацию, очерчивающую область пикселей, и во-вторых, описатель (rd) режима, который кодирует детализацию цветовоспроизведения для этой области пикселей для по меньшей мере двух различных видеоотображений приемной стороны, имеющих различные динамические диапазоны выходной яркости, причем описатель режима (rd) содержит параметрическую формулировку намеченного воспроизведения, как функции по меньшей мере яркости отображения белого, таким образом, что приемная сторона устройства (701) обработки изображения цветовоспроизведения может определить окончательное намеченное воспроизведение на основе фактического значения его яркости отображения белого и параметрической формулировки;
средство для установления значения параметра динамического диапазона устройства отображения; и
блок (712) обработки изображения, выполненный с возможностью применения обработки изображения к входному изображению (О) для получения выходного изображения (IR), которое должно воспроизводиться, на основе обработки, определенной по значению отображения яркости белого и описателя (rd) режима.

12. Устройство (701) для обработки входного сигнала (О) изображения, который должен воспроизводиться, по п. 11, в котором блок (712) обработки изображения выполнен с возможностью применять преобразование цвета к по меньшей мере яркостям пикселей в части входного изображения, причем преобразование цвета определяется по меньшей мере частично в описателе (rd) области.