УСТРОЙСТВО ОБРАБОТКИ ИНФОРМАЦИИ, СПОСОБ ОБРАБОТКИ ИНФОРМАЦИИ И МАШИНОЧИТАЕМЫЙ НОСИТЕЛЬ ИНФОРМАЦИИ Российский патент 2016 года по МПК G06T1/00 A61B3/14 

УРОВЕНЬ ТЕХНИКИ, К КОТОРОМУ ОТНОСИТСЯ ИЗОБРЕТЕНИЕ

Область техники, к которой относится изобретение

[0001] Настоящее изобретение относится к устройству обработки информации, способу обработки информации и машиночитаемому носителю информации, используемым для офтальмологической диагностики.

Описание предшествующего уровня техники

[0002] Чтобы диагностировать на раннем этапе связанные с образом жизни заболевания или заболевания, высоко ранжированные как причины слепоты, широко проводятся обследования зрения. В качестве офтальмологического устройства, использующего принцип конфокального сканирующего микроскопа, известен SLO (сканирующий лазерный офтальмоскоп). Сканирующий лазерный офтальмоскоп растрово сканирует лазерный луч, служащий в качестве измерительного света на глазном дне, и быстро получает плоское изображение высокого разрешения на основе силы возвратного света. Устройство для захвата такого плоского изображения в дальнейшем будет называться SLO-устройством, и захваченное плоское изображение - SLO-изображением.

[0003] В последнее время SLO-устройство может получать SLO-изображение сетчатки, имеющее повышенное разрешение по горизонтали, путем увеличения диаметра луча у измерительного света. Однако, когда увеличивается диаметр луча у измерительного света, отношение S/N и разрешение SLO-изображения уменьшаются в результате аберраций в глазу, который является предметом обследования. Это приводит к проблеме в получении SLO-изображения сетчатки. Чтобы решить эту проблему, разработано SLO-устройство с адаптивной оптикой, которое включает в себя систему адаптивной оптики, сконфигурированную для измерения аберрации в глазу, который будет обследоваться, с использованием датчика волнового фронта в реальном масштабе времени и коррекции аберрации измерительного света или возвратного света, которая имеет место в глазу, который будет обследоваться, с использованием устройства коррекции волнового фронта. Это позволяет получить SLO-изображение, имеющее высокое разрешение по горизонтали.

[0004] Такое SLO-изображение, имеющее высокое разрешение по горизонтали, можно получить в виде движущегося изображения. С использованием движущегося изображения можно измерить различные виды биологической информации. Например, чтобы неинвазивно наблюдать гемодинамику, из каждого кадра выделяется кровеносный сосуд сетчатки, и измеряется скорость движения клеток крови в капилляре и т.п. Чтобы оценить связь со зрительной работоспособностью, используя SLO-изображение, обнаруживаются светочувствительные клетки Р, и измеряется распределение плотности или размещение светочувствительных клеток Р.

[0005] Фактически, угол рассматривания у одного SLO-изображения, имеющего высокое разрешение по горизонтали, которое может захватить SLO-устройство с адаптивной оптикой, обычно небольшой. По этой причине, когда целевая область захвата изображений больше угла рассматривания у SLO-изображения, имеющего высокое разрешение по горизонтали, становится проблемой то, как установить область захвата изображений в целевой области захвата изображений. Это будет описываться со ссылкой на фиг. 7A-7G. Фиг. 7А - вид, схематически показывающий сечение глаза, который будет обследоваться. Фиг. 7B-7G являются видами, показывающими примеры SLO-изображения или целевой области захвата изображений.

[0006] Фиг. 7В - вид, показывающий пример SLO-изображения, имеющего высокое разрешение по горизонтали. На фиг. 7В наблюдаются светочувствительные клетки Р, область Q низкой яркости, соответствующая положению капилляра, и область W высокой яркости, соответствующая положению лейкоцита. Чтобы наблюдать светочувствительные клетки Р или измерять распределение светочувствительных клеток Р, SLO-изображение, которое показано на фиг. 7В, захватывается путем установки положения фокуса возле слоя вне сетчатки (В5 на фиг. 7А).

[0007] С другой стороны, кровеносные сосуды сетчатки и разветвленные капилляры пронизывают слои внутри сетчатки (В2-В4 на фиг. 7А). В частности, в пораженном глазе целевая область захвата изображений часто больше угла рассматривания у одного SLO-изображения, которое может захватить SLO-устройство. Фиг. 7С и 7D показывают примеры, в которых целевая область захвата изображений больше угла рассматривания у SLO-изображения. Фиг. 7С показывает пример частого места повреждения капилляров (кольцеобразная область, окаймленная пунктирной линией). Фиг. 7D показывает пример обширной области отсутствия светочувствительных клеток (замкнутая черная область). В случаях, которые показаны на фиг. 7С и 7D, если все целевые области захвата изображений получаются с большим увеличением, то установка условий захвата изображений для многих SLO-изображений может быть обременительной, или увеличение времени захвата изображений может создать большую нагрузку на субъекта. Целевая область захвата изображений включает в себя как области с большой потребностью в захвате изображений с большим увеличением для диагностики, так и области с незначительной потребностью. Поэтому необходимо подходящим образом установить области захвата изображений, чтобы все области, где нужно получить изображения с большим увеличением, можно было захватить в течение времени обследования, что не создает нагрузку на субъекта.

[0008] В связи с этим приспособление, которое захватывает множество изображений от SLO с адаптивной оптикой путем изменения положения захвата изображений и отображает их в виде панорамного изображения, описывается в выложенном Патенте Японии №2012-213513 как методика касательно установки параметров для получения множества изображений с большим увеличением.

[0009] Однако, когда клетки, ткани или области повреждения, которые будут специально наблюдаться или измеряться, рассредоточиваются шире области, охваченной изображением (изображение dh с большим увеличением), имеющим высокое разрешение по горизонтали, традиционное приспособление имеет следующие проблемы в эффективном захвате области клеток или т.п.:

i) оператору нужно отдельно назначать значения параметров получения (например, положение получения, угол рассматривания, размер пикселя, количество кадров и частоту кадров) у множества изображений D_Hj с большим увеличением, препятствуя эффективному получению множества изображений; и

ii) когда область цели наблюдения шире изображения D_H с большим увеличением захватывается с использованием одних и тех же параметров получения изображений с большим увеличением, количество изображений с большим увеличением (общее количество кадров) является огромным (от нескольких тысяч до нескольких десятков тысяч), и поэтому сложно эффективно получать изображения.

[0010] Также в приспособлении из выложенного Патента Японии №2012-213513 параметры получения у некоторого количества изображений с большим увеличением определяются вручную для каждого изображения. Оператору приходится выполнять обременительные операции для установки параметров получения.

СУЩНОСТЬ ИЗОБРЕТЕНИЯ

[0011] Настоящее изобретение создано с учетом вышеописанных проблем и предоставляет методику эффективного и надлежащего захвата тканей, клеток или возможных повреждений, чье распределение меняется в зависимости от глаза, который будет обследоваться, в диапазоне шире угла рассматривания у изображения с большим увеличением.

[0012] В соответствии с одной особенностью настоящего изобретения предоставляется устройство обработки информации для управления в одной области захвата изображений захватом множества изображений с большим увеличением, имеющих угол рассматривания меньше угла рассматривания области захвата изображений, содержащее: блок представления, сконфигурированный для представления оператору множества базовых шаблонов для выбора, причем каждый шаблон представляет распределение положений, в которых нужно соответственно захватывать изображения с большим увеличением; блок регулировки, сконфигурированный для регулирования в соответствии с командой оператора условия захвата изображений для множества изображений с большим увеличением, заранее ассоциированного с базовым шаблоном, выбранным из множества базовых шаблонов; и блок управления, сконфигурированный для побуждения устройства захвата изображений захватить множество изображений с большим увеличением в области захвата изображений в соответствии с отрегулированным условием захвата изображений.

[0013] Дополнительные признаки настоящего изобретения станут очевидными из нижеследующего описания вариантов осуществления (со ссылкой на прилагаемые чертежи).

КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ

[0014] Фиг. 1А-1С - блок-схемы, показывающие примеры компоновок системы, включающей в себя офтальмологическое устройство 10;

[0015] Фиг. 2 - блок-схема, показывающая пример аппаратной компоновки офтальмологического устройства 10;

[0016] Фиг. 3 - блок-схема, показывающая пример функциональной компоновки офтальмологического устройства 10;

[0017] Фиг. 4 - вид для объяснения общей компоновки устройства 20 захвата SLO-изображений;

[0018] Фиг. 5 - блок-схема последовательности операций обработки, исполняемой офтальмологическим устройством 10;

[0019] Фиг. 6A-6M - виды для объяснения шаблонов получения изображений;

[0020] Фиг. 7A-7G - виды для объяснения содержания обработки изображений;

[0021] Фиг. 8 - блок-схема последовательности операций, показывающая подробности обработки по получению изображений с большим увеличением;

[0022] Фиг. 9 - блок-схема последовательности операций, показывающая подробности обработки по отображению изображений;

[0023] Фиг. 10 - блок-схема, показывающая пример функциональной компоновки офтальмологического устройства 10;

[0024] Фиг. 11 - блок-схема последовательности операций, показывающая подробности обработки по получению изображений с большим увеличением;

[0025] Фиг. 12А-12С - виды для объяснения шаблона получения изображений и исключительных кадров, включенных в движущееся изображение с большим увеличением;

[0026] Фиг. 13 - блок-схема, показывающая пример функциональной компоновки офтальмологического устройства 10;

[0027] Фиг. 14 - вид для объяснения общей компоновки томографического устройства 60;

[0028] Фиг. 15A-15J - виды для объяснения шаблонов получения изображений; и

[0029] Фиг. 16 - блок-схема последовательности операций, показывающая подробности обработки по отображению изображений.

ОПИСАНИЕ ВАРИАНТОВ ОСУЩЕСТВЛЕНИЯ

[0030] Сейчас будут подробно описываться варианты осуществления настоящего изобретения со ссылкой на прилагаемые чертежи.

[0031] Первый вариант осуществления

При получении множества изображений с большим увеличением от SLO с адаптивной оптикой офтальмологическое устройство в качестве устройства обработки информации в соответствии с этим вариантом осуществления представляет базовые шаблоны параметров, ассоциированные с условиями захвата изображений, заранее подготовленными для получения множества изображений с большим увеличением, оператору (пользователю) и побуждает оператора выбрать шаблон. Далее офтальмологическое устройство побуждает оператора регулировать параметры получения изображений по необходимости в соответствии с формой повреждения и определяет значения параметров получения касательно множества изображений с большим увеличением в соответствии с содержанием регулировки. Ниже будет описываться пример, в котором оператор выбирает базовый шаблон для получения множества изображений по дискообразному шаблону для обширной области отсутствия светочувствительных клеток в макулярной части и определяет положение получения, угол рассматривания, размер пикселя, количество кадров, частоту кадров и положение в фокусе у каждого изображения с большим увеличением.

[0032] (Общая компоновка)

Фиг. 1А - блок-схема, показывающая компоновку системы, включающей в себя офтальмологическое устройство 10, в соответствии с этим вариантом осуществления. Как показано на фиг. 1А, офтальмологическое устройство 10 соединяется с устройством 20 захвата SLO-изображений, служащим в качестве устройства захвата изображений, и сервером 40 данных посредством LAN 30 (локальная сеть), образованной из оптического волокна, US3, IEEE 1394 и т.п. Отметим, что форма соединения этих устройств не ограничивается показанным на фиг. 1А примером. Например, эти устройства могут соединяться посредством внешней сети, такой как Интернет. В качестве альтернативы офтальмологическое устройство 10 может соединяться непосредственно с устройством 20 захвата SLO-изображений.

[0033] Устройство 20 захвата SLO-изображений захватывает (фотографирует) изображение D_L с широким углом рассматривания или изображение Он с большим увеличением части глазного дна. Устройство 20 захвата SLO-изображений передает изображение D_L с широким углом рассматривания или изображение D_H с большим увеличением и информацию о положениях F_L и F_H меток фиксации, используемых во время захвата изображений, офтальмологическому устройству 10 и серверу 40 данных.

[0034] Отметим, что когда изображения с соответствующими увеличениями получаются в разных положениях захвата изображений, полученные изображения представляются с помощью D_Lj и D_Hj. Точнее говоря, i и j являются переменными, представляющими положения захвата изображений, которые устанавливаются как i=1, 2, …, imax и j=1, 2, …, jmax. Когда изображения с большим увеличением получаются с множеством разных увеличений, они представляются с помощью D_1j, D_2k, … в убывающем порядке увеличений. Изображение D_1j с наибольшим увеличением будет называться изображением с большим увеличением, а изображения D_2k, … будут называться изображениями с промежуточным увеличением.

[0035] Сервер 40 данных хранит данные условий захвата изображений, признаки изображений глаза, нормальные значения, ассоциированные с распределением признаков изображений глаза, и т.п. В качестве данных условий захвата изображений сервер 40 данных сохраняет изображения D_L с широким углом рассматривания и изображения D_H с большим увеличением глаза, который будет обследоваться, и положения F_L и F_H меток фиксации, используемые во время захвата изображений, которые выводятся из устройства 20 захвата SLO-изображений, и признаки изображений глаза, выведенные из офтальмологического устройства 10. В этом варианте осуществления признаки изображений, ассоциированные со светочувствительными клетками Р, капиллярами Q, клетками W крови, кровеносными сосудами сетчатки и границами слоя сетчатки, обрабатываются как признаки изображений глаза. В ответ на запрос от офтальмологического устройства 10 сервер 40 данных передает офтальмологическому устройству 10 изображения D_L с широким углом рассматривания, изображения D_H с большим увеличением, признаки изображений глаза и данные нормальных значений признаков изображений.

[0036] (Офтальмологическое устройство)

Офтальмологическое устройство 10 реализуется с помощью устройства обработки информации, например встроенной системы, персонального компьютера (PC) или планшетного терминала. Аппаратная компоновка офтальмологического устройства 10 будет описываться со ссылкой на фиг. 2. Ссылаясь на фиг. 2, CPU 301 является центральным процессором и управляет работой всего офтальмологического устройства совместно с другими составляющими элементами на основе компьютерной программы, например OS (операционная система) или прикладной программы. RAM 302 является записываемым запоминающим устройством и функционирует в качестве рабочей области CPU 301 или т.п. ROM 303 является постоянным запоминающим устройством и хранит программы, например базовую программу ввода/вывода, и данные, которые будут использоваться в базовой обработке. Внешнее запоминающее устройство 304 является устройством, функционирующим в качестве массового запоминающего устройства, и реализуется с помощью накопителя на жестком диске или полупроводникового запоминающего устройства. Монитор 305 является устройством отображения, служащим в качестве средства отображения для отображения команды, введенной с клавиатуры 306 или указательного устройства 307, вывода офтальмологического устройства 10 в ответ на это, и т.п. Клавиатура 306 и указательное устройство 307 являются устройствами, которые принимают команду, введенную оператором. Интерфейс 308 является устройством, которое ретранслирует обмен данными с внешним устройством.

[0037] Управляющая программа, которая реализует функцию обработки изображений в соответствии с этим вариантом осуществления, и данные, которые будут использоваться при исполнении управляющей программы, хранятся на внешнем запоминающем устройстве 304. Управляющая программа и данные загружаются в RAM 302 по необходимости через шину 309 под управлением CPU 301 и исполняются CPU 301, чтобы функционировать в качестве блоков, которые будут описаны ниже.

[0038] Функциональная компоновка офтальмологического устройства 10 в соответствии с этим вариантом осуществления будет описываться далее со ссылкой на фиг. 3. Фиг. 3 - блок-схема, показывающая функциональную компоновку офтальмологического устройства 10. Как показано на фиг. 3, офтальмологическое устройство 10 включает в себя блок 110 получения данных, запоминающее устройство 120, блок 130 обработки изображений и блок 140 получения команд.

[0039] Блок 110 получения данных является функциональным блоком, который получает данные, например данные изображений и данные условий захвата изображений. Блок 110 получения данных включает в себя блок 111 получения изображения с широким углом рассматривания, который получает изображение с широким углом рассматривания, и блок 112 получения изображения с большим увеличением, который получает изображение с большим увеличением. Запоминающее устройство 120 является функциональным блоком, который хранит данные, полученные блоком 110 получения данных, и набор 121 шаблонов получения изображений. Набор 121 шаблонов получения изображений является набором шаблонов базовых установок (в дальнейшем будут называться "шаблонами получения изображений"), ассоциированным с параметрами при получении множества изображений с большим увеличением.

[0040] Блок 130 обработки изображений является функциональным блоком, который выполняет такую обработку, как определение условий захвата изображений, установка условий захвата изображений и отображение захваченных изображений. Блок 130 обработки изображений включает в себя блок 131 управления отображением, который выполняет управление отображением захваченных изображений и т.п., блок 132 определения, который определяет условия захвата изображений, и блок 133 совмещения, который совмещает область захвата изображений на основе условий захвата изображений. Блок 131 управления отображением включает в себя блок 1311 представления шаблона получения изображений, который отображает шаблон получения изображений на мониторе и представляет его оператору. Блок 132 определения включает в себя блок 1321 определения увеличения, который определяет увеличение для захвата изображений, блок 1322 определения положения, который определяет положение захвата изображений, блок 1323 определения времени, который определяет момент захвата изображений и т.п., и блок 1324 определения порядка, который определяет порядок захвата изображений.

[0041] (Устройство захвата SLO-изображений)

Далее со ссылкой на фиг. 4 будет описываться пример компоновки устройства 20 захвата SLO-изображений, включающего в себя систему адаптивной оптики. Отметим, что компоновка устройства захвата SLO-изображений, которая будут описана ниже, является всего лишь примером, и устройство захвата SLO-изображений можно составить с использованием любого устройства захвата изображений при условии, что оно может получать изображение с большим увеличением.

[0042] Ссылочная позиция 201 обозначает источник света. Фиг. 4 показывает пример, в котором источник 201 света реализуется с помощью SLD (суперлюминесцентный диод). В этом варианте осуществления источник света, используемый для захвата изображения глазного дна, и источник света, используемый для измерения волнового фронта, реализуются с помощью источника 201 света. Однако могут использоваться отдельные источники света, и световые лучи могут объединяться в середине оптического пути.

[0043] Свет, излученный источником 201 света, проходит по одномодовому оптическому волокну 202 и выходит из коллиматора 203 в виде параллельного измерительного света 205. Измерительный свет 205, который вышел, проходит через блок 204 деления света, образованный из расщепителя луча, и направляется в систему адаптивной оптики.

[0044] Система адаптивной оптики включает в себя блок 206 деления света, датчик 215 волнового фронта, устройство 208 коррекции волнового фронта и отражающие зеркала с 207-1 по 207-4, сконфигурированные для направления к ним света. Отражающие зеркала с 207-1 по 207-4 располагаются так, что по меньшей мере зрачок глаза становится оптически сопряженным с датчиком 215 волнового фронта и устройством 208 коррекции волнового фронта. В этом варианте осуществления в качестве блока 206 деления света используется расщепитель луча. В этом варианте осуществления в качестве устройства 208 коррекции волнового фронта используется пространственный модулятор фазы, использующий жидкокристаллический элемент. Отметим, что в качестве устройства коррекции волнового Фронта может использоваться деформируемое зеркало. Свет, который прошел через систему адаптивной оптики, одномерно или двумерно сканируется сканирующей оптической системой 209.

[0045] В этом варианте осуществления в качестве сканирующей оптической системы 209 используются два гальваносканера для основного сканирования (горизонтальное направление глазного дна) и вспомогательного сканирования (вертикальное направление глазного дна). Для быстрого захвата изображений может использоваться резонансный сканер на стороне основного сканирования в сканирующей оптической системе 209.

[0046] Измерительный свет 205, сканированный сканирующей оптической системой 209, облучает глазное яблоко 211 через окуляры 210-1 и 210-2. Измерительный свет 205, который облучил глазное яблоко 211, отражается или рассеивается глазным дном. Оптимальное облучение может выполняться в соответствии с диоптрийной шкалой глазного яблока 211 путем регулирования положений окуляров 210-1 и 210-2. Отметим, что хотя линза является здесь частью окуляра, она может быть образована из сферического зеркала или т.п.

[0047] Отраженный/рассеянный свет (возвратный свет), отраженный или рассеянный сетчаткой глазного яблока 211, движется обратно по тому же пути, что и падающий свет. Свет частично отражается блоком 206 деления света к датчику 215 волнового фронта и используется для измерения волнового фронта светового луча. Датчик 215 волнового фронта соединяется с блоком 216 управления адаптивной оптикой и передает принятый волновой фронт блоку 216 управления адаптивной оптикой. Устройство 208 коррекции волнового фронта также соединяется с блоком 216 управления адаптивной оптикой и выполняет модуляцию по команде блока 216 управления адаптивной оптикой. Блок 216 управления адаптивной оптикой на основе волнового фронта, измеренного датчиком 215 волнового фронта, вычисляет величину модуляции (величину коррекции), которая приводит волновой фронт, достигающий устройства 208 коррекции волнового Фронта, к свободному от аберраций волновому фронту, и дает команду устройству 208 коррекции волнового фронта модулировать таким образом волновой фронт. Отметим, что измерение волнового фронта и команда устройству 208 коррекции волнового фронта проводятся периодически, и выполняется управление с обратной связью, чтобы всегда получать оптимальный волновой фронт.

[0048] Отраженный/рассеянный свет, который прошел через блок 206 деления света, частично отражается блоком 204 деления света и направляется в датчик 214 силы света через коллиматор 212 и оптическое волокно 213. Датчик 214 силы света преобразует свет в электрический сигнал. Блок 217 управления строит изображение в виде изображения глазного дна и отображает его на дисплее 218. Отметим, что в показанной на фиг. 4 компоновке, когда увеличивается угол отклонения сканирующей оптической системы, и блок 216 управления адаптивной оптикой дает команду не корректировать аберрации, устройство 20 захвата SLO-изображений может работать как обычное SLO-устройство и захватывать SLO-изображение с широким углом рассматривания (изображение dl с широким углом рассматривания).

[0049] (Процедура обработки)

Конкретное содержание обработки, исполняемой офтальмологическим устройством 10, будет подробно описываться совместно с ролями функциональных блоков. Фиг. 5 - блок-схема последовательности операций, показывающая процедуру обработки, исполняемую офтальмологическим устройством 10. Нижеследующие процессы исполняются под управлением CPU 301.

[0050] <Этап S510>

Блок 111 получения изображения с широким углом рассматривания просит устройство 20 захвата SLO-изображений получить изображение D_L с широким углом рассматривания и положение F_L метки фиксации. В этом варианте осуществления будет объясняться пример, в котором изображение D_L с широким углом рассматривания получается путем установки положения F_L метки фиксации в центральную ямку макулярной части. Отметим, что способ установки положения захвата изображений этим не ограничивается, и положение захвата изображений может устанавливаться в другом произвольном положении.

[0051] В ответ на запрос получения от блока 111 получения изображения с широким углом рассматривания устройство 20 захвата SLO-изображений получает изображение D_L с широким углом рассматривания и положение F_L метки фиксации и передает их блоку 111 получения изображения с широким углом рассматривания. Блок 111 получения изображения с широким углом рассматривания принимает изображение D_L с широким углом рассматривания и положение F_L метки фиксации от устройства 20 захвата SLO-изсбражений посредством LAN 30. Блок 111 получения изображения с широким углом рассматривания сохраняет принятое изображение D_L с широким углом рассматривания и положение F_L метки фиксации в запоминающем устройстве 120. Отметим, что в примере из этого варианта осуществления изображение D_L с широким углом рассматривания является движущимся изображением, чьи кадры уже совмещены.

[0052] <Этап S520>

Блок 1311 представления шаблона получения изображений получает по меньшей мере один тип шаблона получения изображений (шаблон базовых установок, ассоциированный с параметрами при получении множества изображений с большим увеличением) из запоминающего устройства 120 и выборочно отображает его на мониторе 305. Произвольный шаблон может представляться в качестве шаблона получения изображений. В примере из этого варианта осуществления будет описываться случай, где представляются базовые шаблоны, которые показаны на фиг. 6A-6F. Фиг. 6А показывает линейный шаблон, фиг. 6В показывает крестообразный шаблон, фиг. 6С показывает радиальный шаблон, фиг. 6D показывает прямоугольный шаблон, фиг. 6Е показывает дискообразный шаблон, и фиг. 6F показывает кольцеобразный шаблон.

[0053] Блок 140 получения команд получает извне команду касательно выбора шаблона получения изображений, нужного оператору. Эта команда вводится оператором, например, посредством клавиатуры 306 или указательного устройства 307. В качестве альтернативы, если монитор 305 включает в себя жидкокристаллическую сенсорную панель, то команду можно вводить посредством этой сенсорной панели. В примере из этого варианта осуществления, поскольку целью наблюдения является дискообразная область отсутствия светочувствительных клеток, которая показана на фиг. 7D, выбирается дискообразный шаблон получения изображений, показанный на фиг. 6Е.

[0054] Отметим, что может представляться не только шаблон получения изображений, включающий в себя только изображения с большим увеличением по одному типу увеличения, как показано на фиг. 6A-6F, но также и шаблон получения изображений, образованный путем объединения изображений с множеством увеличений. Например, как показано на фиг. 6G, для включения в шаблон получения можно задать не только изображения D_1j с большим увеличением, но также изображения D_2k с промежуточным увеличением. Шаблон получения, включающий в себя не только изображения с большим увеличением, но также изображения с промежуточным увеличением, в дальнейшем будет называться "шаблоном получения изображений с несколькими увеличениями". Такой шаблон получения изображений подходит при уменьшении количества полученных изображений или при выполнении более точного совмещения с изображением D_L с широким углом рассматривания. Отметим, что в шаблоне получения изображений с несколькими увеличениями шаблоны получения изображений, образованные изображениями с большим увеличением и изображениями с промежуточным увеличением, могут иметь одинаковую форму или разные формы на основе увеличения. Например, изображения D_2k с промежуточным увеличением, имеющие меньшее увеличение, можно получить по прямоугольному шаблону, а изображения D_1j с большим увеличением можно получить по дискообразному шаблону. Когда шаблон получения изображений меняется между разными увеличениями, на этом этапе также получается информация о типе шаблона получения изображений у каждого увеличения. Отметим, что Фиг. 6G показывает случай, где шаблон получения изображений, образованный изображениями D_1j с большим увеличением, и шаблон, образованный изображениями D_2k с промежуточным увеличением, имеют одинаковую крестообразную форму.

[0055] Может представляться шаблон, в котором множество базовых шаблонов размещается в разных положениях (в дальнейшем будет называться "шаблоном получения изображений с несколькими размещениями"), как показано на фиг. 6Н. Фиг. 6Н иллюстрирует шаблон, в котором размещается множество прямоугольных шаблонов получения изображений. Этот шаблон подходит, когда существует множество повреждений, или при сравнении формы либо динамики цели наблюдения между частями. Отметим, что шаблон получения изображений с несколькими размещениями также включает в себя случай, где изображения получаются путем изменения положения в фокусе между базовыми шаблонами. Может представляться шаблон получения изображений (в дальнейшем будет называться "составным шаблоном получения изображений"), заданный сочетанием базовых шаблонов, как показано на фиг. 6I. Составной шаблон получения изображений подходит при эффективном получении изображений для разных целей с помощью одного обследования. Например, шаблон на фиг. 6I подходит как для случая, где измеряется форма бессосудистой области (замкнутая область, указанная белой линией на фиг. 6I) в центральной ямке (положение центра тяжести бессосудистой области), указанной заштрихованным кружком на фиг. 6I (прямоугольный шаблон), так и случая, где плотность светочувствительных клеток измеряется на каждом заранее установленном расстоянии от центральной ямки (крестообразный шаблон).

[0056] <Этап S530>

Блок 132 определения определяет параметры получения у множества изображений с большим увеличением, устанавливая параметры получения у множества изображений, включенного в выбранный на этапе S520 шаблон получения изображений, в качестве начальных значений и побуждая оператора при необходимости регулировать параметры получения изображений, и изображения получаются. Обработка (в дальнейшем будет называться "обработкой по получению изображений с большим увеличением") из этого этапа будет подробно описываться позже со ссылкой на блок-схему последовательности операций из фиг. 8.

[0057] <Этап S540>

Блок 133 совмещения совмещает изображение D_L с широким углом рассматривания и изображения D_H с большим увеличением и получает относительные положения изображений D_H с большим увеличением на изображении D_L с широким углом рассматривания. Совмещение означает автоматическое оценивание взаимного расположения между изображением D_L с широким углом рассматривания и изображениями D_H с большим увеличением и установку положений изображений D_H с большим увеличением в соответствующие положения изображения D_L с широким углом рассматривания. Отметим, что изображение D_L с широким углом рассматривания является изображением, заданным заранее и имеющим увеличение меньше, чем изображения с большим увеличением, чтобы представлять всю область захвата изображений. Если существует область перекрытия между изображениями D_Hj с большим увеличением, то сначала вычисляется степень подобия между изображениями касательно области перекрытия, и положения изображений D_Hj с большим увеличением совмещаются с положением, где степень подобия между изображениями максимальна. Далее, если на этапе S530 получаются изображения с большим увеличением, имеющие разные разрешения, то совмещение выполняется последовательно от изображения с меньшим увеличением. Например, когда изображение D_1j с большим увеличением и изображение D_2k с промежуточным увеличением получаются в качестве изображений D_H с большим увеличением, совмещение выполняется сначала между изображением D_L с широким углом рассматривания и изображением D_2k с промежуточным увеличением. Затем совмещение выполняется между изображением D_2k с промежуточным увеличением и изображением D_1j с большим увеличением. Если изображения с большим увеличением имеют только один тип разрешения, то само собой разумеется, что выполняется только совмещение между изображениями D_H с большим увеличением и изображением D_L с широким углом рассматривания.

[0058] Отметим, что блок 133 совмещения получает положение F_H метки фиксации, используемое при захвате изображений D_H с большим увеличением, из запоминающего устройства 120 и устанавливает его в качестве начальной точки для поиска параметров совмещения при совмещении между изображением D_L с широким углом рассматривания и изображениями D_H с большим увеличением. 3 качестве степени подобия между изображениями или способа координатного преобразования может использоваться произвольный известный способ. В этом варианте осуществления совмещение выполняется с использованием коэффициента корреляции в качестве степени подобия между изображениями и аффинного преобразования в качестве способа координатного преобразования.

[0059] <Этап S550>

Блок 131 управления отображением отображает изображения D_H с большим увеличением на изображении D_L с широким углом рассматривания на основе значений параметров совмещения, полученных на этапе S540. Обработка (в дальнейшем будет называться "обработкой по отображению изображений") из этого этапа будет подробно описываться позже со ссылкой на блок-схему последовательности операций из фиг. 9.

[0060] <Этап S560>

Блок 140 получения команд получает извне команду о том, сохранять ли на сервере 40 данных изображение D_L с широким углом рассматривания, изображения D_H с большим увеличением, положения F_L и F_H меток фиксации и значения параметров совмещения, полученные на этапе S540. Эта команда вводится оператором, например, посредством клавиатуры 306 или указательного устройства 307. Когда дается команда сохранения (ДА на этапе S560), процесс продвигается к этапу S570. Когда не дается команда сохранения (НЕТ на этапе S560), процесс продвигается к этапу S580.

[0061] <Этап S570>

Блок 130 обработки изображений ассоциирует друг с другом дату/время обследования, информацию для идентификации глаза, который будет обследоваться, изображение D_L с широким углом рассматривания, изображения D_H с большим увеличением, положения F_L и F_H меток фиксации и значения параметров совмещения и передает их серверу 40 данных.

[0062] <Этап S580>

Блок 140 получения команд получает извне команду о том, завершать ли обработку с помощью офтальмологического устройства 10 изображения D_L с широким углом рассматривания и изображений D_H с большим увеличением. Эта команда вводится оператором, например, посредством клавиатуры 306 или указательного устройства 307. После получения команды завершить обработку (ДА на этапе S580) обработка завершается. После получения команды продолжить обработку (НЕТ на этапе S580) процесс возвращается к этапу S510 для выполнения обработки для следующего глаза, который будет обследоваться, или того же глаза.

[0063] (Обработка по получению изображений с большим увеличением)

Далее со ссылкой на блок-схему последовательности операций из фиг. 8 будут описываться подробности обработки по получению изображений с большим увеличением, исполняемой на этапе S530.

[0064] <Этап S810>

Блок 132 определения получает из запоминающего устройства 120 тип шаблона получения изображений, выбранного посредством блока 140 получения команд, и значения параметров получения у каждого изображения D_H с большим увеличением в шаблоне. Точнее говоря, из параметров получения у каждого изображения с большим увеличением, хранимых выбранным шаблоном получения изображений, следующие значения параметров вводятся в качестве начальных значений. А именно, блок 132 определения вводит значения количества увеличений, угла рассматривания и размера пикселя в блок 1321 определения увеличения, положения получения и положения в фокусе в блок 1322 определения положения, количества кадров, частоты кадров и подсчета повторных получений в блок 1323 определения времени и порядка получения в блок 1324 определения порядка в качестве начальных значений.

[0065] <Этап S820>

Блок 132 определения посредством блока 140 получения команд получает условия ограничения, ассоциированные с установленными значениями параметров получения у каждого изображения D_Hj с большим увеличением, включенных в выбранный шаблон получения изображений. Условия ограничения задают диапазоны, которые могут принимать условия захвата изображений. Оператор может назначать/устанавливать условия ограничения, ассоциированные с произвольным шаблоном получения изображений. В примере из этого варианта осуществления будет описываться случай, где оператор может установить следующие четыре условия ограничения:

a) общее время получения изображений;

b) тип увеличения (количество увеличений, угол рассматривания и размер пикселя);

c) положение в фокусе; и

d) область перекрытия между соседними изображениями с большим увеличением.

В этом случае

a) является условием ограничения, ассоциированным с разрешенным временем, которое может выдержать глаз, который будет обследоваться,

b) является условием ограничения, ассоциированным с величиной признака изображения, предполагаемой к получению в положении захвата изображений,

c) является условием ограничения, ассоциированным с положением в направлении глубины (ось z), где существует цель наблюдения, и

d) допустимая величина несоответствия фиксации у глаза, который будет обследоваться.

[0066] В этом варианте осуществления будет объясняться пример, в котором устанавливаются

a) 15 мин

b) 1 и 300 [мкм] × 300 [мкм], и 1 [мкм/пиксель] × 1 [мкм/пиксель]

c) слой светочувствительных клеток, и

d) 20% площади изображения с большим увеличением.

[0067] <Этап S830>

Блок 1321 определения увеличения определяет тип увеличения (количество увеличений, угол рассматривания и размер пикселя) у изображений D_H с большим увеличением. Более того, блок 1322 определения положения определяет положение получения и положение в фокусе у каждого изображения D_Hj с большим увеличением.

[0068] В этом варианте осуществления угол рассматривания, размер пикселя и положение в фокусе являются фиксированными значениями вследствие условий ограничения, полученных на этапе S820, но положение получения каждого изображения D_Hj с большим увеличением является переменным параметром. Поэтому оператор сначала назначает положение некой точки (представляющая точка), которая представляет шаблон получения изображений на глазном дне. В этом варианте осуществления представляющая точка является центральной точкой С на фиг. 6Е и устанавливается в центральной ямке глаза, который будет обследоваться. Далее оператор увеличивает или уменьшает размер всего шаблона получения изображений, посредством этого увеличивая или уменьшая количество положений получения изображений с большим увеличением, сохраняя при этом размер области перекрытия между изображениями с большим увеличением и определяя положение получения каждого изображения D_Hj с большим увеличением. В этом варианте осуществления, когда оператор выдвигает с диска положение (одного) изображения с большим увеличением, расположенного в конце шаблона получения изображений, увеличивается размер всего шаблона получения изображений, и определяются положения получения изображений D_Hj с большим увеличением, указанных прямоугольными областями из белых линий на фиг. 7G.

[0069] Отметим, что представляющая точка не ограничивается центральной точкой шаблона получения изображений. Например, она может быть положением конкретного изображения с большим увеличением, включенного в шаблон получения изображений. В шаблоне получения изображений с несколькими увеличениями, который показан на фиг. 6G, размеры шаблонов получения изображений со всеми увеличениями можно увеличить или уменьшить одновременно, либо размер шаблона получения изображений можно изменять для каждого увеличения.

[0070] С тем же успехом в шаблоне получения изображений с несколькими размещениями, который показан на фиг. 6Н, размеры или интервалы размещения всех шаблонов получения изображений можно изменять одновременно. Размер или интервал размещения шаблона получения изображений можно изменять между базовыми шаблонами. С тем же успехом в составном шаблоне получения изображений, который показан на фиг. 6I, размеры шаблонов всех типов можно изменять одновременно, либо размер шаблона получения изображений можно изменять между типами шаблона получения изображений.

[0071] <Этап S840>

Блок 1323 определения времени определяет количество кадров, частоту кадров и подсчет повторных получений у изображений с большим увеличением. В примере из этого варианта осуществления частота кадров и подсчет повторных получений фиксируются в 32 [кадров/с] и 1 соответственно, а количество кадров является переменным параметром. Что касается способа изменения значения переменного параметра, значение переменного параметра может назначаться с использованием произвольного известного интерфейса пользователя (в дальнейшем - сокращенно "UI"), В примере из этого варианта осуществления оператор управляет UI изменения значения (веса) параметра, который показан на фиг. 6J, посредством этого эффективно изменяя значение параметра. Это UI, сконфигурированный для регулирования веса в радиальном направлении, ассоциированного с количеством кадров у каждого изображения D_Hj с большим увеличением. На фиг. 6J Wc представляет центральный вес в организованном дискообразном шаблоне получения изображений (фиг. 7G), a Wo представляет внешний вес. Когда внешний вес Wo снижается, автоматически определяется количество кадров каждого изображения D_Hj с большим увеличением, чтобы поэтапно становиться меньше от центра шаблона.

[0072] В шаблоне с несколькими увеличениями, который показан на фиг. 6G, может использоваться UI регулировки значения (или веса) параметра, который показан на фиг. 6К. Регулировка значения параметра выполняется в соответствии со следующими процедурами i)-iv):

i) выбрать целевой переменный параметр для регулировки из списка переменных параметров V;

ii) выбрать из карты регулировки целевое увеличение и целевое изображение, для которого нужно выполнить регулировку значения параметра;

iii) выбрать способ R изменения (взвешивания) значения параметра для множества изображений при выбранном увеличении; и

iv) определить значение (вес) параметра для выбранного изображения в UI изменения значения параметра (В на фиг. 6К).

[0073] Отметим, что в i) показанная на фиг. 6К карта регулировки отображается для каждого типа выбранного переменного параметра. Касательно ii) фиг. 6К иллюстрирует случай, где целевое увеличение равно D₁, и изображение D_1c в центре выбирается в качестве целевого изображения для регулировки.

[0074] Для iii) фиг. 6К иллюстрирует пример, в котором способ R установки (взвешивания) значения параметра для изображений выбирается из

установки одинакового значения для множества изображений с одинаковым увеличением (однородный),

поэтапного изменения значения параметра (постепенный) и

изменения значения параметра между отдельными назначенными изображениями (отдельный). В показанном на фиг. 6К примере выбирается поэтапное изменение значения параметра (постепенный способ).

[0075] Касательно iv) фиг. 6К иллюстрирует случай, где оператор назначает максимальное значение (белый) на цветной полосе В, посредством этого автоматически изменяя значения параметров у изображений с таким же увеличением, как у выбранного целевого изображения D_1c, так что значение параметра увеличивается поэтапно к выбранному изображению D_1c.

[0076] Отметим, что на фиг. 6К цветная полоса В используется в качестве UI изменения значения параметра, и значения параметров выражаются серой шкалой. Однако настоящее изобретение этим не ограничивается. Например, UI изменения значения параметра может быть ползунком или окном списка (с численными значениями). Значения параметров могут отображаться в виде численных значений (сами значения параметров или веса) либо с помощью цвета. В качестве альтернативы значения параметров могут отображаться с использованием численных значений и серой шкалы (цвета).

[0077] В шаблоне с несколькими размещениями, который показан на фиг. 6Н, вес (например, Wm1dhi на фиг. 6L) в каждом шаблоне и веса (Wm1 и Wm2) между шаблонами регулируются, как показано на фиг. 6L. В составном шаблоне получения изображений, который показан на фиг. 6М, устанавливаются значения параметров (Wai и Wci) в соответствующих шаблонах и значение параметра (Wbi) на изображении, общем для обоих шаблонов. Процедура регулировки почти такая же, как для шаблона получения изображений с несколькими увеличениями на фиг. 6К. Точнее говоря, только вышеописанная процедура iii) заменяется процедурой выбора способа R изменения (взвешивания) значения параметра для множества изображений не в выбранном увеличении, но в выбранном шаблоне или общей области.

[0078] <Этап 3850>

Блок 1324 определения порядка определяет порядок получения изображений dh] с большим увеличением. В этом варианте осуществления повторная обработка выполняется путем установки из процедур i)-iv), которые будут описаны ниже, i) в качестве самого внутреннего цикла (наивысший приоритет), ii) в качестве второго внутреннего цикла, iii) в качестве третьего внутреннего цикла и iv) в качестве самого внешнего цикла (наименьший приоритет). Точнее говоря, следующие процедуры исполняются путем установки исходного положения получения в самое важное положение для наблюдения (в этом варианте осуществления - центральная ямка) и увеличения получения в наименьшее увеличение:

i) получать изображения с одинаковым шаблоном размещения, одинаковым увеличением получения и одинаковым положением получения изображений вплоть до подсчета повторных получений;

ii) сдвинуть изображение с одинаковым шаблоном размещения и одинаковым увеличением получения в соседнее положение получения изображений и получить изображения снова в соответствии с такой же процедурой, как i);

iii) когда ii) завершена, увеличить значение увеличения получения, снова исполнить операцию ii) и повторять такую же операцию такое же количество раз, как количество увеличений; и

iv) когда iii) завершена, исполнить операцию iii) в другом размещении и повторять операцию, пока не получены изображения во всех размещениях.

[0079] Отметим, что в примере из этого варианта осуществления никакое повторное получение не выполняется в i) (подсчет получения равен только 1), и обработка iv) пропускается, потому что шаблон получения изображений не является шаблоном с несколькими размещениями, который показан на фиг. 6Н. Движение к соседнему изображению в ii) может выполняться в произвольном направлении. В этом варианте осуществления изображение движется по спирали от центральной ямки, потому что увеличивается влияние на зрительную работоспособность, и важность при наблюдении становится высокой, когда сокращается расстояние до центральной ямки.

[0080] С помощью процессов из этапов с S830 по S850 оператор может легко изменять параметры получения изображений, представляющие условия захвата изображений для изображений с большим увеличением.

[0081] <Этап 3860>

Блок 112 получения изображения с большим увеличением просит устройство 20 захвата SLO-изображений получить множество изображений D_Hj с большим увеличением и положения F_Hj меток Фиксации, используя параметры получения изображений, назначенные блоком 132 определения. Устройство 20 захвата SLO-изображений получает изображения D_Hj с большим увеличением и положения F_Hj меток фиксации и передает их в ответ на запрос получения. Блок 112 получения изображения с большим увеличением принимает изображения D_Hj с большим увеличением и положения F_Hj меток Фиксации от устройства 20 захвата SLO-изображений посредством LAN 30. Блок 112 получения изображения с большим увеличением сохраняет принятые изображения D_Hj с большим увеличением и положения F_Hj меток фиксации в запоминающем устройстве 120. Отметим, что в этом варианте осуществления изображения D_Hj с большим увеличением являются движущимися изображениями, которые подверглись межкадровому совмещению.

[0082] (Обработка по отображению изображений)

Далее со ссылкой на блок-схему последовательности операций из фиг. 9 будут описываться подробности обработки по отображению изображений, исполняемой на этапе S550.

[0083] <Этап S910>

Представляющее изображение формируется из каждого из движущихся изображений, полученных блоком 111 получения изображения с широким углом рассматривания и блоком 112 получения изображения с большим увеличением. В этом варианте осуществления формируется перекрывающееся изображение для каждого движущегося изображения, и это перекрывающееся изображение устанавливается в качестве представляющего изображения. Способ формирования представляющего изображения этим не ограничивается. Например, в качестве представляющего изображения может устанавливаться контрольный кадр, установленный во время межкадрового совмещения каждого движущегося изображения. В качестве способа установки контрольного кадра можно использовать произвольный известный способ установки, и например, кадр с первым номером можно установить в качестве контрольного кадра.

[0084] <Этап 3920>

Когда получается множество изображений D_Hj с большим увеличением, блок 131 управления отображением корректирует разность плотности между изображениями с большим увеличением. Чтобы скорректировать разность плотности, применяется произвольный известный способ корректировки яркости. Например, в этом варианте осуществления формируется гистограмма Hj каждого изображения D_Hj с большим увеличением, и значение яркости у каждого изображения D_Hj с большим увеличением линейно преобразуется так, что среднее и дисперсия гистограммы Hj имеют значения, общие для изображений D_Hj с большим увеличением, посредством этого корректируя разность плотности.

[0085] <Этап S930>

При отображении каждого изображения D_H с большим увеличением в виде движущегося изображения на изображении D_L с широким углом рассматривания блок 131 управления отображением устанавливает скорость воспроизведения изображения D_H с большим увеличением. Скорость воспроизведения регулируется путем размещения в области отображения изображений ползунка регулировки скорости воспроизведения или кнопки покадрового продвижения и побуждения оператора назначить скорость воспроизведения посредством блока 140 получения команд.

[0086] Отметим, что в этом варианте осуществления данная обработка пропускается, потому что склеиваются и отображаются сформированные на этапе S910 неподвижные изображения (перекрывающиеся изображения).

[0087] <Этап S940>

Блок 131 управления отображением управляет отображением/неотображением и увеличением отображения каждого изображения D_Hj с большим увеличением. Отображение/неотображение изображения устанавливается путем отображения на мониторе 305 списка, ассоциированного с полученными изображениями, размещения UI (в этом варианте осуществления - флажка) возле названий изображений из списка полученных изображений и побуждения оператора назначить ВКЛ/ОТКЛ в UI посредством блока 140 получения команд. UI (флажок), используемый для назначения всех изображений одновременно, и UI (флажок), используемый для назначения изображений одновременно на основе увеличения получения, также приготовлены для упрощения переключения отображения/неотображения некоторого количества изображений.

[0088] На этом этапе устанавливается не только отображение/неотображение изображений, но также и порядок перекрытия в случае, где существует область перекрытия между соседними изображениями D_Hj с большим увеличением, или в случае, где захват изображений выполняется в одном и том же положении метки фиксации множество раз. В качестве способа установки порядка перекрытия у движущихся изображений может использоваться произвольный способ установки, включая ручную установку. В этом варианте осуществления вычисляется индекс качества изображения или величина несоответствия фиксации у каждого изображения, и изображение, имеющее наибольшее оценочное значение, которое получается с использованием линейной суммы индексов качества изображения или величин несоответствия фиксации в качестве оценочной функции, устанавливается в качестве самого верхнего слоя и отображается. В качестве индекса качества изображения может использоваться произвольный известный индекс. В этом варианте осуществления используется среднее значение яркости у гистограммы изображения. В качестве величины несоответствия фиксации используется значение, полученное путем сложения по всем кадрам абсолютных значений расстояний сдвига (переноса) между соседними кадрами. Отметим, что произвольный индекс может использоваться при условии, что он может оценивать несоответствие фиксации. Что касается увеличения отображения, изображение с большим увеличением, назначенное оператором посредством блока 140 получения команд, увеличивается и отображается на мониторе 305.

[0089] Отметим, что хотя изображение D_L с широким углом рассматривания в вышеописанном примере является одним SLO-изображением с широким углом рассматривания, настоящее изобретение этим не ограничивается. Например, синтезированное изображение, получающееся путем совмещения изображений D_Li с широким углом рассматривания в разных положениях получения, может использоваться в качестве изображения D_L с широким углом рассматривания.

[0090] Как описано выше, офтальмологическое устройство 10 в соответствии с этим вариантом осуществления побуждает оператора выбрать шаблон из базовых шаблонов, ассоциированных с множеством параметров получения изображений с большим увеличением (условия захвата изображений), регулирует значения параметров в соответствии с формой повреждения и получает изображения с большим увеличением на основе отрегулированных значений параметров. Точнее говоря, офтальмологическое устройство 10 выборочно представляет оператору множество базовых шаблонов, представляющих распределение множества положений для захвата изображений с большим увеличением. Условия захвата изображений, ассоциированные с захватом изображений с большим увеличением, которые заранее ассоциируются с базовым шаблоном, выбранным из множества базовых шаблонов в соответствии с выбором оператора, регулируются на основе команды оператора. Устройство захвата изображений захватывает множество изображений с большим увеличением в области захвата изображений в соответствии с отрегулированными условиями захвата изображений. Поэтому в соответствии с этим вариантом осуществления можно без труда установить подходящие условия захвата изображений, чтобы получить в заданной области захвата изображений множество изображений с большим увеличением, имеющих угол рассматривания меньше, чем у области захвата изображений. Это позволяет эффективно захватывать ткани, клетки или возможные повреждения, чье распределение меняется в зависимости от глаза, который будет обследоваться, в диапазоне шире изображения с большим увеличением.

[0091] В этом варианте осуществления условие захвата изображений регулируется на основе по меньшей мере одного из положения представляющей точки в выбранном базовом шаблоне в области захвата изображений, назначенного оператором условия ограничения и величины изменения условия захвата изображений. Поэтому можно без труда установить подходящее условие захвата изображений в соответствии с целью захвата изображений. Например, клетки, ткани и формы или плотности повреждения имеют индивидуальные отличия, и область, которая будет специально наблюдаться или измеряться, изменяется в зависимости от глаза, который будет обследоваться. В соответствии с компоновкой из этого варианта осуществления после того, как задается клетка, ткань или область повреждения у цели наблюдения для каждого глаза, который будет обследоваться, параметры получения у множества изображений D_Hj с большим увеличением можно установить автоматически в соответствии с формой или плотностью области.

[0092] Отметим, что в этом варианте осуществления положение на изображении с широким углом рассматривания, в котором нужно захватить изображение с большим увеличением, порядок захвата изображений, количество изображений, которые будут захвачены в одном и том же положении, угол рассматривания и размер пикселя у изображения с большим увеличением, количество кадров захвата изображений, частота кадров и положение в фокусе проиллюстрированы в качестве условий захвата изображений. Однако условия захвата изображений ими не ограничиваются.

[0093] Второй вариант осуществления

Офтальмологическое устройство в соответствии с этим вариантом осуществления при получении множества изображений с большим увеличением от SLO с адаптивной оптикой конфигурируется для определения значений параметров, ассоциированных с получением множества изображений с большим увеличением, на основе признаков изображений, выделенных из изображения, имеющего угол рассматривания шире, чем у изображений с большим увеличением. Точнее говоря, при получении множества изображений D_1j с большим увеличением по кольцеобразному шаблону для области парафовеальных капилляров положение получения, угол рассматривания, размер пикселя, количество кадров, частота кадров и подсчет повторных получений у каждого изображения D_1j с большим увеличением определяются на основе признаков изображений. К тому же оценивается, включает ли в себя каждое полученное изображение с большим увеличением исключительный кадр, например несоответствие фиксации или моргание, и после оценивания на основе результата оценки, что необходимо повторное получение изображения с большим увеличением, изображение с большим увеличением получается на основе тех же значений параметров получения изображений.

[0094] (Общая компоновка)

Фиг. 1В показывает компоновку устройств, соединенных с офтальмологическим устройством 10, в соответствии с этим вариантом осуществления. Этот вариант осуществления отличается от первого варианта осуществления в том, что устройство 50 получения распределенных по времени данных соединяется с офтальмологическим устройством 10 в дополнение к устройству 20 захвата SLO-изображений и серверу 40 данных. Устройство 50 получения распределенных по времени данных получает данные биомедицинских сигналов (называемые "распределенными по времени данными"), которые меняются независимо и периодически, и образуется, например, из детектора пульсовой волны или электрокардиографа. Устройство 50 получения распределенных по времени данных получает изображения D_Hj с большим увеличением и одновременно получает распределенные по времени данные Sj в соответствии с работой оператора (не показано). Полученные распределенные по времени данные Sj передаются офтальмологическому устройству 10 и серверу 40 данных. В этом варианте осуществления изображения с большим увеличением получаются синхронно с периодическим моментом, представленным распределенными по времени данными, измеренными у субъекта, и отображаются на мониторе 305. Поэтому можно получить или воспроизвести изображение с большим увеличением в подходящий момент в соответствии с изменением в живом организме.

[0095] Сервер 40 данных хранит распределенные по времени данные Sj, признаки изображений глаза и нормальные значения, ассоциированные с распределением признаков изображений глаза, в дополнение к изображению D_L с широким углом рассматривания и изображениям D_H с большим увеличением глаза, который будет обследоваться, и данным условий получения, например положениям F_L и F_H меток фиксации, используемым во время получения. В этом варианте осуществления в качестве признаков изображений глаза хранятся кровеносные сосуды сетчатки, капилляры Q и клетки W крови. Однако признаки изображений ими не ограничиваются. Сервер 40 данных сохраняет распределенные по времени данные Sj, выведенные из устройства 50 получения распределенных по времени данных, и признаки изображений глаза, выведенные из офтальмологического устройства 10. В ответ на запрос от офтальмологического устройства 10 сервер 40 данных передает офтальмологическому устройству 10 распределенные по времени данные Sj, признаки изображений глаза и данные нормальных значений, ассоциированные с распределением признаков изображений глаза.

[0096] (Офтальмологическое устройство)

Фиг. 10 иллюстрирует функциональные блоки офтальмологического устройства 10 в соответствии с этим вариантом осуществления. Офтальмологическое устройство 10 в соответствии с этим вариантом осуществления включает в себя блок 113 получения распределенных по времени данных в блоке 110 получения данных, блок 134 получения признаков изображения в блоке 130 обработки изображений, блок 1325 определения необходимости повторного получения в блоке 132 определения и блок 1331 оценки исключительных кадров в блоке 133 совмещения, в дополнение к компоновке из первого варианта осуществления. Блок 113 получения распределенных по времени данных является функциональным блоком, который получает распределенные по времени данные субъекта. Блок 134 получения признаков изображения является функциональным блоком, который анализирует изображение с широким углом рассматривания и получает информацию о его признаках изображений. Блок 1325 определения необходимости повторного получения является функциональным блоком, который оценивает, получать ли снова изображение с большим увеличением. Блок 1331 оценки исключительных кадров является функциональным блоком, который в качестве "исключительного кадра" обнаруживает кадр, неподходящий для оптометрии, например, кадр, включающий в себя большое несовпадение, вызванное ошибкой фиксации. Когда обнаруживается "исключительный кадр", изображение с большим увеличением получается повторно.

[0097] (Процедура обработки)

Процедура обработки изображений в соответствии с этим вариантом осуществления является такой же, как на фиг. 5, и процессы этапов S510, S560, 3570 и S580 являются такими же, как в первом варианте осуществления. Этап S540 пропускается. 3 этом варианте осуществления будут описываться процессы этапов S520, S530 и S550.

[0098] <Этап S520>

Блок 1311 представления шаблона получения изображений получает по меньшей мере один тип шаблона получения изображений при получении множества изображений с большим увеличением из запоминающего устройства 120 и отображает его на мониторе 305. В этом варианте осуществления блок 1311 представления шаблона получения изображений представляет линейные, крестообразные, радиальные, прямоугольные, дискообразные, кольцеобразные, с несколькими увеличениями, с несколькими размещениями и составные базовые шаблоны.

[0099] Блок 140 получения команд получает извне команду о том, какой шаблон получения изображений следует выбрать. В этом варианте осуществления будет объясняться пример, в котором целью наблюдения является кольцеобразная область парафовеальных капилляров, которая показана на фиг. 7С. В этом случае необходимо определить внутреннюю границу кольцеобразной области на основе бессосудистой области. Поэтому оператор выбирает шаблон получения изображений с несколькими увеличениями. В шаблоне получения изображений с несколькими увеличениями изображения D_1j образуют кольцеобразный шаблон, а изображения D_2k образуют прямоугольный шаблон.

[0100] Отметим, что в этом варианте осуществления обработка по выбору шаблона получения изображений не является неотъемлемой, и обработку этого этапа можно пропустить путем установки изначально целевой области получения изображения с большим увеличением в кольцеобразную область, а целевой области получения изображения с промежуточным увеличением - в прямоугольную область.

[0101] <Этап 3530>

Блок 132 определения просит блок 112 получения изображения с большим увеличением получить изображения D_2k с промежуточным увеличением, и блок 112 получения изображения с большим увеличением получает изображения D_2k с промежуточным увеличением. Далее блок 134 получения признаков изображения получает признаки изображений на изображении D_L с широким углом рассматривания и изображениях D_2k с промежуточным увеличением. Параметры получения множества изображений с большим увеличением определяются на основе тех признаков изображений, и получаются изображения D_1j с большим увеличением. Межкадровое совмещение и оценка исключительных кадров выполняются для полученного изображения D_1j с большим увеличением. После оценивания на основе результата оценки исключительных кадров, что необходим повторный захват, снова захватывается такое же изображение D_1j с большим увеличением. Изображения D_2k с промежуточным увеличением и изображения D_1j с большим увеличением совмещаются на изображении D_L с широким углом рассматривания. Обработка (обработка по получению изображений с большим увеличением) из этого этапа будет подробно описываться позже со ссылкой на блок-схему последовательности операций из фиг. 11.

[0102] <Этап S550>

Блок 131 управления отображением накладывает изображения D_H с большим увеличением на изображение D_L с широким углом рассматривания и отображает их, как показано на фиг. 7Е, на основе значений параметров совмещения, полученных на этапе S1270 (будет описываться позже). В этом варианте осуществления изображения капилляров, которые показаны на фиг. 7F, склеиваются и отображаются в положениях рядом с наложенными изображениями в качестве изображений, которые позволяют пользователю конкретнее наблюдать распределение парафовеальных капилляров. Как описано выше, в этом варианте осуществления управление отображением выполняется, чтобы наложить множество захваченных изображений с большим увеличением на изображение, представляющее всю область захвата изображений, и отобразить их на мониторе 305. Поэтому можно наблюдать точное изображение только в необходимой части изображения с широким углом рассматривания. Обработка (обработка по отображению изображений) из этого этапа будет подробно описываться позже со ссылкой на блок-схему последовательности операций из фиг. 9.

[0103] (Обработка по получению изображений с большим увеличением)

Далее со ссылкой на блок-схему последовательности операций из фиг. 11 будут описываться подробности обработки, исполняемой на этапе S530.

[0104] <Этап S1210>

Блок 132 определения получает изображения D_2k с промежуточным увеличением на основе шаблона получения изображений, выбранного на этапе S520 для изображений D_2k.

[0105] В этом варианте осуществления устанавливается прямоугольный шаблон получения изображений, который указан изображениями D_2k из фиг. 12А. Метка фиксации представляется так, что центральная точка С шаблона получения изображений располагается возле центральной ямки. К тому же 600 [мкм] × 600 [мкм], 2 [мкм/пиксель] × 2 [мкм/пиксель], 256 и 64 [кадров/с] устанавливаются соответственно в качестве значений угла рассматривания, размера ^ пикселя, количества кадров и частоты кадров. Область перекрытия между соседними изображениями с промежуточным увеличением предполагается составляющей 10% от площади изображения с промежуточным увеличением. В этом варианте осуществления порядок получения изображений с большим увеличением устанавливается так, что изображение D₂₅ с промежуточным увеличением в центре шаблона получения изображений устанавливается в качестве первого положения получения, и положение получения сдвигается к следующему изображению с правой стороны, а затем движется против часовой стрелки по соседним изображениям. Блок 133 совмещения выполняет межкадровое совмещение полученных изображений D_2k с промежуточным увеличением и совмещение изображений D_2k с промежуточным увеличением (склейку изображений) на изображении D_L с широким углом рассматривания. Отметим, что способ координатного преобразования и функция оценки степени подобия, используемые для совмещения, являются такими же, как в первом варианте осуществления, и их подробное описание будет пропущено.

[0106] <Этап S1220>

Блок 134 получения признаков изображения обнаруживает капилляры на изображении D_L с широким углом рассматривания или изображениях D_2k с промежуточным увеличением, полученных на этапе S1210, и обнаруживает границу бессосудистой области в обнаруженной области капилляров. Чтобы установить область возле бессосудистой области в качестве целевой области получения изображения с большим увеличением, обнаруживается кольцеобразная (тороидальная) область, равноудаленная от положения границы бессосудистой области.

[0107] В этом варианте осуществления сначала на изображениях D_2k с промежуточным увеличением капилляры задаются в качестве диапазона движения клеток крови в соответствии со следующими процедурами.

(a) Между соседними кадрами каждого изображения D_2k с промежуточным увеличением, которое подверглось межкадровому совмещению, выполняется разностная обработка. То есть формируется разностное движущееся изображение.

(b) Статистический показатель яркости (например, дисперсия) относительно направления кадров вычисляется в каждом положении x-y сформированного на этапе (а) разностного движущегося изображения.

(c) Область, в которой дисперсия яркости в каждом положении x-y разностного движущегося изображения больше либо равна пороговой величине Tv, задается в качестве области, где двигаются клетки крови, то есть области капилляров.

[0108] Отметим, что обработка по обнаружению капилляров не ограничивается этим способом, и может использоваться произвольный известный способ. Например, кровеносные сосуды можно обнаружить путем применения фильтра, который улучшает линейную структуру, к конкретному кадру изображения D_L с широким углом рассматривания или изображения D_2k с промежуточным увеличением.

[0109] Далее блок 134 получения признаков изображения обнаруживает границу бессосудистой области в полученной области капилляров. Возле центральной ямки сетчатки существует область (будет называться "бессосудистой областью"), не включающая в себя капилляры, которая указана внутренней частью внутренней области из пунктирной линии на фиг. 7С. Формы границ бессосудистых областей имеют большие индивидуальные отличия, и начальное повреждение кровеносного сосуда сетчатки легко происходит вокруг границы бессосудистой области. Поэтому граница бессосудистой области важна в качестве цели наблюдения и анализа.

[0110] В этом варианте осуществления деформируемая модель (часть из сплошной линии на фиг. 12А), имеющая радиус Tr меньше радиуса окружности (часть из пунктирной линии на фиг. 12А), которая соединяет центры изображений у изображений D_1j с большим увеличением в шаблоне получения изображений, размещается на склеенном изображении из изображений D_2k с промежуточным увеличением, совмещенных на изображении с широким углом рассматривания на этапе S1210. В этом варианте осуществления модель размещается так, что ее центр совпадает с центром С изображения D₂₅ с промежуточным увеличением на фиг. 12А. Положение (Bi на фиг. 12В) деформируемой модели, которая закончила деформацию в соответствии с признаками изображений на склеенном изображении из изображений D_2k с промежуточным увеличением, задается в качестве границы бессосудистой области, и определяется положение C′ центра тяжести границы бессосудистой области. К тому же положения (Bo и Bm на фиг. 12В), удаленные от границы бессосудистой области наружу на расстояния заранее установленных пороговых величин To и To/2, определяются с использованием изображений расстояния (изображений, имеющих значения расстояния от границы в качестве значений пикселей), полученных путем выполнения преобразования евклидова расстояния для границы бессосудистой области. В качестве пороговой величины To можно установить произвольное значение. Вообще, значение часто устанавливается примерно в 150 [мкм] для человека без какой-либо недееспособности, и поэтому это значение с тем же успехом используется в данном варианте осуществления. Кольцеобразная (тороидальная) целевая область захвата изображения с большим увеличением определяется с использованием заданной внутренней границы Bi и внешней границы Bo. Часть Bm из пунктирной линии указывает возможные варианты положений получения (центры изображений) у изображений D_1j с большим увеличением.

[0111] Отметим, что в этом варианте осуществления расстояние (толщина кольцеобразной области) от границы бессосудистой области фиксируется пороговой величиной To. Однако настоящее изобретение этим не ограничивается. Например, при таком заболевании, как диабетическая ретинопатия, имеющем повреждения в парафовеальных капиллярах сетчатки, с развитием заболевания происходит закупорка капилляра, и бессосудистая область становится большой. Когда бессосудистая область большая, сосудистые повреждения могут произойти в более широком диапазоне вокруг бессосудистой области. Поэтому значение, полученное путем умножения пороговой величины To на значение, пропорциональное площади бессосудистой области, может устанавливаться в качестве расстояния от границы бессосудистой области. Отметим, что в этом случае угол рассматривания устанавливается в качестве переменного параметра и определяется имеющим значением гораздо больше расстояния от границы бессосудистой области, то есть толщины кольцеобразной области на этапе S1230.

[0112] <Этап S1230>

Блок 1321 определения увеличения определяет количество увеличений, угол рассматривания и размер пикселя у изображений D_1j с большим увеличением. Блок 1322 определения положения определяет положение получения и положение в фокусе у каждого изображения D_1j с большим увеличением. В этом варианте осуществления количество увеличений, угол рассматривания, размер пикселя и положение в фокусе устанавливаются в виде фиксированных параметров (соответственно установленных в 2, 200 [мкм] × 200 [мкм], 1 [мкм/пиксель] × 1 [мкм/пиксель] и капилляр), и положение получения каждого изображения D_1j с большим увеличением устанавливается в качестве переменного параметра. Эти параметры определяются следующим образом.

[0113] Сначала точки (Bms на фиг. 12B), полученные путем дискретизации определенной на этапе S1220 границы Bm с равным интервалом Td, задаются в качестве возможных вариантов положений получения изображений D_1j с большим увеличением. Положения получения изображений D_1j с большим увеличением последовательно определяются из конкретной возможной точки Bm0.

[0114] В этом варианте осуществления

интервал Td = угол рассматривания изображения D_1j с большим увеличением × (100 - стандартное значение отношения области перекрытия между изображениями D_1j с большим увеличением)/100 (1)

Возможная точка непосредственно выше положения центра тяжести бессосудистой области устанавливается в Bm0. Конкретные положения получения изображений D_1j с большим увеличением определяются так, чтобы удовлетворять обоим условиям:

a) общее количество пикселей у изображений D_1j с большим увеличением, расположенных вне кольцеобразной области, минимизируется при условии, что никакие пропуски не образуются в кольцеобразной области касательно радиального направления кольцеобразной области, определенной на этапе S1220 (направление линии, которая соединяет положение C′ центра тяжести бессосудистой области и возможную точку Bms положения получения); и

b) совпадение с отношением области перекрытия между изображениями с большим увеличением, которое будет описано ниже, получается касательно тангенциального направления положения Bm границы.

[0115] В этом случае значение, полученное путем умножения стандартного установленного значения (например, 20% в этом варианте осуществления) на значение, обратно пропорциональное круглости Cr границы бессосудистой области, заданной на этапе S1220, устанавливается в качестве отношения [%] области перекрытия между изображениями D_1j с большим увеличением. Круглость Cr имеет вид

где S площадь границы бессосудистой области, a L длина границы. Поэтому, чем меньше круглость, то есть чем больше неровность, тем больше значение, установленное в качестве отношения области перекрытия между изображениями D_1j с большим увеличением.

[0116] Способ определения области перекрытия между изображениями с большим увеличением этим не ограничивается, и может использоваться произвольный известный способ. Например, абсолютные значения кривизны вычисляются в диапазоне заранее установленного расстояния в направлении изображений с большим увеличением, соседних вдоль границы бессосудистой области, от пересечения Bis между бессосудистой областью и линией, которая соединяет центр С′ тяжести границы бессосудистой области и возможную точку Bms положения получения, и вычисляется среднее значение Ch полученных абсолютных значений кривизны. Стандартное установленное значение, ассоциированное с отношением области перекрытия между изображениями с большим увеличением, умножается на значение, пропорциональное значению Ch средней кривизны, и таким образом взвешивается. Когда значение Ch средней кривизны равно 0, стандартное установленное значение используется

напрямую, без взвешивания. Когда используется этот способ установки, отношение области перекрытия между изображениями с большим увеличением можно установить большим в окрестности положения, где абсолютное значение кривизны границы бессосудистой области большое.

[0117] <Этап S1240>

Блок 1323 определения времени определяет количество кадров, частоту кадров и подсчет повторных получений у изображений D_1j с большим увеличением. В примере из этого варианта осуществления количество кадров, частота кадров и подсчет повторных получений в одном и том же положении устанавливаются соответственно в 256, 64 [кадров/с] и 2. Однако настоящее изобретение этим не ограничивается, и может использоваться произвольный способ установки. Например, обработка по прореживанию выполняется для области капилляров на каждом изображении D_1j с большим увеличением, определенная процессами из этапов S1220 и S1230, и вычисляется диаметр сосудов в направлении, перпендикулярном центральной оси полученного кровеносного сосуда. Только когда существует область, где диаметр сосудов демонстрирует анормальное значение, количество кадров и подсчет повторных получений у изображения D_1j с большим увеличением можно увеличить на пороговые величины Tf и Тс соответственно.

[0118] <Этап S1250>

Блок 1324 определения порядка определяет порядок получения изображений D_Hj с большим увеличением. Как и на этапе S850 из первого варианта осуществления, повторная обработка выполняется путем установки из процедур i) iii), которые будут описаны ниже, i) в качестве самого внутреннего цикла (наивысший приоритет), ii) в качестве второго внутреннего цикла и iii) в качестве самого внешнего цикла (наименьший приоритет). Точнее говоря, следующие процедуры исполняются путем установки исходного положения получения на стороне уха и увеличения получения в наименьшее увеличение:

i) получать изображения с одинаковым увеличением получения и одинаковым положением получения изображений вплоть до подсчета повторных получений;

ii) получить изображения с одинаковым увеличением получения из соседнего положения получения изображений (в этом варианте осуществления - против часовой стрелки), как в i); и

iii) когда ii) завершена, увеличить значение увеличения получения, снова исполнить операцию ii) и повторять такую же операцию такое же количество раз, как количество увеличений.

[0119] Отметим, что способ определения порядка изображений с большим увеличением не ограничивается вышеописанной процедурой, и может использоваться произвольный способ установки порядка.

[0120] <Этап S1260>

Блок 112 получения изображения с большим увеличением получает изображения с большим увеличением и распределенные по времени данные в соответствии с параметрами получения изображений с большим увеличением, определенными на этапах S1210-S1250. Блок 113 получения распределенных по времени данных просит устройство 50 получения распределенных по времени данных получить распределенные по времени данные Sj, ассоциированные с биомедицинским сигналом. В этом варианте осуществления в качестве устройства получения распределенных по времени данных используется детектор пульсовой волны, и распределенные по времени данные Sj получаются от lobulus auriculae (мочка уха) субъекта. Распределенные по времени данные Sj выражаются в виде периодической точечной последовательности, имеющей моменты получения по одной оси и значения сигнала пульсовой волны, измеренные детектором пульсовой волны, по другой оси. В ответ на запрос получения устройство 50 получения распределенных по времени данных получает соответствующие распределенные по времени данные Sj и передает их. Поэтому блок 113 получения распределенных по времени данных принимает распределенные по времени данные Sj от устройства 50 получения распределенных по времени данных посредством LAN 30. Блок 113 получения распределенных по времени данных сохраняет принятые распределенные по времени данные Sj в запоминающем устройстве 120.

[0121] Блок 110 получения данных просит устройство 20 захвата SLO-изображений получить изображение D_L с широким углом рассматривания, множество изображений D_Hj с большим увеличением, захваченных в разных положениях Fj меток фиксации, и данные о положении Fj метки фиксации. Здесь можно рассмотреть два случая: случай, где блок 110 получения данных начинает получение изображений D_Hj с большим увеличением в соответствии с некоторой фазой распределенных по времени данных Sj, полученных устройством 50 получения распределенных по времени данных; и случай, где получение данных Sj пульсовой волны и получение изображений D_Hj с большим увеличением начинаются одновременно непосредственно после запроса получения изображений D_Hj с большим увеличением. В этом варианте осуществления непосредственно после запроса получения изображений D_Hj с большим увеличением начинается получение распределенных по времени данных Sj и изображений D_Hj с большим увеличением.

[0122] <Этап S1270>

Блок 133 совмещения выполняет межкадровое совмещение, ассоциированное с полученными изображениями D_1j с большим увеличением, совмещает изображения D_1j с большим увеличением на изображении D_L с широким углом рассматривания и отображает их на мониторе 305. Отметим, что в этом варианте осуществления оценка исключительных кадров, состоящая в оценивании, соответствует ли кадр исключительному кадру, которое будет описано ниже, выполняется во время межкадрового совмещения каждого изображения D_1j с большим увеличением. В качестве способа межкадрового совмещения для каждого движущегося изображения или способа совмещения (склейки изображений) для изображений с разными увеличениями может использоваться произвольный известный способ совмещения. В этом варианте осуществления оба процесса совмещения выполняются с использованием аффинного преобразования и корреляционной функции.

[0123] Как показано на фиг. 12С, исключительный кадр подразумевает кадр Es, значительно смещенный из-за плохой фиксации, кадр Eb с низкой яркостью, сформированный в результате моргания, или низкокачественный кадр (не показан), сформированный в результате ошибки коррекции аберрации на изображении D_H с большим увеличением. Исключительный кадр может оцениваться на основе того, является ли каждое из степени анормальности яркости, величины искажения, уровня шума относительно сигнала и величины смещения относительно контрольного кадра заранее установленным значением или больше. Точнее говоря,

a) когда из значений параметров совмещения между кадров сдвиг больше либо равен пороговой величине,

b) когда среднее значение яркости у кадра меньше пороговой величины и

c) когда отношение S/N у кадра меньше пороговой величины, кадр оценивается как исключительный кадр. После оценивания с помощью оценки исключительных кадров, что максимальное значение интервала формирования исключительного кадра на изображении D_1j с большим увеличением меньше либо равно пороговой величине Te, или общее количество исключительных кадров больше либо равно пороговой величине Ts, блок 1325 определения необходимости повторного получения оценивает, что необходимо повторное получение изображения D_1j с большим увеличением. После оценивания, что необходимо повторное получение изображения D_1j с большим увеличением, блок 1325 определения необходимости повторного получения просит блок 112 получения изображения с большим увеличением повторно получить изображение D_1j с большим увеличением, и блок 112 получения изображения с большим увеличением в ответ на запрос повторно получает изображение D_1j с большим увеличением.

[0124] Отметим, что межкадровое совмещение, оценку исключительных кадров, оценку необходимости повторного получения и повторное получение не всегда нужно исполнять после того, как получаются все изображения с большим увеличением. Например, оценка исключительных кадров и оценка необходимости повторного получения могут исполняться непосредственно после того, как получается изображение с большим увеличением, и изображение с большим увеличением можно повторно получить, как только оценивается, что его нужно повторно получить. 3 качестве альтернативы во время межкадрового совмещения изображений D_2k с промежуточным увеличением на этапе S1210 могут выполняться оценка исключительных кадров и оценка необходимости повторного получения, и изображения D_2k с промежуточным увеличением можно повторно получить, как только оценивается, что их нужно повторно получить. В противном случае оценку исключительных кадров не всегда нужно исполнять только во время межкадрового совмещения движущегося SLO-изображения. Например, фронтальную камеру можно соединить с офтальмологическим устройством 10, и оценка может выполняться с использованием обработки изображений фронтальной камеры, например, обнаружение кадров с низкой яркостью, обнаружение положения зрачка или т.п.

[0125] (Обработка по отображению изображений)

Далее со ссылкой на блок-схему последовательности операций из фиг. 9 будут описываться подробности обработки, исполняемой на этапе S550. Отметим, что процессы за исключением этапов S910 и S930 являются такими же, как в первом варианте осуществления, и в этом варианте осуществления будут описываться процессы этапов S910 и S930.

[0126] <Этап S910>

Блок 131 управления отображением выполняет обработку по формированию наложенных изображений из изображений D_H с большим увеличением на изображении D_L с широким углом рассматривания, как показано на фиг. 7Е, на основе значений параметров совмещения, полученных на этапе S1270. В этом варианте осуществления, поскольку изображения D_H с большим увеличением склеиваются и отображаются не как неподвижные изображения, а как движущиеся изображения, что будет объясняться касательно этапа S930, не формируется никакое представляющее изображение. Однако изображение, которое подверглось межкадровому совмещению, может включать в себя область в конце изображения, которая имеет равные 0 значения пикселей и препятствует отображению. Поэтому в конце изображения после отображения склеенного изображения только пиксели, имеющие значения пикселей больше 0, отображаются по всем кадрам, кроме исключительных кадров.

[0127] В этом варианте осуществления изображения капилляров, которые показаны на фиг. 7F, также склеиваются и отображаются рядом со склеенным движущимся изображением в качестве изображений, которые позволяют пользователю конкретнее наблюдать распределение парафовеальных капилляров. Что касается изображений капилляров, обработка по заданию области капилляров, исполненная для изображений D_2k с промежуточным увеличением на этапе S1220, выполняется не только для изображений D_2k с промежуточным увеличением, но также изображений D_1j с большим увеличением, посредством этого формируя двоичные изображения, которые склеиваются и отображаются на основе параметров совмещения, полученных на этапе S1270. Даже на изображениях капилляров только пиксели, имеющие значения пикселей больше 0, отображаются по всем кадрам, кроме исключительных кадров, как при склеивании движущихся изображений.

[0128] <Этап S930>

При отображении множества изображений D_2k с промежуточным увеличением или изображений D_1j с большим увеличением на изображении D_L с широким углом рассматривания моменты воспроизведения изображений D_2k с промежуточным увеличением и изображений D_1j с большим увеличением синхронизируются на основе распределенных по времени данных (периодических данных на основе биомедицинского сигнала, например пульсовой волны). Точнее говоря, блок 131 управления отображением получает от блока 113 получения распределенных по времени данных распределенные по времени данные Sj и Sk, соответствующие движущимся изображениям (то есть изображениям D_1j с большим увеличением и изображениям D_2k с промежуточным увеличением), обнаруживает экстремальное значение в каждых распределенных по времени данных и вычисляет период пульсации. Далее блок 131 управления отображением получает последовательность номеров исключительных кадров на каждом из изображений D_1j с большим увеличением и изображений D_2k с промежуточным увеличением и выбирает в качестве цели отображения последовательность непрерывных кадров, не включающую никакой исключительный кадр. Когда период пульсации в выбранных кадрах изменяется между движущимися изображениями (изображениями D_1j с большим увеличением или изображениями D_2k с промежуточным увеличением), выполняется обработка по регулировке (будет называться "обработкой по кадровой интерполяции") интервала отображения кадров между движущимися изображениями. К тому же склеенное движущееся изображение отображается путем воспроизведения кадров, соответствующих целому кратному периода пульсации, регулируя при этом время начала воспроизведения у каждого движущегося изображения так, что совпадают моменты воспроизведения кадров, соответствующие экстремальным значениям распределенных по времени данных, соответствующих соответствующим движущимся изображениям.

[0129] Отметим, что способ отображения из настоящего изобретения этим не ограничивается. Если не получаются никакие распределенные по времени данные, то этот этап можно пропустить, и движущиеся изображения можно склеить и отобразить без регулирования моментов воспроизведения.

[0130] Как описано выше, офтальмологическое устройство 10 в соответствии с этим вариантом осуществления определяет значения параметров, ассоциированные с получением множества изображений с большим увеличением, на основе признаков изображений, выделенных из изображения, имеющего угол рассматривания шире, чем у изображений с большим увеличением, при получении множества изображений с большим увеличением от SLO с адаптивной оптикой. Это позволяет эффективно захватывать ткани, клетки или возможные повреждения, чье распределение меняется в зависимости от глаза, который будет обследоваться, в диапазоне шире изображения с большим увеличением.

[0131] В этом варианте осуществления на основе признаков изображений, ассоциированных с кровеносным сосудом или областью, где двигаются клетки крови, по меньшей мере одно изображение кровеносного сосуда из захваченных изображений с большим увеличением отображается на мониторе 305. Это позволяет подходящим образом выделить только часть, которая требует особенно тщательного наблюдения, из изображения с широким углом рассматривания и автоматически выполнить точный захват/отображение изображений.

[0132] Третий вариант осуществления

Офтальмологическое устройство в соответствии с этим вариантом осуществления конфигурируется для определения значений параметров, ассоциированных с получением множества изображений с большим увеличением, на основе признаков изображений, выделенных из ОКТ-томограммы, имеющей угол рассматривания шире, чем у изображений с большим увеличением, при получении множества ОКТ-томограмм с большим увеличением от адаптивной оптики. Точнее говоря, оператор выбирает базовый шаблон для получения множества изображений с большим увеличением по дискообразному шаблону для слоя светочувствительных клеток возле центральной ямки, где слой вне сетчатки деформируется из-за серозной отслойки сетчатки RD, и устанавливает начальные значения параметров получения изображений. Далее параметры получения (положение получения, угол рассматривания, размер пикселя и ворота когерентности) у множества изображений с большим увеличением изменяются на основе признаков изображений формы слоя, полученных из ОКТ-томограммы с широким углом рассматривания, и изображения захватываются. Будет объясняться этот случай.

[0133] (Общая компоновка)

Фиг. 1C показывает компоновку устройств, соединенных с офтальмологическим устройством 10, в соответствии с этим вариантом осуществления. Этот вариант осуществления отличается от первого варианта осуществления в том, что офтальмологическое устройство 10 соединяется не с устройством 20 захвата SLO-изображений, а с томографическим устройством 60, включающим в себя систему адаптивной оптики. Томографическое устройство 60 захватывает томограмму глаза. Тсмографическое устройство 60 образуется, например, а виде SD-OCT (Оптическая когерентная томография в спектральной области). Томографическое устройство 60 трехмерно захватывает томограммы глаза, который будет обследоваться, в соответствии с работой оператора (не показано). Захваченные томограммы передаются офтальмологическому устройству 10.

[0134] (Офтальмологическое устройство)

Фиг. 13 иллюстрирует функциональные блоки офтальмологического устройства 10 в соответствии с этим вариантом осуществления. Эта компоновка отличается от компоновки из первого варианта осуществления в том, что блок 130 обработки изображений включает в себя блок 134 получения признаков изображения, который получает признаки изображения с широким углом рассматривания. Сервер 40 данных хранит признаки изображений глаза и данные нормальных значений, ассоциированные с распределением признаков изображений глаза. Здесь будет описываться случай, где в качестве данных хранятся данные нормальных значений касательно границы слоя сетчатки и его формы и толщины.

[0135] (Томографическое устройство)

Далее со ссылкой на фиг. 14 будет описываться компоновка томографического устройства 60, включающего в себя систему адаптивной оптики. Ссылаясь на фиг. 14, ссылочная позиция 201 обозначает источник света. В этом варианте осуществления используется SLD, имеющий длину волны 840 нм. Источнику 201 света нужно лишь иметь низкокогерентный тип, и соответствующим образом используется SLD, имеющий длину волны 30 нм или больше. В качестве источника света также может использоваться лазер ультракоротких импульсов, например титан-сапфировый лазер. Свет, излученный источником 201 света, проходит через одномодовое оптическое волокно 202 и направляется в волоконный ответвитель 520. Волоконный ответвитель 520 разделяет оптический путь на путь 521 измерительного света и путь 522 эталонного света. Волоконный ответвитель 520 использует волоконный ответвитель, имеющий коэффициент ветвления 10:90, и конфигурируется, чтобы заставить свет, соответствующий 10% входного количества света, достичь пути 521 измерительного света. Свет, который прошел по пути 521 измерительного света, выходит из коллиматора 203 в виде параллельного измерительного света.

[0136] Компоновка от коллиматора 203 такая же, как в устройстве 20 захвата SLO-изображений, описанном в первом варианте осуществления. Точнее говоря, свет проходит через систему адаптивной оптики и сканирующую оптическую систему, и облучает глазное яблоко 211. Отраженный/рассеянный свет от глазного яблока 211 опять движется по тому же пути и направляется с помощью оптического волокна 521 вплоть до волоконного ответвителя 520. С другой стороны свет, который прошел по пути 522 эталонного света, выходит из коллиматора 523 и отражается блоком 524 изменения длины оптического пути, и снова возвращается в волоконный ответвитель 520. Измерительный свет и эталонный свет, которые достигли волоконного ответвителя 520, объединяются и направляются в спектроскоп 526 посредством оптического волокна 525. Блок 217 управления строит томограмму глаза на основе информации об интерференционном свете, спектрально полученной спектроскопом 526. Блок 217 управления может управлять блоком 524 изменения длины оптического пути и получать изображение в нужном положении глубины.

[0137] Отметим, что в показанной на фиг. 14 компоновке, когда увеличивается угол отклонения сканирующей оптической системы, и блок 216 управления адаптивной оптикой дает команду не корректировать аберрации, томографическое устройство 60 может работать как обычное томографическое устройство и захватывать томограмму с широким углом рассматривания (изображение D_L с широким углом рассматривания). В этом варианте осуществления томографическое устройство 60, включающее в себя систему адаптивной оптики, образуется в виде SD-OCT. Однако образование SD-OCT не является важным. Например, томографическое устройство может быть образовано в виде ОСТ во временной области или SS-OCT (Оптическая когерентная томография с использованием генератора качающейся частоты). В SS-OCT используется источник света, который формирует световые лучи с разными длинами волн в разные моменты, и спектральный элемент, сконфигурированный для получения спектральной информации, не нужен. Более того, SS-OCT может получить глубокое инвазивное изображение, включающее не только сетчатку, но также и хориоидею.

[0138] (Процедура обработки)

Фиг. 5 иллюстрирует процедуру обработки изображений в офтальмологическом устройстве 10 в соответствии с этим вариантом осуществления. Содержание обработки за исключением этапов S510, S520, S530, S540 и S550 является таким же, как в первом варианте осуществления, описанном со ссылкой на фиг. 5. В этом варианте осуществления будут описываться процессы этапов S510, S520, S530, S540 и S550.

[0139] <Этап S510>

Блок 111 получения изображения с широким углом рассматривания просит томографическое устройство 60 получить изображение D_L с широким углом рассматривания и положение F_L метки фиксации. В этом варианте осуществления будет объясняться пример, в котором изображение D_L с широким углом рассматривания получается путем установки положения F_L метки фиксации в центральную ямку макулярной части. Отметим, что способ установки положения захвата изображений этим не ограничивается, и положение захвата изображений может устанавливаться в другом произвольном положении.

[0140] В ответ на запрос получения от блока 111 получения изображения с широким углом рассматривания томографическое устройство 60 получает изображение D_L с широким углом рассматривания и положение F_L метки фиксации и передает их блоку 111 получения изображения с широким углом рассматривания. Блок 111 получения изображения с широким углом рассматривания принимает изображение D_L с широким углом рассматривания и положение F_L метки фиксации от томографического устройства 60 посредством LAN 30. Блок 111 получения изображения с широким углом рассматривания сохраняет принятое изображение D_L с широким углом рассматривания и положение F_L метки фиксации в запоминающем устройстве 120.

[0141] <Этап S520>

Блок 1311 представления шаблона получения изображений получает по меньшей мере один тип шаблона базовых установок (шаблона получения изображений), ассоциированного с параметрами при получении множества изображений с большим увеличением, из запоминающего устройства 120 и отображает его на мониторе 305. В качестве шаблона получения изображений можно установить произвольный паблон. В этом варианте осуществления представляются базовые шаблоны, которые показаны на фиг. 15А-15F. Точнее говоря, фиг. 15А показывает линейный шаблон, фиг. 15В показывает крестообразный шаблон, фиг. 15С показывает радиальный шаблон, фиг. 15D показывает прямоугольный шаблон, фиг. 15Е показывает дискообразный шаблон, и фиг. 15F показывает кольцеобразный шаблон.

[0142] Блок 140 получения команд получает извне команду о том, какой шаблон получения изображений следует выбрать. В этом варианте осуществления будет описываться случай, где целью наблюдения является область, где слой вне сетчатки деформируется из-за серозной отслойки сетчатки RD, и возникают повреждения в светочувствительных клетках, как показано на фиг. 15I. Поэтому выбирается дискообразный шаблон получения изображений, который показан на фиг. 15Е.

[0143] Отметим, что как и в первом варианте осуществления, можно представить шаблоны с несколькими увеличениями, с несколькими размещениями и составные шаблоны получения изображений даже для трехмерной томограммы. Например, когда выбирается шаблон получения изображений с несколькими увеличениями, и количество увеличений равно 3, может выбираться шаблон получения изображения D_3m с промежуточным увеличением, который показан на фиг. 15Н, шаблон получения изображений D_2k с промежуточным увеличением, который показан на фиг. 15G, и шаблон получения изображений D_1j с большим увеличением, который показан на фиг. 15Е. Для шаблона получения изображений с несколькими размещениями множество шаблонов получения изображений может размещаться и представляться в направлении глубины (направление оси z на фиг. 15А-15Н).

[0144] <Этап S530>

Блок 132 определения определяет параметры получения у множества изображений с большим увеличением, устанавливая параметры получения у множества изображений, включенного в выбранный на этапе S520 шаблон получения изображений, в качестве начальных значений и регулируя параметры получения изображений на основе признаков изображений, полученных блоком 134 получения признаков изображения. Обработка (обработка по получению изображений с большим увеличением) из этого этапа будет подробно описываться позже со ссылкой на блок-схему последовательности операций из фиг. 16.

[0145] <Этап S540>

Блок 133 совмещения совмещает изображение D_L с широким углом рассматривания и изображения D_Hj с большим увеличением и определяет положения изображений D_Hj с большим увеличением на изображении D_L с широким углом рассматривания. Сначала блок 133 совмещения получает положение F_Hj метки фиксации, используемое при захвате изображений D_Hj с большим увеличением, из запоминающего устройства 120 и устанавливает его в качестве начальной точки для поиска параметров совмещения при совмещении между изображением D_L с широким углом рассматривания и изображениями D_Hj с большим увеличением. Если существует область перекрытия между изображениями D_Hj с большим увеличением, то сначала вычисляется степень подобия между изображениями касательно области перекрытия, и положения изображений D_Hj с большим увеличением совмещаются с положением, где степень подобия между изображениями максимальна. Далее, если на этапе S530 получаются изображения с большим увеличением, имеющие разные разрешения, то совмещение выполняется последовательно от изображения с меньшим увеличением, как в первом варианте осуществления. В этом варианте осуществления, поскольку изображения с большим увеличением имеют только один тип разрешения, выполняется только совмещение между изображением D_L с широким углом рассматривания и изображением D_H с большим увеличением.

[0146] Отметим, что в качестве степени подобия между изображениями или способа координатного преобразования может использоваться произвольный известный способ. В этом варианте осуществления совмещение выполняется с использованием коэффициентов трехмерной корреляции в качестве степени подобия между изображениями и трехмерного аффинного преобразования в качестве способа координатного преобразования.

[0147] <Этап S550>

Блок 131 управления отображением отображает изображения D_Hj с большим увеличением на изображении D_L с широким углом рассматривания на основе значений параметров совмещения, полученных на этапе S540. В этом варианте осуществления, поскольку изображение D_L с широким углом рассматривания и изображения D_Hj с большим увеличением являются трехмерными томограммами, выполняются следующие два типа отображения:

i) проецируемые изображения от изображения D_L с широким углом рассматривания и изображений D_Hj с большим увеличением формируются касательно направления оси z, и проецируемые изображения от изображений D_H с большим увеличением накладываются на проецируемое изображение от изображения D_L с широким углом рассматривания; и

ii) формируется трехмерная томограмма D_L″ с широким углом рассматривания, которая выражается значениями пикселей трехмерной томограммы D_L с широким углом рассматривания в положениях, где получается только трехмерная томограмма D_L с широким углом рассматривания, и значениями пикселей трехмерной томограммы D_Hj с большим увеличением в положениях, где получается трехмерная томограмма D_L с широким углом рассматривания и трехмерная томограмма D_Hj с большим увеличением. Конкретное положение сканирования на трехмерной томограмме D_L″ с широким углом рассматривания отображается стрелкой на наложенном изображении из i). Двумерная томограмма в трехмерной томограмме D_L″ с широким углом рассматривания вырезается в положении стрелки и отображается рядом с наложенным изображением, как в i). При этом отображении накладывается и отображается не только двумерная томограмма в трехмерной томограмме D_L с широким углом рассматривания, но также и двумерная томограмма в трехмерной томограмме D_Hj с большим увеличением. При отображении ii) оператор может двигать стрелку, указывающую положение отображения тсмограммы D_L″ с широким углом рассматривания (в вертикальном или горизонтальном направлении) посредством блока 140 получения команд. Секции отображения изображения D_L с широким углом рассматривания и изображений D_Hj с большим увеличением, которые вырезаются и отображаются, также меняются синхронно с этой операцией.

[0148] Когда получается множество изображений D_Hj с большим увеличением с разными положениями получения, как в этом варианте осуществления, выполняется регулировка, чтобы заставить изображения D_Hj с большим увеличением иметь аналогичную характеристику яркости, используя такой же способ, как и в первом варианте осуществления. Когда положения захвата изображений у изображений D_Hj с большим увеличением находятся близко друг к другу, и существует область перекрытия (включая случай, где положения захвата изображений одинаковы), способ отображения области перекрытия устанавливается в один из следующих способов. А именно, вычисляется значение индекса качества изображения у каждого изображения, и отображается изображение, имеющее наибольшее оценочное значение. В качестве альтернативы яркость каждого изображения D_Hj с большим увеличением взвешивается по прозрачности на основе вышеописанного значения индекса качества изображения, и выполняется смешивание. В качестве значения индекса качества изображения может использоваться произвольный известный индекс. В этом варианте осуществления используется среднее значение яркости у гистограммы изображения.

[0149] Отметим, что способ формирования проецируемых изображений не ограничивается проекцией средних значений, и может использоваться произвольный способ проецирования. Изображения D_Hj с большим увеличением не ограничиваются неподвижными изображениями, и могут использоваться движущиеся изображения.

[0150] (Обработка по получению изображений с большим увеличением)

Далее со ссылкой на блок-схему последовательности операций из фиг. 16 будут описываться подробности обработки (обработки по получению изображений с большим увеличением), исполняемой на этапе S530. Отметим, что этап S1510 является таким же, как этап S810 из первого варианта осуществления, и его описание будет пропущено.

[0151] <Этап S1520>

Блок 134 получения признаков изображения выделяет положения границ внутренней пограничной мембраны В1, границы В2 слоя нервных волокон, границы внутреннего плексиформного слоя В4, границы В5 внутреннего/внешнего сегмента светочувствительных клеток и границы В6 пигментного слоя сетчатки из изображения D_L с широким углом рассматривания, то есть трехмерной томограммы глаза, сохраненных в запоминающем устройстве 120 в качестве признаков изображений. Фиг. 7А, 15I и 15J схематически иллюстрируют положения границ с В1 по B6. Выделенные признаки изображений сохраняются в запоминающем устройстве 120.

[0152] Здесь будет подробно описываться процедура выделения признаков для изображения dl с широким углом рассматривания. Сначала будет объясняться процедура выделения для выделения границ слоев. Трехмерная томограмма в качестве цели обработки рассматривается как набор двумерных томограмм (изображений в В-режиме), и выполняется следующая обработка для каждой двумерной томограммы. Обработка по сглаживанию сначала выполняется для интересующей двумерной томограммы, чтобы удалить составляющие шума. Далее обнаруживаются краевые составляющие из двумерной томограммы, и на основе их связности несколько отрезков прямой выделяется в качестве возможных границ слоев. Из выделенных возможных вариантов самый верхний отрезок прямой выделяется в качестве внутренней пограничной мембраны В1, второй отрезок прямой с верхней стороны выделяется в качестве границы В2 слоя нервных волокон, и третий отрезок прямой выделяется в качестве границы В4 внутреннего плексиформного слоя. Отрезок прямой, имеющий максимальный контраст за пределами (на стороне, где z-координата больше на фиг. 7А) внутренней пограничной мембраны В1, выделяется в качестве границы В5 внутреннего/внешнего сегмента светочувствительных клеток. Самый нижний отрезок прямой из возможных границ слоев выделяется в качестве границы В6 пигментного слоя сетчатки.

[0153] Отметим, что может применяться деформируемая модель типа "змей" (snakes), метод функции уровня или т.п. с использованием отрезков прямой в качестве начальных значений, и может выполняться более точное выделение. Границы слоев могут выделяться по методу разреза графов. Отметим, что выделение границ с использованием деформируемых моделей или разрезов графов может исполняться трехмерно для трехмерной томограммы или двумерно для каждой двумерной томограммы. В качестве способа выделения границ слоев может использоваться любой способ при условии, что он может выделять границы слоев из томограммы глаза.

[0154] <Этап S1530>

Блок 1321 определения увеличения определяет тип увеличения (количество увеличений, угол рассматривания и размер пикселя) у изображений D_H с большим увеличением. В этом варианте осуществления количество увеличений и размер пикселя фиксируются (соответственно 1 и 1 [мкм] × 1 [мкм] × 1 [мкм]), и их подробное описание будет пропущено. Отметим, что угол рассматривания и размер пикселя с тем же успехом включают в себя параметры в направлении оси z, в отличие от первого варианта осуществления. Угол рассматривания является переменным параметром. Угол рассматривания увеличивается на пороговую величину Ta [%] только на изображении с большим увеличением, на котором расстояние между границей В5 внутреннего/внешнего сегмента светочувствительных клеток и границей В6 пигментного слоя сетчатки, полученных на этапе S1520, больше либо равно пороговой величине Trd. Угол рассматривания увеличивается, чтобы предотвратить незахват важной для наблюдения области из-за несоответствия фиксации. К тому же, поскольку части внешних сегментов светочувствительных клеток выше области отслойки сетчатки могут тянуться в виде сосулек в направлении границы В6 пигментного слоя сетчатки, угол рассматривания увеличивается, чтобы сделать возможным получение целых светочувствительных клеток с помощью изображений с большим увеличением.

[0155] Блок 1322 определения положения определяет положение получения и положение ворот когерентности у каждого изображения D_Hj с большим увеличением. В этом варианте осуществления оба являются переменными параметрами. Положение получения каждого изображения D_Hj с большим увеличением определяется в соответствии со следующей процедурой:

a) определить размещение представляющего положения у шаблона получения изображений;

b) определить размещение шаблона получения изображений в направлении плоскости x-y; и

c) определить размещение шаблона получения изображений в направлении оси z.

[0156] На этапе а) представляющее положение шаблона получения изображений устанавливается в центр шаблона получения изображений. Шаблон получения изображений размещается так, что его центр совпадает с положением центра тяжести на области отслойки сетчатки. Отметим, что область отслойки сетчатки указывает область, полученную путем проецирования на плоскость x-y области, где расстояние между границей В5 внутреннего/внешнего сегмента светочувствительных клеток и границей В6 пигментного слоя сетчатки больше либо равно пороговой величине Trd.

[0157] На этапе b) размещение каждого изображения с большим увеличением в направлении x-y определяется в соответствии со следующей процедурой, так что область отслойки сетчатки включается в область шаблона получения изображений. Точнее говоря, получается окружность, которая соединяет центры изображений с большим увеличением, расположенные на самой внешней периферии. Окружность увеличивается вплоть до такого положения, в котором она становится описанной окружностью области отслойки сетчатки. Положения в направлении x-y изображений с большим увеличением определяются так, что они заполняют круглую область с заранее установленным интервалом.

[0158] Положения получения в направлении оси z на этапе с) определяется так, что граница В5 внутреннего/внешнего сегмента светочувствительных клеток, полученная на этапе S1520, совпадает с центрами изображений с большим увеличением. Ворота когерентности каждого изображения D_Hj с большим увеличением устанавливаются, из числа устанавливаемых положений, в ближайшее положение к границе В5 внутреннего/внешнего сегмента светочувствительных клеток, обнаруженной на этапе S1520.

[0159] Фиг.15I показывает начальные положения получения у шаблона получения изображений в соответствии с этим вариантом осуществления. Фиг. 15J показывает положения получения, определенные на этом этапе. Для легкого распознавания шаблона получения фиг. 15I и 15J иллюстрируют только положения получения двух столбцов в центре шаблона получения изображений. Увеличение угла рассматривания на области отслойки сетчатки и перекрытие изображений с большим увеличением не проиллюстрированы. Отметим, что типы переменных параметров не ограничиваются списанными выше, и в качестве переменных параметров можно установить произвольные параметры получения изображений.

[0160] <Этап S1540>

Блок 1324 определения порядка определяет порядок получения изображений D_Hj с большим увеличением. В этом варианте осуществления повторная обработка выполняется путем установки из процедур i)-iv), которые будут описаны ниже, i) в качестве самого внутреннего цикла (наивысший приоритет), ii) в качестве второго внутреннего цикла, iii) в качестве третьего внутреннего цикла и iv) в качестве самого внешнего цикла (наименьший приоритет). Точнее говоря, следующие процедуры с i) по iv) исполняются путем установки исходного положения получения (в этом варианте осуществления - верхний конец шаблона получения изображений) и увеличения получения в наименьшее увеличение:

i) получать изображения с одинаковым шаблоном размещения, одинаковым увеличением получения и одинаковым положением получения изображений вплоть до подсчета повторных получений;

ii) сдвинуть изображение с одинаковым шаблоном размещения и одинаковым увеличением получения в соседнее положение получения изображений и получить изображения снова в соответствии с такой же процедурой, как i);

iii) когда ii) завершена, увеличить значение увеличения получения, снова исполнить операцию ii) и повторять такую же операцию такое же количество раз, как количество увеличений; и

iv) когда iii) завершена, исполнить операцию iii) в другом размещении и повторять операцию, пока не получены изображения во всех размещениях.

[0161] Отметим, что в вышеописанном примере никакое повторное получение не выполняется в i) (подсчет получения равен только 1), и обработка iv) пропускается, потому что шаблон получения изображений не является шаблоном с несколькими размещениями. Движение к соседнему положению получения изображений в ii) может выполняться в произвольном направлении. В этом варианте осуществления положение получения сдвигается в соседнее положение в горизонтальном направлении (если в горизонтальном направлении не существует никакого положения получения, то положение сдвигается вниз по диагонали, и если также по диагонали ниже не существует никакого положения получения, то положение сдвигается непосредственно вниз). То есть изображения с большим увеличением последовательно получаются справа налево в первом слое, слеза направо во втором слое, справа налево в третьем слое, … из числа положений получения изображений с большим увеличением. Отметим, что способ определения порядка из настоящего изобретения не ограничивается вышеописанной процедурой, и может использоваться произвольный известный способ установки порядка.

[0162] <Этап S1550>

Блок 112 получения изображения с большим увеличением просит томографическое устройство 60 получить множество изображений D_Hj с большим увеличением и положения F_Hj меток фиксации, используя параметры получения изображений, назначенные блоком 132 определения. Томографическое устройство 60 получает изображения D_Hj с большим увеличением и положения F_Hj меток фиксации и передает их в ответ на запрос получения. Блок 112 получения изображения с большим увеличением принимает изображения D_Hj с большим увеличением и положения F_Hj меток фиксации от томографического устройства 60 посредством LAN 30. Блок 112 получения изображения с большим увеличением сохраняет принятые изображения D_Hj с большим увеличением и положения F_Hj меток фиксации в запоминающем устройстве 120.

[0163] Отметим, что в этом варианте осуществления положения получения изображений D_Hj с большим увеличением определяются с использованием признаков изображений, ассоциированных с границами слоя светочувствительных клеток. Однако настоящее изобретение этим не ограничивается. Например, оператор может манипулировать (двигать, увеличивать или уменьшать) положения в шаблоне получения изображений и регулировать положения получения одновременно для определения положений получения, как и в первом варианте осуществления.

[0164] Как описано выше, при получении множества ОКТ-томограмм с большим увеличением от адаптивной оптики офтальмологическое устройство 10 определяет значения параметров, ассоциированные с получением множества изображений с большим увеличением, на основе признаков изображений, ассоциированных с формами слоев, выделенных из ОКТ-томограммы, имеющей угол рассматривания шире, чем у изображений с большим увеличением. Это позволяет эффективно захватывать ткани, клетки или возможные повреждения, чье распределение меняется в зависимости от глаза, который будет обследоваться, в диапазоне шире изображения с большим увеличением.

[0165] Другие варианты осуществления

В вышеописанных вариантах осуществления целевое изображение совмещение реализуется в виде SLO-изображения или томограммы глаза. Однако настоящее изобретение этим не ограничивается. Например, изображение D_L с широким углом рассматривания можно реализовать в виде изображения с фундус-камеры, а изображение D_H с большим увеличением можно реализовать в виде изображения с фундус-камеры с адаптивной оптикой. Изображения можно реализовать в виде изображений с разными модальностями. Например, изображение D_L с широким углом рассматривания можно реализовать в виде SLO-изображения с широким углом рассматривания, а изображение D_H с большим увеличением можно реализовать в виде проецируемого изображения томограммы с адаптивной оптикой. Можно реализовать компоновку, в которой многофункциональное устройство, включающее в себя устройство 20 захвата SLO-изображений с адаптивной оптикой и томографическое устройство 60, непосредственно соединяется с офтальмологическим устройством 10.

[0166] Варианты осуществления настоящего изобретения также можно осуществить с помощью компьютера в системе или устройстве, который считывает и исполняет исполняемые компьютером команды, записанные на носителе информации (например, на невременном машиночитаемом носителе информации), чтобы выполнять функции одного или нескольких описанных выше вариантов осуществления настоящего изобретения, и с помощью способа, выполняемого компьютером в системе или устройстве, например, путем считывания информации, чтобы выполнять функции одного или нескольких описанных выше вариантов осуществления. Компьютер может содержать одно или несколько из центрального процессора (CPU), микропроцессора (MPU) или других схем и может включать в себя сеть из отдельных компьютеров или отдельных процессоров компьютера. Исполняемые компьютером команды могут предоставляться компьютеру, например, из сети или с носителя информации. Носитель информации может включать в себя, например, одно или несколько из жесткого диска, оперативного запоминающего устройства (RAM), постоянного запоминающего устройства (ROM), хранилища из распределенных вычислительных систем, оптического диска (например, компакт-диска (CD), цифрового универсального диска (DVD) или диска Blu-ray (BD)™), флэш-памяти, карты памяти и т.п.

[0167] Хотя настоящее изобретение описано со ссылкой на варианты осуществления, нужно понимать, что изобретение не ограничивается раскрытыми вариантами осуществления.

Изобретение относится к технологиям обработки изображений, используемых для офтальмологической диагностики. Техническим результатом является установление подходящих условий захвата изображений, чтобы получить в заданной области захвата изображений множество изображений с большим увеличением, имеющих угол рассматривания меньше, чем у области захвата изображений. Предложено устройство обработки информации для управления в одной области захвата изображений в глазном дне захватом изображений для множества изображений с большим увеличением, имеющих угол рассматривания меньше угла рассматривания области захвата изображений. Устройство содержит блок представления, сконфигурированный для представления оператору множества базовых шаблонов для выбора, причем каждый упомянутый шаблон представляет распределение положений, в которых нужно соответственно захватывать изображения с большим увеличением посредством сканирующего лазерного офтальмоскопа с адаптивной оптикой (AOSLO). Устройство осуществляет регулировку в соответствии с командой оператора условия захвата изображений для множества изображений с большим увеличением, ассоциированных с базовым шаблоном, выбранным из множества базовых шаблонов. 5 н. и 16 з.п. ф-лы, 47 ил.

1. Устройство обработки информации для управления в одной области захвата изображений в глазном дне захватом изображений для множества изображений с большим увеличением, имеющих угол рассматривания меньше угла рассматривания области захвата изображений, содержащее:
блок представления, сконфигурированный для представления оператору множества базовых шаблонов для выбора, причем каждый упомянутый шаблон представляет распределение положений, в которых нужно соответственно захватывать изображения с большим увеличением посредством сканирующего лазерного офтальмоскопа с адаптивной оптикой (AOSLO);
блок регулировки, сконфигурированный для регулирования в соответствии с командой оператора условия захвата изображений для множества изображений с большим увеличением, ассоциированных с базовым шаблоном, выбранным из множества базовых шаблонов; и
блок управления, сконфигурированный для побуждения AOSLO захватить множество изображений с большим увеличением в области захвата изображений в соответствии с отрегулированным условием захвата изображений.

2. Устройство по п. 1, в котором упомянутый блок регулировки регулирует условие захвата изображений на основе по меньшей мере одного из положения точки, представляющей выбранный базовый шаблон в области захвата изображений, условия ограничения, назначенного оператором и задающего диапазон, который может принимать условие захвата изображений, и величины изменения условия захвата изображений, назначенной оператором.

3. Устройство по п. 1, дополнительно содержащее блок получения, сконфигурированный для анализа изображения, представляющего всю область захвата изображений с увеличением меньше, чем у изображений с большим увеличением, и для получения информации, представляющей признак изображения,
причем упомянутый блок регулировки дополнительно регулирует условие захвата изображений на основе упомянутой информации.

4. Устройство по п. 3, в котором упомянутый блок получения получает признак области, включенной в одну из замкнутой области и кольцеобразной области на изображении, представляющем всю область захвата изображений.

5. Устройство по п. 3, дополнительно содержащее блок управления отображением, сконфигурированный для наложения множества захваченных изображений с большим увеличением на изображение, представляющее всю область захвата изображений, и побуждения блока отображения отобразить изображения.

6. Устройство по п. 5, в котором упомянутый блок управления отображением побуждает упомянутый блок отображения отобразить по меньшей мере одно изображение кровеносного сосуда из захваченных изображений с большим увеличением на основе признака изображения, ассоциированного с одним из кровеносного сосуда и области, где перемещается клетка крови, полученного упомянутым блоком получения.

7. Устройство по п. 5, в котором упомянутый блок управления отображением побуждает упомянутый блок отображения отобразить множество захваченных изображений с большим увеличением синхронно с периодическим моментом, представленным биомедицинским сигналом, измеренным у субъекта.

8. Устройство по п. 1, в котором условие захвата изображений включает в себя по меньшей мере одно из положения для захвата изображения с большим увеличением в области захвата изображений, порядка захвата изображений, количества изображений, которые будут захвачены в одном и том же положении, угла рассматривания изображения с большим увеличением, размера пикселя изображения с большим увеличением, количества кадров захвата изображений, частоты кадров и положения в фокусе.

9. Устройство по п. 1, дополнительно содержащее блок оценки, сконфигурированный для оценки кадра, в котором по меньшей мере одно из степени анормальности яркости, величины искажения, уровня шума относительно сигнала и величины смещения относительно контрольного кадра демонстрирует значение не меньше заранее установленного значения, в качестве исключительного кадра из кадров изображения с большим увеличением, и необходимость повторного получения множества изображений с большим увеличением определяется на основе результата оценки.

10. Устройство по п. 1, в котором упомянутый блок управления вызывает захват томограммы в области захвата изображений в качестве изображения с большим увеличением.

11. Устройство обработки информации для управления в одной области захвата изображений в глазном дне захватом изображений для множества изображений с большим увеличением, имеющих угол рассматривания меньше угла рассматривания области захвата изображений, содержащее:
блок получения, сконфигурированный для анализа изображения, имеющего угол рассматривания области захвата изображений, и для получения информации, представляющей признак изображения;
блок определения, сконфигурированный для определения условия захвата изображений для множества изображений с большим увеличением на основе полученной информации; и
блок управления, сконфигурированный для побуждения сканирующего лазерного офтальмоскопа с адаптивной оптикой (AOSLO) захватить множество изображений с большим увеличением в области захвата изображений в соответствии с определенным условием захвата изображений.

12. Устройство по п. 11, в котором упомянутый блок получения получает признак области, включенной в одну из замкнутой области и кольцеобразной области на изображении, представляющем всю область захвата изображений.

13. Устройство по п. 11, дополнительно содержащее блок управления отображением, сконфигурированный для наложения множества захваченных изображений с большим увеличением на изображение, представляющее всю область захвата изображений, и побуждения блока отображения отобразить изображения.

14. Устройство по п. 13, в котором упомянутый блок управления отображением побуждает упомянутый блок отображения отобразить по меньшей мере одно изображение кровеносного сосуда из захваченных изображений с большим увеличением на основе признака изображения, ассоциированного с одним из кровеносного сосуда, полученного упомянутым блоком получения, и области, где перемещается клетка крови.

15. Устройство по п. 13, в котором упомянутый блок управления отображением побуждает упомянутый блок отображения отобразить множество захваченных изображений с большим увеличением синхронно с периодическим моментом, представленным биомедицинским сигналом, измеренным у субъекта.

16. Устройство по п. 11, в котором условие захвата изображений включает в себя по меньшей мере одно из положения для захвата изображения с большим увеличением в области захвата изображений, порядка захвата изображений, количества изображений, которые будут захвачены в одном и том же положении, угла рассматривания изображения с большим увеличением, размера пикселя изображения с большим увеличением, количества кадров захвата изображений, частоты кадров и положения в фокусе.

17. Устройство по п. 11, дополнительно содержащее блок оценки, сконфигурированный для оценки кадра, в котором по меньшей мере одно из степени анормальности яркости, величины искажения, уровня шума относительно сигнала и величины смещения относительно контрольного кадра демонстрирует значение не меньше заранее установленного значения, в качестве исключительного кадра из кадров изображения с большим увеличением, и необходимость повторного получения множества изображений с большим увеличением определяется на основе результата оценки.

18. Устройство по п. 11, в котором упомянутый блок управления вызывает захват томограммы в области захвата изображений в качестве изображения с большим увеличением.

19. Способ обработки информации, исполняемый устройством обработки информации для управления в заданной области захвата изображений в глазном дне захватом изображений для множества изображений с большим увеличением, имеющих угол рассматривания меньше угла рассматривания области захвата изображений, причем упомянутый способ содержит этапы, на которых:
представляют оператору множество базовых шаблонов для выбора, причем каждый упомянутый шаблон представляет распределение положений, в которых нужно соответственно захватывать изображения с большим увеличением посредством сканирующего лазерного офтальмоскопа с адаптивной оптикой (AOSLO);
регулируют в соответствии с командой оператора условие захвата изображений для множества изображений с большим увеличением, ассоциированных с базовым шаблоном, выбранным из множества базовых шаблонов; и
побуждают AOSLO захватить множество изображений с большим увеличением в области захвата изображений в соответствии с отрегулированным условием захвата изображений.

20. Способ обработки информации, исполняемый устройством обработки информации для управления в заданной области захвата изображений в глазном дне захватом изображений для множества изображений с большим увеличением, имеющих угол рассматривания меньше угла рассматривания области захвата изображений, причем упомянутый способ содержит этапы, на которых:
анализируют изображение, имеющее угол рассматривания области захвата изображений, и получают информацию, представляющую признак изображения;
определяют условие захвата изображений для множества изображений с большим увеличением на основе упомянутой информации; и
побуждают сканирующий лазерный офтальмоскоп с адаптивной оптикой (AOSLO) захватить множество изображений с большим увеличением в области захвата изображений в соответствии с определенным условием захвата изображений.

21. Невременный машиночитаемый носитель информации, хранящий компьютерную программу, сконфигурированную для побуждения компьютера функционировать в качестве блоков устройства обработки информации по п. 1.