СВЯЗЫВАНИЕ ОТЧЕТА / ИЗОБРАЖЕНИЯ Российский патент 2020 года по МПК G16H15/00 G16H30/20 

ОБЛАСТЬ ТЕХНИКИ

Настоящее изобретение в целом относится к связыванию медицинского отчета и изображения(й), ссылку на которое(ые) он содержит.

УРОВЕНЬ ТЕХНИКИ

Составление отчетов может представлять собой часть повседневной работы отделения лучевой диагностики, занимающую много времени. Обычный рабочий процесс составления отчетов по лучевой диагностике включает просмотр специалистом по лучевой диагностике множества изображений после лучевого исследования и запись или предписание описательного отчета с описанием полученных результатов. Кроме того, вместе с описанием полученных результатов, специалисты по лучевой диагностике часто могут включать ссылки на конкретные срезы изображения (например, «Нейрофиброма в правой верхней части пространства вне мышечной воронки (группа 5, изображение 104) размером приблизительно 17 мм»). Такие конкретные ссылки часто соответствуют ключевым изображениям.

Отчет создают и сохраняют в радиологической информационной системе (РИС), тогда как изображения сохраняют в системе архивации изображений (САИ). На пользовательском интерфейсе системы архивации изображений доступны инструменты для выполнения основных измерений, например, длины или среднего значения единицы Хаунсфилда (HU) в исследуемой области (ИО), или аннотаций, например, стрелок, для обозначения интересующих областей на изображении. Как правило, имеет место интегрированное решение, при котором изображения в системе архивации изображений в той или иной степени связаны с медицинской картой пациента. Однако при этом отсутствует связь между изображениями и/или аннотациями на изображениях с полученными результатами в отчете.

В EP 2478834 A1 раскрыто устройство и способ генерирования отчетов об интерпретации изображений. Получают и отображают медицинское изображение. Генерируют и отображают электронный отчет об интерпретации медицинского изображения. Вводят положение области поражения на медицинском изображении. Символ связи, связанный гиперсвязью с медицинским изображением, содержащий входное положение области поражения, вставляют в отчет об интерпретации изображения таким образом, что символ связи отображается различимым образом. Выбирают отображенный различимым образом символ связи в отчете об интерпретации изображения. На основании выбранного символа связи на медицинском изображении отображают индекс, представляющий собой положение области поражения.

В EP 2306355 A2 раскрыто устройство и способ отображения информации о медицинском изображении. Отчеты о просмотренных изображениях и медицинские изображения отображают в корреляции друг с другом. Получают вторую группу ключевых слов путем обнаружения фраз, которые соответствуют ключевым словам из первой группы ключевых слов, которые представляют собой органы или патологии из отчетов о просмотренных изображениях. Органы или патологии, представленные первой группой ключевых слов, автоматически обнаруживают из медицинских изображений и получают третью группу ключевых слов, содержащую ключевые слова, соответствующие обнаруженным органам или патологиям. Получают общие совпадающие ключевые слова из ключевых слов второй и третьей группы ключевых слов. Для каждого общего ключевого слова генерируют данные связи, обеспечивающие корреляцию органов или патологий, соответствующих общим ключевым словам. Отображают коррелированные друг с другом общие ключевые слова и признаки, представляющие органы и патологии, соответствующие общим ключевым словам.

В US 2013/006087 A1 раскрыто подобное устройство ситуационного поиска, содержащее блок определения весового значения, который определяет весовое значение каждого количественного признака, извлеченного из целевого интерпретируемого изображения, на основании заранее определенной информации о двунаправленной корреляции данных, определяющей корреляцию между количественным признаком и одним из по меньшей мере одного элемента интерпретации изображения, а также наименование заболевания, оба из которых включены в отчет об интерпретации медицинского изображения, включенного в ситуационный элемент данных, зарегистрированный в ситуационной базе данных, таким образом, что весовое значение увеличивается с увеличением корреляции; и подобный блок ситуационного поиска, который выполняет поиск подобного ситуационного элемента данных, содержащего подобное изображение, путем взвешивания, с использованием весового значения, каждого количественного признака изображения в первом наборе, извлеченном из интерпретируемого целевого изображения, и соответствующего одного из количественных признаков изображения во втором наборе, извлеченном из медицинского изображения, и сравнение взвешенного первого набора и взвешенного второго набора.

РАСКРЫТИЕ СУЩНОСТИ ИЗОБРЕТЕНИЯ

Аспекты, описанные в настоящем документе, решают вышеуказанные проблемы и прочее.

Согласно одному аспекту способ включает:

визуальное отображение медицинского отчета в электронном виде, который содержит ссылку на набор изображений в электронном виде;

извлечение ссылок на набор изображений в электронном виде из медицинского отчета в электронном виде;

связывание медицинского отчета в электронном виде с набором изображений в электронном виде путем:

- определения ткани на каждом изображении из набора изображений в электронном виде, на которых было выполнено измерение;

- извлечения описания, связанного с изображениями, на которых было выполнено измерение; и

- выявления изображений в электронном виде, на которых имеется измеренное значение; и

визуальное отображение выявленных изображений со ссылками и описанием.

Согласно другому аспекту вычислительное устройство содержит память по меньшей мере с одной компьютерочитаемой инструкцией и процессор, который выполняет указанную по меньшей мере одну компьютерочитаемую инструкцию. Процессор, в ответ на выполнение указанной по меньшей мере одной компьютерочитаемой инструкции:

визуально отображает медицинский отчет в электронном виде, причем медицинский отчет в электронном виде содержит ссылку на набор изображений в электронном виде;

извлекает ссылки на набор изображений в электронном виде из медицинского отчета в электронном виде;

связывает медицинский отчет в электронном виде с набором изображений в электронном виде путем:

- определения ткани на каждом изображении из набора изображений в электронном виде, на которых было выполнено измерение;

- извлечения описания, связанного с изображениями, на которых было выполнено измерение; и

- выявления изображений в электронном виде, на которых имеется измеренное значение; и

визуально отображает выявленные изображения со ссылками и описанием.

Согласно другому аспекту компьютерочитаемый носитель закодирован компьютерочитаемыми инструкциями, которые, при выполнении процессором, обуславливают выполнение процессором:

визуального отображения медицинского отчета в электронном виде, причем медицинский отчет в электронном виде содержит ссылку на набор изображений в электронном виде;

извлечения ссылок о наборе изображений в электронном виде из медицинского отчета в электронном виде;

связывания медицинского отчета в электронном виде с набором изображений в электронном виде путем:

- определения ткани на каждом изображении из набора изображений в электронном виде, на которых было выполнено измерение;

- извлечения описания, связанного с изображениями, на которых было выполнено измерение; и

- выявления изображений в электронном виде, на которых имеется измеренное значение; и

визуального отображения выявленных изображений со ссылками и описанием.

КРАТКОЕ ОПИСАНИЕ ЧЕРТЕЖЕЙ

Настоящее изобретение может принимать вид различных компонентов и схем размещения компонентов, и различных этапов и порядка выполнения этапов. Чертежи служат лишь в целях иллюстрации предпочтительных вариантов реализации и не должны рассматриваться в качестве ограничения настоящего изобретения.

На фиг. 1 схематически изображен пример вычислительной системы с модулем связывания отчета/изображения.

На фиг. 2 схематически изображен пример модуля связывания отчета/изображения.

На фиг. 3 изображен пример изображения без измеренного значение или аннотации на нем.

На фиг. 4 изображен пример изображения с измеренным значением, но без аннотации на нем.

На фиг. 5 изображен пример изображения с измеренным значением и аннотацией на нем.

На фиг. 6 изображен пример окна создания/редактирования отчета и окна изображения.

На фиг. 7 схематически изображен другой пример модуля связывания отчета/изображения.

На фиг. 8 изображен пример способа связывания отчета с изображением.

На фиг. 9 изображен другой пример способа связывания отчета с изображением.

ОСУЩЕСТВЛЕНИЕ ИЗОБРЕТЕНИЯ

На фиг. 1 схематически изображена система 100. Система 100 содержит вычислительное устройство 102. Вычислительное устройство 102 содержит процессор(ы) 104, который(е) выполняет(ют) компьютерочитаемую(ые) инструкцию(и) 106, хранимые в компьютерочитаемом носителе 108 («памяти»), который исключает кратковременный носитель, а включает в себя физическую память и/или другой некратковременный носитель. Кроме того, процессор 104 может выполнять одну или более компьютерочитаемых инструкций, переносимых несущей волной, сигналом или другим кратковременным носителем. Вычислительное устройство 102 содержит устройство(а) 110 ввода, такое(ие) как клавиатура, манипулятор-мышь, сенсорный экран и т.д., и устройство(а) 112 вывода, такое(ие) как отображающий монитор и т.д.

Вычислительное устройство 102 связано через сеть 116 с хранилищем(ами) 118 изображений, которое(ые) хранит(ят) изображения в электронном виде. Примером хранилища(хранилищ) 118 изображений является система передачи и архивации изображений (СПАИ), база данных и т.д. Вычислительное устройство 102 также связано через сеть 116 с хранилищем(ами) 120 отчетов, которое хранит отчеты в электронном виде. Примером хранилища(хранилищ) 120 отчетов является рентгенологическая информационная система (РИС), база данных и т.д. Другие системы, которые могут хранить изображения и/или отчеты, включают в себя больничную информационную систему (БИС), электронную медицинскую карту (ЭМК) и т.д. Изображения могут представлять собой изображения КТ, МР, ПЭТ, ОЭКТ, рентгеновские и другие изображения.

Вычислительное устройство 102 может представлять собой систему поддержки принятия клинических решений, компьютер и т.д., находящийся в кабинете врача, учреждении здравоохранения, центре лучевой диагностики и т.д. Компьютерочитаемая инструкция 106 содержит модуль 122 связывания отчета/изображения, который, при выполнении процессором 104, обуславливает выполнение процессором 104 обработки отчета и набора соответствующих изображений. Как описано более подробно ниже, процессор 104, в ответ на выполнение инструкций модуля 122 связывания отчета/изображения, связывает отчет и набор соответствующих изображений. Благодаря связыванию, специалисту в области лучевой диагностики, создающему/просматривающему отчет, не требуется искать, находить и выявлять соответствующий набор изображений, а специалисту в области лучевой диагностики, просматривающему набор изображений, не требуется искать, находить и выявлять соответствующий отчет.

На фиг. 2 схематически изображен пример модуля 122 связывания отчета/изображения. Модуль 122 связывания отчета/изображения содержит редактор 202 отчетов, обеспечивающий возможность создания нового отчета и/или редактирования существующего отчета. В одном примере, редактор 202 отчетов визуально представляет, посредством выходного дисплейного устройства 112, графический интерфейс пользователя с окном создания/редактирования отчета.

Модуль 122 связывания отчета/изображения дополнительно содержит средство 204 извлечения ссылки на изображение. В одном примере, средство 204 извлечения ссылки на изображение использует алгоритм обработки естественного языка (ОЕЯ) для извлечения ссылки(ок) на изображение из текущего отчета. В одном примере, средство 204 извлечения ссылки на изображение использует алгоритм обработки естественного языка для определения разделов, абзацев, предложений и т.д. в отчете.

Средство 204 извлечения ссылки на изображение обрабатывает предложения в разделе «Полученные результаты» отчета и извлекает, например, использование регулярных выражений и ссылок на изображение из одного или более предложений. В случае одного отчета, это может включать извлечение: «группа 11» и «изображение номер 79» из предложения «Ссылочное поражение печени слева (группа номер 11, изображение номер 79) размером приблизительно 6,4 × 5,4 см».

Пример подходящего алгоритма описан в работе Mabotuwana T, Qian Y, Sevenster M., “Using image references in radiology reports to support enhanced report-to-image navigation.” AMIA Annu Symp Proc., 2013:908-16. Другие алгоритмы также предусмотрены в настоящем документе.

В одном варианте, средство 204 извлечения ссылки на изображение также извлекает, на уровне предложения, информацию о дате, которая может содержаться в предложении. Например, в случае предложения «На сканированном изображении от 16 октября 2011 г., размер узла составляет 3 см (группа 5, изображение 26)», средство 204 извлечения ссылки на изображение извлекает: «группа 5», «изображение 26», «16 октября 2011 г.».

Модуль 122 связывания отчета/изображения дополнительно содержит средство 206 извлечения описания изображения. Средство 206 извлечения описания изображения обрабатывает разделы, абзацы, предложения и т.д. из отчетов. В одном примере, это включает использование классификатора максимальной энтропии для назначению знака окончания предложения (‘.’, ‘:’, ‘!’, ‘?’, ‘\n’) в тексте одной из четырех меток: Не конец предложения (например, промежуток в ‘Dr. Doe’); Конец предложения, при этом предложение представляет собой заголовок раздела (например, двоеточие в разделе Полученные результаты:); Конец предложения, при этом предложение является последним предложением в разделе, и Конец предложения ни при одном из вышеуказанных классов.

Средство 206 извлечения описания изображения, для каждого предложения, в котором была извлечена ссылка на изображение, использует стандартные технологии обработки естественного языка для распознавания определенной именной конструкции, связанной со ссылкой на изображение. Например, из фразы «Ссылочное поражение печени слева (группа номер 11, изображение номер 79) размером приблизительно 6,4 × 5,4 см» средство 206 извлечения описания изображения извлекает «ссылочное поражение печени слева», как ключевую именную конструкцию, связанную со ссылкой на изображение.

В другом варианте реализации, где в тексте отчета не указана явная ссылка на изображение, вся конструкция раздел-абзац-предложение может быть перестроена. На этапе после обработки, распознанные заголовки разделов (например, Полученные результаты) и заголовки абзацев (например, ПАНКРЕАЗА, ПЕЧЕНЬ и т.д.) нормализуются относительно перечня известных заголовков. Как только это было выполнено, средство 206 извлечения описания изображения распознает именные конструкции, связанные с каждым заголовком абзаца. Приоритет отдают именным конструкциям с совпадающим измеренным значением.

Также возможно распознавание именной конструкции, основанное только лишь на измерении, вместо измеренного значения и части тела/органа. Если измеренные значения не представлены, извлеченную информацию (т.е. заголовки абзаца и именные конструкции) комбинируют с распознанным органом для определения описания, связанного с ключевыми изображениями. Если на изображении сделана аннотация в виде описания полученного результата (например, «поджелудочная масса»), данную информацию используют в качестве описания, связанного с ключевым изображением.

Модуль 122 связывания отчета/изображения дополнительно содержит средство 208 распознавания элементов анатомии. Средство 208 распознавания элементов анатомии распознает элементы анатомии на изображениях исследований, при которых выполнялось измерение. В одном примере, данную информацию распознают из «Поля Описания Исследования», «Поля Наименования Протокола», «Поля Описания Групп» и/или других полей стандарта DICOM (цифровое создание изображений и осуществление связи в медицине), содержащих информацию, относящуюся к элементам анатомии. Например, если одно из этих полей содержит «поджелудочная масса», средство 208 распознавания элементов анатомии распознает «поджелудочная железа».

Если два или более из этих полей DICOM и/или другие поля DICOM содержат информацию, относящуюся к элементам анатомии, может быть использован основанный на правилах и/или другой подход для распознавания элементов анатомии в интересующем исследовании, в котором выполняют измерение. Пример подходящего алгоритма описан в работе Mabotuwana T, Qian Y, “Determining scanned body part from DICOM study description for relevant prior study matching.” Stud Health Technol Inform., 2013;192:67-71.

В одном варианте, средство 208 распознавания элементов анатомии распознает элементы анатомии из текстовой, числовой, графической и другой накладки изображения. Изображенное средство 208 распознавания элементов анатомии использует алгоритм из алгоритма(ов) 210 распознавания элементов анатомии. На фиг. 3, 4 и 5 изображены алгоритмы, не являющиеся ограничением. На фиг. 3, орган «печень» извлечен из поля DICOM. На фиг. 4 из изображения дополнительно извлечено измеренное значение «54,1 мм». На фиг. 5 из изображения дополнительно извлечен текст «Ссылочное поражение печени», в котором указана «печень».

Возвращаясь к фиг. 2, модуль 122 связывания отчета/изображения дополнительно содержит средство 212 выявления изображения. Средство 212 выявления изображения извлекает распознанное(ые) изображение(я) из хранилища(хранилищ) 118 изображений. Например, для разобранных «группа 5», «изображение 26», «16 октября 2011 г.», средство 212 выявления изображения сообщается с хранилищем(ами) 118 изображений для определения внутренней информации DICOM, необходимой для выполнения выбора соответствующего изображения из хранилища(хранилищ) 118 изображений.

После этого, выявленное(ые) изображение(я) связывают с описанием, определенным средством 206 извлечения описания изображения. Средство 212 выявления изображения визуально представляет выявленное(ые) изображение(я) в окне изображения на графическом интерфейсе пользователя, визуально представленного на дисплее 112. В одном примере, окно изображения представлено одновременно с окном создания/редактирования отчета. В другом примере, окно изображения представлено вместо окна создания/редактирования отчета.

Пример окна 602 создания/редактирования отчета с одновременно отображенным окном 604 изображения(й) показан на фиг. 6. В данном примере, окно 604 изображения(й) обеспечивает пользователю возможность перемещения, копирования и т.д. информации из окна 604 изображения(й) в окно 602 создания/редактирования отчета. Кроме того, пользователь может обновлять/редактировать описание полученного результата в окне 604 изображения или среду составления отчета непосредственно в окне 602 создания/редактирования отчета.

Переходим к фиг. 7, на которой схематически изображен другой пример модуля 122 связывания отчета/изображения. В целом в данном варианте реализации модуль 122 связывания отчета/изображения генерирует связь между полученными результатами на изображении, обозначенными аннотациями, и соответствующим ключевым словом в отчете. Это включает автоматическое связывание ключевых слов в отчете с аннотациями на изображении. Данные аннотации могут представлять собой измеренные значения, стрелки или обозначения из какого-либо другого доступного инструмента.

В данном примере, модуль 122 связывания отчета/изображения содержит средство 702 извлечения текста. Средство 702 извлечения текста извлекает ключевые слова, например, диагноз, отклонения от нормы, измеренные значения, местоположения и/или другую информацию из отчета во время составления или предписания отчета, или после этого. Ранее сгенерированный отчет может быть получен из хранилища(хранилищ) 120 отчетов. Отчет, создаваемый в данный момент, может быть получен из редактора 124 отчетов.

В одном примере, средство 702 извлечения текста извлекает ключевые слова с применением алгоритма обработки естественного языка. Пример подходящего алгоритма описан в работе M. Sevenster et al., “Automatically Correlating Clinical Findings and Body Locations in Radiology Reports Using MedLEE,” J Digit Imaging,№25, страницы 240-249, 2012. В настоящем документе также предусмотрены другие алгоритмы. Средство 702 извлечения текста выводит сигнал, содержащий перечень полученных результатов с их соответствующим анатомическим местоположением.

Модуль 122 связывания отчета/изображения дополнительно содержит средство 704 маркирования элементов анатомии. Средство 704 маркирования элементов анатомии маркирует элементы анатомии на изображениях. Например, средство 704 маркирования элементов анатомии обрабатывает изображение для распознавания на нем ткани (например, сердца) и местоположения ткани. В одном примере, степень детализации обнаружения элементов анатомии такая, что такие органы, как камера сердца, доля печени, корковое поле головного мозга и т.д., которые зачастую указаны в отчетах, могут быть распознаны грубо.

С этой целью может быть использовано иерархическое распределение сперва для обнаружения части тела (например, грудной клетки), затем органа (например, сердца), а затем точного местоположения (например, левого предсердия), если достоверность обнаружения достаточно высока. В изображенном варианте реализации, средство 704 маркирования элементов анатомии использует алгоритм маркирования элементов анатомии из алгоритма(ов) 706 маркирования. Такие алгоритмы включают алгоритмы, основанные на атласе, статистике, и/или другие алгоритмы маркирования элементов анатомии.

Если используется алгоритм, основанный на атласе, данная информация может быть непосредственно кодирована также с учетом иерархической структуры. В одном варианте, с ней может быть объединена модель, обеспечивающая сведения об элементах анатомии с возможностью навигации и разбора. В случае статистического алгоритма, обнаружение элементов анатомии не должно быть точным, а представлять собой вероятное решение. Например, может быть назначено некоторое местоположение, например, для сердца с вероятностью 0,4 и печени с вероятностью 0,6.

Изображения могут быть получены из хранилища(хранилищ) 118 изображений и/или другого источника. Подходящие алгоритмы включают те, что описаны в работах Vik e al., “A new method for robust organ positioning in CT images,” на Международном симпозиуме IEEE по биомедицинской визуализации (ISBI), 2012, Rohlfing et al., “Quo Vadis, Atlas-Based Segmentation,” в справочнике по анализу медицинских изображений: модели сегментации и регистрации, Kluwer, 2005, и/или один или более других алгоритмов.

Модуль 122 связывания отчета/изображения дополнительно содержит средство 708 маркирования аннотаций. Средство 708 маркирования аннотаций маркирует аннотацию на изображениях. Изображенное средство 708 маркирования аннотаций совмещает анатомические маркеры, назначенные изображению средством 704 маркирования элементов анатомии, с аннотациями на изображении. Например, аннотация на изображении, соответствующая местоположению элемента анатомии, маркированному как «сердце», назначена маркеру «сердце». Таким образом, каждая аннотация назначена конкретному элементу анатомии на основании изображения с маркированными элементами анатомии.

Аннотации (например, измеренное значение длины или объема, стрелка, среднее значение HU и т.д.) могут быть сделаны с применением известных или других инструментов, выполняющих маркировки на изображении. Кроме того, аннотации могут содержать «невидимые закладки», представляющие собой маркеры, сделанные на изображении, которые не показаны, например, с целью предотвращения загромождения и, таким образом, отвлечения внимания врача, составляющего отчет. Полученный в результате набор маркированных аннотаций может быть сохранен на внутреннем уровне в виде перечня и/или ином виде.

В качестве примера, не служащего ограничением, для случая невидимой закладки, когда медицинский работник сталкивается с тем, что представляет интерес, он может щелкнуть на положение изображения. Маркер, например, небольшой крест, может быть временно визуально отображен в области щелчка, а затем сделан прозрачным или невидимым. Эти закладки сохраняют и также используют для связывания с отчетом. Невидимая закладка может быть снова визуально отображена п запросу и/или иным образом, например, для редактирования.

Модуль 122 связывания отчета/изображения дополнительно содержит генератор 710 связи. Генератор 710 связи создает связь между извлеченным текстом в отчете и маркированными аннотациями. Например, генератор 710 связи обрабатывает перечень полученных результатов и перечень аннотаций, и выполняет корреляцию их положений. С этой целью, генератор 710 связи использует сведения 712 об элементах анатомии и онтологическую взаимосвязь, поскольку он должен быть способен справляться с точными анатомическими местоположениями, такими как аортальный клапан, а также грубыми описаниями, такими как верхний отдел брюшной полости.

Генератор 710 связи распознает наиболее вероятные комбинации полученных результатов и аннотаций. В одном примере, генератор 710 связи достигает заранее определенной чувствительности (например, 100%, 90%, 75% и т.д.), так что создаются только допустимые связи. При наличии сомнения, связь может быть пропущена или пользователю может быть выведена подсказка для подтверждения. Генератор 710 связи, в ответ на совмещение полученных результатов в отчете и аннотации на изображении, создает связь, такую как гиперсвязь, как для отчета, так и для изображения.

В одном примере, генератор 710 связи генерирует связь автоматически с применением анатомических сведений. То есть, для каждой аннотации должно быть известно анатомическое местоположение, так чтобы оно могло быть автоматически связано с полученными результатами и их местоположением, указанным в отчете. Например, генератор 710 связи может генерировать связь между полученным результатом «гепатоцеллюлярная карцинома в правой доле печени» и измеренным значением, которое было автоматически определено как находящееся в правой доле печени.

Модуль 122 связывания отчета/изображения дополнительно содержит средство 714 обновления отчета/изображения. Средство 714 обновления отчета/изображения добавляет в отчет гиперсвязь с отчетом. Гиперсвязь с отчетом, в ответ на ее вызов, выявляет связанное изображение, которое может быть отображено и/или использовано иным образом. Кроме того, средство 714 обновления отчета/изображения добавляет на изображение гиперсвязь с изображением. Гиперсвязь с изображением, в ответ на ее вызов, выявляет связанный отчет, который может быть отображен и/или использован иным образом.

Гиперсвязь может быть вызвана посредством ввода через устройство(а) 110 ввода, например, путем щелчка с применением манипулятора-мыши. Это означает, что путем щелчка по гиперсвязи в отчете, хранилище(а) 120 отчетов показывает на срезе изображение, соответствующее аннотации, а щелчок по аннотации в соответствующем отчете показывает соответствующий отчет в положении полученного результата. Это может быть особенно полезно, если во внимание принимают устаревшие отчеты или результаты получения в текущей сессии составления отчета.

В одном варианте, генератор 710 связи может изучать вероятные и маловероятные комбинации полученных результатов и местоположения аннотаций, например, аортальный клапан всегда будет находиться в сердце, тогда как перелом никогда не будет соответствовать аннотации на мягкой ткани. Он также может узнавать о комбинации некоторых диагнозов и типов аннотаций, например, опухолей или стентов с измеренными значениями диаметра, кровотечений и значениями измерения HU, переломами или аневризмами со стрелками.

В другом варианте, генератор 710 связи может связывать полученный результат, наблюдаемый в нескольких исследованиях, таким образом, что путем щелчка по гиперссылке опухоли в текущем отчете, опухоль показывается не только в текущем исследовании, но также и в предыдущем. Связывание может быть выполнено между аннотациями и полученными результатами для СПАИ - РИС и/или других инструментов, таких как шкала времени, которая отображает исследования и полученные результаты пациента временно структурированным образом.

Связь может быть полезна при различных сценариях. Например, в некоторых ситуациях, черновую версию отчета сначала составляет врач-стажер, а потом ее проверяет врач, осуществляющий уход. Благодаря связыванию ключевых слов в отчете с местоположением на изображении, которое привело к данному диагнозу, врач, осуществляющий уход, в неясных случаях сможет более легко уяснить, каким образом врач-стажер поставил данный диагноз. Это может обеспечить более быстрое и облегченное ознакомление с отчетом.

В другом примере, при обращении к предыдущим отчетам в сценариях последующего наблюдения, гиперсвязи смогут помочь понять предыдущие диагнозы более быстро, а также обеспечить возможность более быстрого сравнения подозрительных областей. В другом примере гиперсвязи могут быть использованы для обучения. Кроме того, гиперсвязи между полученными результатами при диагностике и соответствующим изображением могут помочь быстрее ознакомиться со случаем.

На фиг. 8 изображен пример способа, в соответствии с раскрытием, представленным в настоящем документе.

Следует понимать, что порядок выполнения действий в способах, описанных в настоящем документе, не является ограничением. Таким образом, другие порядка выполнения действий также предусмотрены в настоящем документе. Кроме того, одно или более действий могут быть опущены и/или одного или более дополнительных действий могут быть включены.

На этапе 802 в текущем медицинском отчете распознают ссылки на изображения и их извлекают из медицинского отчета.

На этапе 804 определяют ткань из каждой извлеченной ссылки.

На этапе 806 из каждой извлеченной ссылки извлекают описание, связанное с изображениями, на которых было выполнено измерение.

На этапе 808 извлекают изображения, на которых имеется измеренное значение, из ссылок.

На этапе 810 извлеченные изображения связывают с тканью из извлеченных ссылок.

На этапе 810 извлеченные изображения отображают в окне изображений вместе со ссылками и описанием.

На этапе 812, в ответ на ввод пользователя посредством устройства(устройств) 110 ввода, процессор 104 перемещает информацию, выбранную в окне изображений, в отчет в окне создания/редактирования отчета.

Вышеуказанное может быть реализовано посредством компьютерочитаемых инструкций, закодированных или встроенных в компьютерочитаемый носитель, которые, при выполнении компьютерным(и) процессором(ами), обуславливают выполнение описанных действий процессором(ами). Дополнительно или в качестве альтернативы, по меньшей мере одна из компьютерочитаемых инструкций содержится в сигнале, несущей волне или другом кратковременном носителе.

На фиг. 9 изображен пример способа, в соответствии с раскрытием, представленным в настоящем документе.

На этапе 902 из медицинского отчета извлекают полученные результаты и соответствующие анатомические положения.

На этапе 904 ткань на изображении маркируют анатомическими маркерами, как описано в настоящем документе и/или иным образом.

На этапе 906 аннотации на изображении маркируют анатомическими маркерами на основании маркировки ткани на изображении.

На этапе 908 совмещают полученные результаты и аннотации.

На этапе 910 гиперсвязь с изображением вставляют в отчет в местоположении полученного результата, а гиперсвязь с отчетом вставляют в изображение в местоположении аннотации.

Вышеуказанное может быть реализовано посредством компьютерочитаемых инструкций, закодированных или встроенных в компьютерочитаемый носитель, которые, при выполнении компьютерным(и) процессором(ами), обуславливают выполнение описанных действий процессором(ами). Дополнительно или в качестве альтернативы, по меньшей мере одна из компьютерочитаемых инструкций содержится в сигнале, несущей волне или другом кратковременном носителе.

Настоящее изобретение было описано со ссылкой на предпочтительные варианты реализации. Модификации и изменения могут стать ясными при прочтении и понимании предшествующего подробного описания. Следует понимать, что предполагается, что настоящее изобретение включает все такие модификации и изменения в такой степени, в которой они указаны в объеме прилагаемой формулы изобретения или ее эквивалентов.

Изобретение относится к связыванию медицинского отчета и изображения, ссылку на которое он содержит. Технический результат заключается в уменьшении затрат времени на составление отчетов в работе отделения лучевой диагностики. Такой результат достигается за счет того, что способ включает визуальное отображение медицинского отчета в электронном виде, который содержит ссылку на набор изображений в электронном виде, извлечение ссылок на набор изображений в электронном виде из медицинского отчета в электронном виде; связывание медицинского отчета в электронном виде с набором изображений в электронном виде путем определения ткани на каждом изображении из набора изображений в электронном виде, на которых было выполнено измерение; извлечения описания, связанного с изображениями, на которых было выполнено измерение; и выявления изображений в электронном виде, на которых имеется измеренное значение; и визуальное отображение выявленных изображений со ссылками и описанием. 3 н. и 12 з.п. ф-лы, 9 ил.

1. Способ связывания медицинского отчета и изображения, ссылку на которое он содержит, включающий:

визуальное отображение медицинского отчета в электронном виде, который содержит ссылку на набор изображений в электронном виде,

извлечение ссылок на набор изображений в электронном виде из медицинского отчета в электронном виде;

связывание медицинского отчета в электронном виде с набором изображений в электронном виде путем:

- определения ткани на каждом изображении из набора изображений в электронном виде, на которых было выполнено измерение;

- извлечения описания, связанного с изображениями, на которых было выполнено измерение; и

- выявления изображений в электронном виде, на которых имеется измеренное значение; и

визуальное отображение выявленных изображений со ссылками и описанием.

2. Способ по п. 1, который также включает

перемещение информации из визуально отображенных выявленных изображений со ссылками и описанием в визуально отображенный отчет в ответ на приём ввода пользователя.

3. Способ по любому из пп. 1, 2, который также включает

использование модуля обработки естественного языка для извлечения ссылок из медицинского отчета в электронном виде.

4. Способ по п. 3, который также включает

использование модуля обработки естественного языка для извлечения ткани из извлеченных ссылок.

5. Способ по любому из пп. 1-4, который также включает

использование модуля обработки естественного языка для извлечения описания.

6. Способ по п. 5, который также включает

извлечение описания из извлеченных ссылок.

7. Способ по любому из пп. 5, 6, который также включает

извлечение ткани из измеренного значения на изображении.

8. Способ по любому из пп. 5-7, который также включает

извлечение ткани из аннотации на изображении.

9. Способ по п. 1, который также включает:

извлечение полученных результатов и соответствующих анатомических положений из медицинского отчета в электронном виде;

маркирование ткани на изображениях анатомическими маркерами;

маркирование аннотаций на изображении анатомическими маркерами на основании маркирования ткани на изображении;

совмещение полученных результатов и аннотаций; и

добавление связи с изображением в отчет в местоположении полученного результата и добавление связи с отчетом на изображение в местоположении аннотации.

10. Способ по п. 9, в котором связь с изображением в отчете представляет собой гиперсвязь, и связь с отчетом на изображении представляет собой гиперсвязь.

11. Способ по любому из пп. 9, 10, который также включает

использование модуля обработки естественного языка для извлечения полученных результатов и соответствующих анатомических положений из медицинского отчета в электронном виде.

12. Способ по любому из пп. 9-11, который также включает

маркирование ткани на изображениях с применением анатомического атласа или статистического алгоритма.

13. Способ по любому из пп. 9-12, в котором по меньшей мере одна из аннотаций является невидимой на изображении.

14. Вычислительное устройство (102) для связывания медицинского отчета и изображения, ссылку на которое он содержит, содержащее:

память (108) по меньшей мере с одной компьютерочитаемой инструкцией (106);

процессор (104), выполненный с возможностью выполнения указанной по меньшей мере одной компьютерочитаемой инструкции, при этом процессор выполнен с возможностью, в ответ на выполнение указанной по меньшей мере одной компьютерочитаемой инструкции:

визуального отображения медицинского отчета в электронном виде, причем медицинский отчет в электронном виде содержит ссылку на набор изображений в электронном виде;

извлечения ссылок на набор изображений в электронном виде из медицинского отчета в электронном виде;

связывания медицинского отчета в электронном виде с набором изображений в электронном виде путем:

- определения ткани на каждом изображении из набора изображений в электронном виде, на которых было выполнено измерение;

- извлечения описания, связанного с изображениями, на которых было выполнено измерение; и

- выявления изображений в электронном виде, на которых имеется измеренное значение; и

визуального отображения выявленных изображений со ссылками и описанием.

15. Компьютерочитаемый носитель, кодированный компьютерочитаемыми инструкциями, которые, при выполнении процессором, обуславливают выполнение процессором:

визуального отображения медицинского отчета в электронном виде, причем медицинский отчет в электронном виде содержит ссылку на набор изображений в электронном виде;

извлечения ссылок на набор изображений в электронном виде из медицинского отчета в электронном виде;

связывания медицинского отчета в электронном виде с набором изображений в электронном виде путем:

- определения ткани на каждом изображении из набора изображений в электронном виде, на которых было выполнено измерение;

- извлечения описания, связанного с изображениями, на которых было выполнено измерение; и

- выявления изображений в электронном виде, на которых имеется измеренное значение; и

визуального отображения выявленных изображений со ссылками и описанием.