Добавил:
kiopkiopkiop18@yandex.ru Вовсе не секретарь, но почту проверяю Опубликованный материал нарушает ваши авторские права? Сообщите нам.
Вуз: Предмет: Файл:

5 курс / Онкология / Возможности_систем_автоматического_анализа_цифровых_рентгенологических

.pdf
Скачиваний:
0
Добавлен:
24.03.2024
Размер:
8.6 Mб
Скачать

101

По результатам данного анализа только одна программа (А) показала результат (AUC - 0,911), позволяющий допустить ее к дальнейшим испытаниям.

Общим для всех программных продуктов было: низкие показатели чувствительности и соответственно отношения правдоподобия отрицательного результата при высоких результатах специфичности и соответственно высокие показатели отношения правдоподобия положительного результата.

Следует отметить, что все программные продукты (даже те, кто не прошли пороговые значения по показателю площади под кривой) показали сопоставимые результаты с усредненными данными результатов врачей-рентгенологов по показателям диагностической эффективности.

Наибольшее число ошибочных интерпретаций программными продуктами было при анализе рентгенограмм пациента с периферической аденокарциномой верхней доли правого легкого (Рисунок 33), представленной солидным образованием размерами 18 мм, три из четырех программных продукта

(программа A, C, D) неверно интерпретировали указанные рентгенограммы как снимки без патологических изменений в легочной ткани; и пациента с периферической аденокарциномой верхней доли левого легкого (Рисунок 34),

представленной солидным образованием размерами 8 мм, два из четырех программных продукта (программа C и D) неверно интерпретировали указанные рентгенограммы как снимки без патологических изменений в легочной ткани

(Таблица 20) [44].

Таблица 20 – Результаты анализа рентгенограмм с округлыми образования в легких системами и врачами-рентгенологами из выборки 2

Категори

Программа

Программа

Программа

Программа

% правильных

и

А

B

C

D

ответов в тесте 2

Случай 1

Нет

Нет

Да

Нет

46,50%

Случай 2

Да

Да

Нет

Да

41,50%

Случай 3

Да

Да

Нет

Нет

48,40%

Случай 4

Да

Нет

Да

Да

16,70%

Случай 5

Да

Нет

Да

Да

7,40%

Случай 6

Да

Да

Да

Да

46,50%

102

Рисунок 33 – Рентгенограмма в передней проекции и скан компьютерной томограммы (аксиальная плоскость, легочное окно) пациента с аденокарциномой

S2 правого легкого, представленной очагом солидного типа максимальным размером 18 мм. Данные изменения были пропущены тремя программными продуктами (программа A, C, D) и 44% врачей-рентгенологов

Рисунок 34 – Рентгенограмма в передней проекции и скан компьютерной томограммы (аксиальная плоскость, легочное окно) пациента с аденокарциномой в S4 левого легкого, представленной очагом солидного типа максимальным размером 8 мм. Данные изменения были пропущены двумя программными продуктами (программа A, C, D) 41% врачей-рентгенологов

Рекомендовано к изучению разделом по лучевой диагностике сайта https://meduniver.com/

103

Также у двух программ из четырех возникли сложности с интерпретацией крупного (32 мм) солидного образования в S1+2 левого легкого (Рисунок 35),

являющегося саркомой легкого. На рентгенограмме образование локализуется в проекции верхней доли левого легкого за тенью ключицы и 4 ребра. Одна из четырех программ (программа B) ложно интерпретировала снимок как норму.

Рисунок 35 – Рентгенограмма в передней проекции и скан компьютерной томограммы (аксиальная плоскость, легочное окно) пациента с саркомой верхней доли левого легкого, представленной очагом солидного типа,

максимальным размером 32 мм. Данные изменения были пропущены одним программным продуктом (программа B) 48% врачей-рентгенологов

Несмотря на крупные размеры образования (67 мм) и солидный тип при его расположении в парамедиастинальном отделе S1 правого легкого (Рисунок 36),

изменения были пропущены одной из программ (программа С).

104

Рисунок 36 – Рентгенограмма в передней проекции и скан компьютерной томограммы (аксиальная плоскость, легочное окно) пациента аденокарциномой верхней доли правого легкого, представленной образованием солидного типа,

максимальным размером 67 мм. Данные изменения были пропущены программой

C и 47% врачей рентгенологов

Аналогичные результаты были получены при анализе рентгенограммы пациента с мелкоклеточным раком, представленным солидным округлым образованием с четкими контурами в субплевральном отделе S1+2 левого легкого

(Рисунок 37), размерами 35мм в верхней доле левого легкого.

Рекомендовано к изучению разделом по лучевой диагностике сайта https://meduniver.com/

105

Рисунок 37 – Рентгенограмма в передней проекции и скан компьютерной томограммы (аксиальная плоскость, легочное окно) пациента аденокарциномой верхней доли правого легкого, представленной образованием солидного типа,

максимальным размером 35 мм. Данные изменения были пропущены программой

C и 17% врачей рентгенологов

Наконец, всеми четырьмя программами была верно обнаружена туберкулома верхней доли правого легкого (Рисунок 38), представленной как солидное образование неоднородной структуры за счет наличия полости, общими размерами 19мм.

106

Рисунок 38 – Рентгенограмма в передней проекции и скан компьютерной томограммы (аксиальная плоскость, легочное окно) пациента с туберкуломой верхней доли правого легкого, представленной образованием солидного типа,

максимальным размером 19 мм. Данные изменения были верно трактованы всеми программными продуктами и пропущены 7% врачей-рентгенологов

Таким образом, следует отметить, что уже в настоящее время результаты систем автоматического выявления патологических изменений на рентгенограммах легких в передней проекции в части выявления очагов и округлых образований легких сопоставимы с усредненными данными результатов врачей-рентгенологов по показателям диагностической эффективности.

В настоящее время, к сожалению, данные алгоритмы не продемонстрировали возможности решения задач, вызывающих трудности при оценке рентгенограмм легких в передней проекции (выявления образований размером до 1,0 см, образований расположенных за тенью костных структур и образований невысокой контрастности).

Все диагностические алгоритмы, протестированные нами независимо от параметров теста (общее количество исследований и частота встречаемости патологических изменений), продемонстрировали высокий показатель специфичности в выявлении очагов и образований в легких при не очень высоких показателях чувствительности. Все это свидетельствует о том, что выявление

Рекомендовано к изучению разделом по лучевой диагностике сайта https://meduniver.com/

107

образования на рентгенограмме программой говорит о высокой вероятности его истинного наличия, при этом отрицательный результат в связи с высокой вероятностью гиподиагностики требует обязательного пересмотра исследования врачом-рентгенологом.

В ходе исследования выявлены значительные различия в результатах диагностической эффективности при изменении частоты встречаемости патологических изменений в тестируемой выборке, что требует при выборе программного продукта учитывать специфику конкретных учреждений

(преимущественно скрининговые исследования или диагностические исследования).

Таким образом, использование систем анализа цифровых рентгенологических изображений на основе технологии искусственного интеллекта является перспективным направлением повышения качества диагностики, в первую очередь при использовании их молодыми врачами-

рентгенологами в качестве дополнительного второго мнения [44].

Имеющиеся в настоящий момент программные продукты существенно различаются по показателям диагностической эффективности.

При выборе программного продукта, кроме показателей диагностической эффективности, представленных производителем и данными независимых испытаний, следует обращать внимание на характер выборки, на которых проводилось тестирование. Результаты диагностической эффективности существенно зависят от соотношения нормы/патологии в тестовых наборах данных [44].

В настоящий момент большинство программных продуктов показывают высокие показатели специфичности и невысокие показатели чувствительности,

что свидетельствует о редких случаях гипердиагностики и частых случаях гиподиагностики [44].

Для более достоверного понимания диагностических возможностей данных программных продуктов следует продолжать клинические испытания как

108

методом аналитической валидации на различных выборках, так и методом

клинической валидации.

Рекомендовано к изучению разделом по лучевой диагностике сайта https://meduniver.com/

109

ГЛАВА 5. ВЛИЯНИЕ РЕЗУЛЬТАТОВ АВТОМАТИЧЕСКОГО АНАЛИЗА

РЕНТГЕНОГРАММ НА ПРОЦЕСС ПРИНЯТИЯ РЕШЕНИЙ ВРАЧОМ

РЕНТГЕНОЛОГОМ ПРИ СОВМЕСТНОЙ РАБОТЕ

На данном этапе исследования были изучены возможные варианты внедрения систем автоматического анализа цифровых рентгенологических изображений как метода выявления округлых образований в легких в клиническую практику врача-рентгенолога.

На данном этапе 20 врачам-рентгенологам, сразу после окончания ординатуры по рентгенологии, было предложено проанализировать 100

рентгенограмм легких, из которых 94 рентгенограммы были без рентгенологической патологии и 6 человек с подтвержденным наличием синдрома округлого образования в легких (Выборка 2 – 100 рентгенограмм,

соотношение норма: патология 94%:6%).

Случайным образом врачи были разделены на 2 группы (Группа 1 и Группа

2) по 10 человек в каждой. Группы полностью сопоставимы по стажу работы.

Тестирование 1 группы состояло из двух этапов.

На I этапе 1 группа специалистов (n=10) оценивала рентгенограммы легких из выборки 2 самостоятельно, далее на II этапе тестирования врачи-рентгенологи повторно анализировали те же самые рентгенограммы из выборки 2, но уже дополненные результатами интерпретации рентгенограмм системой автоматического анализа. В процессе анализа рентгенограмм специалисты заполняли форму с ответами, интерпретируя рентгенограммы как норму или патологию.

Тестирование 2 группы врачей-рентгенологов (n=10) состояло из одного этапа, во время которого врачи-рентгенологи наряду с исходными рентгенограммами легких из выборки 2 сразу получали результаты анализа этих рентгенограмм системой автоматического анализа. В ходе тестирования

110

специалистам также было необходимо заполнить форму ответов с указанием категории, к которой они относят рентгенограмму – норма или патология.

Всем врачам-рентгенологам было предложено на разных этапах (в

зависимости от группы, в которую они были распределены) ознакомиться с результатами анализа (решение норма или патология и «тепловая карта»,

показывающая приблизительную локализацию предполагаемой программой патологии), которые на этой выборке показала программа А.

Решение о выборе данной программы для участия в эксперименте было обусловлено наибольшими показателями диагностической эффективности и соответствием необходимым критериям качества модели [18], полученными в хоте тестирования четырех программ (чувствительность 83,3%, специфичность

99%, AUC-0,911).

Перед началом тестирования врачи-рентгенологи были ознакомлены с показателями диагностической эффективности используемой системы автоматического анализа.

Результаты тестирования группы 1 представлены в таблице 21.

Таблица 21 – Показатели диагностической эффективности при совместном тестировании врачей-рентгенологов и систем автоматического анализа

Показатель

1 группа

1 группа

2

p

p1-2

p1-3

p2-3

I этап

II этап

группа

 

 

 

 

 

Число истинно

4,0

4,0

3,5

 

 

 

 

положительных

[2,8;

0,342

0,264

0,153

0,973

[3,0; 5,0]

[3,0; 5,0]

результатов

4,0]

 

 

 

 

 

 

 

 

 

 

Число ложно

10,0

4,0

5,0

 

 

 

 

положительных

[1,8;

0,037

0,016

0,915

0,044

[6,0; 27,0]

[1,0; 11,0]

результатов

7,3]

 

 

 

 

 

 

 

 

 

 

Число ложно

2,0

2,0

2,5

 

 

 

 

отрицательных

[2,0;

0,342

0,264

0,153

0,973

[1,0; 3,0]

[1,0; 3,0]

результатов

3,3]

 

 

 

 

 

 

 

 

 

 

Число истинно

84,0

90,0

89,0

 

 

 

 

отрицательных

[67,0;

[86,8;

0,037

0,016

0,915

0,044

[83,0; 93,0]

результатов

88,0]

92,3]

 

 

 

 

 

 

 

 

 

Чувствительность

66,7

66,7

58,3

0,342

0,264

0,153

0,973

[50,0;

[50,0; 83,3]

[45,8;

 

 

 

 

 

Рекомендовано к изучению разделом по лучевой диагностике сайта https://meduniver.com/