Центр диагностики и телемедицины опубликовал отчёт по оценке зрелости ИИ-сервисов для лучевой диагностики за 3-й квартал 2024 года.
ИИ-сервисы «Третье Мнение» — первые в рейтинге по параметру ROC AUC:
ИИ-сервисы оцениваются по нескольким параметрам:
Техническая оценка
Соответствуют ли результаты работы ИИ-сервисов базовым функциональным требованиям: наличие описания и визуализации признаков патологий, время обработки исследования и другие.
Клиническая оценка
Совпадает ли результат ИИ-обработки с заключением врача-рентгенолога: правильно ли определены признаки заболеваний.
ROC AUC
По параметру оценивают качество классификации исследования на «норму» и «патологию».
Чем больше оценка по каждому из параметров, тем лучше
ИИ-сервисы «Третье Мнение» — первые в рейтинге по параметру ROC AUC:
- Для флюорографии органов грудной клетки — 94,57
- Для рентгенографии органов грудной клетки — 90,41
- Для КТ органов грудной клетки — 68,98
- Для КТ головного мозга — 91,30
ИИ-сервисы оцениваются по нескольким параметрам:
Техническая оценка
Соответствуют ли результаты работы ИИ-сервисов базовым функциональным требованиям: наличие описания и визуализации признаков патологий, время обработки исследования и другие.
Клиническая оценка
Совпадает ли результат ИИ-обработки с заключением врача-рентгенолога: правильно ли определены признаки заболеваний.
ROC AUC
По параметру оценивают качество классификации исследования на «норму» и «патологию».
Чем больше оценка по каждому из параметров, тем лучше