На ежегодном съезде американских дерматохирургов в Чикаго, который прошел 13-16 ноября 2025 года, д-р А.Нихал из Алабамы представил результаты исследования, посвященного оценке точности ChatGPT в диагностике злокачественных новообразований (ЗНО) кожи.
Для эксперимента отобрали 900 клинических изображений из публичной базы данных Fitzpatrick17k, включая по 50 изображений каждой из 18 исследуемых нозологий (4 – ЗНО кожи, 1 – предраковое состояние и 13 — доброкачественные).
Каждое изображение загружали в ChatGPT-4o одновременно с 3 вопросами:
1) Это рак?
2) Что это?
3) Какие 3 диагноза наиболее вероятны?
Результаты показали, что ChatGPT правильно определил 86% поражений как злокачественные или незлокачественные со специфичностью 91,4% и чувствительностью 68,5%.
Наблюдалась значительная вариабельность чувствительности в зависимости от диагноза: для меланомы этот показатель составил 80%, тогда как для злокачественного лентиго – только 58%.
Специфичность также значительно различалась: состояния, напоминающие сыпь, например, экзема и себорейный дерматит, всегда считались ChatGPT «не раком», тогда как доброкачественные образования – пиогенные гранулемы, себорейные кератомы, – правильно «узнавались» в 60-80% случаев.
Общая положительная и отрицательная прогностическая ценность ChatGPT для доброкачественных образований составила 71% и 90,4% соответственно.
При анализе топ-3 диагнозов первое предположение модели оказалось верным в 46,9% случая, а правильный диагноз присутствовал в топ-3 в 63,8% случая.
Исследователи заключили, что ChatGPT демонстрирует высокую специфичность и умеренную общую диагностическую точность, но его производительность неравномерна по различным диагнозам и типам новообразований кожи, что может вводить пациентов в заблуждение.
Способность модели лучше идентифицировать высыпания по сравнению с объемными образованиями также создает потенциальный риск для пользователей.
Полученные данные, по мнению авторов, подчеркивают необходимость информирования пациентов об ограничениях подобного «ИИ-скрининга» и важности профессионального осмотра дерматологом.