Старые выписки врачей помогли лучше находить пропуски в выписках ИИ
Препринт, ещё не рецензирован · ранние данные
Кратко
Система OmitEHR училась на старых выписках врачей находить важные сведения, которые ИИ не включил в описание госпитализации. При проверке 25 госпитализаций врачи подтвердили в среднем 5,6 пропуска на выписку против 3,3 у другого способа. На 5 000 госпитализаций система работала в 1,6–1,7 раза быстрее и в 5,6–6,7 раза дешевле полной проверки с помощью ИИ.
Зачем это знать?
Проверка выписок, которые составил ИИ, может стать быстрее и дешевле, если использовать для поиска пропусков опыт врачей. Способ проверили на данных одного медицинского центра.
Разбор
Система училась на старых выписках врачей выбирать важные предложения из записей о лечении. Затем она искала среди них сведения, которых не оказалось в выписке, составленной ИИ.
Проверка одной выписки занимала от 17,7 до 19,5 секунды и стоила от 0,03 до 0,13 доллара. Время и стоимость зависели от того, какой ИИ составлял выписку.
Ключевые цифры
Можно ли доверять
Систему применили к данным 5 000 госпитализаций в одном медицинском центре, а для 25 госпитализаций два врача вслепую проверили найденные пропуски. Авторы считали пропуск подтверждённым, если его признал хотя бы один врач. Проверка на данных одного центра и врачебная оценка только части госпитализаций оставляют открытым вопрос, как система справится в других больницах.
- Это препринт, результаты ещё не прошли рецензирование.
- Проверка врачами охватила только 25 госпитализаций.
- Система обучалась и оценивалась для кратких выписок о течении госпитализации в одном крупном академическом медицинском центре.
Пересказано ИИ по научной статье. Это научпоп, а не совет врача. Как это устроено