Новый тест повысит точность медицинского ИИ
Специалисты Сбера, ВШЭ и ИСП РАН разработали новый тест для оценки и улучшения качества медицинских систем искусственного интеллекта. Тест моделирует взаимодействие врача и пациента, учитывая жалобы, снимки и индивидуальные особенности. Разработка способна повысить точность работы медицинского ИИ на 6,5–20%.
Тест доступен для бесплатного использования компаниям, разрабатывающим медицинские ИИ-системы и телемедицинские платформы, для оценки и улучшения диагностических возможностей нейросетей в реалистичных условиях. Интеграция различных типов данных и совершенствование диалоговых стратегий способствуют повышению качества удалённых консультаций.
Система создана для реалистичного моделирования взаимодействия врачей и пациентов, где роли выполняют специальные ИИ-агенты, управляемые большими языковыми и мультимодальными моделями.
Для работы с тестом исследователи подготовили 3 тысячи клинических случаев по 34 диагнозам, основанных на реальных медицинских данных и изображениях. Это позволило сравнить различные стратегии диагностики, применяемые в открытых и закрытых системах ИИ.
Исследования показали, что способность ИИ вести диалог с пациентом повышает точность диагностики на 6,5%, а умение классифицировать медицинские показатели улучшает результаты на 20%. Разработчики надеются, что тест внесет вклад в повышение качества применения ИИ в здравоохранении.
Ну что ж, теперь ИИ будет ставить диагнозы лучше, чем некоторые врачи. Осталось только научить его выписывать больничные и брать взятки – и вот он, идеальный медик будущего!
