Представьте себе ИИ-врача, которого не колбасит из-за галлюцинаций, то есть он, например, не прописывает несуществующее лекарства от вашей реальной болезни. Так вот Google со своим ИИ-танком в виде Deep Mind, отставая в гонке универсальных моделей вроде GPT-4 и Claude 3, сделали ход конем и выпустили Med-Gemini, которая специализируется в медицинских вопросах. Это новое поколение мультимодальных систем, способных обрабатывать информацию из разных источников: текста, изображений, видео и аудио. Как работает Med-Gemini разбирается в работе на 58 страниц, ссылка на нее, как всегда, в конце поста. Для постановки диагноза и выбора лечения врачам обычно нужно сочетать свои медицинские знания с множеством других данных: симптомами, историей болезни, результатами анализов и т.д. Med-Gemini умеет искать дополнительную информацию в интернете (на профильных медицинских ресурсах, куда ходят и врачи-люди уточнить свои знания), чтобы уточнить свои ответы на медицинские вопросы. Электронные медкарты могут быть очень объёмными, но врачи должны знать, что в них содержится, могут упускать детали. Med-Gemini может находить упоминания редких заболеваний и симптомов в огромных массивах медицинских записей. В тестовых беседах Med-Gemini задавал уточняющие вопросы пациенту, жалующемуся на зудящее образование на коже, попросил фото, поставил правильный диагноз и дад рекомендации по лечению. И всё это без специального обучения именно диалогам с пациентам, по которым поди найди или сделай сколь-нибудь внушительный датасет (врачебная тайна — юридическое серьезное препятствие для таких разработок)! Конечно, исследователи признают, что предстоит ещё много работы. Необходимо учесть вопросы конфиденциальности, справедливости и безопасности, прежде чем такие системы можно будет применять в реальной медицине. Но заметьте, они в основном не инженерные, а юридические и социальные. А вы бы доверились такому врачу? Исследование 👾 Подписаться на SciOne 👾 #новости