Aloe-Vision: новые модели для анализа медданных по изображениям

Созданы модели Aloe-Vision для анализа медданных по изображениям, набор данных Aloe-Vision-Data и тест CareQA-Vision. Модели открыты, протестированы и готовы к использованию.

Исследователи представили семейство моделей Aloe-Vision для работы с визуальными и текстовыми данными в медицине. Для их обучения создан набор данных Aloe-Vision-Data — масштабная подборка мультимодальной информации из медицинских и общих источников. Модели выпускаются в двух версиях (7B и 72B) с открытыми весами, рецептами тренировок и данными. Также разработан тест CareQA-Vision на основе экзаменов для врачей и медсестёр в Испании — он поможет надёжнее оценивать работу моделей. Учёные показали, что современные модели остаются уязвимыми к вводящим в заблуждение данным — это подчёркивает важность повышения их надёжности в клинической практике.