MKG-RAG-Bench: новый тест для оценки мультимодального поиска в ИИ-системах

Исследователи разработали тест MKG-RAG-Bench — он позволяет оценить, насколько эффективно системы с дополненным поиском (RAG) работают с мультимодальными графами знаний (MKG-RAG). Тест включает два мультимодальных графа знаний — в общей и медицинской областях — и наборы данных с вопросами и ответами. С его помощью можно проверить, как системы ищут информацию и генерируют ответы, учитывая разные типы данных (текст, изображения и т. д.). Эксперименты показали, что эффективный мультимодальный поиск — сложная задача, но именно от его качества во многом зависят результаты генерации. MKG-RAG-Bench поможет выявить слабые места текущих систем и улучшить их.