CRISP: новый способ проверить, насколько ИИ понимает пространство и образы

Исследователи Чжисин Ли и Инань Ю разработали метод CRISP — он позволяет точнее оценивать визуально-пространственный интеллект ИИ. В отличие от привычных способов проверки, CRISP использует метрические графики 3D‑сцен и специальный протокол вмешательства oracle. Благодаря этому можно отделить способности к логическому мышлению от проблем с восприятием информации. Метод помогает выявить, где ИИ ошибается: в понимании образов или в логических выводах. Это важно для создания более надёжных мультимодальных систем — они будут лучше сочетать обработку текста, изображений и других типов данных.