Агенты LLM прошли испытание на задачах энергетической аналитики

Исследователи проверили, как агенты на базе LLM с дополнительными инструментами справляются с реальными задачами в сфере энергетической аналитики. В эксперименте участвовали 243 задачи — от анализа цен и спроса до сложного моделирования и принятия решений. Агенты использовали разные инструменты: API-интерфейсы рынка электроэнергии в реальном времени, базы данных тарифов, модели оптимизации активов и прочее. Специалисты оценили ответы по нескольким критериям — от точности до достоверности источников. В ходе исследования сравнивались LLM с закрытым и открытым исходным кодом. Результаты помогут лучше понять, как ИИ может поддерживать профессионалов в сложной отрасли.