На этой неделе в исследованиях ИИ особое внимание уделено вопросам этики и совершенствованию инструментов работы со знаниями. Учёные выявили неочевидные риски методов борьбы со стереотипами в NLP, а также представили решение для проверки фактов в графах знаний.
Борьба со стереотипами в ИИ: неожиданный побочный эффект
Исследователи обнаружили, что методы, призванные бороться со стереотипами в NLP, могут непреднамеренно усиливать стереотипизацию других социальных групп. Эффект наблюдается в разных моделях и при различных стратегиях обработки данных. Это ставит вопрос о необходимости более тонкой настройки алгоритмов и учёта широкого спектра возможных последствий при внедрении мер по снижению предвзятости.
AgentKGV: как проверить факты в графах знаний с помощью ИИ
Разработана система AgentKGV — инструмент для верификации фактов в графах знаний. В её основе — динамическая маршрутизация и двухэтапное обучение. На наборе данных T-REx система показала значительный прирост по метрике macro-F1 (на 5,5–9,4 процентных пункта) и позволила сократить количество запросов к поисковым системам. Практическая ценность решения — в повышении надёжности знаний, используемых в ИИ-системах.
На этой неделе прослеживается тренд на углублённый анализ этических и технических аспектов работы ИИ: с одной стороны — выявление скрытых рисков, с другой — создание эффективных инструментов для повышения достоверности и надёжности систем.