Новый метод изучает 3D‑физику по видео: прорыв в компьютерном зрении

Исследователи Зикан Ванг и Нилой Митра разработали систему, которая учится понимать физическую динамику в 3D, анализируя видео. В отличие от существующих генеративных моделей, которые часто допускают физические ошибки, новая система переводит анализ из 2D в объёмное 3D‑пространство. Она извлекает объекты из видео и моделирует их поведение, учитывая физические законы — например, как твёрдое тело движется в потоке жидкости. При этом система работает только на основе видеосигнала, без дополнительных данных о внутреннем устройстве физического движка. Модель успешно прошла тесты (CLEVERER, PhysInOne, PhysGaia) и демонстрирует стабильность и достоверность. Это открывает путь к созданию универсальных моделей, которые смогут «понимать» 3D‑мир, просто просматривая видео.