AI Tools ↗

Исследовательский конвейер использует физические черновики для управления движением в ИИ-видео

Краткое содержание

Исследователи из учреждений, включая Китайский университет Гонконга, Университет науки и технологий Китая и Университет Карнеги — Меллона, предложили двухэтапную систему для создания физически более правдоподобного ИИ-видео. В июльском препринте arXiv:2607.27380 сначала используются код и физический движок для создания грубого черновика движения, после чего модель видеомонтажа добавляет реалистичный внешний вид, сохраняя заданное движение. Как сообщается, метод нацелен на такие ошибки, как неправдоподобные столкновения, гравитация и траектории объектов. Описан и компонент инструкций, который направляет этап доработки на материалы, освещение и композицию, а не на переписывание движения.

Взгляд Ханы

Мне нравится разделение движения и внешнего вида, потому что оно соответствует привычной работе художников: сначала выстроить действие, затем доработать кадр. Физическая правдоподобность — не то же самое, что повествование, но сокращение невозможных столкновений и траекторий упростило бы монтаж сгенерированного материала. Решающее значение будут иметь воспроизводимые сравнения из статьи и то, смогут ли авторы управлять черновиком, не теряя движение при добавлении внешнего вида.

Вы автор и у вас есть отличная история? Мы будем рады её услышать: ПОДАТЬ ЗАЯВКУ