ИИ научился удалять объекты из видео без нарушения физики
Учёные разработали ИИ, который умеет удалять объекты из видео так, чтобы сцена оставалась физически правдоподобной. Это важно, потому что обычные инструменты часто создают нереалистичные эффекты.
Речь идёт о моделировании причинно-следственных связей.
Детали
Разработку представили исследователи из Netflix и их коллеги.
Система получила название VOID (Video Object and Interaction Deletion).
В отличие от обычных инструментов, она:
- не просто «стирает» объект
- учитывает, как он влиял на окружающие элементы
- перестраивает поведение всей сцены
Например:
- если удалить опору, объект должен упасть
- если убрать элемент в цепочке домино — падение остановится
Анализ показал:
- ИИ сначала определяет зоны, которые затронет изменение
- затем создаёт карту изменений (включая тени и движения)
- после этого генерирует новую версию сцены
- на финальном этапе уточняет движение и форму объектов
Система обучалась на тысячах симулированных сцен, чтобы понять связи «причина–следствие».
Почему это важно
Технология решает одну из ключевых проблем видеомонтажа.
Учёные отмечают:
- обычные инструменты часто нарушают физику сцены
- это делает видео неестественным
- новая модель может повысить качество кино и визуальных эффектов
Также это открывает возможности для:
- автоматического редактирования видео
- создания реалистичных сцен без пересъёмок
Бэкграунд
Ранее системы редактирования видео работали в основном с пикселями, а не с логикой происходящего.
Это приводило к ситуациям, когда после удаления объекта сцена выглядела «сломано».
Источник
Исследование основано на разработке модели VOID для удаления объектов с учётом физики взаимодействий. Работа опубликована на сервере препринтов arXiv (2026).