Netflix представила модель VOID которая не просто удаляет объекты из видео а пересчитывает физику сцены так будто их изначально не существовало.
При удалении человека или предмета меняются не только пиксели но и поведение окружения: объекты продолжают движение свет и тени перестраиваются а взаимодействия между элементами сцены пересобираются с учётом новых условий.
По демонстрациям если убрать человека с гитарой инструмент падает при удалении рук предметы с которыми они взаимодействовали продолжают движение самостоятельно.
Это выходит за рамки классической сегментации и ретуши: модель учитывает причинно-следственные связи внутри сцены и пересобирает её логику.
Ранее подобные правки требовали сложного VFX и ручной доработки теперь значительная часть процесса автоматизирована.
Сообщается что Netflix распространяет VOID как open-source решение .
Такие инструменты могут упростить постпродакшн где раньше требовались пересъёмки или сложные правки.
Одновременно это снижает порог для изменения уже снятых сцен и архивных материалов поскольку видео можно адаптировать под новый контекст без полной пересборки
ai aivideo generativeai Netflix VOID videomodel vfx computervision deeplearning aiediting postproduction
Источник: rutube.ru