Новейшая ИИ технология вырезания видео от Google, супер ИИ кеинг

Автор · 11:18 02.09.20210


Здравствуйте, уважаемые читатели сайта Uspei.com. Как добавить водяной знак с более реалистичным эффектом?

Эта новая технология от Google позволяет тексту буквально встраиваться в картинку, даже на изображениях с дымом, снегом или дождем.

В данном случа вы можете легко выделить маску движущегося объекта на видео.

После этого все соответствующие элементы сцены этого ролика могут быть разделены вплоть до теней!


Можно отделить объект вместе с рябью на воде!

Технология способна отделить вместе объектом, например, даже песок и пыль от движущегося на скорости автомобиля.

Все элементы могут быть разделены, независимо от направления, скорости и динамики движения, независимо от любой формы или размера.

Это новейшая технология наслоения видео Google - omnimatte - с открытым исходным кодом и участвует в конкурсе CVPR 2021.

Принцип работы технологии

Компьютерная обработка объектов на видео становится все более эффективной при их сегментировании, однако существуют сторонние объекты видео, связанные с объектами. Например, такие эффекты сцены, как тени, отражения, дождь и дым, часто упускаются из виду.


И хотя распознавание этих эффектов сцены важно для улучшения визуального восприятия сцены ИИ, как новая технология Google достигает этого?

Проще говоря, CNN обучается с помощью метода рендеринга иерархической нейронной сети, которая самостоятельно отделяет объект от фонового изображения.

Из-за уникальной структуры CNN существует тенденция к изучению корреляций между эффектами изображения, и чем сильнее корреляция, тем легче CNN учиться.

Примеры:

Обратите внимание, что ребенок в центре на оригинальном виде прыгает последним, а в обработанном варианте все вместе.


Подробнее

Мы в соцсетях:0