Этой нейросети от Apple хватит 10 секунд видео с вами, чтобы сделать ваш дипфейк
В начале августа Apple создала на GitHub репозиторий для NeuMan — новой нейросети, способной сделать достаточно реалистичный дипфейк на основе всего лишь 10-секундного видео. Правда, истинное её предназначение совсем в другом. Новость заметил блогер Денис Ширяев.
NeuMan распознаёт фон и человека на видео, снятом с движущейся камеры. Затем алгоритм синтезирует новое видео с разных ракурсов — с таким же фоном (только размытым и с меньшей детализацией) и человеком, теперь уже выполняющим любые действия (танцующим, прыгающим, демонстрирующим акробатические элементы и так далее).
Согласно официальному описанию, такая технология необходима для улучшения дополненной реальности. Обучаясь всего лишь на 10 секундах видео, нейросеть способна изучить специфические детали объекта, включая складки ткани и различные аксессуары.