26.05.2024
Подписывайтесь на Telegram-канал по ссылке

Apple представила нейросеть для создания дипфейков

NeuMan для создания дипфейков

Компания Apple разработала собственную нейросеть NeuMan. Программа «учится» создавать дипфейки с помощью коротких видео. Исходный код опубликован на GitHub. Отмечается, что нейросеть способна создать собственный правдоподобный ролик с участием человека после просмотра видео длительностью не более 10 секунд.

Алгоритм NeuMan способен создать трёхмерную модель человека. В результате человек может выполнять разные другие действия на том же фоне, что и в оригинальном ролике. Например, на сгенерированных нейросетью роликах герой видео может начать бегать, сделать кувырок или подпрыгнуть. Однако в результате такой «обработки» у видео снижается качество, но действия персонажа всё ещё выглядят правдоподобно.

Для обучения нейросети используются две модели NeRF (Neural Radiance Fields for Unconstrained, умеет превращать фотографии в объёмную анимацию). Первая модель вычисляет человека на фоне и формирует трёхмерную модель, а вторая — определяет фон и «дополняет» его. Разработчики считают, что нейросеть будет использоваться для приложений в дополненной реальности.