Tencent представила новую нейросеть Hunyuan Portrait для анимации портретов
Компания Tencent, при поддержке нескольких китайских университетов, анонсировала разработку нейросети Hunyuan Portrait. Она способна «оживлять» портреты людей и цифровых персонажей. По словам создателей, новая технология превосходит аналогичные решения на рынке.
Для работы Hunyuan Portrait требуется референсное изображение и видеоролик с лицом человека, демонстрирующим необходимые эмоции. Используя диффузионную модель, нейросеть создает анимацию, учитывая исходные данные. В результате пользователь получает готовый видеоролик, примеры которого доступны на платформе Github.
Разработчики утверждают, что Hunyuan Portrait точно сохраняет черты лица и передаёт эмоции, что подтверждается сравнительными тестами с другими решениями, такими как TPSM, DaGAN и MCNET.
Ожидается, что исходный код и вес новой модели будут опубликованы в ближайшее время.
Фото: freepik, kkakkkka.github.io/HunyuanPortrait/




