快手可灵大模型团队开源了可控人像视频生成框架 LivePortrait,受到广泛关注和好评。它基于隐式关键点框架,平衡了计算效率和可控性,采用多种技术提升生成能力和可控性,模型训练分两阶段,包括基础模型训练和贴合与重定向模块训练。实验对比显示其在同身份和跨身份驱动方面表现出色,还能实现多人驱动、动物驱动、人像视频编辑等拓展应用,相关技术已在快手多项业务落地,并将继续探索多模态驱动的人像视频生成。
快手可灵大模型团队开源了可控人像视频生成框架 LivePortrait,受到广泛关注和好评。它基于隐式关键点框架,平衡了计算效率和可控性,采用多种技术提升生成能力和可控性,模型训练分两阶段,包括基础模型训练和贴合与重定向模块训练。实验对比显示其在同身份和跨身份驱动方面表现出色,还能实现多人驱动、动物驱动、人像视频编辑等拓展应用,相关技术已在快手多项业务落地,并将继续探索多模态驱动的人像视频生成。