LivePortrait

产品简介

Live Portrait 是一款基于人工智能的视频驱动人像动画框架，旨在将静态照片转换成栩栩如生的动态视频。该框架由快手科技、中国科学技术大学和复旦大学的研究人员共同开发，它着重于提升实用性，拥有更好的泛化能力、可控性和效率。与主流的基于扩散模型的方法不同，Live Portrait 探索并扩展了基于隐式关键点的框架潜力，在计算效率和可控性之间取得了平衡。Live Portrait 的核心在于使用单一的源图像作为外观参考，并根据驱动视频、音频、文本或生成内容来赋予其动作，包括面部表情和头部姿势。该技术基于vid2vid模型，并经过大量高质量图像和视频数据集的训练，能够提取源图像和驱动视频的关键特征。通过创新的隐式关键点框架，将运动从驱动视频映射到人像上，确保高效且可控的动画效果。优化的解码器能够快速生成每一帧，从而高效地创建流畅的动画，同时保持源图像的身份特征。

主要功能

• 多风格人像动画:Live Portrait 利用拼接技术，能够跨越多种风格和尺寸对静态图像进行动画处理，这意味着用户可以将照片转换成逼真的视频，或者赋予其油画、雕塑、3D渲染等不同的艺术风格，极大地拓展了创作的可能性，满足不同用户的审美需求。

• 人像视频编辑与拼接:该工具提供动态的视频到视频的面部动画和编辑功能，同样借助拼接技术，用户可以对视频中的人脸进行编辑，例如替换面部表情、调整头部姿势等，甚至可以将不同视频中的人脸无缝拼接在一起，创造出全新的视频内容。

• 精确的眼睛动画控制:Live Portrait 允许用户通过标量输入来动态调整眼睛的睁开程度，从而实现对眼神的细微表情控制，这使得动画人物的表情更加生动自然，能够更好地传达情感和意图，提升用户体验。

• 准确的嘴唇动作控制:该工具能够使用基于标量的输入来微调嘴唇的位置，从而实现精确的语音和表情动画，这意味着用户可以控制动画人物的口型与语音完美同步，或者调整嘴唇的动作来表达不同的情绪，让动画人物更加逼真。

• 高级的自我重演:Live Portrait 能够从单个源帧生成高质量的动画，在重现动态视频序列方面优于现有的方法，这意味着用户只需要提供一张照片，就可以生成一段包含丰富表情和动作的动画视频，极大地简化了动画制作的流程。

• 强大的交叉重演:Live Portrait 能够准确地在不同人像之间传递动作，处理从大幅姿势变化到细微表情和多人输入等各种场景，这意味着用户可以将一个人的表情和动作应用到另一个人的脸上，甚至可以实现多人之间的互动，创造出各种有趣的动画效果。

使用方法

1. 上传人像图片:首先，上传一张包含清晰面部的肖像照片。Live Portrait 将从这张图片中提取面部特征以进行动画制作。
2. 选择或上传驱动视频:接下来，选择或上传一段展示面部动作的驱动视频。这个视频将引导你的人像图像的面部动作生成。建议选择面部表情丰富，头部动作自然的视频，以获得更好的动画效果。
3. 生成动画:点击“Animate（动画）”按钮，如果需要，可以调整配置参数，或者保留默认设置。然后点击生成，并等待过程完成。生成时间取决于图片和视频的大小以及服务器的负载情况。
4. 查看和下载:生成完成后，可以查看生成的动画效果。如果满意，就可以将动画下载到本地，用于各种用途。如果不满意，可以尝试调整参数或更换驱动视频，重新生成。

应用场景

• 社交媒体内容创作:Live Portrait 可以用于创建引人注目的社交媒体头像或帖子，在用户的信息流中脱颖而出，吸引更多关注。无论是制作个性化的动态头像，还是将静态照片转换成有趣的短视频，都能为社交媒体内容增添活力和创意。

• 数字艺术创作:艺术家可以利用 Live Portrait 将他们的插图作品赋予生命，为作品增加新的维度，创造出更具吸引力和感染力的艺术作品。例如，可以将静态的人物肖像画转换成动态的视频，让画中人物眨眼、微笑，甚至说话。

• 电商产品展示:电商平台可以利用 Live Portrait 将商品图片进行动画处理，以展示商品的特点或吸引在线商店的注意力，提高商品的点击率和转化率。例如，可以制作服装的动态展示视频，让模特展示服装的穿着效果和细节。

• 教育领域应用:Live Portrait 可以将历史人物或科学概念进行动画处理，以更有效地吸引学生的注意力，提升学习效果。例如，可以将历史人物的画像转换成动态视频，让学生更直观地了解历史人物的故事和贡献。

• 营销推广活动:品牌可以利用 Live Portrait 创建令人难忘的广告或互动展示，吸引潜在客户的关注，提升品牌知名度和影响力。例如，可以制作明星的动态宣传视频，或者将用户的照片转换成品牌代言人的动画形象。

• 游戏角色设计:游戏开发者可以利用 Live Portrait 将游戏中的角色肖像进行动画处理，以增强游戏的沉浸感和故事性，提升玩家的游戏体验。例如，可以让游戏角色的面部表情更加生动自然，或者根据游戏情节让角色做出不同的动作和表情。

• 纪念服务应用:在纪念逝者的场合，Live Portrait 可以用于以一种尊重和感人的方式，将逝者的珍贵记忆带回人们的视野，给予生者慰藉。例如，可以将逝者的照片转换成动态视频，让逝者在视频中微笑、说话，仿佛他们还在我们身边。

首页截图