模型介绍
LivePortrait 是一个高效的肖像动画模型，由快手科技、中国科学技术大学和复旦大学联合开发。这个模型能够利用一张静态肖像照片生成逼真的动态视频肖像。
作者：KwaiVGI
预览图
模型列表
insightface
2d106det.onnx
det_10g.onnx
liveportrait
appearance_feature_extractor.pth
landmark.onnx
motion_extractor.pth
spade_generator.pth
stitching_retargeting_module.pth
warping_module.pth
类型：LivePortrait
核心组件
- 外观特征提取器：负责从静态图像中提取关键的外观特征。
- 规范隐式关键点检测器：用于检测图像中的关键点，以便进行后续的处理。
- 头部姿势估计网络：估计头部的姿态，这对于动画的逼真度至关重要。
- 表情变形估计网络：分析并估计面部表情的变化，以实现表情的动态变化。
- 扭曲场估计器：计算图像中的扭曲场，这对于图像的变形和动画效果至关重要。
- 生成器：基于上述组件提供的信息，生成动态视频肖像。
- 缝合和重定向模块（可选）：用于将生成的动态肖像与原始图像进行融合，以及根据需要对肖像进行重定向。
LivePortrait 的这些组件共同工作，使得从静态图像到动态视频的转换既高效又逼真。
