图生视频

图生视频让静态图片动起来,是产品展示、艺术创作的重要工具。

共 3 篇文章·阅读时间:约30分钟

01动画化原理

图生视频需要在保持原图内容的同时,添加合理的运动。

技术原理

  • 光流估计:预测像素运动轨迹
  • 深度估计:理解场景三维结构
  • 运动扩散:在潜在空间生成运动
  • 帧插值:生成中间帧保证流畅

运动控制

控制方式

  • 文本描述运动方向和幅度
  • 拖拽控制特定区域运动
  • 运动笔刷绘制运动路径

相机运动

推拉镜头

Zoom In/Out,画面放大或缩小

摇镜头

Pan Left/Right,水平方向移动

环绕镜头

Orbit,围绕主体旋转

02主流工具

多个平台提供图生视频功能,各有特色。

Runway Image2Video

Motion Brush精确控制,支持多种运动模式

Pika图生视频

简单易用,一键生成,风格化效果丰富

SVD (Stable Video Diffusion)

开源模型,可本地部署,高度可定制

03应用场景

图生视频在多个领域有广泛应用。

典型场景

  • 产品展示:静态产品图动态化
  • 艺术动画:照片转艺术动画
  • 社交媒体:朋友圈、小红书动态内容
  • 广告创意:快速制作广告素材
----