项目背景与简介
Animated Drawings 是由 Meta(原 Facebook)AI 团队于 2021 年开源的创新工具,为了将儿童手绘涂鸦一键转化为生动的人物动画。借助 Detectron2 和 AlphaPose 等前沿计算机视觉算法,该工具能自动识别画作中的人物姿态与四肢轮廓,让静态线条“活”起来。
核心功能与亮点
- 自动骨骼绑定:上传绘画后,系统自动定位头部、双肩、肘、腕、髋、膝等关键关节。
- 动作库丰富:内置跑步、跳跃、舞蹈等预设动画,也可导入 BVH 动作数据。
- 操作零门槛:无需任何动画或编程基础,只需拍照上传并简单标记五官和四肢位置。
- 实时预览与导出:生成动画后可立即播放,并导出为视频或 GIF 格式。
技术原理简述
Animated Drawings 后端采用两阶段流程:
- 物体检测(Detectron2)——从复杂背景中分离出人物主体。
- 姿态估计(AlphaPose)——捕获人物 17 个关键点坐标,再映射到预设的 2D 骨骼模板上。
最终通过插值计算驱动关节旋转,实现与真人动作对齐的动画效果。
在线制作步骤
- 上传画作:拍摄或扫描儿童手绘作品(建议背景干净,人物轮廓清晰)。
- 标记关键点:根据提示框选人物区域,并点击额头、下巴、左右肩、手腕、膝盖等点位。
- 选择动作:从内置动作库中挑选喜欢的运动(如挥手、行走)。
- 生成并导出:系统几秒内完成渲染,可调整动作速度、循环次数后下载。
适用场景与受众
- 家庭亲子互动:将孩子的涂鸦变成动态故事素材,激发创造力。
- 教育启蒙:用于美术课堂演示,展示线条与运动的关系。
- 社交媒体内容:制作趣味短视频,分享孩子的“动画杰作”。
- 开源研究:开发者可基于代码修改动作、优化检测精度。
获取方式
- 在线版(推荐):直接访问官方演示站
sketch.meta.com,无需注册即可体验。 - 移动端:Animated Drawings 已推出安卓 / iOS 应用,可在应用商店搜索下载,支持离线使用部分功能。
- 开源代码:GitHub 上可获取完整 Python 实现,适合二次开发与部署。
总结与展望
Animated Drawings 重塑了“涂鸦—动画”的创作链条,让儿童艺术在 AI 辅助下迸发全新活力。未来随着姿态估计精度的提升和动作多样性的扩展,该工具或可应用于虚拟偶像、简易动画片制作等更专业领域,真正实现“人人都是动画师”。