Meta公司通过将其动画绘图工具项目开源,旨在鼓励开发者为项目贡献代码,从而扩展其功能并增加新特性。这一举措不仅能够促进技术的共享和创新,还能加强全球开发者之间的合作。
在2021年,Meta推出了一个基于网络的动画绘图工具版本,允许用户上传他们手绘的角色图像,并生成简短的动画。在演示阶段,公司上传了超过670万张图像。然后,人工审核员筛选这些图像,并与Meta的研究团队分享,以便进行进一步分析。
该动画绘图工具结合了目标检测模型、姿态估计和基于图像处理的分割技术,以创建绘画的数字版本。然后,它利用现有的图形方法来动画化对象。
最近,Meta开源了该项目,提供了大约18万幅绘画的数据集,并分享了动画流水线代码。这一举措将允许更多的用户和开发者为项目做出贡献,增强其功能,并促进合作。
儿童的绘画常常包含独特和富有想象力的角色,这要求采用不同的方法来识别他们所描绘的人物和对象。虽然父母或老师可以轻松识别儿童绘画中的预期主题,但由于儿童绘画的抽象性质,AI系统往往难以完成这项任务。
Meta的研究人员开发了一种创新的方法,使用AI自动动画化儿童手绘的人物。通过将他们的绘画上传到原型系统,儿童和父母可以观看他们的创作变得栩栩如生,跳舞、跳跃和跳跃。用户甚至可以下载他们的动画绘画视频,与朋友和家人分享。
许多AI工具可以处理逼真的人类图像,但儿童绘画引入了一定程度的多样性和不可预测性,这使得识别变得复杂。因此,Meta的项目旨在创建一个AI系统,能够准确识别并动画化儿童绘画中的类人形象,无需人为干预。