Meta公司已经开源了一个人工智能项目,让任何人都能把他们的涂鸦变得更有生机。该公司希望通过将"Animated Drawings"作为一个开源项目提供给其他开发者,他们将能够创造出新的、更丰富的体验。
基础人工智能研究(FAIR)团队最初在2021年发布了该工具的网络版本。它只需要用户上传一张类似人类的单一角色的图画,或者选择一个演示人物。如果你使用自己的涂鸦,你会看到一个同意书,询问Meta是否可以使用你的画来帮助训练其模型,不需要提供同意也可以继续使用这个工具。
接下来,上传者需要手动调整一个捕捉框的大小,使之与原作紧紧相贴,界面中提供了笔和橡皮擦来调整图纸,然后再调整关节的位置。完成这一切后,就可以看到草图的动画版本。你可以从四类预设的动画中挑选:舞蹈、搞笑、跳跃和行走。
动画图画利用物体检测模型、姿势估计模型和基于图像处理的分割方法来捕捉数字版本的图画。然后,它使用传统的计算机图形技术对图像进行变形和制作动画。
在演示上线后的几个月内,用户已经授权Meta公司使用160多万张图片用于培训。一些人上传了公司标志、动漫人物、鱼和毛绒动物的图片,尽管该工具规定只有人类形象可以使用。
除了要求提供包括声音效果和文本覆盖在内的更深入的工具集外,人们上传到该工具的一系列图像表明,人们对更广泛的绘画到动画的体验有广泛的兴趣。这在一定程度上带动了Meta公司将该项目与大约180000张图纸的数据集进行了开源。Meta在一篇博文中写道:"通过将模型和代码作为开放源码发布,该项目为开发者提供了一个起点,使他们能够建立和扩展该项目,促进开放源码社区内的创新和协作文化。"
了解更多: