MetaAI发布首个AI动画绘图开源项目,用AI技术轻松让各种人物涂鸦变成动画

新知榜官方账号

2023-07-04 02:08:37

微软和Meta发布首个AI动画绘图开源项目

MetaAI的基础人工智能研究(FAIR)团队发布了首个AI动画绘图(AnimatedDrawings)开源项目,用AI技术轻松让各种人物涂鸦变成动画。这个项目的论文题目为《一种让儿童人物绘图动画化的方法》(AMethodforAnimatingChildren'sDrawingsoftheHumanFigure),已被计算机图形领域国际顶级期刊TransactionsonGraphics接收,并将在国际计算机图形顶级会议SIGGRAPH2023上展示。

开源草图转动画代码,让AI看懂人类的想象力

Meta的动画绘图项目始于2021年,当时FAIR研究人员想让计算机视觉的最新进展更直观,将人物画中的类人形象动画化。为了解决训练计算机视觉模型所需规模的人物画集不足的问题,Meta研究人员从单张图形生成动画的任务构建为人体图形检测、分割、姿势估计和动画等一系列子任务。创作者可在浏览器上上传他们的绘图,查看/更正一些标注预测,并接收由绘图中的类人角色的动画。家长可以选择允许或者不允许Meta保留图像和标注以供将来研究之用。研究人员希望通过发布该演示最终能收集到10000张图纸来改进模型的性能。用户们对动画绘图演示的反应非常积极,最初几个月就上传并同意使用超过160万张图片。

让手绘人物动起来

如果你想尝试将自己画的人物角色变成动画,可以在浏览器登陆AnimatedDrawings网站。上传绘图后,用户可以选择调整检测到的边界框、分割蒙版和关节位置,并选择一个动作来制作动画。如果你想自己下载和运行代码,可以到GitHub项目上按照指引步骤进行尝试。Meta的动画绘图项目已经在macOSVentura13.2.1和Ubuntu18.04上进行了测试。

Meta的业余绘图数据集策略

Meta今天分享的新数据集,研究人员和从业者可以构建工具来更轻松、更准确地分析业余绘图的内容,解锁新的数字-物理混合体验。全球有超过320万人访问了Meta在2021年底发布的动画绘图演示网站,总计上传了670万张图片。然后人工审阅者过滤了参与者选择与Meta的研究团队分享的业余绘图集,执行了多个级别的过滤以确保高质量并实施了隐私保护措施,以尽可能减少滥用数据的可能性。这个数据集反映了现实世界的条件,例如模糊、硬阴影、褶皱表面和背景元素等,这些在数字绘图和高分辨率扫描中都是不存在的。数据集还包括边界框、分割蒙版和关节位置的标注。

本页网址:https://www.xinzhibang.net/article_detail-5142.html

寻求报道,请 点击这里 微信扫码咨询

关键词

MetaAI AI动画绘图 开源项目

分享至微信: 微信扫码阅读

相关工具

相关文章

相关快讯