热门搜素: 电商 教育 视频 健康
新知榜公众号 随时随地查看资讯 手机访问更加便捷
首页 > 行业观察 > AI特效落地:腾讯微视如何在移动端实现实时特效生成?
AI特效落地:腾讯微视如何在移动端实现实时特效生成?
新知榜官方账号
2023-06-30 12:33:08
近年来,人工智能技术已经在很多领域得到了广泛的应用,特别是在图像处理、音视频处理等方面,人工智能的应用效果越来越明显。
然而,AI技术在移动端的应用仍面临很多挑战,比如计算量大、模型复杂等问题。而腾讯微视的技术团队却成功地将AI特效落地到了移动端,实现了实时特效的生成,这在移动端应用领域是非常有意义的。
将AI特效落地到移动端面临很多挑战,比如数据采集、可控性差、生成质量不稳定、计算量大等问题。
腾讯微视的技术团队针对这些挑战,研发出了一套支持移动端实时特效的GAN模型训练和部署框架,包括以下三个步骤:
通过以上三个步骤,腾讯微视的技术团队成功地实现了image-to-image的实时特效生成效果。
腾讯微视的技术团队在技术方面有很多优势,包括已经搭建了一整套流程化框架、算法经过多次迭代、数据需求量已经降至很低的水平等。
同时,他们还利用图像处理技术和属性编辑方案对大模型生成的图片进行美化,如利用去皱纹模型去除眼袋和泪沟。在稳定性和清晰度方面,微视参考图像修复和超分辨率的相关方法单独训练了一个既能提升清晰度又能消除人脸瑕疵的GAN模型。
此外,为了让小模型成功学到大模型的能力,他们还采用了分阶段蒸馏训练的策略。训练完小模型之后,团队借助腾讯自己研发的移动端深度学习推理框架TNN实现了手机端的部署和实时推理,从而使得用户通过摄像头驱动任意人脸图片的玩法变为可能。
腾讯微视的技术团队成功地将AI特效落地到了移动端,实现了实时特效的生成。他们在技术方面有很多优势,包括已经搭建了一整套流程化框架、算法经过多次迭代、数据需求量已经降至很低的水平等。未来,我们还将在微视上看到更多原本只能在论文中看到的惊艳效果。
相关工具
相关文章
相关快讯
短视频知识人物影响力榜
新知榜独家 {{faTime.effecttime}}发布
总榜
人物 领域 粉丝数 影响力指数
{{item.manIndex}}
{{item.nickname}} {{item.field}}
{{item.fs}}
{{item.effect}}