AI视频生成技术原理与应用场景

首页 > 行业观察 > AI视频生成技术原理与应用场景

AI视频生成技术原理与应用场景

新知榜官方账号

2023-12-07 02:08:26

AI技术不仅可以生成图片，也能够生成序列帧，组成一个完整的视频。2022年10月，AI重置版《幻觉东京》发布。《幻觉东京》原本是一部记录日本亚文化人物的纪录片，作者将经过剪辑的短片交给AI美术大师，经过160小时生成3万张独立插画，再进行人工手动微调，连成了一部赛博朋克大幻想。虽然目前还只是在原脚本和视频的基础上，通过AI逐帧完成图片生成，但这让我们看到了AIGC参与到视频创作中的可能性。当然，除了这种连接AI生成图片组成视频的生成方式，也有直接利用文字描述生成视频的方法。2022年9月，Meta推出的Make-A-Ⅵdeo工具就具有根据文本描述生成相应短视频的能力。Make-A-Ⅵdeo推出不久，谷歌就推出了主打高清生成的ImagenⅥdeo和主打更长视频内容生成的Phenaki。ImagenⅥdeo是由谷歌在2022年5月推出的AI绘图工具Imagen进化而来，它继承了Imagen对于文字的准确理解能力，能够生成1280X768分辨率、每秒24帧的高清视频片段。除了分辨率高以外，它还能理解并生成不同艺术风格的作品，比如水彩画风格、像素画风格、梵高风格。同时，它还能理解物体的3D结构，在旋转展示中不会变形。而谷歌推出的另一款AI视频生成工具Phenaki则可以根据200个词左右的提示语生成2分钟以上的长镜头，讲述一个完整的故事，并能根据提示语自由切换风格场景，让人人都能够成为导演。

除了刚提到的这些新兴的视频AIGC技术，AIGC在视频生成方面的常见传统应用场景还包括视频属性编辑、视频自动剪辑及视频部分编辑。视频属性编辑包括删除特定主体、生成特效、跟踪剪辑等，能够高效节省人力和时间。AI能够通过对画面人物的动态追踪，自动搜索人物，定位关键时间节点，极大提升剪辑效率。此外，Al还能够去除视频的拍摄抖动，修复视频画质。视频自动剪辑是对特定片段进行检测及合成。2020年全国两会期间，《人民日报》创造性地推出“SG+AI”模式的新闻报道，打造的智慧平台iMedia、iMonitor、iNews等可以第一时间对素材进行智能处理，只需要短短几分钟，就能结合语音、人像、文字识别，从海量的视频资料中迅速生成剪辑视频片段，并自动匹配字幕。此外，从广义上讲，AI主播也可以看作一种AIGC生成视频的应用，只不过是将生成的音频内容去对应到虚拟人的口型与动作进行综合剪辑。

2020年5月，由新华社与搜狗公司联合推出的身穿蓝白正装的“新小微”第一次亮相演播室。“新小微”是全球首位3D版AI合成主播，能够像真人一样走动和转身，并摆出各种复杂动作与姿态。同时，她还在不断迭代，比如从“职业微笑”到增加了许多微表情，从单一妆发到根据播报场景变更妆发等。事实上，“新小微”并非新华社推出的第一个AI主播，在她之前已经诞生了由“新小萌”“新小浩”等组成的AI合成主播家族。其中，中国首个AI合成女主播“新小萌”在2019年上岗时就惊艳了全球媒体圈，被外媒评价为“几乎可以以假乱真”。除了新华社，中央广播电视总台、人民日报社等国家级媒体以及湖南卫视等省市媒体也在积极布局应用AI合成主播，先后推出了央视AI主播“AI王冠”、湖南卫视AI主持人“小漾”、安徽卫视AI主持人“安小豚”、央视网AI小编“小C”等。与“新小微”一样，这些AI主播在全国两会、冬季奥运会、冬季残奥会等重大活动期间被广泛应用，极大地提升了新闻产出与传播效率。

除此之外，像AI视频换脸这种视频部分编辑的形式从广义上来说也属于AIGC的范畴。2019年，一款名为ZAO的AI换脸软件刷屏各大社交网络，人们乐于把自己的脸替换进经典影视剧如《甄嬛传》《权力的游戏》，并进行分享。虽然ZAO后来因为侵犯个人隐私被下架，但类似的AI视频换脸软件却层出不穷，这在某种程度上也反映了人们的内容创作热情以及对于自由表达的欲望，但合法合规问题则是AI视频换脸长久发展需要重点解决的问题。

本页网址：https://www.xinzhibang.net/article_detail-22172.html

寻求报道，请

关键词

AI视频生成视频制作 AIGC

分享至微信：

相关工具

HeyFriday

国内团队推出的智能AI写作工具

度加创作工具

百度官方出品的AIGC创作平台

Spell.tools

高颜值AI内容营销创作工具

奇妙文

出门问问推出的AI写作助理

5118 SEO优化精灵

一键式生成高质量SEO文章，提高搜索引擎排名获得更多流量

Texta

AI博客和文章一键生成

一款名为“视频翻译”的工具：免费、能处理任意时长视频的翻译工具

一、工具介绍近期，一款名为“视频翻译”的工具引起了广泛关注。这不是一个简单的网页应用，而是一个可以免费部署在个人电脑或服务器上的实用程序。它的强大之处在于能够翻译任意时长的视频内容。所谓的视频翻译，实际上是指同声传译。虽然这类工具并非近期才问世，市场上已有多款成熟产品，例如我之前提到的heygen和

视频翻译同声传译免费工具

12-03 16:23

AI绘画和AI编程：技术进步带来的就业危机

AI绘画和AI编程：技术进步带来的就业危机AI技术的进步带来了许多新的应用，比如AI绘画和AI编程等。然而，这些技术也带来了就业危机，尤其是对程序员来说。本文探讨了AI绘画和AI编程的发展历程以及可能带来的影响。今年，AI绘画以各种姿势刷遍了科技版新闻的头条。年初，只需要一句文字描述就能画出科幻奇观

AI绘画AI编程技术进步就业危机人工智能程序员

12-03 16:07

视频翻译工具MyHeyGen的安装与使用

什么是MyHeyGen？MyHeyGen是一款免费的视频翻译工具，可以免费部署在个人电脑或服务器上，可以翻译任意时长的视频内容。与其他市场上的视频翻译工具不同，MyHeyGen可以处理任意时长的视频且完全免费。如何安装MyHeyGen？您可以在以下链接中找到MyHeyGen的源代码：https://

视频翻译MyHeyGen免费工具

12-03 08:38

AI数字人和虚拟人的区别及其应用场景

一、AI数字人与虚拟人的区别AI数字人是利用人工智能技术实现与真人直播形象的1:1克隆，即克隆出一个数字化的真人，包括你的形象、表情、动作和声音都会被克隆下来，让你能够拥有接近真人的表现力，它可以进行直播带货、客户服务、教育培训等各种任务。虚拟人是通过计算机生成的虚拟实体，可以是二维或三维形象。虚拟

AI数字人虚拟人人工智能直播带货客户服务教育培训虚拟现实游戏和动画

11-27 22:12

《资治通鉴》的管理哲学

《资治通鉴》的管理哲学是以历史为参照，从政治兴衰和军事得失中总结出治国理政的经验和教训，注重人才选拔，强调品德和诚信的重要性。这一管理哲学为现代企业的管理和经营提供了丰富的参考。首先，《资治通鉴》强调了诚信和品德的重要性，建议在选拔人才时，首先考察其品德，其次才是才能。这一原则在现代企业中也同样适用

资治通鉴管理哲学人才决策组织内部结构危机管理领导力公正的管理

11-21 22:27

看看火山AI写的短篇小说：初遇，错别离，重逢，分离

在那个初秋，沈忆枫第一次遇到了刘念。她就像一束阳光，光芒四射，让人无法忽视。她像一个神话中的天使，让刘念情不自禁地爱上了她。然而，沈忆枫是高干子弟，他和刘念的环境大相径庭。刘念只是一个平凡的人，他自卑而胆怯，不敢去表白。然而，命运仿佛在和他们开玩笑，一个意外的误会，让刘念和沈忆枫的生活轨迹开始交错。

火山AI短篇小说初遇错别离重逢分离

11-21 22:26

文心一言4.0版本发布，功能更智能，插件更多

文心一言4.0版本发布，功能更智能，插件更多文心一言于11.1日正式推出4.0版本，对比3.5免费版，4.0是需要付费使用的，订阅费用59.9/月，连续订阅则是49.9/月，相比较国外GPT4.0来说，这个价格更“亲民”一些。基础版文心一言3.5在开放使用之后我也体验了很多次了，对话、写作、绘画都不

文心一言4.0版本智能AI应用

11-21 22:25

火山写作——自媒体文案神器

火山写作——自媒体文案神器火山写作是一款智能写作工具，由字节跳动旗下开发。它可以让文本更加优化和润色，让你的文案更加出彩。使用火山写作非常简单，只需要把文本输入到左侧空白区，再点击一键优化，就能得到修改和润色的版本。更牛的是，它还可以根据使用需求来定制文本风格。比如，自媒体种草文案、营销文案、学术论

自媒体文案火山写作智能写作工具

11-21 22:24

AI创作短片和配音的操作教程

AI创作短片和配音的操作教程随着人工智能技术的不断发展，各种AI创作工具也应运而生。其中，AI创作短片是近年来备受关注的一个领域。AI创作短片不仅具有创新性，而且趣味性十足。同时，操作简单，非常适合初学者尝试。首先，AI创作短片具有很强的趣味性。通过AI技术，用户可以轻松生成各种有趣的短片。这些短片

AI创作短片AI配音智能配音工具

11-11 10:06

俄罗斯Elari与涂鸦智能深度合作，打造全屋智能场景

Elari与涂鸦智能深度合作，打造全屋智能场景11月19日，俄罗斯消费电子产品公司Elari在莫斯科和涂鸦智能联合举办产品发布会，推出了智能插座、智能灯、智能传感器、智能摄像头等一系列智能设备，全方位覆盖全屋智能场景。Elari宣布与全球化AIoT平台涂鸦智能达成深度合作，引入后者在人工智能与物联网

Elari涂鸦智能智能家居

11-11 10:05