数字人渲染技术在直播业务中的应用

新知榜官方账号

2023-10-12 17:12:43

背景

2022年开年以来，数字人几乎成为AI第一热门赛道，在诸多应用场景大放光彩。IDC发布《中国AI数字人市场现状与机会分析，2022》报告。报告显示：中国AI数字人市场规模呈现高速增长趋势，到2026年中国AI数字人市场规模将达到102.4亿元人民币。本文详细的阐述了基于数字人云渲染技术方案在直播业务架构中的应用，以及与众多AI能力的相结合，虚拟主播在今年是热门IP，强互动的直播场景无疑是数字人渲染的重点关注对象，后续渲染技术进一步完善和创新，将数字人直播间更加拟人化、生动、吸引眼球是我们规划的方向，尽可能应用到更大更多的场景里面。

业务

百度电商直播平台是继承主播开播、带货、商品讲解、直播分发、下单购买的综合平台，依托百度流量池，基于众多百家号创作者和UGC主播通过线上直播丰富的内容形式，给用户提供更个性化、更生动、更高效的消费体验。与数字人的结合主要是基于代班主播的产品形态，提供虚拟数字人主播直播带货的能力。

架构

整体功能模块分为三层：数字人资产、数字人声音系统、数字人动作系统、直播互动、流媒体控制。数字人驱动服务用于驱动数字人渲染引擎执行相应的指令，对业务屏蔽了和数字人渲染引擎交互的复杂逻辑，提供http接口给业务方接入，方便业务快速接入数字人直播能力。

技术实现详述

数字人渲染引擎基于ACG-云渲染方案提供websocket服务接口，用于接收数字人驱动服务发送过来的指令，通过调用AI能力进行语音理解、对话生成、合成语音等，调用基于渲染引擎的人像渲染服务生成人像视频，最终通过流媒体服务进行推流。数字人驱动服务维护两个先进先出队列，分别为：剧本队列、实时交互队列，主节点负责队列消费。数字人直播间的开关播由master节点控制，支持自动开播和手动开播两种方式，关闭直播间支持自动和手动两种方式。容灾方面，数字人渲染引擎采用多实例部署和连接故障转移，数字人驱动服务主从选举和故障转移、故障恢复等措施保证系统高可用。

结论

数字人渲染技术在直播业务中的应用，实现了虚拟主播在面部表情、肢体动作、问答对话以及情绪反馈等交互效果上都达到了十分生动拟人的效果。数字人直播间实现了强互动性和生动拟人的效果，为直播带货带来了新的商业价值。未来渲染技术进一步完善和创新，将数字人直播间更加拟人化、生动、吸引眼球是我们规划的方向，尽可能应用到更大更多的场景里面。

本页网址：https://www.xinzhibang.net/article_detail-16518.html

寻求报道，请

关键词

分享至微信：

相关工具

IconifyAI

AI App图标生成器

鹿班

阿里推出的智能设计商品图和海报的平台

智绘设计

腾讯推出的智能设计平台，让内容更精彩

阿里云智能logo设计

阿里云推出的智能Logo设计

图宇宙

高品质AI智能设计平台

墨刀AI

墨刀推出的AI产品原型设计助手

生动形象的数字人生成带来的好处

生动形象的数字人生成带来的好处数字人生成技术的兴起引领了创作领域的革新，为我们带来了许多机会和乐趣。通过图片生成数字人，我们能够创造出栩栩如生的虚拟角色，为各行各业的广告、媒体和娱乐产业注入了新的活力和创意。这项技术的发展为我们提供了无限的可能性。数字人生成带来的好处首先，数字人能够帮助企业提高品牌

分类标签数字人生成品牌形象娱乐产业

12-09 00:07

ChatGPT大模型商用浪潮袭来，微美全息构建基于大数据的AIGC智能人机交互界面生成系统

不久前，在TwitterSpaces的节目中，特斯拉(TSLA.US)首席执行官埃隆·马斯克(ElonMusk)公布了自己的AI公司xAI，并表示该公司的目标是建设一个有着“最大限度好奇心”和“求真务实”的“良好AGI”。在业内人士看来，人工智能是数字技术创新最活跃的领域之一，以生成式AI、大规模预

分类标签 ChatGPTAIGC人机交互大模型微美全息

12-07 08:44

《花语绚烂》展现女性的娇媚和绰约风采

《花语绚烂》展现女性的娇媚和绰约风采《花语绚烂》是一本展现女性娇媚和花朵绚烂的艺术作品，通过绘画、摄影和文字的结合，营造出一种优雅、浪漫和神秘的氛围。艺术家运用细腻的画笔、精准的摄影技术和凝练的文字，将女性与花朵相互交融，创造出独特的视觉效果。作品中的色彩鲜艳、线条流畅，通过光影的巧妙运用，展现了女

分类标签花朵女性艺术作品

12-07 08:43

如何将人工智能融入到联合办公的设计过程中

人工智能与办公设计CAD的发明彻底改革了设计行业，使传统的纸笔方法过时，显著提高了建筑和产品设计等领域的效率和精度。随着人工智能（A.I.）的快速发展，人类创造的设计最终可能会变得多余吗？人工智能有潜力分析大量数据，并生成优化各种因素（如美学）的设计。随着这些智能系统的不断改进，它们可能会简化设计过

分类标签人工智能联合办公设计

12-02 02:26

18个国家发布人工智能模型网络安全指导方针，敦促企业设计安全

近日，美国、英国、澳大利亚和其他15个国家发布了一份长达20页的文件，敦促企业在开发或使用人工智能模型时应如何处理其网络安全问题。指导方针主要包括一般性建议，如严格控制人工智能模型的基础设施，在模型发布前后对其进行监控，以及对员工进行网络安全风险培训。然而，指导方针未涉及到人工智能领域的一些争议问题

分类标签人工智能网络安全指导方针

12-02 02:25

2023年家居行业数据报告

2023年家居行业数据报告在如此缺乏确定性的环境下，家居企业如何找到真正的增长点及新机会？11月22日，在2023酷+全空间数字生态峰会现场，群核科技（酷家乐）资深副总裁陈卓发布了《2023年家居行业数据报告》。报告旨在理清行业脉络，揭示中国家居消费者所需要的“刚需”产品，同时也投射出行业的“隐形”

分类标签家居行业增长点新机会

11-24 16:04

群核科技发布四大产品能力升级，推出2023年家居行业数据报告

在2023酷＋全空间数字峰会上，群核科技（酷家乐）联合创始人兼CEO陈航再次重申酷家乐的客户成功服务理念。而在2019年，陈航首次在酷＋大会上提到“客户成功”赋能计划。今年，“让客户成功”被摆在了更高的位置，托起“客户成功”服务体系的基座依然是群核科技七大技术引擎和硬核产品力。11月22日，2023

分类标签群核科技酷家乐产品能力升级家居行业数据报告设计渲染对接生产AIGCPaaS

11-22 22:27

利用midjourney快速制作品牌IP形象

甲方想法多、难以捉摸，花大量时间设计、建模、渲染后，甲方说方向不对全部重来，这个时刻应该会很崩溃吧。现在可以用极短的时间和精力通过AI实现不同方向、各种想法的形象设计快速实现甲方的各种稀奇古怪的想法，极大得提高了沟通和工作效率，让我们的工作更加便捷快速。如何使用midjourney制作品牌IP形象，

分类标签品牌IP形象midjourney创意独特设计AI

11-06 02:34

《床上之美：绮丽的风采》

《床上之美：绮丽的风采》是一本以床上美女为主题的真集，旨在探索床上美女的独特魅力。内容上，这本真集将呈现各种不同类型的床上美女形象，包括宁静的睡眠、优雅的休憩、自在的阅读等。每个形象都将以真实而艺术化的方式展现，通过摄影、绘画和文字等多种形式，展示她们在床上的独特韵味和艺术表达。艺术风格和技术方面，

分类标签床上美女私密空间艺术表达

11-06 02:33

ArchiGAN：一只AI设计师，可以帮你规划整个公寓

ArchiGAN：一只AI设计师，可以帮你规划整个公寓ArchiGAN是一只可以帮你规划整个公寓的AI设计师，它可以实现立体规划、户型DIY、家具自动码放等多种功能。这只设计GAN由法国建筑师Stanislas Chaillou开发，它可以根据用户的涂抹操作生成合理的布局，并考虑到承重墙的设计是否实

分类标签 ArchiGANAI设计师公寓规划

11-06 02:32

ChatGPT Midjourney 文心一言文心一格 bing新必应 Stable diffusion 稿定设计墨刀AI mastergo Adobe Firefly runway