百度翻译发布全球首个上下文感知的机器同传模型

新知榜官方账号

2023-07-11 17:20:37

背景介绍

近日，百度翻译团队提出全球首个上下文感知的机器同传模型，并基于此发布最新的语音到语音的机器同传系统：DuTongChuan（度同传），同时发布了全球首个中文-英文演讲场景语音翻译数据集（BSTC）。形象地说，“度同传”就像你身边的一位虚拟同传译员，只需要带上耳机，就可以听到用自己母语播报出来的演讲内容，获得沉浸式体验。这位“虚拟译员”可以根据演讲的上下文，实时地播放连贯、准确的翻译结果。区别于此前的翻译系统，不考虑上下文环境，“播了这一句，忘了上一句”。此外，由于该系统以小程序的形式提供服务，只需要一个手机就可以收听，省去了租用同传红外设备的成本。

技术创新

与传统的机器同传技术不同，“度同传”使用了最新研发的感知上下文的机器同传模型。百度翻译团队创新性地提出了语义信息单元（InformationUnit，IU）这一概念，将实时语音流进行IU切分并以其作为翻译单元。这一灵感来自于人类同传译员，在翻译的时候将听到的内容以语义块为单位进行翻译，既保证了翻译质量，又保证了实时性。此外，百度提出了两种解码算法：部分解码（PartialDecoding）和上下文感知解码（Context-awareDecoding），能够结合上下文信息，生成全局流畅的目标译文。而传统方法仅对当前句子做出翻译，没有结合上下文信息，译文流畅度差。

应用效果

在产品形式上，与传统的字幕投屏同传相比，“度同传”采用语音到语音的同传形式能够使用户获得与人工同传类似的沉浸式体验，将注意力更集中在演讲者与演讲内容本身。此外，该系统具有高质量、高流畅度、低时延等特点，这得益于百度研发的最新技术。该系统成功应用于2019百度AI开发者大会，将演讲内容实时翻译给现场观众收听，好评如潮。百度翻译团队还发布了全球首个中文-英文演讲场景语音翻译数据集（BSTC），该数据集填补了机器同传研究没有真实数据集的空白，对推动相关研究具有重要作用。

本页网址：https://www.xinzhibang.net/article_detail-7634.html

寻求报道，请

关键词

分享至微信：

扎心文案+AI插画=爆款！揭秘8万赞视频的制作全流程

又一个爆款诞生！今天拆解一个账号——@尴尬的老男人，内容很简单，最高一条近8万赞，但平均每条视频都有几百赞！他的视频看似就是几张图片配上一段音乐，却精准狙击用户对“生活氛围感”和“情绪价值”的深层渴望，再加上温暖色调、治愈配乐——每一帧都让人忍不住驻足回味。其实，这种视频的关键就是2个：扎心文案

分类标签

08-12 10:08

三个国外专业免费的调色网站

三个国外专业免费的调色网站无论制作视频、编辑图片，合适的色彩会让你的作品增加视觉冲击力，所以专业的调色技术价值非凡，一部电影或一部好的视频、图片海报，专业调色耗费少则上万，多则上百万，只是大家对专业调色这个行业知之甚少，今天网玩君就为大家分享三个国外专业免费的调色网站，记得收藏好，以后编辑视频、图片

分类标签调色网站免费

04-18 16:42

第六届中国国际工业设计博览会盛况空前

第六届中国国际工业设计博览会于11月30日至12月2日在武汉举行。本届博览会展览面积达2万平方米，参展企业超过300家，其中，参展国家级工业设计中心数量为历届最多。众多国内外行业龙头企业展示了多项“首台套”的硬核实力，为中国制造业向高端化、智能化、绿色化转型升级赋能。中铁宝桥集团展示了多个“国内首条

分类标签中国国际工业设计博览会工业设计创新成果中国制造业

04-18 16:42

知识分享查理芒格思考的独立性与决策的准确性

知识分享查理芒格思考的独立性与决策的准确性本文介绍了成功投资者必须具备独立思考和决策准确性，同时保持谦逊低调的心态，以及成功的关键因素之一——运气。同时，本文还分享了下周市场关注的行业和概念。一、知识分享查理芒格思考的独立性成功的投资者必须具备独立思考的能力，因为只有独立思考才能避免盲目跟风和投资决

分类标签独立思考决策准确性谦逊低调

04-18 16:42

阿里国际发布三款AI设计工具助力中国制造走向全球

阿里国际发布三款AI设计工具助力中国制造走向全球12月1日，在第六届中国国际工业设计博览会上，阿里国际数字商业集团（简称“阿里国际”）发布了3款设计生态工具：堆友、PicCopilot、鹿班AI。这3款产品具有AI绘画、AI模型创作、AI图像和视频处理等功能，用AI设计服务全球商家更轻松的做好本地市

分类标签 AI设计阿里国际数字商业集团

04-18 16:42

ChatGPT Midjourney 文心一言文心一格 bing新必应 Stable diffusion 稿定设计墨刀AI mastergo Adobe Firefly runway