新知榜官方账号
2023-12-08 16:13:24
近日,腾讯低调发布首个AI开源项目Angel3.0版本,进化版的Angel3.0则尝试打造一个全栈的机器学习平台。
Angel是什么?先来科普一下,Angle是基于参数服务器架构的分布式计算平台,致力于解决稀疏数据大模型训练以及大规模图数据分析问题,由腾讯与北京大学联合研发。最新版本的3.0,功能特性涵盖了机器学习的各个阶段:特征工程,模型训练,超参数调节和模型服务。
Angel的特征工程模块基于Spark开发,增强了Spark的特征选择功能,同时使用特征交叉和重索引实现了自动特征生成。这些组件可以无缝地整合进Spark的流水线。为了让整个系统更加的智能,Angel3.0还新增了超参数调节的功能,目前支持随机搜索,网格搜索和贝叶斯优化三种算法。
在模型服务方面,Angel3.0提供了一个跨平台的组件AngelServing,AngelServing不仅可以满足Angel自身的需求,还可以为其他平台提供模型服务。在生态方面,Angel也尝试将参数服务器(PS)能力赋能给其他的计算平台,目前已经完成了SparkOnAngel和PyTorchOnAngel两个平台的建设。这两个平台各有优势和侧重,SparkOnAngel使用的是Angel内置的算法核心,主要负责常见推荐领域的机器学习算法和基础图算法。PyTorchOnAngel使用PyTorch作为计算核心,主要负责推荐领域深度学习算法和图深度学习算法。
回顾Angle的历史。2017年6月,Angel在Github上低调开源。开源两周,这个项目在Github上已收获183Watch,1693Star,389Fork,也吸引了许多业界工程师关注与贡献。2018年9月,Angel2.0版本发布,支持千亿级模型维度训练,同时算法库也更加丰富,首次引入了深度学习算法和图算法。同年,Angel加入Linux旗下深度学习基金会(现已更名为LFAI基金会(LFAIFoundation)),结合基金会成熟的运营,升级的Angel2.0与国际开源社区继续深入互动,致力于让机器学习技术更易于上手研究及应用落地的目标。
截至目前,Angel在GitHub上Star数已超过4200,Fork数超过1000。Angel项目目前总共有38为代码贡献者,其他包括8位committer,他们总共提交了超过2000个commit。而腾讯开源在GitHub上整体的项目数也已突破80个,涵盖AI、云计算、安全等多个领域,累计获得了超过23万Star。从1.0到3.0,Angel从一个单一的模型训练平台发展到涵盖机器学习各个流程,包含自己生态的通用计算平台,代码量也超过了50万行。为了后续维护和使用的方便,Angel将拆分成8个子项目,统一放在Angel-ML目录下(https://github.com/Angel-ML):angel,PyTorchOnAngel,sona(SparkOnAngel),serving,automl,mlcore,math2和format。
而在应用上,据了解,自2016年年初在腾讯内部上线以来,Angel已应用于微信支付、QQ、腾讯视频、腾讯社交广告及用户画像挖掘等业务。在过去12个月,Angel在腾讯内部的任务数量有了非常明显的增长,增幅达到150%。值得一提的是,SparkOnAngel的任务数增长了10倍,为了让SparkOnAngel更加的易用,3.0版本对SparkOnAngel做了大幅度升级。Angel官方还维护了一个QQ群与外部开发者进行交流,对群用户的统计表明:Angel的绝大部分用户来自中国,主要分布在北京,上海,杭州,成都和深圳等互联网行业比较发达的城市。有超过100家的公司和科研机构在使用或测试Angel,其中包括了中国最顶级的IT公司:微博,华为和百度等。
相关工具
相关文章
相关快讯
推荐
300美元的AI男友来了!马斯克的情感生意从女友做到男友
2025-08-01 17:56
Agent智能体:2025年企业新员工,月薪仅需一度电?
2025-07-30 17:49
国产GLM-4.5把AI价格打到地板价,实测强到离谱!
2025-07-30 09:08
用AI批量生成治愈系漫画,月入2000+
2025-07-29 09:59
千亿市场规模背后,AI短剧商业化迎来爆发期?
2025-07-17 09:19
15个作品涨粉26万!AI历史账号又出王炸案例!
2025-07-09 09:37
亲测真香!这6个AI工具让工作效率翻倍,同事追着问链接
2025-06-17 16:21
FLUX.1 Kontext 一出,AI生图领域 “地震” 了!
2025-06-06 15:38
用Deepseek写AI绘图提示词,像呼吸一样简单!
2025-02-19 16:12
你以为AI绘画是黑科技?其实早成了“路边摊生意”!
2025-02-19 10:15