麻省理工团队神经架构网络可将AI设计过程加速240倍

新知榜官方账号

2023-10-04 22:42:26

麻省理工学院的一个研究团队将要展示一种名为“神经架构搜索”的算法，该算法可以使被AI优化过的AI设计过程加速240多倍。自2017年以来，人工智能（AI）研究人员一直用AI神经网络来设计更好、更快的AI神经网络。迄今为止，学界一直在追求用人工智能促进人工智能更好地发展。这种方法能达到数万小时的GPU时间。如果真可以实现这一点，那么设计AI应用程序时，可能会更快、更简单。

麻省理工学院电子工程和计算机科学助理教授韩松说：“在模型大小、应用延迟、准确性和模型容量之间存在各种权衡。把所有的东西权衡起来就会产生一个巨大的设计空间。以前人们设计的神经网络采用的是启发式算法。神经架构搜索的目的在于减轻算法的工作量，将基于人类启发式的探索转化为算法自主学习的，更符合AI的设计逻辑。

就像AI可以学习下围棋一样，去学习如何设计一个神经网络。麻省理工用的AI算法类型是一种卷积神经网络（CNN）。

韩松说，这种被AI优化过的CNN的图像分类速度将是其他AI的1.8倍。他补充说团队能将CNN提速至此，主要缘于以下三点：首先，他们减少了运行神经架构搜索的GPU内存负载。标准神经架构搜索可以同时检查网络中神经层之间所有可能的连接。而韩松团队的算法每次只在CPU的内存中保存一条路径。这个技巧可以只用十分之一的内存完成对所有参数空间的搜索，从而使搜索能够覆盖更多的网络配置而不会耗尽芯片上的空间。第二，该团队通过删减掉冗余的神经网络来精简路径，这样明显加快了神经网络搜索进程。通常，神经架构搜索只丢弃单个“神经元”，因为它会修剪掉所有次优的神经网络连接。第三，这个算法使神经网络搜索意识到AI系统在正在运行的硬件中可能的延迟时间，不管这个硬件是GPU或CPU。

韩松表示，当前用于人工智能计算的硬件中，GPU仍然占主导地位。他说：“GPU本身有很大的并行性，而且大型内核调用比调用几个小内核调用效率更高，因此7×7层的滤波器更适用于GPU。”

本页网址：https://www.xinzhibang.net/article_detail-15367.html

寻求报道，请

关键词

分享至微信：

相关工具

Huemint

AI调色生成工具

Luma AI

AI 3D捕捉、建模和渲染

Illustroke

AI SVG矢量插画生成工具

IconifyAI

AI App图标生成器

Khroma

AI调色盘生成工具

Alpaca

将生成式AI集成到Photoshop图像设计中

神采PromeAI：AI建筑设计的新利器

神采PromeAI：AI建筑设计的新利器2023年，AIGC进入黄金时期，AIGC生成内容类型不断丰富，质量不断提升，正在不断深入人们生活的各个领域。正在我们惊叹于AIGC二次元的表现能力时，发现当人工智能和建筑设计结合起来，会产生令人惊叹的创造力和可能性。神采PromeAI作为一个今年新出的AI项

分类标签神采PromeAIAI建筑设计PingPong

12-06 22:28

视频智能分析识别技术的发展与应用

一、AI视频智能分析识别技术的发展视频智能分析识别技术经历了多个阶段的发展...二、AI视频智能分析识别技术的应用目前，视频智能分析识别技术正在被广泛应用于各个领域...总之，视频智能分析识别技术的发展和应用已经成为了当今社会的一个重要趋势...

分类标签视频智能分析AI算法EasyCVR视频技术

11-29 22:07

6款在线logo设计工具推荐，省时省力，简单易用！

如今，在线logo设计网站已经成为了许多设计师和潜在客户的首选工具之一。利用这些工具，可以节省大量时间和精力。下面分享2款logo设计APP+4款logo设计网站，赶紧码住呀！一、logo设计APPLOGO设计工厂：一款智能AI设计LOGO工具，软件内提供多行业通用免费模版，设计风格多种多样。一键l

分类标签 logo设计工具在线设计logo生成软件

11-27 10:44

AI是否会替代设计？

AI在视觉设计领域的潜力已经初见端倪。这些算法会不断被改善，数据会不断被学习。而且AI学习的是大师的作品。它的起点远高于我们。并且远比我们“努力”。我们从小学开始就知道了达·芬奇画蛋的故事，但又有多少设计师曾经像达·芬奇一样勤奋练习？更何况人类终其一生能做的训练和计算机算力相比，简直就是九牛一毛。在

分类标签 AI设计可持续发展

11-27 10:39

腾讯“AIINALL”加速布局，打造开放AI生态

腾讯“AIINALL”加速布局，打造开放AI生态近年来，腾讯加速布局人工智能领域，以“AIINALL”为战略口号，打造开放的AI生态。在2017腾讯全球合作伙伴大会上，腾讯首次将“AIINALL”定为自己的战略口号，并公开腾讯完整的AI战略计划。除了在微信、QQ、音乐、视频的试水之外，腾讯的AI技术

分类标签腾讯AIINALL人工智能AILab开放平台大数据

11-25 16:32

腾讯AI数字人“艾灵”宣布出道，能与王俊凯共同创作歌曲

背景六一儿童节这天，腾讯AI“艾灵”正式宣布出道。AI“艾灵”诞生自腾讯AILab的实验探索性技术项目——AI数字人。该项目的目标是计算机视觉、语音/歌声合成和转换、图像/视频合成和迁移、自然语言理解等多模态AI能力融合，生成可交互内容，并打造出拟人度较高的智能数字人。合作内容艾灵与王俊凯共同创作歌

分类标签腾讯AI数字人艾灵王俊凯歌曲AI歌声合成技术

11-25 16:31

腾讯AI形象“AI小几”发布视频疑似抄袭Capcom小萝莉道歉视频

背景近日，博主@李狗带Eazzzz爆料，腾讯AI形象“AI小几”发布的庆生视频疑似抄袭了Capcom的小萝莉道歉视频。虽然腾讯早早删掉了原微博，但已经在网络上掀起了热议。争议有网友表示腾讯非常聪明，这么做无非就是让别人知道知几这个东西，毕竟被骂也有流量。但也有网友认为这并不是营销，因为这并不是游戏项

分类标签腾讯AI小几抄袭

11-25 16:29

5个最佳“草图到图像”的AI渲染工具推荐

5个最佳“草图到图像”的AI渲染工具推荐在数字艺术和设计的动态领域中，将草图转化为令人惊叹的图像的能力是一项宝贵的能力。人工智能的出现彻底改变了这一过程，为创意人员提供了工具，可以将草图的想法解释并呈现为精美的视觉效果。这些人工智能驱动的草图到图像渲染工具不仅加速了创意工作流程，而且使艺术创作民主化

分类标签 AI渲染工具草图转图像人工智能创意工作流程艺术创作民主化

11-16 22:23

五款AI草图到图像渲染工具的特色

五款AI草图到图像渲染工具的特色数字艺术和设计的领域一直在不断变化，将草图转化为惊人的图像已经成为一项重要的能力。人工智能的出现彻底改变了这一过程，为创意人才提供了工具，可以将草图理解并呈现成具有惊人准确性和风格的图像。这些由AI驱动的草图到图像渲染工具不仅加速了创意工作流程，还使艺术创作变得更加民

分类标签 AI草图到图像渲染工具数字艺术设计人工智能创意

11-16 22:22

人工智能风险引发科技领袖担忧

人工智能风险引发科技领袖担忧最近几天，人工智能风险引发了多位科技领袖的深切担忧。首先是被称为“人工智能教父”的杰弗里·辛顿（Geoffrey Hinton），他上周在接受哥伦比亚广播公司采访时表示，人工智能可能发展到对人类构成威胁“并非不可想象”的地步。随后，AI“大牛”盖瑞·马库斯（Gary Ma

分类标签人工智能风险科技领袖

11-04 16:18

ChatGPT Midjourney 文心一言文心一格 bing新必应 Stable diffusion 稿定设计墨刀AI mastergo Adobe Firefly runway