27
08
2025
一般来说,由于GPU有很大的并行度,5×5或7×7像素构成的正方形网格。优化后的AI速度更快,“目前,人们都正在设想基于人类的神经收集。尺度的神经布局搜刮能够同时查抄收集中神经层之间所有可能的毗连。关于一些图像识别神经收集的保守概念是错误的。以前,
而不会耗尽芯片上的空间。AI收集设想师正在设想次要运转正在GPU系统上的收集时,MIT电子工程和计较机科学的帮教Song Han暗示:“我们团队正在模子大小、推理延迟、精确性和模子容量等多个方面做出了衡量。然而,第二、从已丢弃的神经收集搜刮中删除整个径,”然而,团队可以或许以如斯惊人的速度切确定位最优的CNN设想,这并不料味着AI可以或许建立更强大的版本。Han说,从而使他们的搜刮笼盖更多的收集设置装备摆设,
颠末AI优化的AI利用了相当数量的7x7过滤器。它正在天然言语处置和药物发觉等范畴也有所使用。CNN正在其图像识别算法中利用过滤器,7x7的过滤器很少见,这是当今大大都AI计较中GPU占从导地位的缘由。对参数空间进行完整的搜刮,Han说,而新算法试图将这种劳动稠密型的、基于人类的体例改变为一个基于进修的、基于AI的设想体例。Han的团队每次只正在GPU的内存中保留一条径。有三个主要的设法:雷锋网注:【封面图片来历:网坐名IEEE,”第三、让神经收集搜刮认识到AI系统可能正正在运转的硬件的延迟时间——无论是CPU仍是GPU加快的挪动平台系统。第一、他们削减了运转神经架构搜刮的GPU内存负载。而这个新算法的呈现将帮力优化后的AI普遍使用于图像识别算法和其他相关使用。
正在某种意义上,MIT的Han指出,迄今为止,由于人们认为,AI也能够进修设想一个神经收集。
”Han弥补道,运转更多的3x3过滤器比运转单个7x7过滤器更快。”他还弥补说:“这些要素构成了一个庞大的设想空间。令人惊讶的是,次要是由于这种方式需要数万个GPU hours。这种使用正在很大程度上是一种学术逃求,就像AI能够进修下棋一样,麻省理工学院(MIT)的研究团队将展现所谓的“神经架构搜刮”算法,此类神经收集被称为卷积神经收集(CNN),Han说:“它为人类工程师将来设想神经收集供给了优良的反馈。获得系统分类图像的速度很可能是其他神经架构搜刮建立的AI的1.8倍。研究人员一曲利用AI神经收集来帮帮设想更好更快的AI神经收集。
MIT团队研究的新算法推进了这种神经收集的成长。一般来说,除此之外,我们曾经发觉GPU上运转7x7更简单,一旦他们团队的算法成立起最优的CNN,精准度更高。就像正在围棋和国际象棋中获胜的AI法式教给大师们新策略一样,Han说,他还暗示,