IBM研制出新型人工智能芯片
- 中国大自动化网
- 2018-12-25 21:14
在12月初举办的NeurIPS会议上,IBM展示了一款新型人工智能芯片。
IBM的研究人员声称,他们已开发出一个更加高效的模型用于处理神经网络,该模型只需使用8位浮点精度进行训练,推理(inferencing)时更是仅需4位浮点精度。该研究的成果已于2018年12月初在国际电子元件会议(International Electron Devices Meeting,IEDM)和神经信息处理系统大会(Conference on NeuralInformation Processing Systems,NeurIPS)上发布。
简而言之,IBM展示了专用于减少精度处理单元的定制硬件,以及能够利用该硬件进行深度神经网络(DNN)训练和推理的新算法。其主要目标在于提高硬件的能效,使其可以应用于范围更广泛的人工智能解决方案。
下一代人工智能应用程序需要更快的响应时间、更大的人工智能工作负载以及来自众多数据流的多模式数据。为了释放人工智能的全部潜能,我们重新设计了将人工智能考虑在内的硬件:从加速器到用于人工智能工作负载的特定用途硬件(例如我们的新芯片),以及最终用于人工智能的量子计算技术。使用新的硬件解决方案扩展人工智能是IBM研究院(IBM Research)更广泛努力的一部分,以期从范围狭窄的人工智能(通常用于处理具体的、界限清楚的任务)转向范围广泛的人工智能(跨越各个学科,可帮助人类解决最迫切的问题)。
具体而言,IBM研究院提出了可提供8位浮点(FP8)精度用于训练神经网络的硬件。8位浮点精度是16位浮点精度(FP16)的一半,而16位浮点精度自2015年以来一直是深度神经网络工作的事实标准。(提议的硬件将依靠FP16来累积点积,而不是现在使用的FP32。)借助于稍后介绍的新算法技术,IBM的研究人员表示,他们可以跨各种深度学习模型保持精确度。事实上,他们记录在案了使用FP8精度基于图像、语音和文本数据集对深度神经网络所进行的训练,并实现了与基于FP32的训练相当的模型精确度。
降低精度的模型基于三项软件创新:一种新的FP8格式,让用于深度神经网络训练的矩阵乘法和卷积计算可在不损失精确度的情况下工作;一种“基于组块的计算”技术,使得只需使用FP8乘法和FP16加法即可处理神经网络成为现实;并且在加权更新过程中使用浮点随机舍入,允许以16位浮点精度(而不是32位浮点精度)计算这些更新。
IBM展示的硬件是一款基于“新式数据流核心”的14纳米处理器。该处理器由降低精度的数据流引擎、16位浮点精度组块加法引擎和核心上内存及内存访问引擎组成。研究人员声称,与现在的平台相比,这种设计有可能使训练速度提高2到4倍。其中部分改进是用于训练模型的位宽减少了2倍的结果,但其余改进则是因为用于利用降低的精度的软件技术。
也许更重要的是,IBM研究院表示,由于其FP8/FP16模型相较标准FP16/FP32模型而言所需的内存带宽和存储空间更少,并且因为其硬件是为处理这些神经网络而定制的,能效可提高2-4倍以上。研究人员表示,这将使深度神经网络模型能够在一些边缘设备上进行训练,而不仅仅是在数据中心服务器上进行训练。
研究人员还发表了一篇关于在多个深度学习应用程序中使用4位浮点精度推理,而同样不损失精确度的论文(目前,大部分推理基于使用8位浮点精度或更多位浮点精度的计算)。此处的意义在于,位宽的减小将再次提高吞吐量和能效。对降低精度的需求也使得基于在训练期间优化的位精度构建用于训练和推理的统一架构更加自然。根据研究人员的说法,由于减少了专用于计算的处理器面积并拥有在内存中保留模型和激活数据的能力,此类硬件可以带来推理性能的超线性提升。
相关研究领域需要与将这种降低精度的模型应用于模拟芯片相关,模拟芯片天生不如数字芯片精确,但能效却高得多。IBM的研究人员开发了一种使用相变存储器(PCM)的8位浮点精度模拟加速器,它可以充当用于处理神经网络的计算基板和存储介质。根据2018年早些时候发布的工作成果,IBM研究院已经实施了该技术的创新加成,称为预测PCM(Projected PCM,Proj-PCM),它可以减少PCM硬件的一些令人烦恼的不精确性。研究团队认为,该设计可为物联网(IoT)和边缘设备等功率受限环境中的人工智能训练和推理提供高性能水平。
尽管所有这些仍处于研究阶段,但IBM显然对构建自己的人工智能芯片和加速器并将其交付到客户手中感兴趣。他们计划如何将该技术商业化仍然有待观察。无论如何,如果降低精度的训练和推理流行起来,IBM将面临很多竞争。这些竞争不仅仅来自将相应调整自己的处理器平台的英特尔和英伟达等行业巨头,它们还来自似乎每天都在涌现的人工智能芯片初创公司。在一个如此飞速变化的环境中,成功将青睐于最灵活变通的参与者。
相关文章
资讯
- 2020-12-28
国产大飞机研制取得重大进展 民营航空企业迎来发展新机遇
- 2020-12-07
双十二好物推荐,一款超能打的智能教育笔记本
- 2020-11-26
用技术驱动企业采购模式升级,京东企业购助力中小企业数字化转型
- 2020-11-03
守卫平安保障,提防保险“代理全额退保”诸多风险危害
- 2020-10-30
工厂里的“新面孔”,进博“大家伙”这样助力中国制造提质升级
- 2020-10-28
2021第五届中国上海国际车轮及轮胎展览会暨嘉年华活动
- 2020-10-28
2021中国上海国际汽车底盘及制动系统展览会
- 2020-10-19
京东企业业务发布技术服务品牌“电解智” 用“+服务”的综合性解决方案保障技术产品落地
- 2020-10-13
财富健康双保障 平安人寿“金瑞人生21”重磅上市
- 2020-09-29
《小马宝莉之彩虹音爆》全球首站,在成都正式开演!
- 2020-09-27
《小马宝莉之彩虹音爆》全球首站,在成都正式开演!
- 2020-09-27
全息技术儿童剧场《小马宝莉之彩虹音爆》亮相成都,全球首演!
- 2020-09-09
平安相伴,"救"在身边 平安人寿客服节用健康之礼回馈用户
- 2020-09-03
AMTech & AMC2021新闻发布会暨全球启动仪式9月2日在深圳成功召开
- 2020-08-19
美国第一家!苹果市值一度突破2万亿美元
原创
荐读
-
智能手机竞争中失败,日本在联网汽车领域举步维艰
据外媒报道,在制造带有数字联网服务的汽车的竞争中,丰田汽车和日产汽车面临着被本土市场拖累的风险。与美国和欧洲的汽车消费者不同的是,日本消费者不愿意为这些联网功能和服务买单。结果就是:日本只有10%的汽车...
-
2020年河南省将推广应用3万台工业机器人
到2020年,推广应用3万台工业机器人,建设1000条智能生产线、300个智能车间、150个智能工厂……4月16日,在2018两岸智能装备制造郑州论坛上,河南省工信委发布了《2017年河南省智能制造白皮书》,河南智能制造的2020...
-
全国首个获批建设国家技术标准(贵州大数据)创新基地
近日,国家标准委复函批准 , 同意贵州省建设国家技术标准 ( 贵州大数据 ) 创新基地,标志着贵州成为全国首个获批建设大数据国家技术标准创新基地的省份。按照国家标准委批复要求,国家技术标准 ( 贵州大数据 ) 创新...