爱吧机器人网 » 技术 > 智能硬件 > 正文

IBM研制出新型人工智能芯片


在12月初举办的NeurIPS会议上,IBM展示了一款新型人工智能芯片。

IBM的研究人员声称,他们已开发出一个更加高效的模型用于处理神经网络,该模型只需使用8位浮点精度进行训练,推理(inferencing)时更是仅需4位浮点精度。该研究的成果已于2018年12月初在国际电子元件会议(International Electron Devices Meeting,IEDM)和神经信息处理系统大会(Conference on NeuralInformation Processing Systems,NeurIPS)上发布。

简而言之,IBM展示了专用于减少精度处理单元的定制硬件,以及能够利用该硬件进行深度神经网络(DNN)训练和推理的新算法。其主要目标在于提高硬件的能效,使其可以应用于范围更广泛的人工智能解决方案。

下一代人工智能应用程序需要更快的响应时间、更大的人工智能工作负载以及来自众多数据流的多模式数据。为了释放人工智能的全部潜能,我们重新设计了将人工智能考虑在内的硬件:从加速器到用于人工智能工作负载的特定用途硬件(例如我们的新芯片),以及最终用于人工智能的量子计算技术。使用新的硬件解决方案扩展人工智能是IBM研究院(IBM Research)更广泛努力的一部分,以期从范围狭窄的人工智能(通常用于处理具体的、界限清楚的任务)转向范围广泛的人工智能(跨越各个学科,可帮助人类解决最迫切的问题)。

具体而言,IBM研究院提出了可提供8位浮点(FP8)精度用于训练神经网络的硬件。8位浮点精度是16位浮点精度(FP16)的一半,而16位浮点精度自2015年以来一直是深度神经网络工作的事实标准。(提议的硬件将依靠FP16来累积点积,而不是现在使用的FP32。)借助于稍后介绍的新算法技术,IBM的研究人员表示,他们可以跨各种深度学习模型保持精确度。事实上,他们记录在案了使用FP8精度基于图像、语音和文本数据集对深度神经网络所进行的训练,并实现了与基于FP32的训练相当的模型精确度。

降低精度的模型基于三项软件创新:一种新的FP8格式,让用于深度神经网络训练的矩阵乘法和卷积计算可在不损失精确度的情况下工作;一种“基于组块的计算”技术,使得只需使用FP8乘法和FP16加法即可处理神经网络成为现实;并且在加权更新过程中使用浮点随机舍入,允许以16位浮点精度(而不是32位浮点精度)计算这些更新。

IBM展示的硬件是一款基于“新式数据流核心”的14纳米处理器。该处理器由降低精度的数据流引擎、16位浮点精度组块加法引擎和核心上内存及内存访问引擎组成。研究人员声称,与现在的平台相比,这种设计有可能使训练速度提高2到4倍。其中部分改进是用于训练模型的位宽减少了2倍的结果,但其余改进则是因为用于利用降低的精度的软件技术。

也许更重要的是,IBM研究院表示,由于其FP8/FP16模型相较标准FP16/FP32模型而言所需的内存带宽和存储空间更少,并且因为其硬件是为处理这些神经网络而定制的,能效可提高2-4倍以上。研究人员表示,这将使深度神经网络模型能够在一些边缘设备上进行训练,而不仅仅是在数据中心服务器上进行训练。

研究人员还发表了一篇关于在多个深度学习应用程序中使用4位浮点精度推理,而同样不损失精确度的论文(目前,大部分推理基于使用8位浮点精度或更多位浮点精度的计算)。此处的意义在于,位宽的减小将再次提高吞吐量和能效。对降低精度的需求也使得基于在训练期间优化的位精度构建用于训练和推理的统一架构更加自然。根据研究人员的说法,由于减少了专用于计算的处理器面积并拥有在内存中保留模型和激活数据的能力,此类硬件可以带来推理性能的超线性提升。

相关研究领域需要与将这种降低精度的模型应用于模拟芯片相关,模拟芯片天生不如数字芯片精确,但能效却高得多。IBM的研究人员开发了一种使用相变存储器(PCM)的8位浮点精度模拟加速器,它可以充当用于处理神经网络的计算基板和存储介质。根据2018年早些时候发布的工作成果,IBM研究院已经实施了该技术的创新加成,称为预测PCM(Projected PCM,Proj-PCM),它可以减少PCM硬件的一些令人烦恼的不精确性。研究团队认为,该设计可为物联网(IoT)和边缘设备等功率受限环境中的人工智能训练和推理提供高性能水平。

尽管所有这些仍处于研究阶段,但IBM显然对构建自己的人工智能芯片和加速器并将其交付到客户手中感兴趣。他们计划如何将该技术商业化仍然有待观察。无论如何,如果降低精度的训练和推理流行起来,IBM将面临很多竞争。这些竞争不仅仅来自将相应调整自己的处理器平台的英特尔和英伟达等行业巨头,它们还来自似乎每天都在涌现的人工智能芯片初创公司。在一个如此飞速变化的环境中,成功将青睐于最灵活变通的参与者。

赢家机器人——全国首家聚合型AI智能机器人营销平台,为客户提供包括电话销售、电话客服、网络销售、客户资源搜集等多方位营销推广服务,全面提升企业销售业绩,帮助企业节省电销、客服、网络营销、资源搜集等岗位的人力成本70%,提升企业利润300%!

赢家机器人拥有四大功能板块:依托阿里云、科大讯飞智能语音识别技术,研发出AI智能语音机器人;深度优化人工转接功能等功能,研发出AI智能客服机器人;直接对接腾讯、百度等互联网集团公司的大数据中心,研发出AI智能资源机器人;深度结合网销岗位特点与完美模拟手机运营环境,研发出AI智能网销机器人。

作为全国首家聚合型AI智能机器人营销平台,赢家机器人凭借科大讯飞、阿里云、腾讯AI大数据中心等多方营销优势,为传统企业提供最优化的AI智能升级方案。全面提升企业利润,极力缩减企业人力成本!

智汇营销,畅联未来。赢家机器人聚合电话机器人、客服机器人、资源机器人、网销机器人等多重营销模式,帮助传统企业降低AI智能营销难度,深度切合各行业营销特点,帮助传统企业实现AI智能营销方向的营销升级!



上一篇:人工智能成手机发展“新引擎” 用户偏爱“视觉体验”
下一篇:Firefly人工智能开源硬件系列:融合软硬件与AI技术的开放平台
精选推荐
17世纪的莱布尼茨试图制造“思想机器”却被现实打脸
17世纪的莱布尼茨试图制造“思想机器”却被现实打脸

[2019-11-05]  莱布尼茨,德国哲学家、数学家、律师,历史上少见的通才1666年,德国博学家戈特弗里德·威廉·莱布尼茨(Gottfried Wilhelm Leibniz)发 ...

集群机器人领域最新研究:一种用于探测未知环境的微型无人机群
集群机器人领域最新研究:一种用于探测未知环境的微型无人机群

[2019-10-26]  (图:无人机扩散至不同方向来探索环境。当一个无人机注意到另一个无人机在它的首选方向,它将试图飞到另一个方向。若首选方向冲突,低优先 ...

谷歌宣布搜索算法重大升级,用BERT模型理解用户搜索意图
谷歌宣布搜索算法重大升级,用BERT模型理解用户搜索意图

[2019-10-26]  谷歌刚刚宣布,其搜索引擎的核心算法正在进行一项重大升级,这项升级可能会改变10%的搜索结果排序。此项升级应用了自然语言处理技术(BERT ...

搭载人工智能的太空机器人CIMON 2乘SpaceX抵达国际空间站
搭载人工智能的太空机器人CIMON 2乘SpaceX抵达国际空间站

[2019-12-09]  12月5日,搭载人工智能的太空机器人西蒙2号(CIMON 2)乘坐SpaceX火箭Dragon货运舱,从佛罗里达州卡纳维拉尔角空军基地升空,前往国际空间 ...

美国普渡大学研发快动作软体机器人,灵感来自变色龙舌头捕食
美国普渡大学研发快动作软体机器人,灵感来自变色龙舌头捕食

[2019-10-31]  本文图片均来自:Ramses v Martinez 普渡大学变色龙、蝾螈和许多蟾蜍利用积蓄的弹性能量,向距离1 5倍体长的毫无防备的昆虫伸出粘糊糊的舌 ...

可编辑神经网络,有望简化深度学习?
可编辑神经网络,有望简化深度学习?

[2019-10-04]  深度学习是一个计算繁重的过程。 降低成本一直是 Data curation 的一大挑战。 关于深度学习神经网络大功耗的训练过程,已经有研究人员 ...

九台“猎豹”机器人组队踢球,麻省理工高材生们的高级趣味
九台“猎豹”机器人组队踢球,麻省理工高材生们的高级趣味

[2019-11-09]  本周,在麻省理工学院10号楼外草坪上展开了一场别开生面的足球比赛。在绿草如茵的基利安球场上,一群由人工智能驱动的机器人就是这场比赛的 ...

研究人员融合人类与AI的创造力 显著提高了深度学习的表现
研究人员融合人类与AI的创造力 显著提高了深度学习的表现

[2019-10-12]  由加拿大人工智能领域研究主席、滑铁卢大学系统设计工程教授Alexander Wong领导的一个团队开发了一种新型紧凑型神经网络家族,可以在智能 ...

本周栏目热点

Firefly人工智能开源硬件系列:融合软硬件与AI技术的开放平台

[2019-01-09]  随着人工智能的迅速发展,AI产品层出不穷,推动着行业的发展,Firefly开源团队推出的人工智能硬件系列,融合了软硬件与AI技术,提供了专业的开放平台,以及一站式解决方案,加......

苹果设计师曝光VR:设计简约科技感十足

[2016-03-02]   【TechWeb报道】2月28日消息,关于苹果进入VR领域的消息由来以久,最近苹果概念设计师Martin Hajek独 ...

现代机械外骨骼能让普通人举起数百公斤物品

[2016-05-17]   韩国汽车厂商现代最近发布了一副全新的机械外骨骼。在博客文章当中,现代把这个可穿戴机器人原型机与钢铁侠盔甲进行了对比,称其能 ...

智能手环Feel:追踪情绪变化 帮助调整情绪

[2016-01-19]   将来回想起来,人们可能隐约会记起那是2016年的某一天:一款名为Feel Bracelet的设备出现了,戴上它人 ...

乐视推VR头盔COOL1:售149元

[2015-12-27]   12月23日消息,乐视今日在京公布其VR(虚拟现实)战略,并发布旗下VR头盔LeVR COOL1。据了解,该款头 ...