爱吧机器人网 » 技术 > 智能硬件 > 正文

IBM研制出新型人工智能芯片


在12月初举办的NeurIPS会议上,IBM展示了一款新型人工智能芯片。

IBM的研究人员声称,他们已开发出一个更加高效的模型用于处理神经网络,该模型只需使用8位浮点精度进行训练,推理(inferencing)时更是仅需4位浮点精度。该研究的成果已于2018年12月初在国际电子元件会议(International Electron Devices Meeting,IEDM)和神经信息处理系统大会(Conference on NeuralInformation Processing Systems,NeurIPS)上发布。

简而言之,IBM展示了专用于减少精度处理单元的定制硬件,以及能够利用该硬件进行深度神经网络(DNN)训练和推理的新算法。其主要目标在于提高硬件的能效,使其可以应用于范围更广泛的人工智能解决方案。

下一代人工智能应用程序需要更快的响应时间、更大的人工智能工作负载以及来自众多数据流的多模式数据。为了释放人工智能的全部潜能,我们重新设计了将人工智能考虑在内的硬件:从加速器到用于人工智能工作负载的特定用途硬件(例如我们的新芯片),以及最终用于人工智能的量子计算技术。使用新的硬件解决方案扩展人工智能是IBM研究院(IBM Research)更广泛努力的一部分,以期从范围狭窄的人工智能(通常用于处理具体的、界限清楚的任务)转向范围广泛的人工智能(跨越各个学科,可帮助人类解决最迫切的问题)。

具体而言,IBM研究院提出了可提供8位浮点(FP8)精度用于训练神经网络的硬件。8位浮点精度是16位浮点精度(FP16)的一半,而16位浮点精度自2015年以来一直是深度神经网络工作的事实标准。(提议的硬件将依靠FP16来累积点积,而不是现在使用的FP32。)借助于稍后介绍的新算法技术,IBM的研究人员表示,他们可以跨各种深度学习模型保持精确度。事实上,他们记录在案了使用FP8精度基于图像、语音和文本数据集对深度神经网络所进行的训练,并实现了与基于FP32的训练相当的模型精确度。

降低精度的模型基于三项软件创新:一种新的FP8格式,让用于深度神经网络训练的矩阵乘法和卷积计算可在不损失精确度的情况下工作;一种“基于组块的计算”技术,使得只需使用FP8乘法和FP16加法即可处理神经网络成为现实;并且在加权更新过程中使用浮点随机舍入,允许以16位浮点精度(而不是32位浮点精度)计算这些更新。

IBM展示的硬件是一款基于“新式数据流核心”的14纳米处理器。该处理器由降低精度的数据流引擎、16位浮点精度组块加法引擎和核心上内存及内存访问引擎组成。研究人员声称,与现在的平台相比,这种设计有可能使训练速度提高2到4倍。其中部分改进是用于训练模型的位宽减少了2倍的结果,但其余改进则是因为用于利用降低的精度的软件技术。

也许更重要的是,IBM研究院表示,由于其FP8/FP16模型相较标准FP16/FP32模型而言所需的内存带宽和存储空间更少,并且因为其硬件是为处理这些神经网络而定制的,能效可提高2-4倍以上。研究人员表示,这将使深度神经网络模型能够在一些边缘设备上进行训练,而不仅仅是在数据中心服务器上进行训练。

研究人员还发表了一篇关于在多个深度学习应用程序中使用4位浮点精度推理,而同样不损失精确度的论文(目前,大部分推理基于使用8位浮点精度或更多位浮点精度的计算)。此处的意义在于,位宽的减小将再次提高吞吐量和能效。对降低精度的需求也使得基于在训练期间优化的位精度构建用于训练和推理的统一架构更加自然。根据研究人员的说法,由于减少了专用于计算的处理器面积并拥有在内存中保留模型和激活数据的能力,此类硬件可以带来推理性能的超线性提升。

相关研究领域需要与将这种降低精度的模型应用于模拟芯片相关,模拟芯片天生不如数字芯片精确,但能效却高得多。IBM的研究人员开发了一种使用相变存储器(PCM)的8位浮点精度模拟加速器,它可以充当用于处理神经网络的计算基板和存储介质。根据2018年早些时候发布的工作成果,IBM研究院已经实施了该技术的创新加成,称为预测PCM(Projected PCM,Proj-PCM),它可以减少PCM硬件的一些令人烦恼的不精确性。研究团队认为,该设计可为物联网(IoT)和边缘设备等功率受限环境中的人工智能训练和推理提供高性能水平。

尽管所有这些仍处于研究阶段,但IBM显然对构建自己的人工智能芯片和加速器并将其交付到客户手中感兴趣。他们计划如何将该技术商业化仍然有待观察。无论如何,如果降低精度的训练和推理流行起来,IBM将面临很多竞争。这些竞争不仅仅来自将相应调整自己的处理器平台的英特尔和英伟达等行业巨头,它们还来自似乎每天都在涌现的人工智能芯片初创公司。在一个如此飞速变化的环境中,成功将青睐于最灵活变通的参与者。

赢家机器人——全国首家聚合型AI智能机器人营销平台,为客户提供包括电话销售、电话客服、网络销售、客户资源搜集等多方位营销推广服务,全面提升企业销售业绩,帮助企业节省电销、客服、网络营销、资源搜集等岗位的人力成本70%,提升企业利润300%!

赢家机器人拥有四大功能板块:依托阿里云、科大讯飞智能语音识别技术,研发出AI智能语音机器人;深度优化人工转接功能等功能,研发出AI智能客服机器人;直接对接腾讯、百度等互联网集团公司的大数据中心,研发出AI智能资源机器人;深度结合网销岗位特点与完美模拟手机运营环境,研发出AI智能网销机器人。

作为全国首家聚合型AI智能机器人营销平台,赢家机器人凭借科大讯飞、阿里云、腾讯AI大数据中心等多方营销优势,为传统企业提供最优化的AI智能升级方案。全面提升企业利润,极力缩减企业人力成本!

智汇营销,畅联未来。赢家机器人聚合电话机器人、客服机器人、资源机器人、网销机器人等多重营销模式,帮助传统企业降低AI智能营销难度,深度切合各行业营销特点,帮助传统企业实现AI智能营销方向的营销升级!



上一篇:人工智能成手机发展“新引擎” 用户偏爱“视觉体验”
下一篇:Firefly人工智能开源硬件系列:融合软硬件与AI技术的开放平台
精选推荐
九台“猎豹”机器人组队踢球,麻省理工高材生们的高级趣味
九台“猎豹”机器人组队踢球,麻省理工高材生们的高级趣味

[2019-11-09]  本周,在麻省理工学院10号楼外草坪上展开了一场别开生面的足球比赛。在绿草如茵的基利安球场上,一群由人工智能驱动的机器人就是这场比赛的 ...

什么是机器人学?机器人学简介
什么是机器人学?机器人学简介

[2017-12-14]  机器人学是工程学与科学的交叉学科,包括机械工程,电气工程,计算机科学等。机器人技术涉及机器人的设计、制造、操作和应用,以及用于控制、感官反馈和信息处理的计算机系统。...

麻省理工又秀神技:推出如魔法般跳跃的方块机器人集群
麻省理工又秀神技:推出如魔法般跳跃的方块机器人集群

[2019-10-31]  几天前,小编向大家介绍过麻省理工(MIT)研发的一种自组装机器人集群(点此阅览),它们可以用统一标准的小单元自动组装出各种大型结构。 ...

谷歌《Nature》发论文称实现量子霸权 18亿倍速碾压世界最强超算
谷歌《Nature》发论文称实现量子霸权 18亿倍速碾压世界最强超算

[2019-10-23]  谷歌坚称自己已经取得了量子霸权——这标志着计算研究领域的一个重要里程碑。谷歌首次发布声明是在今年9月,虽然遭到竞争对手的质疑,但就 ...

这个外科手术机器人可以为患者“量身定制”
这个外科手术机器人可以为患者“量身定制”

[2019-07-12]  世界首创,来自澳大利亚机器人视觉研究中心的研究人员正在推动手术机器人的发展边界,他们创造了可定制的、小型化的手术机器人,能够唯一地 ...

基于生物启发的机器人很容易适应丢失附属器官
基于生物启发的机器人很容易适应丢失附属器官

[2017-12-17]  很多机器人被设计应用在危险环境,如灾难现场。在这些地方,他们的运动系统完全有可能被损坏。那这样会吓跑这些机器人吗?也许不是,如果它们像日本的东北和北海道大学创造的......

揭秘达芬奇手术机器人
揭秘达芬奇手术机器人

[2018-04-19]  达芬奇手术系统是由美国Intuitive Surgical公司制造的机器人手术系统。美国食品和药物管理局(FDA)于2000年通过该标准,旨在利用微创手段 ...

可编辑神经网络,有望简化深度学习?
可编辑神经网络,有望简化深度学习?

[2019-10-04]  深度学习是一个计算繁重的过程。 降低成本一直是 Data curation 的一大挑战。 关于深度学习神经网络大功耗的训练过程,已经有研究人员 ...

本周栏目热点

读心术成现实!麻省理工研发出头戴设备“AlterEgo” 信息识别准确率达92%

[2018-04-09]  据外媒报道,近日,美国麻省理工大学(MIT)新开发了一款名为AlterEgo的头戴设备,可以实现不言自明的读心境界。用户不用说话,它就能够识 ...

现代机械外骨骼能让普通人举起数百公斤物品

[2016-05-17]   韩国汽车厂商现代最近发布了一副全新的机械外骨骼。在博客文章当中,现代把这个可穿戴机器人原型机与钢铁侠盔甲进行了对比,称其能 ...

LG:Clova将正式运用到智能音箱ThinQ Hub中

[2017-11-22]  随着人工智能的发展,似乎越来越多的软件硬件开始变得越发的智能了,就如音响来说,最开始的音箱是需要插线才能够使用的,而后出现了智能的蓝牙音箱...

智能手环Feel:追踪情绪变化 帮助调整情绪

[2016-01-19]   将来回想起来,人们可能隐约会记起那是2016年的某一天:一款名为Feel Bracelet的设备出现了,戴上它人 ...

乐视推VR头盔COOL1:售149元

[2015-12-27]   12月23日消息,乐视今日在京公布其VR(虚拟现实)战略,并发布旗下VR头盔LeVR COOL1。据了解,该款头 ...