爱吧机器人网 » 技术 > 大数据 > 正文

大数据的未来之路

Cloudera中国专区>>>

开源技术的开发类似今天 互联网 世界的众筹模式——成千上万背景不同的技术爱好者聚集在一个“开源社区”中,一起创造一个他们热爱的软件技术,人们可以自由使用。在此过程中,红帽创造了一种名为“订阅”的商业模式,它基于开源社区的软件,通过更多测试和验证,开发出更稳定、更易用的“企业版”。用户可以免费使用它,但如果需要技术支持和咨询服务就要付费。Cloudera仿照红帽模式,提供企业级Hadoop平台的服务。

如今,Cloudera已经带头形成全球最大的 大数据 生态链,有1200个合作伙伴。在美国,每天70%的智能手机数据都是在Cloudera平台上进行处理的。同时,Cloudera对新兴 大数据 领域进行普及,在全球培训了5万多名Hadoop专家。

9月,Cloudera落户中国。苗凯翔成为其在中国的第一个员工,担任该公司中国区副总裁。之前,他在英特尔负责 大数据 业务,参与了中国第一个Hadoop项目——2011年中国移动的通话详单查询项目。

苗凯翔发现,美国的 大数据 业务发展要比中国早两年,美国很多集群规模都已是上千个节点,中国才几十个,他预计明年中国企业会部署更大的集群。

“中国的企业,如运营商、银行在 大数据 的规划上越来越务实,设想也越来越大。目前他们要先想清楚 大数据 的商业价值。”苗凯翔说,“还要考虑清楚用 大数据 的目的是节省成本,还是创造价值,这是 大数据 的两个主题。”

苗凯翔用全球最大在线支付公司的实践来说明 大数据 的意义。这家企业本来用小型机做数据存储,在备份系统建设中,如果使用同样的小型机,一套就要上千万美元,太昂贵。最后,它们购买了Hadoop平台。Hadoop已经足够稳定、容量非常庞大,成本只是小型机的几十分之一甚至几百份之一,可以为企业节省可观的成本。这是企业使用 大数据 技术的第一步。之后,这家企业又基于Hadoop平台开展新业务,例如,给自己的客户提供各种报表,仅这项业务就为企业创造了百亿美元的销售额。

Hadoop非常复杂,苗凯翔认为,Cloudera的意义是能在中国把它构架起来、跑起来。他希望把Cloudera在金融、电信、零售、制造、政府和医疗领域的实践带到中国。

伴随Cloudera 在中国落地,其全球性合作伙伴Oracle、HP、DELL、SAS等会与Cloudera有更多在中国的合作。同时,它也在找寻本土合作伙伴,像博康智能这样在一个细分市场做得出色的系统集成商。明年第一季度,Cloudera也会在中国开展培训业务。目前,苗凯翔团队在与中国客户沟通,探讨Cloudera在中国的商业模式。

未来之路

近些年,Doug Cutting一直推进Hadoop在企业级市场的实践。让他欣慰的是Hadoop在各行业中开展的实践。

让他印象最深的是一家信用卡公司。之前,这家企业检验欺诈行为需要3个月,当它采用Hadoop分析过往5年的交易历史后,发现了一个欺诈模式,这个模式在多年中会连续出现。于是,这家信用卡公司采用了Hadoop技术,不仅节省了很多成本,效果也非常好。

Doug Cutting也曾拜访过一家位于亚特兰大的儿童医院。在医院的一间急诊室中,有几十个早产儿。婴儿身上有很多监测器,医护人员可以通过屏幕来看这些数据。一开始,这些数据随时就被扔掉了。后来,人们把数据从那些老式电脑中取出来,存储起来并进行分析。他们发现,为了检测孩子的身体状况,护士每天都要在孩子脚底扎针取血,一开始孩子们会哭,过了几天他们就不哭了。可是,当人们看到这些数据时会发现,实际上,在扎针取血后30分钟内,婴儿的心跳和呼吸都特别快,他们非常紧张,这对他们的健康不利。这帮助医护人员了解了很多情况,并改进了他们对婴儿的护理。

“我们看到越来越多的行业,正在利用 大数据 分析来提升业绩。”Doug Cutting说,“这些企业并不仅局限于高 科技 产业,它们还来自其他行业,比如采矿业、交通业。”

目前,大企业是最早采用 大数据 分析平台的,Doug Cutting观察到,这些企业通常是从个别部门开始使用Hadoop,然后扩展到其他部门。Doug Cutting认为,未来会有越来越多的中小企业使用Hadoop。在美国,一些小型农场主甚至农民,现在也是 大数据 的生产者——他们有GPS定位设备,他们的拖拉机和其他机械设备也收集了大量数据,通过这些数据可以更好地分析土壤状况,提高播种效率和产量。

“我们看到这个趋势正在在很多行业不断蔓延开来。” Doug Cutting说,“一些规模更小的公司,也将在接下来的5~10年中越来越多地去使用 大数据 。”

Doug Cutting还提到一个业界认同的大趋势——企业会越来越多地使用数据中心,把数据中心作为自己的“默认平台”,使用上面不同的应用程序。“智能手机既是手机,也是照相机、游戏机、电子书……因为它就在那儿,你知道怎么使用它,而且它上面也集成了所有的生活工具。” Doug Cutting 说,“未来企业数据中心的作用也类似,所有的工具都集成在上面,企业可以选择使用。”

上一页12下一页

上一篇:互联网征信:如何处理数据问题是关键
下一篇:移动应用决策平台App Annie获D轮融资5500万美元
精选推荐
谷歌宣布搜索算法重大升级,用BERT模型理解用户搜索意图
谷歌宣布搜索算法重大升级,用BERT模型理解用户搜索意图

[2019-10-26]  谷歌刚刚宣布,其搜索引擎的核心算法正在进行一项重大升级,这项升级可能会改变10%的搜索结果排序。此项升级应用了自然语言处理技术(BERT ...

机器人从工业走向家庭  库卡KUKA目标是引领中国市场
机器人从工业走向家庭 库卡KUKA目标是引领中国市场

[2017-12-08]  机器人正在改变着人们的生活方式,而库卡KUKA想要在中国这个大蛋糕中占有一块大份额,库卡公司正在引领市场...

比利时研发出可以自我愈合伤口的软体机器人
比利时研发出可以自我愈合伤口的软体机器人

[2017-09-03]  软体机器人是机器人技术的新兴领域; 他们“可以与人类相互作用,而不会杀死他们,并拿起像西红柿这样柔软的物体。” 从长远来看,布鲁塞尔大学队伍正在努力创建一个类似的材......

Waymo:人性和行为心理学才是无人驾驶最大的挑战
Waymo:人性和行为心理学才是无人驾驶最大的挑战

[2019-11-03]  自动驾驶汽车作为AI领域内最大的挑战之一,谷歌致力于其研发已有十余载,现在他们逐渐意识到,最困难的是如何让人们享受驾驶的乐趣。这是一 ...

17世纪的莱布尼茨试图制造“思想机器”却被现实打脸
17世纪的莱布尼茨试图制造“思想机器”却被现实打脸

[2019-11-05]  莱布尼茨,德国哲学家、数学家、律师,历史上少见的通才1666年,德国博学家戈特弗里德·威廉·莱布尼茨(Gottfried Wilhelm Leibniz)发 ...

[2017-03-21]  虽然有很多关于机器人取代工人的担心,但哈佛经济学家James Bessen的论文指出,在过去的67年里机器人仅仅淘汰掉人类工作中的一个。在1950 ...

农业将为高科技行业 农业机器人的应用领域
农业将为高科技行业 农业机器人的应用领域

[2017-12-17]  农业正在迅速成为一个令人兴奋的高科技产业,吸引了新专业人士,新公司和新投资者。技术发展迅速,不仅提高了农民的生产能力,而且促进了我们所知道的机器人和自动化技术的发展。...

可编辑神经网络,有望简化深度学习?
可编辑神经网络,有望简化深度学习?

[2019-10-04]  深度学习是一个计算繁重的过程。 降低成本一直是 Data curation 的一大挑战。 关于深度学习神经网络大功耗的训练过程,已经有研究人员 ...

本周栏目热点

[2016-08-07]     著名物理学家霍金教授说,忘了黑洞吧,女人才是宇宙最大的谜。但,未来这个最大的谜题因为大数据分析的出现而揭开谜底。人工智能是大数 ...

网友在什么时候发朋友圈可以看出贫富差距?

[2016-08-30]   收入不平等、教育不平等这些名词你都不会陌生。现在有人希望通过分析Instagram上图片分享的地理定位数据来告诉你什么叫做——社交 ...

[2018-07-23]  随着信息技术在各个领域的全面应用,数据的种类、数量、速度和价值都出现了显著变化,一个大规模生产、分享和应用数据的时代已经开启。...

个人征信机构静待发令枪响 业内:大数据并不便宜

[1970-01-01]   个人征信牌照发放在即。近日,《每日经济新闻》记者从多家机构获悉,央行对征信机构的验收工作已经收尾 ...

数据开放的经济学分析

[1970-01-01]   2009年美国启动开放政府计划,开启了国际政府机构以数据开放展开数据与信息分享的重要议题,在世界范围 ...