提到Hadoop,很多人会不由自主的联想到那只可爱的小象,10年前它正式面世,这个名字正如它的形象,是创始人DougCutting孩子的一个棕黄色大象玩具名字。谁也没想到的是,经过10年的发展,Hadoop已经从根本上改变了企业存储、处理和分析数据的方式。
Hadoop的快速兴起其中很重要的一个因素就是扎根于开源土壤,通过人人共享有更多的人参与进来并不断完善。LAMP--Linux、Apache、MySQL、PHP,可以说是开源世界的四大支柱,众所周知,2015年又是ApacheHadoop标志性的一年,ApacheSpark已经成为主流,Kudu(孵化中)的全新储存能力也加入进来,安全也更加卓越。ApacheSoftwareFoundation在不断发展完善的过程中,也出现了很多发行版本,其中比较有名的当属ClouderaDistributionofApacheHadoop(CDH)。
近日,Cloudera全球副总裁大中华区总经理凌琦分享了Hadoop及其演变的历史,阐述了Cloudera商业模式和行业领先地位,以及Hadoop在2016年的展望。凌琦表示:Cloudera将致力于唤醒沉睡在中国的大数据商业价值,从而帮助企业通过大数据处理和分析加速洞察的获取效率。对于未来,有以下三个预测与大家分享。
Hadoop将更加隐形
去年,MikeOlson(Cloudera联合创始人兼首席战略官)就在纽约StrataHadoop世界大会的演讲中提出这个说法(意思是用户真正在乎基于Hadoop的平台和能达到的业务结果,而不是Hadoop本身)。Hadoop之初的用例定位就是一个经济型的深度存储和数据处理平台,我们陆续看到如今大大小小的企业都在用这个平台进行创新部署,涉及的应用也越发广泛。
Hadoop技术将被广泛使用
在Cloudera学术合作伙伴(CAP)中,Cloudera已经有超过100名合作伙伴,这无疑是一个重要的里程碑,有助于培养未来所需的Hadoop技术专家。随着时间的推移,越来越多掌握Hadoop技术的人们进入工作岗位为他们带来成功。这的确是朝着正确方向迈进的一大步,但并不是全部。
除了获得必要的技能,对于企业来讲,更大的挑战是如何判断和评估Hadoop的最佳适用。使用Hadoop来进行平台重构时,技术本身只是等式的一部分,众多企业意识到他们同样需要考虑人员及流程变动的因素,懂得如何去把握所有变化是一项十分艰巨的工作。
2017年,将看到成功之路上人们对教育的渴望。"今天的关键着手点是什么?"、"一旦实施,我将如何调整?"、"我如何从部门小项目提升为整个企业的计划?"所有这些问题都都需要解决。科技只是拼图的一角,当越来越多的企业停下脚步自我审视,企业处在何地,将去向何方,经过一番深思熟虑,技术才会更加普及,过程才会更加流畅。就自身而言,Cloudera将尽可能的简化产品。
物联网机遇下的云
对于Hadoop而言,"云"将继续走在前沿,因为数据越来越多地从本地迁移到云上。在最近的一次网络研讨会上,45%的参会者回答到他们的所有数据都是本地存储的。相反,只有33%的人希望在2020年前,他们的数据可以实现云存储。这个调研清晰地告诉我们,数据对混合云模式的转变,Cloudera认为Hadoop部署也是同样。
在一个专门讨论如何在AWS上成功部署生产环境的网络研讨会上,54%的调查者表示在云上Hadoop的复杂性是导致他们不用云部署的原因。这也是为什么要开发ClouderaDirector这样的工具来简化云部署技术。
"物联网"会是在将来听到更多的词。Cloudera的客户长期以来一直活跃于物联网领域。举个例子,Vivint使用Cloudera为用户提供物联网解决方案,提升了家居联网的同时也改进了服务体验。另一个例子,Omneo推动工业化物联网领域,实时优化供应链,通过这种方法节省了1500万-2000万美元。无论是升级用户体验,还是数据驱动产品,预计"物联网"在未来都会是各个领域人们的热门话题。
最后想要了解更多关于Hadoop行业资讯,请关注大讲台官网、微信等平台,大讲台IT职业在线学习教育平台为您提供权威的大数据Hadoop培训课程和视频教程系统,通过大讲台金牌讲师在线录制的第一套自适应Hadoop在线视频课程系统,让你快速掌握Hadoop从入门到精通大数据开发实战技能。