信息化
首页  >  信息化  >  信息化要闻

Hadoop市场的“战国策”

2015-04-02  来源:企业网D1Net  作者:谭磊

2011年如果你去给大企业的IT经理介绍大数据,他会说有个叫“H”什么的技术,没有太多人听说过Hadoop;2012年你再去,别人会问你,你的Hadoop和开源的有什么不同?2013年有人说Hadoop是每个大中企业的IT玩具;2014年企业纷纷试水Hadoop;2015年??

Hadoop真的来了!,起源于Google和Yahoo若干年前对传统IOE架构的颠覆。他们分别在自己的Web集群中采用了一种全新的、基于x86平台的分布式存储与计算调度架构,从而化解了传统集中式架构无法承担互联网数据几何级数增长的问题。随着市场快速发展,移动终端爆炸性增长,尤其近三年“大数据”的提出,企业系统中的数据也开始出现了类几何级数增长的问题。在看到了这片新“处女地”后,开源及互联网领域里的Hadoop技术专家们纷纷自立门户,开始以Hadoop发行版的方式向企业级市场进军,一时间Hadoop市场呈现出“群雄逐鹿”的战国场面 – 毕竟,企业级市场才是整个IT领域中那颗“皇冠上的珍珠”。在美国,Cloudera、Hortonworks、MapR已经成为主流Hadoop发行版厂商,各自拥有几百个企业客户IBM的 Big Insights也是一个Hadoop版本,虽然Big Insights轮不上IBM主要产品线,但相信客户数也不少。

这样的风潮固然起源于硅谷,但今日的地球“是平的”,中国IT业也早不是以前了。在国家“创新”战略的影响下,纷纷加入到Hadoop技术的竞争中来,推出自己的企业版本。星环科技一马当先,已经加入到顶级技术PK的战队中,其Transwarp Data Hub是国内自主的最早一个发行版,也是国际上除DataBricks以外最早的Spark企业发行版。华为,亚信,Redhaoop等也以自身的品牌,市场或者社区优势推出基于Hadoop的大数据平台 。再加上国外的几家厂商,可谓盛况空前。类似当年的Linux之争,但不同的是这次的战场是企业的IT核心-数据平台。马云说了,“Data is the future”。谁是对的,谁能解决客户的问题,谁能在漫长而又短暂的竞争中胜出,远还没到判别的时候。但我们不妨来走马看花,说几句闲话。

Hotonworks和Cloudera在美国打的不可开交,前者已经提前上市,上市后又宣布成立ODP,联合一批厂商包括EMC/Pivotal搞开放联盟,后者早就拿到Intel大笔资金,号称不上市也能活到下个10年。但无论Cloudera还是Hortonworks都以Open Source开源为商业模式,虽然Cloudera最好用的Manager(管理器)是闭源的。这种模式好处在于易于获得,但对厂商自己而言,收入全来自于服务和支持费,如果客户对服务要求简单,这些服务就会被生态链的服务厂商拿走,如果服务复杂,就又会陷入低利润的服务业务。Hortonworks2014年收入4千多万美元,亏损8千多万美元,也许说明一些问题。MapR则秉承另外的理念,开源不等于开放,满足客户需求是第一位的,MapR定位于为企业提供专有的稳定、高性能的hadoop,重写了hdfs和hbase并闭源。而国内新秀星环的TDH定位于提供具备SQL和数据挖掘功能的高性能Hadoop平台,支持企业核心分析应用系统向Hadoop迁移,以此构建复杂的全新大数据应用。也主要强调SQL on Hadoop的功能,和企业现有应用对接。刚结束的Strata-Conference提出SQL的支持是Hadoop目前最需要解决的问题之一,显然,这方面星环已经先发,这也体现了我们国内公司的技术视野。

IBM,华为,再到亚信则是另一类厂商,对这类厂商来讲,Hadoop只是一个工具,他们关心的是整体方案,客户喜欢什么就给什么。他们不太可能成为Hadoop的创新者,但这些厂家以其强大的市场能力,整体的方案,也一定是Hadoop的重要使用者。而浪潮,携其对x86硬件体系常年的投入和研究,推出大数据一体机,从另一层面丰富了大数据平台产品的交付方式,给用户提供了一站式的解决方案。

竞争才刚刚开始,如果我们看下传统数据库厂商的收入和hadoop厂商的收入,我们就会明白这一点。Hadoop的兴起不是一个产品代替另一类产品,而是在硬件发展到一定阶段一个计算模式代替另一个计算模式。大数据,云计算,大数据云计算技术的整合,相信吧,这才起了个头。让我们拭目以待。

作者介绍:复旦计算机学士、美国杜克计算机硕士。美国微软总部服务13年,是数据分析、数据挖掘、产品研发及管理、互联网广告和互联网营销方面的专家。《New Internet:大数据挖掘》《数据掘金:电商数据运营》两书作者。

关键词:Hadoop 大数据