据《华尔街日报》报道,雅虎正考虑与自己的公司分拆Hadoop
有报道称,雅虎计划将其Hadoop工程部门分拆成一家独立的公司。观察家称,如果这一计划成真,将会在已经增长的数据处理框架支持领域引发更多竞争。
周三是《华尔街日报》报道雅虎正在考虑将其Hadoop开发团队作为一个新的独立公司,继续开发软件并提供Hadoop相关的咨询服务。
“这是Hadoop空间继续增长的另一个好迹象,”Hadapt的联合创始人兼首席执行官贾斯汀·博格曼(Justin Borgman)说。Hadapt提供将Hadoop与数据仓库连接起来的工具。这将给其他Hadoop公司带来压力。竞争越激烈越好。”
Hadoop是“多年来企业软件领域最大的进步,”Benchmark Capital的合伙人罗布•贝尔登(Rob Bearden)对《华尔街日报》表示。Forrester Research的高级分析师James Kobielus估计,Hadoop产品和服务的市场可能会增长到每年10亿美元。
Hadoop可以处理数据它驻留在多个服务器上,使得它适合分析比典型数据仓库能够处理的更多的信息。
雅虎一直致力于Hadoop数据处理平台的开发,并为该项目投入了大量工程资源。雅虎使用该技术进行数据处理和分析,以便为用户个性化内容和广告。其他互联网服务巨头,如eBay、Facebook和Twitter,也在使用这项技术。
“Hadoop是我们运营公司的平台。这是我们工作的核心,”雅虎云计算副总裁Todd Papaioannou在上个月接受IDG采访时说。雅虎没有立即回应记者的置评请求。
Hadoop的创始人道格·卡廷(Doug Cutting)于2006年加入雅虎,帮助该公司开发这项技术。他现在在分发Hadoop版本的Cloudera工作。Apache基金会监督Hadoop,哪个是开源项目尽管雅虎为该项目的新代码贡献了相当大的一部分。
Hadapt的Borgman指出,将Hadoop团队指定为自己的实体对雅虎来说是有意义的。雅虎主要是一家互联网媒体公司,Hadoop的市场将是企业,雅虎目前还没有迎合这个市场。
Borgman说:“也许他们觉得把它分拆到另一家公司,会有更好的机会去从事不同的业务。”
如果剥离发生,新的实体将成为越来越多的支持Hadoop的公司之一。Cloudera也提供了自己的服务Hadoop的分布。DataStax提供了一个版本与它的Cassandra数据存储相匹配。IBM已经打包Hadoop的分析产品,甚至使用了框架作为它的一部分沃森Jeopardy-playing超级计算机。
Kobielus预测,考虑到雅虎,剥离实体不会创建自己的Hadoop分发版今年早些时候,它停止了自己的分销。新公司将专注于企业的咨询、专业服务和系统集成。
Kobielus表示,可能的分拆也可能引发对该技术的进一步投资。风险投资家可能会资助更多基于hadoop的初创企业,传统的企业数据仓库(EDW)供应商可能会为自己抢购这些企业。
“Forrester强烈预计,许多已经进入Hadoop市场的初创公司将被成熟的EDW和分析供应商收购,他们需要在这个新领域中启动自己的努力,”Kobielus说。
Kobielus写道,甲骨文、Teradata、微软和惠普等公司可能会认真考虑基于hadoop的初创公司,如Cloudera、Karmasphere、Datameer、Hadapt和HStreaming。
Kobielus指出,尽管人们对此很感兴趣,但将Hadoop引入企业IT部门的工作仍有待完成,因为企业IT部门可能没有足够的工程专业知识来实施这项技术,从而在内部运行软件。它没有提供核心规范、api(应用程序编程接口)或代码库的参考框架。它仍然缺乏一些基本功能,比如实时分析。此外,目前还没有足够的建模工具可以将Hadoop组件(如MapReduce和Pig)中的数据集成逻辑转换为商业智能分析师能够理解的术语。
博格曼说,尽管存在这些限制,但Hadoop已经“非常接近”企业级应用。“我们正处在一个真正有趣的大数据分析新世界的风口浪尖。”
约押·杰克逊报道企业软件和通用技术的突发新闻IDG新闻服务。在推特上关注约押@Joab_Jackson。约押的电子邮件地址是Joab_Jackson@idg.com