As 2016 draws to a close, a new study suggests big data is growing in maturity and surging in the cloud.
AtScale, which specializes in BI on Hadoop using OLAP-like cubes, recently conducted a survey of more than 2,550 big data professionals at 1,400 companies across 77 countries. The survey was conducted in conjunction with Cloudera, Hortonworks, MapR, Cognizant, Trifacta and Tableau.
AtScale的2016大数据成熟度调查发现的受访者近70％的人使用大数据进行了一年多了（与去年同期59％相比）。受访者76％今天使用Hadoop，并且73％的人说他们现在在生产中使用Hadoop（与去年同期65％相比）。此外，74％的有10个以上的Hadoop节点和20％的20％具有大于100个节点。
[ Related8 big data predictions for 2017]
“受访者在本次调查的成熟是一个关键的考虑因素，”托马斯·斯莫尔，大数据分析行业分析师和作家的书"Disruptive Analytics,"在一份声明中说，星期三。“五分之一的受访者有超过100个节点和他们的74％都在生产，表明了两位数的增长年同期。”
受访者还表示，他们正在越来越多地转向云计算，当谈到托管自己的大数据分析。的受访者百分之五十三说，他们在云已部署大数据和受访者的14％都在云中所有的大数据。百分之七十二的计划使用云在未来的一个大数据部署。
“有许多人在使用大数据在过去一年中明确激增云，什么是也许有趣的是，受访者更有可能取得实实在在的价值时，他们的数据在云中，” AtScale CTO和联合说-founder马特·贝尔德。
Hadoop是长线好
“Hadoop是吓坏难”，增加了CEO和AtScale的创始人戴夫·马里亚尼。“这真的很难部署，这真的很难管理。我看到了很多的客户很喜欢不必担心管理他们的Hadoop集群。如果能够弹性地规模，而不仅仅是增加新的节点，但也缩小他们，并使用对象存储作为持久层做到这一点，这是一个完全不同的概念比-PREM Hadoop的“。
[ Related:在校园里大数据]
除了大数据的日益成熟，主要的工作量也转变。
“一个去年的工作量人数为ETL，那么商业智能，数据再科学，”布鲁诺阿齐扎，AtScale的首席营销官。“今年的头号工作量的商务智能。”
BI是大
ETL和数据科学大数据workl仍受欢迎oads, but business intelligence (BI), which was already trending upward last year, has become the predominant workload with 75 percent of respondents using or planning to use BI on big data. And that's not slowing down any time soon if the indications are correct. Fully 97 percent of respondents said they would do as much oremore with big data over the next three months.
While there has been a lot of hype around Spark, the survey found that 42 percent of organizations use Spark for educational purposes but have no real project using Spark as of yet. A third of respondents say Spark is primarily in development today, while 25 percent say they have deployed Spark in development and production.
“有很多围绕星火兴奋，但很少现实生活中的部署，”阿齐扎说。
“如果你看一下在使用Hadoop的规划，多数人都在思考，‘我将要使用的Spark作为我的主要引擎。’但是，当你真正开始使用Hadoop，大多数人使用蜂巢，”马里亚尼补充道。“你永远不会使用火花的ETL管线你要使用蜂巢为但我们永远不会使用蜂巢交互式查询;。我们会使用Spark或黑斑羚为”
应当指出，然而，在生产部署火花组织是85％更容易实现价值。
When it comes to concerns around big data, accessibility, security and governance have become the fastest growing areas of concern year-over year, with worries related to governance growing the most at 21 percent.
这个故事，“企业云眼大数据部署”最初发表CIO 。