当前位置: 移动技术网 > 互联网>大数据 > Hadoop部署调查:大数据迎来高速发展期

Hadoop部署调查:大数据迎来高速发展期

2018年05月10日  | 移动技术网互联网  | 我要评论

开封列车时刻表,鼠标dpi,slideshare分享网

  得益于市场的宣传,企业用户对于大数据这一概念的接受程度越来越高,作为一个较为廉价并且开源的大数据解决方案Hadoop,也越来越受到用户的关注。在最近IT168.com进行的一项关于Hadoop部署的专项调查显示,将近82%的企业用户已经部署或预计在未来一年内部署Hadoop或相关的大数据解决方案,在这之中,HDFS、MapReduce和Hbase分别以19%、18%和14%的比例位列前三。

  大数据,给人第一印象就是数据量大,并且单位时间内的新增数据量较大。大多数企业用户都达成这样一个共识,大数据解决方案不可能一蹴而就,并且如何从大数据处理中获得与投入相匹配的收益是目前一个较为棘手的问题,所以从用户的反馈情况来看,其通常采用一种循序渐进的方式部署大数据解决方案,不断地积累企业内部数据,然后根据业务不断地完善这一方案。

  在对278名企业IT主管或IT技术工程师进行调查后,经统计显示,89%的受调查者表示,其所在企业的每月新增数据大约在500GB一下,其中,42%的受调查者表示,其每月新增数据在11GB-100GB之间,27%的受调查者认为其所在企业的每月新增数据为101GB-500GB。具体如下图所示:

  结合上两个图表,我们可以看到,在第一个图表中,20%的受访者表示,其所在企业每月的新增数据在10GB以下;而第二个图表则显示18%的受调查者表示没有部署大数据解决方案的计划。

  从IT168.com的调查结果来看,目前企业考虑部署或者已经部署Hadoop解决方案都还处于起始阶段,不管是从部署Hadoop的节点规模,还是Hadoop开发人员的配置,以及运行在Hadoop之上的应用数据和数据量来看,其规模都比较小。具体如下所示:


  从上图可以看出,目前大多数企业(83%)所部署的Hadoop节点数规模还在20个以下,超过20个节点规模的企业仅为17%。


  同样,在回答用于Hadoop集群中的数据规模这一问题时,91%的受调查者表示,其所在企业用于Hadoop集群中大数据规模在1TB以下,其中35%的受调查者认为,其用于Hadoop的数据规模为100GB-500GB之间,31%的企业用于Hadoop的数据规模在100GB以下。仅有9%的受调查者表示,其所在企业用于Hadoop集群中的数据规模在1TB以上,其中3%的受调查者称,其企业用于Hadoop的数据规模在5TB以上。

  在回答企业部署Hadoop解决方案的主要作用时,20%的受调查者表示主要是为了降低数据分析的成本,而紧随其后(19%)的企业则是为了日志分析和WEB搜索。具体如下图所示:


  从这一统计结果来看,目前企业所部署的Hadoop解决方案大多还停留在数据管理的层面,对大数据进行挖掘与分析还有待后续继续开发。

  作为一款开源的大数据解决方案,Hadoop在短短几年内就发布了多个版本,可见其用户群体之庞大。而这也给诸多企业用户带来了很多的难题。在谈到Hadoop的优点时,节省成本是其风靡全球的重要因素之一,25%的受调查者表示,这是受Hadoop吸引的重要因素之一。


  同时,20%的受调查者表示,目前没有商业化工具,服务还不够完善,这是目前Hadoop面临的一大尴尬问题。另有20%的受调查表示,在Hadoop方面,目前还缺少中文社区的支持,而这一因素间接提高了学习Hadoop技术的门槛。

  尽管Hadoop目前还存在诸多问题,但绝大多数的受调查者(93%)都表示看好Hadoop在未来的发展前景,其中36%的受调查者非常看好Hadoop,认为这是未来大数据分析的“利器”。仅有5%的受调查者表示不看好Hadoop的发展,另有2%的受调查者对Hadoop的前景表示沉默。

您可能感兴趣的文章:

如对本文有疑问,请在下面进行留言讨论,广大热心网友会与你互动!! 点击进行留言回复

相关文章:

网友评论

验证码:
移动技术网