IDC：调查大企业如何使用大数据

据IDC预计，到2017年，大数据技术与服务市场的年复合增长率将达到27%，届时整体市场规模也增长至324亿美元。根据IDC的说法，为了帮助大家更为直观地进行比较，大数据市场的增长速度比信息及通信技术市场的整体增幅高出六倍。

尽管资金在不断涌入，但企业花掉的真金白银到底能不能买回个光明的未来还真说不准——毕竟目前尚处于大数据技术部署的早期阶段。为了找到确切答案，研究人员们调查了多位IT高管及中层管理人员，旨在了解他们所在企业在大数据领域的计划、投资以及发展倾向等情况。

以下是2014年大数据调查的一部分关键性结论：

这项调查所涉及的各企业分别处于大数据部署的不同阶段。其中一些已经完成了实施工作(19%)，也有一些尚处于大数据项目的实施过程之中(25%)。其它不少企业则正在制定部署规划——具体时间为未来12个月之内(16%)或者未来13到24个月之内(16%)。最后剩下的这部分企业(23%)距离大数据项目的实施目标似乎还有很长的道路要走，他们往往还在纠结于寻找正确的执行策略或者解决方案。

从宏观前景角度看，大数据对于任何行业、任何规模的企业而言都具备极其重要的意义。在被问及企业为大数据规划制定的重要级别时，53%的受访者表示他们的项目处于关键性或者高优先级地位，另有34%的受访者表示属于中等优先级别。只有12%的受访者将其划入低优先级范畴。

下面我们概括归纳受访者们对于大数据的观点：

1.企业希望更好也更快地作出决策

为什么要选择大数据?因为它在帮助企业快速制定高质量决策方面扮演着关键性角色。在促使企业向大数据项目投入资金方面，有两点因素最为重要，它们分别是改进决策质量(受到59%受访者的认同)以及提高决策速度(受到53%受访者的认同)。

在大数据作用目标排名当中，紧随以上两点之后的是改进规划与预测(47%)、开发新产品/服务以及收来源(47%)、改进新客户吸纳/现有客户保留情况(44%)以及建立新的业务合作关系(34%)。

2.数据量达到PB级别?更多大型企业面临数据爆炸这一现实问题

企业在运营过程中积累下与客户及业务发展相关的庞大数据集。在全部受访者当中，当前正在管理的平均数据规模已经达到了164TB。在被问及预计从现在起未来12到18个月内所需管理的数据总量时，受访者给出的平均答案为289TB——增长幅度高达76%。

就目前来看，已经有6%的受访者在管理着数量超过1PB的庞大数据;而在接下来的十二到十八个月内，这部分受访者的比例将上升至14%。而在规模最大的企业当中(即年营收数额至少达到10亿美元)，有31%的受访者预计需要管理的数据量将超过1PB。

3.企业感受到数据超载所引发的后果

面对当前大量数据持续涌入的状况，企业也开始体会到由此带来的负面结果。举例来说：由于无法迅速找到所需信息而错失业务(31%的受访者表示此类情况偶尔发生、11%的受访者则表示经常发生);无法及时作出重要决策(39%的受访者表示此类情况偶尔发生、14%的受访者表示经常发生);用户反映数据量过大而不堪重负(46%的受访者表示偶尔发生、19%则表示经常发生);数据安全性方面也可能出现问题(46%的受访者表示偶尔发生、19%则表示经常发生)。

4.企业准备投资，而投资回报率目前也不再是主要障碍

调查发现，大数据推广所面临的最大挑战在于日益紧迫的预算。在受访者当中，投资数额存在着一定差别。在低端层面，19%的受访者表示将在未来一年中向大数据项目投入10万美元以下的资金。而在高端层面，有29%的受访者表示将在大数据领域投入100万美元以上(其中更有2%的受访者计划投入1亿美元甚至更高额度的资金)。

相关资金会花在与大数据相关的各个投入项目，其中包括：

●开发或者购买软件应用程序(38%);

●用于添加额外的服务器或者存储硬件/软件(37%);

●采用开源软件框架(例如ApacheHadoop)(30%);

●迁移到基于云环境的存储服务(28%);

●增加网络带宽(27%);

●迁移到基于云环境的分析服务(26%)。

然而，尽管预算成为最普遍的难题，但投资回报率方面所并没有带来什么压力。只有26%的受访者认为当前投资的主要阻碍在于很难证明大数据项目带来投资回报的能力。

5.企业面临人才短缺的困境

企业担心在内部环境中找不到有能力负责大数据相关事务的人才——譬如知识员工以及数据科学家——这就导致大数据计划很可能无法得到充分利用。在人员方面，34%的受访企业目前正在招聘拥有分析技能的人才、26%则选择将这部分工作外包给大数据专业服务供应商。

在被问及未来十二到十八个月内计划添加哪些技术人员组合时，数据科学家(27%)名列榜首，接下来依次为：数据架构师(24%)、数据分析师(24%)、数据可视化专家(23%)、业务分析师(21%)、研究分析师(21%)、分析主管或者经理(19%)以及数据库程序员(19%)。

6.数据安全成为关注重点，但并非最紧要的问题

根据此次调查，预算有限与人才稀缺并列成为大数据挑战当中最为紧迫的两大难题。此外，受访者们同样关注安全问题(35%)、开发时间(35%)、遗留问题——例如现有工具的整合(33%)、糟糕的数据质量(32%)以及数据实时整合或者分析难题(30%)。

在谈到安全话题时，接近一半的受访者(49%)表示他们的现有安全解决方案及产品足以保障大数据项目的安全。29%的受访者表示现有机制还不够可靠，而另外22%则表示对此无法确定。

7.哪个难题更令人头痛：业务整合还是文化接纳?

研究人员向受访者们询问了他们在将大数据规划融入企业业务流程及文化中时所遭遇的挑战。通过选择“极具挑战性”和“颇具挑战性”答案的受访者比例，我们发现文化整合(54%)以微弱的得票数优势压倒了业务流程整合(50%)，从而在这场并不光荣的比拼中胜出。

8.IT主导大数据规划，但成功与否却取决于跨职能合作关系

在受访者当中，大数据项目由IT部门主导已经成为普遍作法：46%的受访者表示企业中是由高级或者高层IT管理者来统领大数据规划，而44%的受访者表示由IT管理者负责大数据项目的运作。不过后者的答案也并非如此单纯：其中36%的受访者指出高层业务领导者同样会参与进来。另外，受访者们表示他们的大数据项目得到了CEO(47%)或者LOB级别的支持与赞助。IT与业务部门负责人都认为大数据项目在由双方共同拥有并实施时，解决特定业务挑战的效果最为出色。

9.大数据发展势头在多数企业中仍将持续

展望未来，接近一半(48%)的受访者认为未来三年大数据在使用率方面将普及到企业的每个角落，但另外26%的受访者则表示大数据最终的覆盖范畴只能达到一个或者多个业务单位、部门或者分支机构。只有5%的受访者预计大数据会在这股炒作风潮平息后被打入冷宫，而另外5%表示不能确定。其余的16%受访者认为大数据将继续作为实验性技术存在，但不会出现在主流产品当中。