中国大数据人才在实践中成长

2006年，刚从高校毕业的陈飙加入英特尔公司，在软件事业部从事平台软件的研发和调优工作。在随后几年的工作中，陈飙参与了处理套件、编译器、SSO单点登录在内多个软件产品的研发工作，并在日常的工作中成长成为一组开发团队的负责人。

如果没有2010年前后开始掀起的大数据浪潮，陈飙日后的职业生涯可能会继续沿着各种工具型软件的团队研发道路走下去，并成为一名出色的研发项目经理和技术领域的“大牛”。但大数据产业发展的迅猛节奏，以及包含英特尔在内的，业内主要企业级IT厂商对这一产业的重视和投入改变了陈飙随后的职业发展道路。

对高质量编程的兴趣，是陈飙选择将大数据平台作为未来自身个人职业发展方向的一个最为主要的原因。“无论是在科学理论研究，还是在产品开发层面，大数据的热门和快速的技术更迭都能满足我个人对新技术兴趣爱好的需求。”陈飙说，“此外从职业发展层面，大数据也能带来更多机会。我看过一个报道，显示大数据相关的职位在IT技术领域包揽了高薪排行榜的前三名，这也是整个市场对大数据产业热度，以及大数据产业人才相对匮乏的一个反映，我相信在未来几年，能满足这个产业发展需要的人才将会得到更多、更好的发展空间。”

在那个时间，陈飙的团队正好负责的是一套服务器中间件软件中数据集成产品的开发。而在开发过程与客户的过程中，陈飙发现无论是客户自己还是合作伙伴，对Hadoop这样的海量数据处理平台产生极大的兴趣和需求，同时也希望有主流的IT厂商承担起为自己提供大数据平台的职责。

在这样的条件下，陈飙的团队由于拥有对客户需求和数据集成技术的理解和直接经验，成为了英特尔转型大数据产业过程中的先驱部队。而面向行业用户提供大数据解决方案的顾问，并提供大数据领域的推广和支持，是陈飙所在的部门目前最为主要的工作。在过去的1年中，陈飙的团队负责的大数据相关项目数量超过30个，这种火爆的局面也是在转型的起步阶段他们根本没有想到过的。

而在新的环境之下，转型成为项目经理的陈飙在工作内容上也相比以前发生了巨大的变化。目前，他每天的日常工作主要分为三类，一是针对产品和方案提供咨询服务，为客户提供专业的大数据方案，针对客户需求提供工具和二次功能开发，从而推动大数据软件产业化。而随着成功案例的不断增加和成熟，开发相关的工作只占到他日常工作量的20%以内。

而另外两类占据陈飙80%以上精力的工作，则主要针对合作伙伴生态圈的能力培养，一是面向合作伙伴的技术服务，通过协助部署、开发指导和故障排除等工作，帮助合作伙伴提升大数据落地的能力。而另外一类则是对合作伙伴的服务，即作为大数据讲师和顾问、培训，推动大数据技术在国内的普及。“我们之前的团队更多在大数据方面建立标杆应用和方案，未来的工作集中在会和传统伙伴一起建立生态平台，共同对生态系统做出自己的贡献。”他说。

就像陈飙的日常工作发生的转变那样，对大部分转型大数据产业的IT技术人员而言，面向大数据领域的转型包括专业领域和工作内容两个方面的转变。而向大数据领域的转型，确实会给传统的IT人才带来大量的挑战。

从工作性质上，平台级别的开发和整合取代了以前单纯的模块开发工作。在传统IT开发的工作流程中，软件工程师只需要对相对比较窄的技术层面吃得足够透彻，就能很好地实现产品的内部功能，从而完成目标。

而相比之下，大数据领域需要学的东西更多更杂，以NoSQL非关系型数据库为例，在谷歌上每个月访问量超过4万次的NoSQL产品数量超过150个，而这些常用的产品都有各自的特点和实用场景，加上技术还在不断更新，与传统信息化需要掌握的技能相比，难度增加了许多。

此外，在大数据相关产业中，研发的工作更接近应用的落地，需要实现整个项目的整体交付和实施的落地，在代码编写之外还要有更多亲和合作伙伴和用户的工作，而同时也能带给技术人员更大的成就感。

在伴随英特尔大数据业务成长的过程中，陈飙也不放过一切提升自己大数据专业技能，从而成为“全才”的机会。除了通过互联网寻找文档和课程，在线的开源社区参加活动和学习邮件组研读其他人的经验之外，陈飙还通过不同的途径，来尽一切可能地提升自己的大数据相关技能。

“公司对我们来说就像一个大的图书馆，可以学到很多东西。”陈飙介绍，在英特尔公司内部有许多在数据挖掘领域专长的科学家，而英特尔针对大数据提供了多项在线课程，对于提升专业领域的技能尤其有帮助，通过企业内部学习，可以最大限度地提升对整个大数据产业发展的洞察。除此以外，陈飙的开发团队内部和不同的开发团队之间，都会开展不定期的经验共享工作，除了专业知识之外，也对不同的项目中，遇到的技术性和非技术性问题进行共同探讨。

而在工作之余，陈飙也会通过同行、客户开展交流的方式，获取业界发展的最新动向。在他看来，对技术的认识只是在大数据领域有所专长的基础，而在大数据这样不同类型的客户应用差异性巨大的项目中，实践的重要性远超过传统IT架构的需求。即便是对于技术团队，只有通过更多的测试实践和原型开发，才能对大数据技术框架有更为深层次的理解。

电信行业的大数据应用开发和推广是陈飙的团队最为主要的目标市场。他介绍，在某个省级移动项目中，他的团队通过在100多台服务器上部署英特尔发行版本的Hadoop解决方案，wie用户提供了成熟的清帐系统和网上单据查询系统。作为英特尔在电信行业的第一个大数据平台，这一项目在后来更多的省级电信运营商项目中，起到了巨大的标杆借鉴作用。

“看到自己开发的东西完成整个项目周期，从设计到投入使用产生价值，最终为行业认可，这种成就感和单纯的软件开发是完全不一样的。”陈飙说。