网易新闻客户端试水大数据技术与处理

大数据近几年非常火爆，其实从数据技术与处理的纵向流程来讲，在2005年时已经有一整套从数据的抽取、清洗，再到数据的建模，最终到数据的展现的完整理论。最近这几年为什么大数据又会比较火，因为整个流程里某一些环节又开始膨胀，比如数据的来源这个层面，原先我们很多是所谓的结构化的，公司内部的，现在有很多我们做移动互联网，移动化、社交化、碎片化，导致数据更多。

另外一个环节，数据的可视化，也越来越灵活，形式也越来越多。所以，基于这两点，大数据这个话题又热了起来。纵向来讲，这个流程相对比较清晰，我们可能需要更多关注的在某些环节里面的东西，然后做深入研究。

例如，网易新闻客户端，去年跟深圳中科院做了一个云系统分析，把2012年移动端的数据抽取出来做了一个分析，经过大量的数据分析，发现了一些用户行为习惯。根据数据分析前的预测，使用网易新闻客户端的人数应该是周末多一些，但经过数据发现，其实周四使用的人更多，跟贴的数量也更多。另外，从内部分享方面来看，根据道iOS跟安卓系统，预先分成两个版本，分析两个系统用户的差异，基于设置了很多关键词，如政治、主权、娱乐，通过数据的分析发现当涉及到跟爱国、主权相关的时候，安卓用户的关注度较高，而IOS系统的用户在各个关键词方面的反应都相对比较平均一点儿。