如何帮助中国移动驾驭实时大数据


中国移动驾驭实时大数据全国数据量峰值百万条/秒,每小时增量数据上千亿条……这样庞然大“数”面前,永洪科技帮中国移动构建一套信息安全分析系统,实现了对核心数据进行实时扫描,全量分析,实时拦截处理。

中国移动

China Mobile
全球网络规模、客户规模最大的移动通信运营商。2014 年,中国移动位居《财富》杂志“世界 500 强”排名第55位,并连续七年入选道·琼斯可持续发展指数。

项目背景

手机恶意软件日益泛滥,传统的安全防护手段能够在网络侧侦测和防范已发现的恶意软件,但对于未知的恶意软件,目前还缺乏高效的分析方法。

项目实施

1、建立信息安全分析系统,对移动运营商的核心网数据进行全量分析。
2、采集分析来自运营商移动核心网的关键日志数据,通过模式识别算法,帮助移动运营商从海量数据中分析发现恶意软件的蛛丝马迹。

客户收益

1、全网数据量的峰值为数百万条 / 秒,每小时增量数据上千亿条。
2、信息安全系统对这些庞大的数据进行实时的信息安全扫描,找出有问题的记录,并进行实时拦截处理。
3、所拦截的恶意软件数量比过去增加了好几倍, 大大提升了安全性。
4、研发人员负担减轻,可专注核心业务。

案例详情

揭秘中国经典的大数据项目

多大的数据算大数据?一百万?一亿?一百亿?这个问题谁也给不出一个确切答案,当然也不是单纯的量大就能被称为大数据。但是数据量越大,在分析和计算方面对技术的要求就越高,这一点是毋庸置疑的。中国移动这个项目,可以说是中国商业领域里数据规模最大的大数据项目之一了。

随着智能手机的普及,手机恶意软件日益泛滥。根据百度安全实验室的最新数据,2014年第三季度,安卓平台恶意软件和高危软件的总数已经突破了200万个,达到历史了新高。这些恶意软件会造成用户隐私泄露、信息丢失、设备损坏、话费损失等诸多问题,给客户利益带来极大危害,同时给电信运营商的网络运营带来了极大的不利影响。传统的安全防护手段能够在网络侧侦测和防范已发现的恶意软件,但对于未知的恶意软件,目前还缺乏高效的分析方法。

中国移动考虑,有必要建立一套信息安全分析系统。对核心网数据进行全量分析。不过,摆在中国移动面前的一个现实问题是:全网数据量的峰值为数百万条/秒,每小时增量数据上千亿条。即将建设的这套系统要对这些庞大的数据进行实时的信息安全扫描,找出有问题的记录,并进行实时拦截处理。

作为最重要的技术提供商,国内知名的一站式大数据分析平台服务商永洪科技参与承建了该系统。永洪科技利用自主研发的大数据平台。采集分析来自运营商移动核心网的关键日志数据,通过模式识别算法,帮助移动运营商从海量数据中分析发现恶意软件的蛛丝马迹。

永洪科技的技术原理是,通过在上百台服务器上搭建(多节点并行计算)大数据集市和敏捷BI系统,来支撑这一系统所需要的庞大的数据分析计算。从架构上分为:〔服务器集群由5个子集群组成,分别是:
1、前置机集群:用于接收全国各个省的日志数据。
2、流计算集群:用于扫描数据,将匹配的日志数据放入数据库。
3、数据库集群:用于累积匹配的数据并做评判,最终生成疑似数据,放入MPP集群,并上报总部。
4、 MPP集群:存储疑似数据,用于数据分析和挖掘。
5、管理集群:用于集群监控、配置管理、BI前端等。

客户评价

行业相关案例

医疗行业案例-知名三甲医院大数据平台项目

通过对医院全量数据进行分析做出科学决策、提高业务人员数据分析效率、解放IT人员手工操作等使客户获得巨大的收益......

查看详情

广电行业案例-四达时代bi工具项目

Yonghong Z-Suite是一个高效易用的数据分析平台。通过分析数据,找出潜在风险,避免安全漏洞;在秒级速度内汇总并分析收视......

查看详情

零售行业案例-家乐福可视化平台项目

在与永洪合作后,永洪对供应链优化的整体方案设计,数据治理、数仓的建设、数据分析、可视化应用展现及实施服务都对家乐福有很大帮助......

查看详情

永洪BI
更敏捷、更快速、更强大

申请试用
Copyright © 2012-2020 北京永洪商智科技有限公司
京ICP备12050607号 京公网安备110110802011451号