如何帮助中国移动驾驭实时大数据


中国移动驾驭实时大数据全国数据量峰值百万条/秒,每小时增量数据上千亿条……这样庞然大“数”面前,永洪科技帮中国移动构建一套信息安全分析系统,实现了对核心数据进行实时扫描,全量分析,实时拦截处理。

中国移动

China Mobile
全球网络规模、客户规模最大的移动通信运营商。2014 年,中国移动位居《财富》杂志“世界 500 强”排名第55位,并连续七年入选道·琼斯可持续发展指数。

项目背景

手机恶意软件日益泛滥,传统的安全防护手段能够在网络侧侦测和防范已发现的恶意软件,但对于未知的恶意软件,目前还缺乏高效的分析方法。

项目实施

1、建立信息安全分析系统,对移动运营商的核心网数据进行全量分析。
2、采集分析来自运营商移动核心网的关键日志数据,通过模式识别算法,帮助移动运营商从海量数据中分析发现恶意软件的蛛丝马迹。

客户收益

1、全网数据量的峰值为数百万条 / 秒,每小时增量数据上千亿条。
2、信息安全系统对这些庞大的数据进行实时的信息安全扫描,找出有问题的记录,并进行实时拦截处理。
3、所拦截的恶意软件数量比过去增加了好几倍, 大大提升了安全性。
4、研发人员负担减轻,可专注核心业务。

案例详情

揭秘中国经典的大数据项目

多大的数据算大数据?一百万?一亿?一百亿?这个问题谁也给不出一个确切答案,当然也不是单纯的量大就能被称为大数据。但是数据量越大,在分析和计算方面对技术的要求就越高,这一点是毋庸置疑的。中国移动这个项目,可以说是中国商业领域里数据规模最大的大数据项目之一了。

随着智能手机的普及,手机恶意软件日益泛滥。根据百度安全实验室的最新数据,2014年第三季度,安卓平台恶意软件和高危软件的总数已经突破了200万个,达到历史了新高。这些恶意软件会造成用户隐私泄露、信息丢失、设备损坏、话费损失等诸多问题,给客户利益带来极大危害,同时给电信运营商的网络运营带来了极大的不利影响。传统的安全防护手段能够在网络侧侦测和防范已发现的恶意软件,但对于未知的恶意软件,目前还缺乏高效的分析方法。

中国移动考虑,有必要建立一套信息安全分析系统。对核心网数据进行全量分析。不过,摆在中国移动面前的一个现实问题是:全网数据量的峰值为数百万条/秒,每小时增量数据上千亿条。即将建设的这套系统要对这些庞大的数据进行实时的信息安全扫描,找出有问题的记录,并进行实时拦截处理。

作为最重要的技术提供商,国内知名的一站式大数据分析平台服务商永洪科技参与承建了该系统。永洪科技利用自主研发的大数据平台。采集分析来自运营商移动核心网的关键日志数据,通过模式识别算法,帮助移动运营商从海量数据中分析发现恶意软件的蛛丝马迹。

永洪科技的技术原理是,通过在上百台服务器上搭建(多节点并行计算)大数据集市和敏捷BI系统,来支撑这一系统所需要的庞大的数据分析计算。从架构上分为:〔服务器集群由5个子集群组成,分别是:
1、前置机集群:用于接收全国各个省的日志数据。
2、流计算集群:用于扫描数据,将匹配的日志数据放入数据库。
3、数据库集群:用于累积匹配的数据并做评判,最终生成疑似数据,放入MPP集群,并上报总部。
4、 MPP集群:存储疑似数据,用于数据分析和挖掘。
5、管理集群:用于集群监控、配置管理、BI前端等。

客户评价

行业相关案例

零售行业案例-绝味食品

构建全面的数据分析体系,打造报表分析服务平台,以及不同层级不同角色的指标看板,实现数据的敏捷分析和灵活运用,帮助业务决策发挥数据价值......

查看详情

医疗行业案例-武汉大学中南医院

建立全业务数据应用体系,包括医院运营的方方面面,实现通过一个系统就能访问和了解全院数据。让员工对数据使用有满足感、喜悦感,喜欢上数据分析。......

查看详情

金融行业案例-合众财险

200多名员工都可以很快获取工作和经营数据,完善报表体系,应用覆盖车险业务、运营发展、战略企划、财务分析等领域,业务部门实现员工自服务制作报表。......

查看详情

永洪BI
更敏捷、更快速、更强大

申请试用
Copyright © 2012-2023开发者:北京永洪商智科技有限公司版本:V10.0
京ICP备12050607号-1京公网安备110110802011451号 隐私政策应用权限