C114通信网  |  通信人家园

资讯
2018/8/7 17:54

“蜂巢大数据”之能力建设与系统应用

移动Labs  邓胜

自2008年起,广东移动以珠海分公司作为大数据试点单位,开始从底层进行数据清洗、数据集成,结合DPI解析、爬虫抓取等技术进行数据分析与数据挖掘,研究出基于运营商信令数据的城市人口测算模型等系列标准模型与标签库,通过能力封装、平台建设为行业客户解决实际需求,打造出“蜂巢大数据”品牌系列产品。

邓胜:

2015年入职珠海分公司工作至今,通过国家工信部大数据中级工程师、美国PMP项目管理师认证,在其所负责的大数据能力建设和平台研发上,取得了显著的成绩。先后荣获工信部2017年电信大数据“司马奖”优秀成果奖、广东省2017-2018年度优秀共青团员、广东移动2018年省内技术类创新成果等多项团队、个人荣誉,发挥着重要先锋模范作用。

作为通信运营商,中国移动网络覆盖最全、信号最优,市场占有率最高(超70%),拥有着天然的市场规模优势和管道入口优势,涵盖身份、位置、行为、通信、消费、终端等丰富的数据资源,掌握着最大的数据金矿,具有显著的大数据优势。自2008年起,广东移动以珠海分公司作为大数据试点单位,开始从底层进行数据清洗、数据集成,结合DPI解析、爬虫抓取等技术进行数据分析与数据挖掘,研究出基于运营商信令数据的城市人口测算模型等系列标准模型与标签库,通过能力封装、平台建设为行业客户解决实际需求,打造出“蜂巢大数据”品牌系列产品。

下面以分别城市数据地图、蜂巢热力图系统、标签自助分析平台、基于场景的SAAS分析专题为例,对“蜂巢大数据”品牌系列产品应用情况进行详细介绍:

一、城市数据地图

城市数据地图是整合用户的位置数据、客户标签等数据源,从宏观角度给政府、企业、市民更清晰的展现城市常驻(≠常住)人口、通勤职住变化的大数据可视化平台。广东移动大数据应用创新中心通过网络基站小区定位的数据标准化生产模式、从原始通信信令数据码流到面向业务的宽表标准化处理流程,建立了以全省月常驻居民统计模型为代表的22类城市人口统计模型,为利用运营商大数据解决政府治理中的人口统计问题做出有益的探索。

以广东为例,全省共有1.49亿常驻居民,其中广州2590万人,深圳2309万人,珠海346万人。2018年6月共4314万人有到访过广东,迁徙人次达1.29亿人次,比2018年春节期间迁徙人次少近1/3。

二、蜂巢热图

“蜂巢热图” 是基于广东移动网络信令大数据,以圈定区域为单位,对外准实时提供该区域内客流人群变化情况的大数据平台。此系统具有覆盖用户群体大、投入成本低,可准实时计算(统计粒度5分钟,延迟15分钟)等特点,目前可通过标准化网页显示、OpenAPI接口、SFTP文件传输三种形式对外提供服务,满足政府单位对交通疏导,公共安全监控等不同层次的需求。

三、标签自助分析平台

标签自助分析平台是围绕用户通信库、位置库、终端库、APP库、搜索行为库等7大数据基础库,结合DPI解析、爬虫等,打造而成的面向行业客户提供标签定制服务的大数据可视化平台。目前该平台,支持自助定义分析口径或导入目标客群,短时间内可完成用户画像服务,高效解决人群圈选、运营决策、营销推广以及客群分析等分析需求。

基于标签的在线自助分析平台

基于自选客群的人群定位分析

四、基于场景的SAAS分析专题

在标签自助分析平台的基础上,将数据服务能力再升级,以行业场景化的需求将数据打包成在线的SAAS分析专题,从最初级的卖分析报告转化为卖解决方案 。目前该平台以上线面向终端洞察、人口、商圈等多个行业分析专题。

产品架构图

产品功能服务内容

平台安全管控:以上所有平台都严格遵循《中国移动大数据安全管控分类级实施指南》和《中国移动大数据安全风险防控工作指引》的要求,对涉及敏感表的访问进行金库审批,定时排查安全隐患,规避潜在风险。对底层数据采用数据模糊化、对称密钥、MD5等多种手段加强数据安全管控。强化数据访问权限制度,将大数据各节点服务器、接口机按信任程度分至不同安全区域,区域间通过防火墙进行隔离和双向访问控制。明确了大数据合作审批流程,建立完善的事前可管,事中可控,事后可查的安全管理制度。

数据安全管控策略

广东移动大数据应用创新中心将在《中国移动大数据安全管控分类级实施指南》和《中国移动大数据安全风险防控工作指引》的要求和指导下,进一步完善大数据基础能力,提高数据联动的平台展示能力,以满足“蜂巢大数据”系列产品的需求,更好地助力智慧广东建设。

给作者点赞
0 VS 0
写得不太好

  免责声明:本文仅代表作者个人观点,与C114通信网无关。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,请读者仅作参考,并请自行核实相关内容。

热门文章
    最新视频
    为您推荐

      C114简介 | 联系我们 | 网站地图 | 手机版

      Copyright©1999-2024 c114 All Rights Reserved | 沪ICP备12002291号

      C114 通信网 版权所有 举报电话:021-54451141