概述
中国联通主要经营GSM、WCDMA和FDD-LTE制式移动网络业务,以及固定通信业务、中国国内及国际通信设施服务业务、卫星国际专线业务、数据通信业务、网络接入业务和各类电信增值业务等,在国内31个省(自治区、直辖市)和境外多个国家和地区设有分支机构,是中国唯一一家在纽约、香港、上海三地同时上市的电信运营企业,连续多年入选“世界500强企业”。
中国联通拥有覆盖全国、通达世界的通信网络,积极推进固定网络和移动网络的宽带化,为广大用户提供全方位、高品质的信息通信服务。中国联通拥有当今世界上技术最为成熟、应用最为广泛、产业链最为完善的WCDMA制式的3G牌照,拥有“沃3G/沃4G”、“沃派”、“沃家庭”等著名客户品牌。
Cloudera通过其企业级产品为中国联通提供全方位的平台支持,有效帮助其管理和监控大数据平台,提升效率,降低成本,并为其多个上层应用提供支持能力,为业务的高速增长保驾护航。
影响
通过部署Cloudera EDH企业版,中国联通实现了对企业中多个集群运行状况的有效监控和管理。同时,联通的运营团队能放心使用底层数据平台,部署丰富的业务应用,保障系统的平稳、顺畅运行。在Cloudera技术的支持下,目前中国联通构建了除BAT外,国内最大的Hadoop平台及一体化运营体系,其集中大数据建设所取得的成果走在了全世界电信运营商的前列,并领先于同业竞争对手两年。
在企业版产品的支持下,升级后的中国联通数据中心初步建成。其构建了Hadoop、MPP、Oracle的混搭数据平台,实现了M\B\O的跨域深度整合,其中包括对结构化、半结构化以及非结构化的数据支撑。数据来源包括了联通的O域,B域和M域,日处理4亿客户资料信息、5400亿条上网记录信息,以及140亿条计费详单等。
同时,中国联通对数据及服务逐步进行了整合,实现了数据中心对内对外统一进行数据服务及管理。这其中涉及到多达13000多个标准产品化服务指标、3000多个标签、18个用户维系模型并使用了实时场景化营销,以及6类金融征信产品。另外,通过端到端的透明化作业管控,数据建设、管理、维护、服务的工作边界得以梳理,其系统的数据重传基本消除,数据迟传逐步减少,数据质量大幅提升。
挑战
随着中国联通通信业务在国内外市场的快速发展,为了满足业务需求,例如针对海量数据的实时查询,联通现有的IT 平台架构已无法处理超过其PB 量级的数据,因此升级大数据平台迫在眉睫。
业务驱动因素
联通从2014 年开始部署了CDH 社区版,并基于此开发了世界杯大数据营销、365 流量辅导计划、维系中心存量经营支撑等多项应用,但由于社区版系统没有完整的Cloudera Manager 功能,因此缺乏足够的管理支持,系统无法有效地监控多个CDH 集群,导致运营团队无法了解集群的运行状态并得到实时告警。另外,由于平台无法再有效稳定地获得技术支持,导致系统故障之时无法快速解决并及时恢复,造成业务中断。
解决方案
2016 年开始,为了提升监管效率并保障底层数据平台的稳定性,确保团队可以基于大数据平台进行更多业务创新,中国联通引入了Cloudera EDH 企业级服务。Cloudera 企业级产品与联通现有IT 系统无缝集成,实现了完整全面的大数据平台监控管理能力,并提供企业级平台能力,包括原厂技术支持,无宕机升级,数据灾备等。
基于新的大数据平台,中国联通构建了360 度客户画像,洞察客户消费行为与需求偏好,开展以客户为中心的维系挽留计划,增强客户黏性,提升客户感知,并储备对外数据价值多元化、多样化的服务交付能力。同时,针对2/3G 用户转4G 开展系统化的上网辅导计划,建立线上辅导制度的常态化、规范化、品牌化。
而其IP 溯源项目则可以采集中国联通移动3 亿用户(日活跃9000 万)使用流量所产生的IP 地址数据,处理准确率在99% 以上。其HBase 数据查询支撑每日约1200 亿条记录,60 天共计72000 亿条记录的检索功能,而响应时间在60 秒内。在查询优化上,rowkey 设计保证查询效率,在存储优化上,value 采用压缩格式,能节省10% 的空间资源。
另外,为应对流量快速增长而其硅谷机房无法扩容的问题,联通将流量查询系统总部的数据存储子系统、数据查询和分析子系统迁移至亦庄机房大数据统一平台,以满足客服人员查询、最终客户查询、总部业务部门及省份针对流量数据的分析和挖掘需求。
升级后的企业级系统还同时支持更多的大数据金融应用。例如,联通与招商银行合作,在Hadoop 平台上建立数据特区,招商银行能自行在数据特区上建立业务模型,联通则可向招商银行提供部分号码的客户、产品、消费、使用、缴费、终端等脱敏后数据信息,实现数据共享,强强联合。联通还与银联征信项目合作,通过大数据平台完成底层数据采集、整合加工及封装,形成六类征信数据产品,同时提供用户身份信息、账户信息、满意度信息、通信信息、综合信用评分等数据以支撑用户信贷能力评估。
为什么选择Cloudera
中国联通选择Cloudera 的开源及Hadoop 平台,是因为该解决方案能完全满足其发展新业务的需求,并显著降低成本。作为Hadoop 技术的领导者,Cloudera 拥有足够的技术资源帮助联通及时解决Hadoop 平台遇到的各种问题,保障业务不间断。同时,Cloudera平台具备易用、安全、稳定、高效、可扩展的特点,帮助联通更好地应对业务挑战。
联通IT 团队负责人表示,“Cloudera 是我们首选的技术支持伙伴,他们领先的技术,专业的态度,以及快速的响应赢得了中国联通团队的认可。基于此,我们双方也正在探讨未来更多合作的可能性,如基于云平台的大数据能力等,为实现联通下一阶段云计算和大数据紧密结合的目标做准备。中国联通会继续与Cloudera 团队紧密携手,从宽度和深度上挖掘大数据分析的潜力,一起为中国电信行业的发展做出更大贡献。”
◆◆◆
请点击“阅读全文”获取源文件
(更多技术干货、行业动态,请关注【微站】,不定时更新)





