正文内容

intel英特尔大数据平台最佳实践46-文库吧

2024-03-15 10:57 本页面


【正文】 务流量产生及计费方式不了解,主观认为自己未使用或使用较少数据流量, 要求运营商提供上网记录 ,而现有系统不具备此功能,从而导致投诉 升级。 3G流量费争议占总咨询投诉量 比率 上网 记录 查询对中国联通的业务发展产生了较大的影响 影响  对 用户而言:  “ …要是能查到流量是和谁发生的就好了,如果是手机的问题,我也才知道今后怎么防范,现在连防范谁都不知道,谁知道下次还会不会发生类似问题 ?‖  对 运营 商而言:  根据中国联通客户服务部门提供 的数据,目前移动业务每万元收入,因无法提供上网详单造成的退费和赔付约 ;  如果问题得不到根本解决,将会 影响 运营商 按 流量计费的资费模式, 对运营商 3G业务的开展将产生较大 影响  用户上网记录数是个海量数据,不仅投资巨大,传统的电信业解决方案根本无法提供该服务 案例  某 iPhone合约计划用户,在凌晨零点到 4点之间手机产生巨额流量费  在 其得知因受计量设备限制无法向其提供数据流量去向后 ,竟上升到司法诉讼层面 联通 3G详单查询 问 题来源 ( 2/2) 移动用户上网记录集中查询与分析支撑系统 建设上网记录集中查询与分析支撑系统意义重大 查询  为客户 服务人员提供客户上网记录快速查询服务,解决流量投诉 问题  为用户提供准实时的异常大流量上网记录自助查询 服务 分析  对 数据流量进行 统计  终 端分析: iPhone、 iPad、其 他智能手 机 分 布,新终端推广效果分析  热门流量、热门网站(业务 )  网络分析: 2G/3G基站流量分析,网络优化  数据挖掘  根据流量分布,分析用户群特征  提 供套餐设计参考,优化用户体验  通过感知业务态势,制定市场策略,指导业务产品 开发, 为市场营销提供丰富的数据 支持 移动互联网处于快速发展期:每 6个月,流量翻一番  移动互联网用户快速增加,智能终端迅速普及、户均流量显著增长,上网记录数据将进一步 猛增 难点分析 上网记录是海量数据 用户每月的上网记录约几万至 数 十万  在 Gn( SGSN与 GGSN之间)接口上部署采集设备来生成用户上网记录  用户手机 访问一次网页,约会产生数十条,甚至数百条请求,意味着产生数十条和数百条上网记录  访问手机新浪网首页,约产生 20条记录  访问新浪 iPad首页,约产生 40条记录  在 iPad中看一条新浪新闻,产生超过 180条记录  访问淘宝触摸屏版,约产生 60条记录  大量的 DNS查询、推送服务记录(如苹果通知服务)等  以中国联通某省分公司为例,日均上网记录数近 10亿条,每月数据量近 9TB, 31个省份 数 据量 12T/day 难点分析 采用关系型数据库进行上网记录的存储已不可行 采用何种方式进行存储和检索是一个问题  存储: 如此大的数据量已经超越了当前关系型数据库可管理的容量上限  查询: 关系型数据库上对大规模数据进行操作会造成系统性能严重下 降  当数据集和索引变大时,传统关系型数据库如 Oracle、 Sybase,在对大规模数据进行操作会造成系统性能严重下降,因为在处理数据时 SQL请求会占用大量的 CPU周期,并且会导致大量的磁盘读写,性能会变得让人无法忍受  成 本  小型机+高端存储 + 关系数据库  成 本导致扩展困难 移动用户上网记录集中查询与分析支撑系统 系统 构成  系统采用 全国集中的一级架构方案进行建设,主要包含数据采集子系统、数据入库子系统、数据存储子系统、数据查询与分析子系统 基本 技术  采用 Hadoop/HBase作为上网记录存储方案  采用 MapReduce/Hive作用统计分析和数据挖掘工具 关键性 能指标 解决 方案 数据 查询  上网 记录查询速度 :不高于 1秒(不含用户访问查询页面的时间)  支持并发查询数目 : 1000请求 /秒 数据 存储  上网记录入库时间:一般小于 30分钟,实际约 10分钟  具备存储 全国移动 用户 不 小于 6个月的原始上网记录能力  历史 5个月 +当前月  统计分析的中间报表数据保存不小于 5年 全国集中的一级架构,电信行业首次将 Hadoop/HBase引入到商用电信服务系统建设中 系统部署 19 D C N 网 络I P 承 载 网客 服 系 统A 省G G S NS G S NG n 口产 创 平 台采 集 系 统客 服 系 统B 省G G S NS G S NG n 口产 创 平 台采 集 系 统核 心 交 换 机 核 心 交 换 机负 载 均 衡 器负 载 均 衡 器防 火 墙防 火 墙D C N 网 络 接 入路 由 器核 心 交 换 机 核 心 交 换 机防 火 墙防 火 墙
点击复制文档内容
高考资料相关推荐
文库吧 www.wenkub.com
备案图鄂ICP备17016276号-1