intel英特尔大数据平台最佳实践46-文库吧
2025-03-01 10:57 本页面
【正文】 务流量产生及计费方式不了解，主观认为自己未使用或使用较少数据流量， 要求运营商提供上网记录 ，而现有系统不具备此功能，从而导致投诉 升级。 3G流量费争议占总咨询投诉量 比率 上网 记录 查询对中国联通的业务发展产生了较大的影响 影响 对 用户而言： “ …要是能查到流量是和谁发生的就好了，如果是手机的问题，我也才知道今后怎么防范，现在连防范谁都不知道，谁知道下次还会不会发生类似问题 ?‖ 对 运营 商而言： 根据中国联通客户服务部门提供 的数据，目前移动业务每万元收入，因无法提供上网详单造成的退费和赔付约 ； 如果问题得不到根本解决，将会 影响 运营商 按 流量计费的资费模式， 对运营商 3G业务的开展将产生较大 影响 用户上网记录数是个海量数据，不仅投资巨大，传统的电信业解决方案根本无法提供该服务 案例 某 iPhone合约计划用户，在凌晨零点到 4点之间手机产生巨额流量费 在 其得知因受计量设备限制无法向其提供数据流量去向后 ，竟上升到司法诉讼层面 联通 3G详单查询 问 题来源 （ 2/2） 移动用户上网记录集中查询与分析支撑系统 建设上网记录集中查询与分析支撑系统意义重大 查询 为客户 服务人员提供客户上网记录快速查询服务，解决流量投诉 问题 为用户提供准实时的异常大流量上网记录自助查询 服务 分析 对 数据流量进行 统计 终 端分析： iPhone、 iPad、其 他智能手 机 分 布，新终端推广效果分析 热门流量、热门网站（业务 ） 网络分析： 2G/3G基站流量分析，网络优化 数据挖掘 根据流量分布，分析用户群特征 提 供套餐设计参考，优化用户体验 通过感知业务态势，制定市场策略，指导业务产品 开发， 为市场营销提供丰富的数据 支持 移动互联网处于快速发展期：每 6个月，流量翻一番 移动互联网用户快速增加，智能终端迅速普及、户均流量显著增长，上网记录数据将进一步 猛增 难点分析 上网记录是海量数据 用户每月的上网记录约几万至 数 十万 在 Gn（ SGSN与 GGSN之间）接口上部署采集设备来生成用户上网记录 用户手机 访问一次网页，约会产生数十条，甚至数百条请求，意味着产生数十条和数百条上网记录 访问手机新浪网首页，约产生 20条记录 访问新浪 iPad首页，约产生 40条记录 在 iPad中看一条新浪新闻，产生超过 180条记录 访问淘宝触摸屏版，约产生 60条记录 大量的 DNS查询、推送服务记录（如苹果通知服务）等 以中国联通某省分公司为例，日均上网记录数近 10亿条，每月数据量近 9TB， 31个省份 数 据量 12T/day 难点分析 采用关系型数据库进行上网记录的存储已不可行 采用何种方式进行存储和检索是一个问题 存储： 如此大的数据量已经超越了当前关系型数据库可管理的容量上限 查询： 关系型数据库上对大规模数据进行操作会造成系统性能严重下 降 当数据集和索引变大时，传统关系型数据库如 Oracle、 Sybase，在对大规模数据进行操作会造成系统性能严重下降，因为在处理数据时 SQL请求会占用大量的 CPU周期，并且会导致大量的磁盘读写，性能会变得让人无法忍受 成 本 小型机＋高端存储 + 关系数据库 成 本导致扩展困难 移动用户上网记录集中查询与分析支撑系统 系统 构成 系统采用 全国集中的一级架构方案进行建设，主要包含数据采集子系统、数据入库子系统、数据存储子系统、数据查询与分析子系统 基本 技术 采用 Hadoop/HBase作为上网记录存储方案 采用 MapReduce/Hive作用统计分析和数据挖掘工具 关键性 能指标 解决 方案 数据 查询 上网 记录查询速度 ：不高于 1秒（不含用户访问查询页面的时间） 支持并发查询数目 ： 1000请求 /秒 数据 存储 上网记录入库时间：一般小于 30分钟，实际约 10分钟 具备存储 全国移动 用户 不 小于 6个月的原始上网记录能力 历史 5个月 +当前月 统计分析的中间报表数据保存不小于 5年 全国集中的一级架构，电信行业首次将 Hadoop/HBase引入到商用电信服务系统建设中 系统部署 19 D C N 网 络I P 承 载 网客 服 系 统A 省G G S NS G S NG n 口产 创 平 台采 集 系 统客 服 系 统B 省G G S NS G S NG n 口产 创 平 台采 集 系 统核 心 交 换 机 核 心 交 换 机负 载 均 衡 器负 载 均 衡 器防 火 墙防 火 墙D C N 网 络 接 入路 由 器核 心 交 换 机 核 心 交 换 机防 火 墙防 火 墙
高考资料相关推荐
鄂ICP备17016276号-1