基于hadoop的缴费行为和网点布局优化数据挖掘应用研究

《基于hadoop的缴费行为和网点布局优化数据挖掘应用研究》由会员上传分享，免费在线阅读，更多相关内容在工程资料-天天文库。

1、基于Hadoop的缴费行为和网点布局优化数据挖掘应用研究沈佳李凯邹岳琳郭江涛刘昆国网新疆电力有限公司信息通信公司摘要：近年來，随着电力行业缴费平台的建设，实现了多种平台的缴费接入，方便了广大用户的用电缴费，为了进一步提高电力优质服务水平，采用了基于Hadoop的大数据分析挖掘技术，对现有营销类系统的数据做了统一整合分析，结合用户分布密集程度、用户缴费行为习惯、周边营业网点分布等关联信息，为缴费网点新增及现有布局优化提供有力的数据支撑，提高了决策水平和优质服务水平。本文首先介绍了缴费行为和网点布局优化大数据分析应用主要功能及技术路线选型，随后就后续使

2、用过程中取得的成效进行了总结，最后对缴费大数据分析挖掘的意义和前景做了展望。关键词：缴费;网点布局;大数据；作者简介：沈佳，国网新疆电力有限公司信息通信公司。作者简介：李凯，国网新疆电力有限公司信息通信公司。作者简介：邹岳琳，国网新疆电力有限公司信息通信公司。作者简介：郭江涛，国网新疆电力有限公司信息通信公司。作者简介：刘昆，国网新疆电力有限公司信息通信公司。近年來，随着电力行业缴费平台的建设，实现了金融渠道（各银行）、非金融渠道、电力POS终端、电力自助缴费终端、95598互动网站、手机等渠道的缴费接入，这些缴费渠道的接入运行大大方便了广大用户的

3、用电缴费行为，也为深化缴费渠道建设提供了良好的基础和契机。为了在缴费渠道建设中避免经验主义的主观臆断，更好的贴合实际情况，科学的指导新增和优化缴费网点建设，在实际操作屮充分应用大数据分析技术，考虑用户分布密集程度、用户缴费行为习惯、周边营业网点分布情况等因素，提高决策水平和优质服务水平。1缴费行为和网点布局优化分析主要功能及技术路线缴费行为和网点布局优化分析主要实现了以下几方面功能：一是网点展示，结合收费网点及终端的地理位置信息，在地图上对网点及终端的分布情况进行展示。可采用分层、按区域等查看方式，按照类别、范围对各类收费网点即终端的分布情况进行筛

4、选、查看。二是网点（终端）分布分析，依托缴费渠道的基础信息及地理位置信息，与客户缴费记录进行关联，以半径示意的方式进行网点及终端的覆盖能力展示，覆盖能力可通过客户缴费密度参数进行控制，以获得实际有效的覆盖范围。根据网点类型及地市、县、乡三类区域进行网点分布分析，分析结果可为10分钟缴费圈建设提供依据。三是客户缴费渠道偏好分析，依托缴费渠道的基础信息及地理位置信息，与客户缴费记录进行关联，按照客户类型、客户缴费频率、渠道类型、渠道渗透率等,进行缴费行为偏好的综合分析，识别出当前客户最偏好、实际利用率最高的缴费渠道，进而对出渠道建设的投资方向提供依据。

5、四是缴费渠道成本效益分析，基于缴费渠道运营投入的成本，如:场地、设备、人员工资绩效等信息，结合电费回收额、电费回收效率等客户交费信息，进行缴费渠道的成本效益综合分析，从而对缴费渠道的运营成本及效益进行量化展示。为了更好的为电力用户提供优质服务，提高决策水平，在分析应用技术路线选型上，确定了以Hadoop为基础，广泛使用开源组件的大数据分析路线。1）海量数据采集和清洗。满足缴费网点用户档案、用户坐标、用户缴费等数据分析，大数据系统采用Hadoop作为底层架构，构建Hive数据仓库，通过Sqoop实现跨数据的数据传递。2）分布式海量数据存储技术。分布式

6、存储（HDFS）解决了缴费网点缴费数据10G/年以上的基础数据存储问题，容错性较好，能提供高吞吐量的数据访问，对部署环境要求较低。以往10GB、甚至TB以上的历年缴费、缴费数据与网点交叉连接运算在关系型数据库中无法实现，在HDFS支持下海量数据延时数据分析具备可能性，可以支持历年数据分析，汇总，并从中找到支撑运营管理的分析结论。3）海量数据分析技术。网点规划中，需要结合可视区域缴费网点、缴费网点历年缴费数据、缴费网点GIS数据、缴费网点客户档案数据、G1S距离运算进行即时数据运算与输岀。技术选型选型采用Spark,支持交互式内存运算，比Hadoop

7、运算快100倍以上。4）高可用集群自动管控技术。缴费网点大数据需要每天自动采集增量数据，并提供延时和即时数据统计分析服务，为确保集群稳定性，在用Zookeeper集群管理技术，监控系统运行，并提供Master-Slave自动枚举和分配技术，确保平台高可用。2应用成效分析缴费行为和网点优化大数据分析场景在实际工作中取得了较好的应用效果。一是通过对数据的综合利用，由表及里、由点及面，紧密结合实际，排除了主观臆断，“人、财、物”兼顾，为管理者的决策提供可靠有力的根据，缩短了决策周期，节省了投资成本，提高了决策的科学性和及吋性。二是有效减少了服务盲区，优化

8、了缴费网点的设置。结合了渠道信息、区域信息、网点建设及服务能力信息、用户信息、用户缴费习惯信息等进行综合分析，提高了对未有