数据业务分析系统在四川移动的应用

【IT168 信息化】　　项目背景　　2005年，采用了Sybase IQ的四川移动“数据业务分析系统”（Data Analyze System）（简称为DAS）投入运行。在之后的三年时间里，该系统进行了4次扩容，由此，DAS的功能也癫痫病吃什么药从很开始的短信、彩信等常规业务的简单分析，相应增加到现在集各类数据业务发展状况分析、用户价值评估、业务稽核、营销支撑等等多方面，成为一个完整流程的分析、支撑系统。随着DAS的数据不断增长，给客户获取、查询、管理、研究、备份和恢复数据带来的新的课题。为解决这个问题，Sybase提供了Non-Stop IQ解决方案，全面保证了DAS系统的安全运行。　　应用需求　　四川移动的业务流程和服务过程需要真正体现以客户的价值取向和消费心理为导向，为客户提供及时准确高质量服务，同时还要保证企业的盈利增长。DAS系统的建立就是要通过对全面的数据业务分析、客户行为分析、企业已有的关键数据及其变化趋势分析，为企业描述客户的价值取向、消费心理以及企业可能的盈利增长模式，为企业决策层能定制更好的营销策略提供临沧市看癫痫病什么医院好确实可靠的依据与保障。　　同时为了保证DAS系统的正常运行，数据的安全尤为重要。如何进行数据的快速备份和恢复，也是大数据量的DAS分析系统甚为关注的问题。　　解决方案　　 Sybase IQ　　 Sybase Non-Stop IQ解决方案　　使用Sybase IQ 建立DAS系统　　为应对上述需求，从2005年起，四川移动开始采用Sybase及其合作伙伴提供的解决方案部署其数据业务分析系统。以前，用户的数据业务消费（使用）行为数据分别存放在各自的业务系统中，如MISC、彩铃、彩信等业务系统，无法达到对用户的整体行为分析。本次建立的 DAS系统将支持四川移动的全部数据业务包括短信、WAP、移动梦网、彩铃、彩信等，主要实现以下功能：营销活动流程支持，营销响应分析，交叉销售分析，用户价值评估，业务稽核，异动告警等等。下图描述了该系统的业务架构及软件分层模型。▲　　图一：系统业务架构▲　　图二：软件分层模型　　作为DAS系统的核心产品，分析型数据仓库引擎Sybase IQ为企业级数据存储、数据及时加载和信息快速灵活展现提供了有力保证，凭借其高效的数据压缩能力、专利的查询优化技术以及良好的开发性、安全性、易管理性、可扩展性，满足了四川移动获取、保留、查询、管理、研究大量快速增长数据的需求，为全面的数据业务分析提供了强大的核心引擎。　　使用Non-Stop IQ建立DAS系统的容灾备份　　随着分析、支撑功能的增强，以及时间的推移，2008年初，四川移动DAS的数据库已达到5TB。为了解决TB级数据量的快速备份和恢复，SYBASE 和众多存储厂商、数据安全软件厂商一起，采用当前先进的存储软件技术和硬件技术，结合IQ的虚拟备份技术，架构了NonStop IQ备份和容灾解决方案。为用户提供了快速、可靠和低成本的备份和容灾解决方案。　　下图为Non-Stop IQ解决方案的架构图：▲　　图三：Non-Stop IQ解决方案架构图　　当前系统配置如下：　　硬件： Sun Fire 4900 (8*2 CPU,32G内存)　　数据库：Sybase IQ 12.7　　存储：EMC DMX_1000（源、目的）　　应用软件：Symantec Storage Foundation 5.0 企业版　　该解决方案采用的是基于软件卷管理和复制的方法（Symantec Storage Foundation），再结合IQ的虚拟备份技术，实现了TB级数据的快速备份。其主要技术要点包括：　　IQ 对于原始数据的高压缩率，大大减少存储容量；　　利用存储厂商的全备和增量备份技术，和IQ虚拟备份技术结合，提供完全基于硬盘的备份方案；　　可以采用ATA硬盘技术，由于这种高密度的磁盘技术可以很好地与Sybase IQ典河北治癫痫病医院排行型的大数据量的线性I/O特性匹配，因此可以提供和FibreChannel同样的性能；　　采用基于卷管理软件的解决方案可以实现跨平台的异构的存储的管理；即生产中心的存储硬件与容灾中心的存储硬件可以异构，同时也消除了距离上的限制，而且利用现有的Fibre Channel，或通过TCP/IP网络癫痫病医院就可以实现数据的复制；　　可以实现多种的快照的功能（全快照与空间优化的快照）。　　实施效果　　目前，四川移动 DAS系统完整解决了移动用户全数据业务的消费（使用）行为数据的集中存储，使得用户只需要连接DAS系统，就可以直接了解客户的使用行为和消费能力。有助于四川移动对客户进行定位，做到精细化营销，这是以前独立的分析系统所不能达到的。同时，除了已有的分析功能外，DAS还向多个专项分析系统提供数据，并不断根据新的要求，从一些新的系统中把相关的数据补充进入DAS系统。　　自DAS系统实施以来，不仅使四川移动的营销活动目标更准确，减少了宣传费用，提高了宣传效率，同时，因为更准确的用户定位，也减少了客服收到投诉的压力，大大提高了四川移动数据业务的总体收入以及服务质量。　　而Non-Stop IQ解决方案更全面保证了系统的安全运行，对于DAS系统 5TB 数据的实际备份，总共耗时不到20分钟（此前需要16个小时）。　　我们相信Sybase IQ所提供的卓越性能与可扩展性以及Non-Stop IQ解决方案所提供的快速备份及恢复功能必将会满足四川移动DAS系统不断的发展。