电力营销系统监控管理解决方案SAMP蓝宝石应用监控平台.doc

SAMP蓝宝石应用监控平台 Sapphire Application Monitor Platform电力营销系统监控管理解决方案 V1.0广州蓝科科技股份有限公司背 景信息技术作为企业整合资源、加强管理和提升企业综合竞争力的利器，正日益受到企业前所未有的重视，并逐步渗透到企业整个价值链。电网企业也不例外，电力营销信息化从上世纪90年代的单机单项应用开始起步，到今天的网络化全业务应用，电力营销信息化步伐正呈加速和纵深发展趋势。在国家电网公司，SG186新一代电力营销技术支持系统正在其下辖的26个省级电网公司全面铺开实施，在南方电网公司，基于全省统一的电力营销信息管理系统也在如火如荼地进行。与传统电力营销系统相比，新一代电力营销系统呈现诸多显著特点：首先，“以客户为中心”的服务理念在系统中得到充分体现，支持客户“随时随地”的服务请求；其次，电力营销数据和应用日趋向上集中，目前向省集中已成为主流建设模式；再次，系统业务功能日趋全面和一体化，电力营销业务对IT系统的依赖程度正达到前所未有的高度；最后，系统的IT架构日趋复杂，有别于传统的局域网应用，现今的电力营销系统采用的是多层技术架构，其组成除了包括复杂的网络、存储、负载均衡和机房等IT基础设施外，通常还包括数据库、中间件、WEB、系统备份和外部接口等各种服务器，以及基于其上的各种业务应用系统。这一切给新一代电力营销系统运维带来诸多新的挑战：² 系统容纳的用电客户和使用终端数目呈现爆发性增长，例如一个省级集中电力营销系统通常有数千万用电客户和上万个使用终端；² 系统要求7*24小时持续不间断地支持客服中心、银电收费和其他自助业务的运作，以满足客户任意时间服务请求；² 系统用户访问模式正变得越来越不确定，如用户可通过网上营业厅、呼叫中心、自助终端、银电联网系统等多种渠道办理缴费和其他业务；² 系统受到安全攻击的可能性越来越大，安全管理工作正变得越来越复杂。总之，新一代电力营销系统面临的是一个全新的复杂的IT环境，在可用性、性能和安全管理等方面都给系统运维带来许多新的困难和挑战，怎样通过采用先进的技术和管理手段应对目前的困境，确保在复杂IT环境下电力营销业务持续高可用性，是摆在目前电网企业面前亟需考虑的紧迫问题。监控现状与困惑随着电力营销业务对电力营销系统的依赖程度与日俱增，以及伴随电力营销数据和应用的集中化趋势，系统风险也在急剧聚集，系统在可用性、性能和安全方面管理正承担前所未有的压力，如何对电力营销系统实行有效的监控管理，确保电力营销业务持续高可用性，正日益受到各供电企业空前的关注和重视。在传统的人工运维无法胜任的情况下，供电企业纷纷上马各种IT运维系统，从最初的单纯网络管理，到机房管理、主机管理和应用管理，以及目前的业务服务管理，试图以技术手段和管理手段来解决系统运维中存在的困难，经过多年的摸索和实践，已取得相当的成效，但同时又面临到许多新的困惑，具体表现在以下几个方面：² 由于缺乏基于业务视角的监控视图，在监控管理方面业务部门与IT运维部门经常沟通不畅，造成IT与业务脱节，在故障发生时无法确定业务影响范围和故障恢复优先次序，导致系统运维人员工作目标性不强，总是处于被动应战状态；² 由于业务应用系统本身的特殊性和缺乏必要的监控标准和规范，几乎所有监控产品都是只针对业务应用系统所依赖的IT资源层面进行监控，很少有能真正对电力营销业务应用系统本身进行直接监控的产品，这已经成为目前电力营销系统监控管理中的一个盲点和死角；² 由于设计上的缺陷，许多主流的监控产品并不能很好地解决目前电力营销应用监控中碰到的一些难题，例如由于电力营销业务具有很强的周期性，在一个电费周期中对资源的监控，通常需要对不同的时段（如月初、月中和月末）设置不同的预警和告警阀值，即所谓的浮动阀值。又如对备份任务的监测，除了需要检查备份内容是否完整外，还要实时监测备份任务是否在预定时间内正常开始和结束，这通常需要监控系统支持复杂阀值设置和上下文关联分析才能实现，而一般监控产品通常只支持一些简单阀值设置；² 在监控产品选择上，要么是功能太过单一，如单纯的网络管理产品，已经很难满足现有电力营销系统监控需要；要么就是功能虽然强大，但价格昂贵，并且将IT监控人为割裂为网络管理、应用管理、性能管理和安全管理等各种独立的产品打包出售，然后通过后期的集成来实现所谓的“一体化监控”。这种基于后期整合的做法由于忽视了IT系统作为一个整体存在为企业业务服务的事实，忽视了IT系统各元素之间存在的天然联系，在监控效果上自然是大打折扣。蓝科监控解决方案针对电力营销系统当前监控管理现状和困惑，广州蓝科科技股份有限公司借助其十多年电力营销系统开发实施和运维经验，经过数年精心打造，适时推出了电力营销系统全面一体化的监控管理解决方案，以下是本解决方案关键特性介绍：n 从业务视角出发，高效主动地管理电力营销系统IT是为企业业务服务的，保持企业业务持续高可用性是IT运维部门的首要目的。传统的以资源监控为主的监控产品，无法建立企业业务与IT资源之间的映射关系，实行的是一种单点监控和分散监控管理方式，不能直观整体地反映企业业务的健康状况，常导致“四处救火”被动应战的工作局面。蓝科电力营销监控管理解决方案，强调从业务视角出发，提供业务视图展现和业务服务水平管理（SLA），使电力营销业务与其所依赖的IT资源和使用用户关联起来。通过业务视图（图1），系统提供一种整体浏览电力营销业务健康状况的方式，并能使运维人员更直观地了解业务系统发生故障时的影响范围和依据监控对象之间的业务依赖关系快速定位故障节点。通过业务服务水平管理，使IT运维部门有了明确的工作目标和动力，帮助运维人员确定工作优先次序，增强业务部门和IT部门沟通，改变长期被动运维工作的局面。图表 1电力营销业务视图n 基于统一监控对象模型，实现电力营销系统全面一体化监控所谓全面监控，是指将企业业务所依赖的IT资源包括网络、服务器、数据库、中间件、机房和业务系统统一作为监控对象纳入管理。所谓一体化监控，是指监控内容必须覆盖IT系统在可用性、性能、安全、资源和其他异常事件方面监控管理需求。有别于其他大厂商通过多个功能模块后期集成来实现一体化监控的模式，我们依据IT系统是作为一个整体为企业业务服务的事实，通过建立统一监控对象模型，在监控对象粒度一级就集成了可用性、性能、资源、安全和其他异常事件的管理，应该是目前最高效最接近本质的一体化监控解决方案。图2是电力营销系统全面一体化监控管理模型，从纵向(监控对象)包含电力营销业务所依赖的所有IT资源，横向（监控指标）则覆盖了每个监控对象可用、性能、安全、资源和异常等多方面得监控管理需求。网络设施机房环境应用系统中间件数据库服务器可用性能资源异常安全监控对象监控指标图表 2电力营销系统全面一体化监控管理模型n 专有的现场探针技术，完美解决电力营销系统监控的盲点和死角由于应用系统本身缺乏统一的成型的监控标准和方法，导致在开发过程中，开发商多只考虑自己业务逻辑的实现，很少考虑自身软件的监控能力，因此绝大部分监控产品都只实现对通用资源的监控，缺乏对应用系统本身直接的监控，这也是目前电力营销系统监控管理中存在的最大盲点和死角。而根据我们的经验，在日常运维过程中，相当多的电力营销业务可用性问题并不是由于IT资源层面的故障引起的，而是由应用系统本身缺陷导致的，因此如果缺少对应用系统本身的监控，监控的效果自然也就大打折扣。广州蓝科公司通过采用专有的现场探针技术，成功绕开了目前电力营销系统本身缺乏监控能力的难题，使电力营销系统监控不留死角和盲点。具体做法是根据实际情况在用户不同的使用场景下部署现场探针，然后通过执行预设的脚本或基于协议分析的方法，来监测电力营销业务操作的可用性和响应时间。现场探针技术的采用，保证了监控结果更接近用户体验，如图3所示，对电力营销收费业务的监控结果能反映用户不同使用场景使用效果，更能满足日常监控管理需要。图表 3现场探针技术在电力营销系统监控中的应用示意图n 独具特色的两层分析处理机制，解决应用监控中的诸多难题让我们先来看看一个具体的电力营销数据备份监控需求：某大型应用系统数据库系统为Sybase，每天晚上12点开始进行1级备份，即把Sybase中的5个数据库master，dlyxgis，dlyx_cx，dlyx，bakdata备份到服务器的本地磁盘中；第二天中午开始进行二级备份，即把一级备份的磁盘文件用legato备份软件备份到磁带库。现在要求监测一级备份是否在每天晚上12点左右（一个时间范围）如期启动，5个数据库是否都正确完成备份，并且整个一级备份工作是否在第二天早上8点前完成（因为上班时候进行一级备份会对白天业务处理性能产生较大影响），二级备份是否在3个小时之内正常完成。经过仔细分析，备份任务监测需求是复杂的多条件、多事件、时间相关和顺序相关的，其中一级备份和二级备份还是跨资源相关的。下面让我们看看怎么运用二层分析处理机制来解决电力营销数据备份监控需求的，如4所示，系统第一层分析处理（图4中第环节）是基于指标粒度级的，它通过对持续采集回来的一级和二级备份日志进行上下文关联分析，输出一级备份和二级备份监控结果（事件）。第2层分析（图4中第环节）是告警事件分析处理层，通过对监控事件进行过滤、压缩和关联分析处理，输出有效告警事件，避免告警风暴和误报，如在一级备份没有正常启动或备份不成功，二级备份告警是需要屏蔽的。目前市面上监控产品大致可分为两类，一类是根本不具有分析能力，仅支持简单阀值判断和告警功能，无法很好地满足象电力营销数据备份这样复杂的监控需求。另一类是具有事件相关分析能力的监控产品，但由于是把所有监控事件都统一集中处理，增加了处理的复杂性。而两层分析处理机制，由于在采集到告警之间增加了一层分析功能，负责对同一监控资源事件进行上下文关联分析和处理，更能有效地解决应用监控中的各种难题。图表 4 电力营销系统全闭环监控管理示意图n 有针对性监控指标体系设计，提供强大的故障预警能力一个好的监控产品，其价值不在于故障发生后如何告警，而是在故障发生前如何能及时预警，使IT运维工作真正做到“防患于未然”。一个监控产品的故障预警能力强弱，除了依赖其纳入监控的对象是否全面外，监控指标体系设计也是重要因素之一。广州蓝科专门针对电力营销系统实际监控需求，除了具备一般监控产品所有通用指标之外，还增加了许多极具针对性的指标。如通过对主机集群状态监测，可在生产机和备用机切换时发出预警信息，提醒运维人员查找和消除故障隐患，以避免下次真正单点故障发生；又如对数据库备份进程监测，在早上上班前预定时间内如果发现备份进程还在运行，则发出预警信息通知系统管理员提前处理，以避免在工作时间内进行系统备份影响业务响应速度。图表 5电力营销系统监控指标体系n 集中监控与分布式部署能力，以适应营销系统建设日趋集中趋势电力企业集中化和扁平化管理要求，使电力营销系统建设也呈现日趋集中趋势，省集中已是目前的主流应用模式。在省集中模式下，基于各种业务或技术的原因，一般还会有部分应用系统继续保留在地市公司，如95598呼叫中心、与地方商业银行的银电联网系统、电能量采集系统等。蓝科SAMP监控平台由于具有集中监控和分布式部署能力，能很好支持这种应用场景，如图5所示，只需通过在地市部署一个监控调度服务器（MS），负责本地应用系统监控数据的采集和上报，而不再需要在各地市单独部署监控系统，这样为客户也节省了不少投资。图表 6 SAMP部署图n 精心设计的系统功能，真正实现营销系统全面闭环监控管理SAMP系统根据电力营销系统从监测、分析、告警到控制的闭环管理需求，精心设计各个环节系统功能，功能菜单组织如图6所示。具体功能特点描述如下：² 监控部署l 提供向导式的人工部署界面l 自动发现功能，提高监控对象部署效率l 监控对象导入/导出，支持系统快速恢复和批量创建l 监测代理远程集中部署，使系统部署变轻松l 监控调度（MS）服务器和CCE服务器配置功能，使系统能轻松应对监控规模变化，真正做到“随需而变”² 监控管理l 业务、管理和设备多种视图展现，使系统支持分业务、分权限和分设备管理需求l 拓扑视图，支持各种物理和逻辑的拓扑绘制，并通过与监控对象的关联，可实时了解拓扑图中各种监控对象的健康状况l 机房视图，可直观展现监控对象在机房位置情况和机房环境当前状态图表 7电力营销系统监控管理功能菜单组织² 告警管理l 告警预订，使运维人员能批量预订自己关注的告警信息l 告警确认，提供告警事件之间关联展现，辅助运维人员快速定位故障l 工单处理，提供已确认告警事件的流程处理，促使运维工作规范化l 告警动作配置，支持多种告警通知方式和故障自动响应² SLA管理l SLA定义，支持分层分级定义服务水平l SLA浏览，支持分层分级展现服务水平² 报表管理l 支持TOPN、对比分析、趋势分析、告警统计、告警TOPN、设备分类、可用性和工单统计等各种类型报表² 知识库l 海量的专家建议信息，为运维人员快速解决问题提供有力帮助l 支持知识条目创建、分类、修改和查询l 支持告警事件与知识库的自动关联n 丰富的模板功能，有效解决电力营销系统监控中的个性化需求SAMP系统内置多种模板，以解决电力营销系统监控中的个性化需求，具体如下：² 告警信息模板，使用户能灵活定义适合本单位的告警信息内容；² 报警信息模板，使用户能根据不同告警通知方式定义适合自己的报警信息，如相比短信通知方式，对邮件通知方式可订阅告警事件的详情；² 报表模板，使用户可调整各种类型报表的展现内容和格式；² 页面展现模板，使用户可定义出适合自己个性化应用展现页面；² 拓扑图模板，使用户可定义各种物理和逻辑拓扑展现；² 监控对象模板，使用户能很轻松地增加新的监控对象类型。选择我们的理由n 十多年的电力营销系统开发和运维经验我们拥有有十多年的电力营销系统开发和运维经验，产品成功运行于国家电网和南方电网多个省份，并成功承担了吉林省电力公司营销业务规范和服务行为规范咨询项目。我们对电力营销业务和IT架构管理需求有着深刻的理解，了解并掌握电力营销应用监控中的各种难题及解决方法。我们将十多年电力营销开发和运维经验充分融入到电力营销监控系统的设计中，监控系统中内置的监控参数缺省值和运维知识库将帮助客户更好地使用本监控产品。n 高性价比的电力营销一体化监控管理解决方案全面一体化的监控管理解决方案使客户能以更低的成本享受到高效的监控成果，并免除后期集成的麻烦和风险。专门针对电力营销系统优化的监控指标体系，更是省去了客户二次开发的费用。n 功能全面，部署简单，使用方便系统实现了对监控对象从监测、分析、告警和控制的闭环管理，监控内容涵盖可用性、性能、安全、资源和其他异常事件管理。自动发现、远程集中代理维护、内置最佳经验缺省值使系统部署变得轻松简单。经过精心设计的菜单条目和管理界面，使操作人员不须借助文档即能快速上手。n 高可扩展性SAMP系统是一个支持集中管理和分布式部署之高扩展性平台，通过增加监控调度服务器（Monitor Scheduler）的数目，可以轻松应对未来监控对象大规模的增加。另外系统提供的监控对象定义工具和内置的各种模板，使客户能很轻易地增加新的监控对象类型。n 支持与第三方监控产品无缝集成，节省客户投资SAMP作为一个自成体系的监控平台，支持无缝地和第三方监控产品进行集成，SAMP不仅可以作为其他监控平台的一个智能告警源，也可以接受第三方网管平台的告警信息实现统一展现，从而有效地节省客户投资。成功案例l 湖北省电力有限公司l 广东电网公司潮州供电局l 广东电网公司阳江供电局