浙江省政府网站群运维监管平台解决方案

浙江省政府网站群运维监管平台解决方案
一、方案背景说明
随着政府网站建设工作的不断推进和深化，以浙江省政府门户网站（）为总门户，拥有40余家省级部门网站，11家市级政府网站和90个县（市、区）的省政府网站群建设取得了很大的发展，受到了社会公众的广泛关注和认同，无论是整体建设规模，还是绩效水平，目前都处于全国领先行列。

但是，随着政府信息公开力度的不断深入，以及网站信息整合手段的不断丰富，政府网站发布网页的数量越来越多，据初步统计，省政府网站群的总体网页数量已达300多万，其中“中国浙江”政府门户网站的总网页数已达14万，包括简繁体中文、英文和日文网页，并且平均以100页/天的速度在增加。

在14万张网页中，涉及引用100多家全省政府网站的4000多个外部链接地址。

由于网站网页数量的不断增加，以及网站改版和技术方面的原因，导致产生网页链接失效、网页附件下载失败、服务器连接错误等问题，使网民浏览或查询网站内容时，无法找到自己想要的信息，严重影响了公众对政府网站的信任感，损害了政府网站在公众心目中的整体形象，大大降低了公众访问网站的使用率和满意度。

在一定程度上，这种负面影响也阻碍了政府网站建设水平的进一步提高。

同时，随着省政府网站绩效考核评测工作的不断推进，迫切需要一种科学有效的技术手段，引入更多的量化考核指标，进一步提高网站考核评测数据的科学性、准确性，使省政府网站的考核评测标准体系更合理更规范。

为此，在星鸟软件公司的技术支持下，部署了一个覆盖40余家省级部门和11家市级政府网站的网站群运维监管平台，对省政府门户网站，以及40余家省级部门和11家市级政府网站实行诊断和监控，主要目的是：一、利用系统功能为全省政府网站群提供定期的错误链接诊断、网站运行状态监控，发现错误及时改正；二、对纳入监控范围的所有政府网站可用性、响应速度、网页差错率，以及内容更新率等指标进行分析统计，定期发布全省政府网站群检测分析报告，激励先进、鞭策落后；三、为完善省政府网站考核评测指标体系，提供准确、科学的考核依据。

在省政府门户网站构建一个网站群运维监管平台，对进一步保持“中国浙江”政府门户网站在全国的领先优势，对促进浙江省政府网站建设的全面健康发展，有着十分重要的积极意义。

二、方案详细说明
2.1 总体结构
2.2 访问数据模型
2.3 方案功能介绍2.
3.1 健康诊断
诊断网站中的各类错误地址，通过错误定位和追踪等功能协助技术部解决错误地址。

系统支持错误类型（比如访问错误、服务器500错误、网络连接失败等）和错误对象（比如链接、图片、脚本、IFRAME等）的区分,为错误的解决提供便捷。

功能目录：
2.3.2 实时监控
构建一个多屏幕、多视图的监控平台，7×24小时监控网站或其他服务的可用性、数据和网页是否及时更新、网页中包括的错误量。

在遇到较严重的情况下，系统在第一时间通过短信、邮件等方式通知相关负责人，同时在监控平台上以明显地图形或者动画显示问题的严重性。

平台采用智能的报警策略，通过配置报警规则（包括报警变量、报警有效时间、报警级别、问题发生持续时间等）实现对报警和其行为的设定。

报警级别包括“提醒”、“警告”、“严重”、“不稳定”、“正常”等多种状态，同一个监控点能够随着问题的严重性而自动改变其报警级别。

智能报警策略避免了传统报警的无目的性和盲目性，真正实现报警监控于一体的平台。

监控平台的多视图包括“监控图”、“详情图”、“缩略图”、“大图标”、“小图标”等多种方式。

健康监控：
健康监控用于检测指定页面中是否存在无效地址（包括网络错误、访问错误、服务器错误）。

可用性监控：
可用性指检测指定页面是否可用、是否超时，系统支持对静态页面、动态页面（或登录后打开）、查询页面（或登录后查询）、登录等应用服务的检测。

注：登录页面不能有验证码，否则无法登录。

如果必须要有验证码，需要开通一个不需要验证码的登录方式。

更新监控：
更新监控指检测指定页面或者页面中某一个区域的链接、图片、文字等更新量和更新次数。

2.3.3 绩效考核
用于对系统中相关数据的考核，并且自动对考核数据进行打分。

? 健康状况考核，其中各类错误均可按以下地址类型考核：1、按资源类型考核，如图片、链接、背景图片、框架、脚本/CSS；2、按内部、外部地址考核；3、按错误类型考核，比如网络错误、访问错误、服务器错误。

? 网站可用性考核，可用性指标包括连接时间、下载时间、响应时间、无法访问率等。

? 网站更新量考核，响应速度指标包括网站总更新量、政府文件更新量、公告公示更新量、信息公开更新量等。

? 网站访问量考核，除传统的唯一访问者数、页面量排名外，还包括访问粘度、流出数据量、首页二跳率、搜索引擎来访数、直接访问数、注册用户率等指标的排名。

2.3.4 访问分析
? 流量统计，比如点击数、页面量、唯一访问者数、新闻排行榜、栏目排名等。

? 行为分析，包括来访用户分类分析、指定路径或者特定集合路径分析、跳转分析、二跳统计、页面停留时间统计等。

? 互联网搜索热点分析，包括搜索引擎来访次数排名、搜索引擎贡献页面量排名、关键字来访次数排名、关键字贡献页面量排名。

? 站内搜索分析，包括搜索次数或人次排名、搜索效率分析、二次搜索分析等。

? 注册用户分析，分析注册用户关注热点（网页、栏目、专题等）、浏览路径、地区分布以及追踪任何一个注册用户的访问情况。

? 路径查询/可视化流量查询等，通过可视化技术在网页中再现网民点击的动态视觉效果，为了解网民浏览习惯、以及调整网页的布局提供参考。

? 栏目钻取分析，通过向上、向下钻取栏目，掌握任意层次栏目的访问流量、网民关注内容、网民访问来源等信息。

分析的栏目深度可达50层、单个网站栏目数量可支持5000个（如果是动态栏目，数量不受限制）。

2.4 系统技术特点
2.4.1 准确诊断
系统采用多种技术保证诊断数据的准确和诊断的彻底性，比如：正确识别网页中的各种元素；支持脚本的解析；支持海量网页的自主开发的存储技术；重试诊断策略等。

海量网页的存储技术确保诊断的彻底性，脚本解析能够解析采用脚本编程实现的网页，而重试策略能够解决网络或者网站的不确定性。

2.4.2 准确访问统计
网站的正常访问记录会受到其他各种访问记录的干扰，比如搜索引擎的扫描或者其他恶意的扫描或者离线下载等。

这些数据都影响了网站的统计准确性。

如果没有采用扫描识别机制，任何系统都无法避免数据的不准确性。

本系统基于大量历史数据的学习、采用智能的扫描识别机制，能够准确识别并且过滤各类扫描访问，从而获取准确的访问统计。

2.4.3 自主关联存储技术
本系统采用星鸟软件自主开发的支持海量网页和关联信息的核心数据存储技术。

并且星鸟软件其在诊断领域的应用进行了专门的调试和改良，其性能远远超过一般的采用数据库的存储技术，支持百万网页量、千万网页量的网站或者网站群。

其具有以下特点：
? 关联信息无损存储
? 查询速度快速
? 存储速度快速
该技术包括了系统磁盘驱动、磁盘空间管理、海量数据查询、海量数据排序、数据纠错与恢复、关联信息、多级关联索引、64位支持以及二次开发接口与开发语言等核心技术。

2.5 星鸟运维监管平台优势
★以星鸟关联存储技术作为基础，解决了应用传统关系数据库（ORCAL、SQL）碰到的大量技术壁垒。

★星鸟软件无需改变网站结构，如某些网站无法识别栏目地址等等。

★网站的各类数据能够层层挖掘。

★庞大的数据运算对软件的运行没有任何影响。

★大量的智能型数据报表，任意定制。

★支持上千万网站的网站群。

★数据准确，能够完全把网络蜘蛛等真实的数据过滤。

2.6 服务方式与内容
★采用一条龙地安装、实施、维护、升级等服务内容。

★定期分析报告，发现网站存在的问题、提供优化解决方案等。

★24小时监控网站的可用性、敏感信息、无效链接。

★提供个性化的报表定制服务，使得能够满足用户的个性化需求。