1、附件 9:政务云服务质量评价规范(试行)2012 年 11 月目录一、 概述 .11.1 目的 .11.2 范围 .1二、 术语和定义 .1三、 设定原则 .2四、 监管要素与评价指标列表 .34.1 服务能力评价指标 .44.2 服务过程评价指标 .7五、 运维服务评价指标体系 .105.1 任务级评价指标 .105.2 项目级评价指标 .125.3 组织级评价指标 .155.4 企业级评价指标 .20第 1 页 / 第 25 页一、 概述1.1 目的明确指标的设定原则,对指标分类、度量方法、评价方法等进行规范性描述,用以对服务质量、服务能力进行评价,规范运营企业的运维服务工作。1.2 范围
2、重点监督、管理和评价运营企业的云服务提供过程,兼顾运营企业的云服务提供能力。适合于以下使用者:1. 用户单位申请采购和使用政务云服务的政府部门和行政事业单位。2. 管理单位对政务云建设和运营服务进行指导、监督和管理的单位。3. 运维单位提供政务云运维服务的服务提供商。二、 术语和定义术语名称 定义服务与服务承诺有关的活动、工作或义务的实施,例如软件的开发、维护和操作。服务承诺 一个可视的、并希望各方遵守的协议。服务计划维护交付产品所使用的说明管理方法和技术途径的文档。典型的维护计划内容包括:工具、资源、设施及日程。运维基线启动运维时刻系统配置环境描述、软硬件版本说明及当前运行程序、源码的备份,
3、匹配版本的系统软件备份,以及其他与运维有关的配置项。原因分析 为确定缺陷的根源所作的缺陷分析。影响度 就所影响的用户或业务数量而言,事件偏离正常服务级别的程第 2 页 / 第 23 页度。紧急度 解决故障时,对用户或业务来说可接受的最短耽搁时间。可用性软件(系统或部件)在投入使用时可操作和可访问的程度或能实现其指定的系统功能的概率;系统正常工作时间和总的运行时间之比;在运行时,某一配置项实现指定功能的能力。服务级别协议与客户之间签订的描述将要提供的一项或多项服务的一份协议。运维工作说明书纲要侧重运维工作计划和维护工作规程,适用于服务合同附件蓝本(1)范围:注意套用服务内容及等级划分,定义服务响
4、应和保障层级(2)工作计划:what、when、who、why、how、where(3)运维资源:人力资源、运维对象的运行环境、输出文档、工具资源(4)工作界面及服务交付说明运维工具 明确运维目标实现和质量保障的支撑工具客户运维服务工作规程(1)组成维护过程的活动包括:过程实施、问题和修改分析、修改实现、维护评审和确认、退役、迁移;(2)修改请求/问题报告规程(3)配置管理规程(4)服务结果验证过程服务度量 对服务过程、能力、质量进行度量、评价运维工作模版修改请求分析模版、问题报告模版、软件迁移计划模版三、 设定原则“政务云服务质量评价规范”的设定原则是: 系统性原则 实用性原则第 3 页 /
5、 第 23 页 稳定性原则 一致性原则 易度量原则四、 监管要素与评价指标列表云服务的监管评价过程上表现为:通过采集运维服务过程数据和服务能力数据,对运维服务过程进行监管,对服务能力进行评估、评价,进而对云服务进行诊断。监管要素是运维服务过程中需要进行重点监管的元素,评价指标用于对服务能力的评估、评价。监管要素和评价指标两者互相对应,其中,评价指标用于对监管要素的量化评价。第 4 页 / 第 23 页4.1 服务能力评价指标服务能力评价指标是指衡量云服务的静态指标,主要是对企业资质、运维服务综合能力、运维服务管理制度、运维服务支撑工具、服务人员和知识管理等监管要素进行评价。指标名称 度量方法
6、评价方法 对应的监管要素数据来源1. 国际行业认证直接度量认证的数量根据认证数量,进行人工评价企业资质人工录用、维护2. 国际产品认证直接度量认证的数量根据认证数量,进行人工评价企业资质人工录用、维护3. 国家行业认证直接度量认证的数量根据认证数量,进行人工评价企业资质人工录用、维护4. 国家产品认证直接度量认证的数量根据认证数量,进行人工评价企业资质人工录用、维护5. 其他资质认证直接度量认证的数量根据认证数量,进行人工评价企业资质人工录用、维护6. 企业注册资金直接度量根据资金规模,进行人工评价运维服务综合能力人工录用、维护7. 企业年度总营业额按年度直接度量 根据年度总营业额,进行人工评
7、价运维服务综合能力人工录用、维护8. 企业员工总数 直接度量 根据企业员工总数,进行人工评价运维服务综合能力人工录用、维护9. 从事运维服务年限以开始提供运维服务的年度为基准计算出从事运维服务年限根据年限,进行人工评价运维服务综合能力人工录用、维护第 5 页 / 第 23 页10. 年度运维服务营业额按年度直接度量 根据营业额规模,进行人工评价运维服务综合能力人工录用、维护11. 年度运维服务营业额比例年度运维服务营业额与企业年度总营业额的比值根据营业额比例,进行人工评价运维服务综合能力人工录用、维护12. 年度运维服务项目数度量年度内运维服务类项目的数量根据项目数量,进行人工评价运维服务综合
8、能力人工录用、维护13. 单个运维服务项目合同金额度量单个运维服务项目合同金额在一定数量级以上的项目数量根据资金规模一定数量级以上的项目数量,进行人工评价运维服务综合能力人工录用、维护14. 服务管理规范与制度直接度量相应的制度、规范、操作说明书的数量根据服务管理规范与制度清单,进行人工评价运维服务管理制度人工录用、维护15. 云服务管理的支撑工具直接度量使用的云服务管理支撑工具根据云服务管理的支撑工具清单,进行人工评价运维服务支撑工具人工录用、维护16. 运维服务人员数量直接度量 根据人员数量,进行人工评价服务人员 人工录用、维护17. 运维服务人员占公司员工比例运维服务人员数量/公司员工总
9、数根据人员比例,进行人工评价服务人员 人工录用、维护18. 不同级别的人员数量按运维服务人员级别,度量不同级别的人员数量。根据各级别人员数量,进行人工评价服务人员 人工录用、维护第 6 页 / 第 23 页19. 不同服务内容类别的人员数量按运维服务内容类别,不同内容的服务人员数量根据不同服务内容类别的人员数量,进行人工评价服务人员 人工录用、维护20. 一定任职年限的服务人员数量直接度量在一定任职年限的服务人员数量根据不同任职年限的服务人员数量,进行人工评价服务人员 人工录用、维护21. 年度运维服务人员流失率年度运维服务离职人员数量/运维服务人员数量根据比值,进行人工评价服务人员 人工录用
10、、维护22. 国际行业认证服务人员数量直接度量 根据数量,进行人工评价服务人员 人工录用、维护23. 国际产品认证服务人员数量直接度量 根据数量,进行人工评价服务人员 人工录用、维护24. 国家行业认证服务人员数量直接度量 根据数量,进行人工评价服务人员 人工录用、维护25. 国家产品认证服务人员数量直接度量 根据数量,进行人工评价服务人员 人工录用、维护26. 其他资质认证服务人员数量直接度量 根据数量,进行人工评价服务人员 人工录用、维护27. 运维知识数量 按不同项目直接度量根据数量,进行人工评价知识管理 作业系统接口28. 知识的被使用次数按不同项目直接度量根据次数,进行人工评价知识管
11、理 作业系统接口4.2 服务过程评价指标云服务过程评价指标是指衡量云服务的动态指标,主要是对事件管理、问第 7 页 / 第 23 页题管理、变更管理、合作伙伴管理、客户满意度管理、客户投诉管理、值班管理、作业计划管理、应急预案管理和培训管理等监管要素进行评价。指标名称 度量方法 评价方法对应的监管要素数据来源1. 事件数量分布按照时间跨度、不同项目对事件的数量进行度量通过事件数量分布情况评价不同项目、不同时间段的服务工作负荷事件管理作业系统接口2. 平均每位服务人员事件数量未关闭事件数量/与服务人员总数量反映了当前服务人员工作负荷状况事件管理作业系统接口3. 事件关闭率已关闭事件数量/所有事件
12、数量评价不同项目、不同时间段的服务工作效率事件管理作业系统接口4. 一线事件关闭率一线关闭事件总数/关闭事件总数通过比率大小衡量一线员工的处理能力高低事件管理作业系统接口5. 非现场事件关闭率非现场(远程支持、电话支持和邮件支持)关闭事件总数/关闭事件总数通过比率大小衡量远程服务的比例事件管理作业系统接口6. 现场事件一次关闭率现场一次性关闭事件数量/ 所有现场关闭事件数量评价现场服务的效果事件管理作业系统接口7. 事件按期关闭率在与用户约定的期限内关闭事件的数量/关闭事件总数通过比率衡量服务质量事件管理作业系统接口8. 事件延期 在与用户约定的期 通过比率衡量服 事件管理 作业系统第 8 页
13、 / 第 23 页关闭率 限外关闭事件的数量/关闭事件总数务质量 接口9. 事件平均关闭时间按不同项目度量其运维服务事件的总耗时/事件总数通过平均关闭时间的长短反映事件的复杂程度和事件的处理效率事件管理作业系统接口10. 现场事件平均关闭时间所有现场事件处理所花费的时间之和/所有现场事件数量通过平均关闭时间来评价现场处理效率事件管理作业系统接口11. 由事件导致的变更数量所有由事件导致的变更数量反映事件对变更的影响事件管理作业系统接口12. 问题数量分布按照时间跨度,统计问题数量根据问题分布特点,进行人工评价问题管理作业系统接口13. 主动性问题所占比率主动性问题总数/问题总数通过比率大小衡量
14、主动运维的能力问题管理作业系统接口14. 已知错误所占比率已知错误的总数/所有问题总数通过比率大小衡量问题管理能力问题管理作业系统接口15. 永久性修复率永久性解决问题总数/问题总数通过比率大小衡量问题管理能力问题管理作业系统接口16. 临时性修复率临时性解决问题总数/问题总数通过比率大小衡量问题管理能力问题管理作业系统接口17. 问题关闭率已解决问题总数/问题数量总数通过比率大小衡量问题管理能力问题管理作业系统接口18. 问题平均解决时间已解决问题的总耗时/已解决问题总数通过比率大小衡量问题解决效率问题管理作业系统接口19. 变更数量分布一定时期内,变更数量的总和通过变更数量分布,进行人工评变更管理作业系统接口