第三节 项目应用评价

(一)指标体系架构
医疗健康信息互联互通标准化成熟度测评指标体系结构包括四部分:数据资源标准化、互联互通标准化、基础设施建设、互联互通应用效果。
数据资源标准化指标包括数据集标准化和共享文档标准化指标,数据标准化是互联互通的基础,而标准的共享文档为数据共享的重要载体。
互联互通标准化包括交互服务标准化和技术架构标准化指标,考察为互联互通提供了“通道”的交互服务是否已标准化;技术架构通过考察信息整合方法、信息整合技术、资源库等指标,验证平台的高扩展性、高安全性、高可靠性等。
基础设施建设包括硬件基础设施、网络安全、信息安全、业务系统建设等指标,主要考察是否具有支持平台正常运行的基础硬件和安全保护,并检查基础业务系统的建设情况。
互联互通应用效果包括平台上的业务应用建设、平台互联接入、业务联通应用效果等指标,考察平台标准化建设后的应用效果(见图2)。
图2 指标体系结构图
(二)测评内容
数据资源标准化建设情况
数据资源标准化建设情况,是依据实验室测试结果在实际生产环境中进行定量指标抽测,以验证数据集和共享文档的标准化应用情况;主要针对电子健康档案相关数据标准进行符合性测评,测评指标包括两个方面:数据集标准化建设情况和共享文档标准化建设情况。
互联互通标准化建设情况
互联互通标准化建设主要是针对信息平台在实现互联互通标准化建设情况的测评,测评指标主要包括三个方面:技术架构情况、互联互通服务功能和平台运行性能情况。
技术架构情况主要是对测评对象的信息整合方式、信息整合技术、信息资源库建设等定性指标进行测评。
互联互通服务功能主要相关标准,对测评对象中建设的基本服务功能进行定量指标测试。
平台运行性能情况主要测试测评对象实际运行情况的指标,考察重要服务的响应时间。
基础设施建设情况
基础设施建设主要是对支持信息平台正常运行的数据中心基础设施进行测评,测评指标包括四个方面:平台硬件基础设施情况、网络及网络安全情况、信息安全情况和业务应用系统(生产系统)建设情况。
硬件基础设施情况主要对平台的服务器设备、存储设备以及网络设备等的配置、实现技术等定性指标进行测评。
网络及网络安全情况主要对平台或相关业务系统的网络带宽情况、接入域建设、网络安全等定性指标进行测评。
信息安全情况主要对测评对象的环境安全、应用安全、数据安全、隐私保护、管理安全等定性指标进行测评。
业务应用系统(生产系统)建设情况主要对公众卫生服务系统建设、行业机构服务系统建设、公共卫生管理系统建设情况等定性指标进行测评。
互联互通应用效果
互联互通应用效果测评指标,主要考察测评对象是实际应用中相关业务系统建设和应用情况;以及与相关平台、系统的互联互通情况。
(三)测评方法

1.定量测试

现场查验环节的定量指标抽测主要采用定量测试的方式,抽样一定比例的数据集和共享文档;以及全部检索查询类的交互服务。
1)数据集测试方法
根据抽样原则在测评对象中选择样本数据。由测评对象将样本数据按照测试所要求的格式导出,测试工具判断测评对象导出的数据是否符合健康档案数据标准,并打印测试结果。
2)共享文档测试方法
抽取测评对象中已经存在的健康档案共享文档,提交给测试工具,测试工具执行测试用例,验证共享文档是否符合标准。
3)互联互通服务功能测试方法
采用“黑盒测试”方法,将测评对象视为“黑盒”,通过测试工具向测评对象发送服务请求;测评对象处理服务请求并返回处理结果给测试工具;测试工具分析校验返回的结果,判断测评对象是否符合区域卫生信息平台技术规范。生产环境仅抽测查询、调阅类交互服务功能的测试。
4)运行性能测试方法
测评对象运行性能测试采用专用性能测试工具、查看日志等方式进行测试,根据专用工具的测试结果,或采用人工验证方法测试的结果,并通过申请机构提供的相关技术文档等对测评指标进行测试。

2.定性评审

定性评审主要根据指标体系中的定性指标,通过文件审查、现场验证、现场确认和演示答疑等形式对测评对象在实际生产环境中的运行情况进行验证测评和打分,根据最终得分确定区域卫生信息互联互通标准化成熟度级别。
定性评审指标主要包括互联互通标准化建设中的技术架构、基础设施建设以及互联互通应用效果三部分。
1)技术架构评审
技术架构评审主要采用专家评审的方式进行评价,通过审核相关技术文档、现场讲解答疑等形式对测评指标进行评分。
2)基础设施建设评审
基础设施建设评审主要采用专家评审的方式进行评价,通过审核相关技术文档、现场讲解答疑等形式对测评指标进行评分。
3)互联互通应用效果评审
互联互通应用效果评审主要采用文件审查、现场验证、现场确认和演示答疑等定性审核方法,分别对申请机构提交的测评对象相关技术文档和实际生产环境,按照相关指标要求由测评专家组进行确认并打分。