《信息资源共享系统绩效评估指标体系的构建》由会员分享，可在线阅读，更多相关《信息资源共享系统绩效评估指标体系的构建（18页珍藏版）》请在金锄头文库上搜索。
1、信息资源共享系统绩效评估指标体系的构建张璇/肖希明2013-2-26 14:44:38 来源：图书情报工作（京）2009年19期英文标题】 Construeting Performance Evaluation Index System of InformationResource Sharing System【作者简介】张璇，女，1983年生，硕士，发表论文6篇。中山大学图书 馆广州510275肖希明，男，1955年生，教授，博士生导师，发表论文110余篇。武汉大 学信息管理学院武汉430072【内容提要】在分析现有的信息资源共享系统绩效评估指标体系研究的基 础上，探讨信息资源共享系统绩效评
2、估的要素、评估指标选取的原则，设计评估 指标体系并明确其指标内涵。最后通过对NSTL的实证分析，对评估指标体系的 科学性和可行性进行验证。Based on analyzing the existing research on performance evaluation index system of information resource sharing system, the paper discusses the influencing factors and the principles of selecting indicators of performance evaluatio
3、n of information resource sharing system, designs the evalua tion index sys tem and analyses the con notation of each indica tor. By the empirical study on performance evaluation of NSTL, the paper verifies the scientificity and feasibility of the index system.【关 键 词】信息资源共享系统/绩效评估/指标体系Information re
4、source sharing system/Performance evaluation/Index system1引言信息资源共享系统绩效评估即依照一定标准对信息资源共享系统在一段时 期的成绩和效益进行科学地分析和评价1，其核心问题是评估指标体系的构建。国外学者很早就开始研究信息资源共享绩效评估指标体系问题。1982年美 国学者William B. Rouse定义了图书馆资源共享网络的性能指标，提出了可靠 性、弹性、可获得性、可用性、可接受性、效率、效力及质量控制8个评价指标 2。近年来，有的国外学者进行了网络服务绩效评估研究，确定绩效评估指标 包括用户、成本、网络流量、使用、服务和支持6个
5、方面3；国外一些专业机 构，如ARL(Association of Research Libraries)统计和评价委员会，对图书 馆的电子资源、服务质量和网络对服务的影响等进行专门的评价，制定了一系列 相关的评价指标体系，有效地推动了对信息资源共享系统运行、信息资源保障能 力、信息资源利用情况以及用户满意度等要素的绩效评估4。在我国，有学者 对信息资源共享过程中的效率和效益进行分析，提出以资源本身结构、信息资源 传输和用户可视化为要素的信息资源共享效度评价模式5；有的把信息资源共 享率、信息输出、输入率和信息资源贡献率作为评价和改进资源共享工作的主要 评价指标6；有的从地区需求满足状况、技术
6、条件和标准化评估、管理运行评 估、政策法规建设评估4个方面构建了以地区需求为导向的信息资源共享系统评 估指标体系7。这些研究，从不同角度对信息资源共享的绩效评估进行了有益的探索。但从整体上看，研究文献数量还不多，且主要侧重于对共享系统某一方 面进行评估，整体性、综合性比较薄弱。本文试图从多层次对我国信息资源共享 系统的绩效评估问题进行综合研究，并尝试构建一个既符合数字环境下信息资源 共享规律、又切实可行的绩效评估体系。2信息资源共享系统绩效评估的要素目前国内外建立起来的信息资源共享系统尽管有不同的运行模式，但其评估 都会涉及如下要素：2.1资源因素资源因素涉及：数量因素，主要是指资源的规模效应
7、8。衡量资源的数 量，除了绝对数量之外，还有类型、品种、学科、语种等结构数量布局。资源数 量越丰富，越能促进用户对资源的利用。质量因素，包括所收录资源的学术性、 权威价值；对资源内容的揭示深度和组织程度；资源内容的时效性和资源更新周 期等。从资源利用的角度分析，资源质量涉及资源的可知晓性、可获取性、获取 便利性3个方面，其中有关资源本身的因素包括资源的结构分布、资源的组织和 揭示、资源的存储格式等。2.2服务因素服务是连接资源和用户的纽带，也是制约绩效的重要因素，它包括：量的 因素，主要体现在服务覆盖的范围、服务的数量、服务响应时间等方面。一般来 说，服务覆盖范围广，服务量大，服务响应时间快，
8、则绩效越好。质的因素, 主要体现在服务的内容和形式、网络服务系统的质量、服务满意度等方面。对服 务的内容和形式而言，各种不同服务形式投入不尽相同，带来的绩效也有所不同。 服务满意度作为服务效果的直接反馈无疑是衡量共享系统绩效的重要因子，在整 个共享系统中都有着较高的关注度。2.3人力因素人力因素主要是指服务人员和用户人员两者的专业能力和信息素质。共享 系统的服务人员，他们对共享系统资源的了解程度和信息服务能力直接影响着共 享系统能否发挥和在多大程度上发挥其应有的效用，他们对本专业领域的知识水 平决定其在提供服务的过程中能否向用户提供最准确的信息。共享系统所服务 的对象即最终用户，他们的信息检索
9、和利用能力以及阅读外文资料的水平和利用 计算机的能力等都影响着对共享系统的利用程度。2.4成本因素信息资源共享系统运行中的成本主要分为资源采集成本、系统运行成本、人 力成本和用户等待时间成本。由于信息资源共享系统的构建和运作目标主要是避 免和节省资源建设的重复投入，使资源配置达到最优化，因此，在对信息资源共 享系统进行绩效评估时，不仅要考虑成本投入,更重要的是评估其成本节省程度。由于信息资源共享系统通常是由多个图书情报机构，为达到资源互补和共享 的目的而形成的责任共担的合作活动和项目，因此，不仅要对系统自身进行效益 评价，还应对利用系统资源提供增值服务的机构或个人所提供的服务及其效益进 行评价
10、，包括成员单位直接利用系统资源提供服务产生的效益；成员单位和其他 机构由于系统的资源或服务的支持，维持同等保障水平时减少投入带来的效益;成员单位和其他机构利用系统的资源、服务、技术所开发衍生的资源或延伸服务 所产生的新的效益等9。3信息资源共享系统绩效评估指标选择的原则3.1操作性原则在选择评估指标时，一方面应注意指标的实用性、操作方式的简洁性和工作 速度的高效性，另一方面要确保与指标对应的数据易于收集，其准确性、可靠性 易于保证，避免过于复杂的计算10。3.2定性与定量指标相结合原则在进行指标设定时，选择适当的定量评价指标，可以保证评价结果的科学准 确。当然，针对不可量化和难以量化的因素进行
11、评价，也需要设定部分定性指标。 在进行定性指标评价时，可以选择适当的评价方法将反映基本特点的定性指标定 量化、规范化。考虑到信息资源共享系统绩效形式的多样性，在设计指标体系时, 应采用定性与定量相结合的评估方法。3.3筹兼顾原则原则上应将与共享系统自身、成员单位、用户等相关的指标都纳入进来，以 保证评估的全面性和可信度。但是，也要避免指标体系过于庞杂，并统筹整体与 个体、定性与定量的关系，最终统一到追求共享系统运作效率最优化上。3.4开放性原则随着国家信息化建设的迅速发展，对信息需求的不断变化，加之信息载体的 转变、科学技术的发展等，信息资源共享系统的功能定位、发展目标都将产生一 定的变化，因
12、而共享系统的绩效评估指标也会随之不断发展。同时，不同的共享 系统其运作方式和目标也不尽相同，因此评估指标体系的确定应考虑到指标选择 的可变通性和灵活性。4各项评估指标及其内涵遵循评估指标选择的原则，选取有意义的绩效评估要素，分层解析，即可构 建出一个层次清晰的三级评估指标体系，如表1所示。一级捋标一二级指标三级捋标A1资源建设（定駅十定性）B1资源保障率（定 it）C1资源覆證率C2全文保障率B2资源结构和布局（定盘）C3供科分布（：4类取分布：5语种分布C6年代分布B3资源质：fi（定最+定性（：7资料来源08学术性C9同行评议B4资源组织、楡索和存取 （定性）C10分类与揭示C11检啾功能
13、CI2检索效果C13易存取性B5时效性（定性）C14坦新频率A2资源利用效率 （定 fit）B6资源利用悄况（定就CE5轻录次数C1&杳询/检索次数C17电文下载次数B7资源辅助程度（定盘）Ci8对成员单位的资源辅助程度CL9对用户单位的资源辅助程度山玄接服务效益（定議*定性）B8服务范圈（定量）C20成员单位、镜豫站、服务站的覆咼范围C21用户群地理覆盅范围B9服务内容（定性）C22 ft：接服务形式和内容B10直接服务嚴（定量）C23文献传递服务斌C24参考咨询服务毎B11服务响应时何（世量）C25文献传递服务从中谓到获得文献时间C26参考咨询服务从咨询到回复时间C27检索系统响应时间B1
14、2服务满意率 （定fit +建性）C28文献传递服务滿意度C29参野咨询服务满意度C30检索系统满意度A4延伸服务效益（定性）B13延伸服务形式C3I成员单位利用共享系统的资源而延伸提供 服务形式B14延伸服务效果（定flt +定性）C32服务次数C33 JIK务溝意度A3减负效益B15采购成本降低率（定量）C34联合采购加成员畝位经费降低率C35资源辅助对其他单仅经费降低率R1A况甘血虑稱何琛厂砧対* &拮hV衣第一层由资源建设和资源利用效率、直接服务效益和延伸服务效益、减负效 益和社会效益6个一级指标组成。第二层由18个二级指标组成。第三层由40 个三级指标组成。4.1 A1资源建设4.1
15、.1 B1资源保障率即从数量角度分析共享系统的资源对用户信息需求的 满足能力。可用两个指标来评价：C1资源覆盖率，即共享系统所收录的文献 资源数量占该领域文献总数的比例；C2全文保障率，即共享系统所收录的全 文文献占所有资源数量的比例。一般而言，用户对资源的利用多倾向于全文文献， 资源总量中全文文献比例越高，越能满足用户的资源利用需求。4.1.2 B2资源结构和布局具体可以从C3学科分布、C4类型分布、C5语种 分布、C6年代分布等方面来评价，分别指共享系统收录的资源覆盖的学科范围、 资源类型范围、语种范围和年代范围。对学科分布进行评估，通常以现有的学科 划分为标准，也可以共享系统本身所规定的资源建设政策为标准；资源类型如学 术期刊、会议论文、学位论文、专利技术、科技成果等；语种和年代也是反映资 源结构和布局的指标。4.1.3 B3资源质量即从资源内容的权威性、学术性等角度来反映资源的建 设情况。可用3个指标来评价：C7资料来源，指所收录资源是否出自知名出 版机构或权威网站，或者资源的提供者是否是同际或国内知名机构；C8学术 性，指从所收录资源的影响因子或者被引用和转载的情况等角度来判断资源的质 量；C9同行评议，指某种资源被相关专业领域专家的评价情
