《毕业论文（设计）-数字参考服务质量评估体系建立初探03752.doc》由会员分享，可在线阅读，更多相关《毕业论文（设计）-数字参考服务质量评估体系建立初探03752.doc（11页珍藏版）》请在三一文库上搜索。
1、专业好文档数字参考服务质量评估体系建立初探郭晶（上海交通大学图书馆 上海 200030）摘要 随着图书馆网上实时参考服务的迅速崛起，为了保障其顺利可持续发展，有关数字参考服务质量评估标准的研究日益受到关注。文章根据国内外图书馆利用实时软件技术进行咨询服务涉及到的有关质量评价环节，从与之紧密相关的服务系统、服务过程、回答质量、用户满意程度、服务统计、成本测度和服务开放程度等七个方面考虑，提出了三级服务质量评估指标体系，并列出了具体指标项目。同时，根据层次分析法等评估方法，对数字参考服务质量评估的实际操作进行了探讨。关键词 数字参考服务 质量评估 三级评估指标体系 层次分析法（AHP）On the
2、 development of the digital reference service quality evaluation systemGuo jing(Shanghai Jiao Tong University libraries Shanghai 200030)Abstract With the rapid rise of the libraries real-time reference services on the web, the study on the quality evaluation standards for digital reference services
3、has been given more and more attention for its future stable development. Based on the quality evaluation process currently involved in the reference services by real-time software technology in the libraries at home and abroad and taking into consideration seven related aspects of service systems,
4、service process, answers quality, user satisfactory degree, service statistics, cost measurement and service opening degree, this paper brings forward a three-level indicator system for service quality evaluation and sets out a detailed index. At the same time, this paper discusses the real operatio
5、n on the digital reference service quality evaluation based on the analytical hierarchy process.Key words digital reference services；quality evaluation ； Three-level measurement indicator system； Analytical Hierarchy Process（AHP） 前言Email随着数字图书馆的发展和应用，以计算机网络通讯和实时技术为依托的网上咨询服务越来越多地出现在图书馆的门户网站上。这种数字参考服务
6、（digital reference service，或称虚拟参考服务virtual reference service、实时服务real-time service等），与传统参考服务的最大区别就是能依靠先进的网络工具和服务系统，在网上再现传统咨询服务的场景，与远程用户进行更为便捷的实时交流。从广义讲，这种基于web的数字参考咨询服务主要有五种形式（参见图1）：email信箱、BBS留言板或留言簿，在线填写的web表单，FAQ（frequently asked questions，常见问题解答）以及实时解答。咨询内容主要是利用图书馆或网上资源时遇到的问题，有的也包括读者荐书、意见和资源导航等。
7、有的图书馆还提出了服务承诺，请读者监督。Web表单BBS图书馆主页实时解答FAQ用户用户户 咨询员图1 图书馆数字参考咨询服务形式网上咨询服务在整合了上述多种形式后，以其方便、快捷、全面的特征逐渐成为图书馆咨询服务的主导形式，其中，实时的数字参考服务又是最具代表形式和发展最受关注的网上服务项目。同时，数字参考服务的顺利进行依赖于有效的质量评估机制，但目前对其服务质量评估的策略远远不能满足发展要求，因而，建立一套行之有效的数字参考质量评估体系显得尤为重要。本文以国内外相关领域的研究和图书馆的实践为基础，探讨了针对数字参考服务的质量评估体系建立及具体实现方法。1 研究现状图书馆服务的质量评估标准研
8、究最早可追溯到20世纪80年代，但有关数字参考服务的评价则集中在90年代后期，国外图书情报领域做了大量工作。著名的VRD项目组的syracuse大学信息研究所在原来为美国国家教育部设计的AskERIC服务的基础上，于1998年提出了“question interchange profile（QuIP）”，该标准是一个合作化数字参考系统共享与交换提问和回答信息的元数据描述标准，提供了一种跨平台、跨媒介地交换信息的通用表达方法。1999年，美国国会图书馆启动的knowledgeBit项目，经过大量各类型图书馆与项目的讨论、测试，形成关于数字参考处理管理的通用标准数据格式。2001年，ERIC和An
9、swerBase Corporation将该项目的研究成果作为“数字参考管理标准（digital reference management standard）提交给美国国家信息标准组织（NISO）。1潘卫.数字参考服务:发展与思考.大学图书馆学报,2002 (4):63691VRD项目组也于2000年10月提出了“数字参考服务的质量因素（第4版）”。另外，佛罗里达州大学信息利用管理和政策学院于2001年3月-2002年7月建设的研究项目“Assessing quality in digital reference services”，也提出了一套用于评价数字参考服务的方法和质量标准。国内相关研
10、究不是很多，已有的成果主要在近一两年，如金更达先生的图书馆服务质量评价实现探讨2金更达.图书馆服务质量评价实现探讨. 大学图书馆学报,2002 (3):49543 http:/www.iso.ch/iso/en/ISOOnline.openerpage，2003-03-162，提出了基于用户“期望感知”的评价模型。目前，相关的国际标准和存在的评估模式只针对整个图书馆及信息服务等宏观角度，而缺少专门为数字参考服务制订的实际可行的标准。如美国国家标准局制订的ANSI/NISO Z39.7/1995，详见中“Service and activity measures”一节；另外，国际标准化组织ISO
11、(International Organization for Standardization)也于1998年制订了相关标准，如ISO11620:1998 （Information and documentation Library performance indicators：信息与文献图书馆绩效指标）,其中关于参考咨询服务的评估指标主要在馆际互借和用户满意度两方面。4郭晶 林皓明.关于图书馆利用chat软件进行实时咨询服务的探讨.大学图书馆学报,2002(6):4953另外，Virtual Reference Desk于2000年提出的“Facets of VRD Quality”也提出了
12、相关评估模式，这些指标都是衡量信息服务质量的重要参考依据。但是，对于数字参考服务这一具有广阔发展前景的图书馆服务模式，目前国际上却缺乏明确的可操作并制度化的标准。2001年，著名的VRD第三届数字参考年会的主题就是“Setting Standards and Making it real（建立标准并予以实现）”，探讨了数字参考服务标准化的有关问题，并得到了广泛的重视。5 http:/www.vrd.org/conferences/VRD2001/，2002-11-036 http:/202.120.13.77:8080/virtual/skin/myd.htm，2003-05-09随着实时形式
13、的数字参考服务的进一步发展，为了保障其顺利可持续进行，建立数字参考服务的质量评估体系已经迫在眉睫。2 数字参考服务质量评估三级指标体系根据目前图书馆基于web形式的数字参考服务现状，尤其是利用实时软件技术进行咨询服务涉及到的有关质量评估环节，7陈伟.正确认识层次分析法(AHP).人类工效学,2000(2):3235笔者从与之紧密相关的服务系统、服务过程、回答质量、用户满意程度、服务统计、成本测度和服务开放程度等七个方面考虑，提出了三级服务质量评估指标体系及具体指标项目（评估项目参见表1）。2.1七种数字参考服务测度标准及指标服务系统测度对用于数字参考服务的各系统平台的软硬件标准进行测度，以考虑
14、是否适应用户需求和实时服务发展的趋势，包含的指标主要有系统性能和执行标准两方面。服务过程测度针对整个咨询问答过程所涉及到的各个环节，从服务初始到服务结束的评价以及相关的用户认证及服务政策等内容，包含的指标有服务程序、服务人员、服务政策、服务对象。回答质量测度该指标主要针对咨询问题的回答程度和效果，进行回答质量测度，包含的指标有回答质量、答案价值、回答语言。用户满意程度对接受服务的用户进行满意度问卷调查，是普遍使用、易于执行的一项评估指标。目前常见的问卷调查形式主要针对这一过程的测度标准设计，主要考虑的指标有：咨询员操作情况及效果、用户使用情况及效果。服务统计测度根据用于数字参考服务的相关系统进
15、行服务的跟踪统计报表等信息，能比较直观地反映出服务的效果。包含的统计指标有：实时咨询系统统计、其它服务系统如常见问题库和学习中心使用情况统计。成本测度根据经济学指标，确定数字咨询服务所涉及到的各项支出收益情况。由于传统咨询服务对成本测度考虑不多，所以这项指标还有待于进一步完善。目前可考虑的指标主要有：单项参考服务成本、整个数字参考服务成本及与图书馆其他服务成本的关系。服务开放程度服务开放程度简单说主要是指服务的影响范围和合作情况。对于一项数字参考服务来讲，其服务时间越长，服务人群越广，服务影响面越大，评价结果就越好。2.2三级服务质量评估指标体系及具体指标项目表1列出了评价数字参考服务常用的具
16、体指标，指标的确定综合了国内外有关研究及实践，并根据目前上海交通大学图书馆使用情况，具有一定的普遍性和可操作性，并且可以随着应用的深入进行补充。为了便于评估，确定的指标本着实用并易于比较评价的原则，在具体操作时，可以根据实际情况和需要，选择其中的一项或几项指标进行横向或纵向比较。表1三级服务质量评估指标体系及具体指标项目一级指标二级指标三级指标（具体评估项目）备注A服务系统测度A1系统性能A11稳定性A12兼容性A13易用性A14可扩展性A2执行标准A21各项系统指标是否为国家标准A22各项系统指标是否为国际标准A23问答记录（知识库记录）形式是否符合元数据等标准A24有无合作组织问题交换标准
17、B服务过程测度B1服务形式B11Email电子邮件咨询B32专业技能；键盘技能；处理多重咨询任务的能力；快速查检技能；处理不同用户的能力；网上信息搜索能力；知识积累和更新能力B12BBS留言版B13Web咨询表单B14FAQ问题库B15实时解答B2服务程序B21服务易获取性B22响应时间B23服务程序的清晰通明度B24用户认证制度B3服务人员B31解决问题的范围B32工作人员培训及考核B4服务政策B41服务定期的总结与评价B42制订合理的服务政策B5服务对象B51用户信息私密性B52用户认知程度C回答质量测度C1回答质量C11答案正确性C32是否建立了统一的常用短语库（反应库）C12交互性C2
18、答案价值C21引导启发性C22教育性C23影响力C3回答语言C31规范性C32统一性C33语种多样性D用户满意程度D1咨询员操作情况及效果D11回答准确性D12回答反应速度，用时长度D13服务态度D2用户使用情况及效果D21技术易用性D22用户信心度D23用户接受程度D24服务效果E服务统计测度E1实时咨询系统E11登陆用户信息统计E11按天、月、IP地址进行统计分析E12用户满意度调查报表E2其它服务统计E21知识库使用统计E22学习中心课件统计F成本测度F1单项参考服务成本F11执行一项咨询服务的支出收益情况F2整个数字参考服务成本F21维持数字参考服务所需的设施开销F22该支出对图书馆其
19、他支出的影响G服务开放程度G1服务范围G11服务时间长度G12服务地域范围G2合作情况G21是否为地区合作组织成员G22是否为全球合作组织成员。3评估操作方法探讨目前针对数字参考服务质量评估工作主要采取的是问卷调查法及统计报表分析法，这类方法简便易行，但定性的成分所占比例较大，影响了评估结果的科学性。如果能和基于数学方法计算的定量方法结合起来，有利于评估结果的客观和准确。本文列举两种评估方法，在实践中可根据实际情况结合起来使用。3.1网上问卷调查及统计报表分析法该方法以定性评估为基础，根据专家论证和相应的质量标准，确定调查内容，并发布在网上供用户填写。经过一段时间的数据积累，生成统计报表，再对
20、报表进行分析。表2和表3分别是上海交大图书馆在实时解答后发送的用户满意度调查问卷（具体选项未列出）和统计报表，8陈洪云 李贵春.层次分析法(AHP)在教学实验室评估标准中的应用.天津师大学报,2000(3):2831问卷内容是根据上述指标体系中的D类指标的相应项目制订的。表2 制订用户满意度调查问卷内容示例问卷调查内容对应三级指标体系的具体项目您觉得这项服务使用起来如何？D21技术易用性您对我们的回答满意吗？D11回答准确性；D13服务态度您认为我们对提问的反应速度如何？D12回答反应速度，用时长度您喜欢用这种实时的聊天形式咨询问题吗？D23用户接受程度您认为这项服务对您利用图书馆有帮助吗？D
21、24服务效果您还会再次使用这项服务吗？D22用户信心度 表3 用户满意度调查问卷统计报表9王众托.系统工程引论.北京:电子工业出版社,1984作者简介：郭晶，女，助理馆员，上海交通大学图书馆咨询部工作。联系方式: 调查表非常满意比较满意感觉一般很不满意有效问卷量使用方便与否89%8%3%0%124人回答满意与否75%17%4%4%123人提问反应速度74%11%7%8%125人此方式喜欢与否92%8%0%0%113人有无帮助90%10%0%0%110人以后是否会用93%0%7%0%127人根据表3所列出的统计报表数字，可以清楚地了解用户对服务内容的反馈信息，从统计比率可以看出，用户对整体服务效
22、果还是认可的。同时，通过统计分析，为评价并改善现有服务提供了依据。3.2层次分析法（Analytical Hierarchy Process，简称AHP）根据三级质量评估指标体系和AHP的建模要求，把一级指标作为目标层，二级指标作为准则层1，三级指标作为准则层2，可以建立相应的评估模型，该方法适于评价参考服务的整体质量或其中几项指标的质量标准，也适于不同单位数字参考服务质量情况的比较。下面以服务系统的评估为例，建立模型并给出相应的求解过程（参见图2）：AHP模型的求解由以下三个步骤组成：本文发表在上海交通大学学报2003年增刊计算单一目标下同层各元素的单权重：计算自上而下逐层进行，如设上层为B
23、，其下层为C，本文以C层为例说明单权重的计算方法。设B层目标的总权重为b1、b2bm，其下层目标为C1、C2Cn，相对于上层bk（k=1、2m）的单权重表示为C1(k)，C2(k)Cn（k）（k=1、2m）。设C层目标中的前S个与B层中目标的Bk有关系，在CiCj个目标中，由有关专家评价出Ci目标相对于Cj目标的相对重要性，记为Cij，评价结果用19自然数来表示，评估标准如下：若认为Ci比Cj同等重要，则取Cij=1，Cji=1；若认为Ci比Cj稍重要，则取Cij=3，Cji=1/3；可扩展性C4系统性能B1服务系统的评估A目标层问题交换标准C8是否为国家标准C5是否为国际标准C6知识库记录形
24、式是否符合元数据等标准C7执行标准B2准则层2易用性C3兼容性C2稳定性C1准则层1图2 运用AHP建立服务系统的评估模型若认为Ci比Cj明显重要，则取Cij=5，Cji=1/5；若认为Ci比Cj重要得多，则取Cij=7，Cji=1/7；若认为Ci比Cj绝对重要，则取Cij=9，Cji=1/9；若属于上述判断之间，则可取2，4，6，8和1/2，1/4，1/6，1/8，确定了Cij后，就能构造一个两两比较判断矩阵：参考文献9BkC：Bk C1 C2 CsC1 1 C12 C1sC2 1/ C12 1 C2s Cs 1/ C1s 1/ C2s 1计算出单一目标Bk下的下层目标C1、C2，Cn的单权
25、重向量为：W(k)=(C1(k),C2(k),Cs(k),Cs+1(k),Cn(k)r(2)计算各层元素的总权重：Ci=bk Ci（k） （i=1，2，n）(3)检验判断矩阵的一致性：在计算权重的过程中，每一个判断矩阵都要进行一致性的检验，以保证矩阵的合理性。当判断矩阵满足 0.1时，则判断矩阵的一致性可以接受。设有m个专家，并给定了各个指标的判断标准，根据上述单权重的计算方法，可以计算出各层的单权重：ABi W0=（0.666,0.333）TB1Ci W1=（0.396,0.068,0.162,0.374）T；B2Ci W2=（0.079,0.579,0.298,0.434）T根据单权重的计
26、算结果，得出准则层2对目标A的总权重：C=（0.264,0.046,0.108,0.249,0.026,0.193,0.100,0.014），再由专家对各项指标Ci用百分制打分，设某专家对Ci的打分为Vi，则该专家对服务系统的最终评分为F=，根据得分多少排序，进行比较评估。比如根据不同时间的服务评分情况，对服务质量进行纵向比较评价。结语综上所述, 建立数字参考服务质量评估体系能更好地促进图书馆网上实时服务的发展，为图书馆相应的决策、评估提供依据。在评估操作时，还可以运用加权评分法，对图书馆之间的相关服务质量进行横向比较分析。笔者提供了一种思路，希望能在有关的探讨和实践中进一步加以完善。1该统计
27、报表数字截止于2003年5月16日2为了举例方便起见，该标准B和C、A和B的对应关系值为作者给出。实际操作中，应由有关专家给定。Editors note: Judson Jones is a meteorologist, journalist and photographer. He has freelanced with CNN for four years, covering severe weather from tornadoes to typhoons. Follow him on Twitter: jnjonesjr (CNN) - I will always wonder wha
28、t it was like to huddle around a shortwave radio and through the crackling static from space hear the faint beeps of the worlds first satellite - Sputnik. I also missed watching Neil Armstrong step foot on the moon and the first space shuttle take off for the stars. Those events were way before my t
29、ime.As a kid, I was fascinated with what goes on in the sky, and when NASA pulled the plug on the shuttle program I was heartbroken. Yet the privatized space race has renewed my childhood dreams to reach for the stars.As a meteorologist, Ive still seen many important weather and space events, but ri
30、ght now, if you were sitting next to me, youd hear my foot tapping rapidly under my desk. Im anxious for the next one: a space capsule hanging from a crane in the New Mexico desert.Its like the set for a George Lucas movie floating to the edge of space.You and I will have the chance to watch a man t
31、ake a leap into an unimaginable free fall from the edge of space - live.The (lack of) air up there Watch man jump from 96,000 feet Tuesday, I sat at work glued to the live stream of the Red Bull Stratos Mission. I watched the balloons positioned at different altitudes in the sky to test the winds, k
32、nowing that if they would just line up in a vertical straight line we would be go for launch.I feel this mission was created for me because I am also a journalist and a photographer, but above all I live for taking a leap of faith - the feeling of pushing the envelope into uncharted territory.The gu
33、y who is going to do this, Felix Baumgartner, must have that same feeling, at a level I will never reach. However, it did not stop me from feeling his pain when a gust of swirling wind kicked up and twisted the partially filled balloon that would take him to the upper end of our atmosphere. As soon
34、as the 40-acre balloon, with skin no thicker than a dry cleaning bag, scraped the ground I knew it was over.How claustrophobia almost grounded supersonic skydiverWith each twist, you could see the wrinkles of disappointment on the face of the current record holder and capcom (capsule communications)
35、, Col. Joe Kittinger. He hung his head low in mission control as he told Baumgartner the disappointing news: Mission aborted.The supersonic descent could happen as early as Sunday.The weather plays an important role in this mission. Starting at the ground, conditions have to be very calm - winds les
36、s than 2 mph, with no precipitation or humidity and limited cloud cover. The balloon, with capsule attached, will move through the lower level of the atmosphere (the troposphere) where our day-to-day weather lives. It will climb higher than the tip of Mount Everest (5.5 miles/8.85 kilometers), drift
37、ing even higher than the cruising altitude of commercial airliners (5.6 miles/9.17 kilometers) and into the stratosphere. As he crosses the boundary layer (called the tropopause), he can expect a lot of turbulence.The balloon will slowly drift to the edge of space at 120,000 feet (22.7 miles/36.53 k
38、ilometers). Here, Fearless Felix will unclip. He will roll back the door.Then, I would assume, he will slowly step out onto something resembling an Olympic diving platform.Below, the Earth becomes the concrete bottom of a swimming pool that he wants to land on, but not too hard. Still, hell be trave
39、ling fast, so despite the distance, it will not be like diving into the deep end of a pool. It will be like he is diving into the shallow end.Skydiver preps for the big jumpWhen he jumps, he is expected to reach the speed of sound - 690 mph (1,110 kph) - in less than 40 seconds. Like hitting the top
40、 of the water, he will begin to slow as he approaches the more dense air closer to Earth. But this will not be enough to stop him completely.If he goes too fast or spins out of control, he has a stabilization parachute that can be deployed to slow him down. His team hopes its not needed. Instead, he
41、 plans to deploy his 270-square-foot (25-square-meter) main chute at an altitude of around 5,000 feet (1,524 meters).In order to deploy this chute successfully, he will have to slow to 172 mph (277 kph). He will have a reserve parachute that will open automatically if he loses consciousness at mach
42、speeds.Even if everything goes as planned, it wont. Baumgartner still will free fall at a speed that would cause you and me to pass out, and no parachute is guaranteed to work higher than 25,000 feet (7,620 meters).It might not be the moon, but Kittinger free fell from 102,800 feet in 1960 - at the dawn of an infamous space race that captured the hearts of many. Baumgartner will attempt to break that record, a feat that boggles the mind. This is one of those monumental moments I will always remember, because there is no way Id miss this.