IN SEARCH OF EXCELLENCE: LIBRARY ASSESSEMENT FOR SUCCESS 追求卓越:图书馆的绩效评估 Karen T. Wei 陈同丽 美国伊利诺伊大学亚洲图书馆馆长 2010年5月 中国 天津 烟台 上海 Characteristics of U.S. Public Libraries 前言:美国公共图书馆的特征 Libraries enrich lives Libraries welcome everyone Libraries offer open and easy access Libraries belong to the local community Libraries have challenges 图书馆丰富生活 图书馆欢迎每个人 图书馆提供开放和 方便的阅览 图书馆属于当地社 区 图书馆面临挑战 Outlines 大纲 Definition and purpose 评估的定义与目的 Culture of assessment 评估的文化 Why libraries perform assessment 为什麽执行 评估 Evaluation models 评价的模式 Areas need to be assessed 评估的范围和领域 Assessment practices and methods 评估的方法 Tools used for assessment评估的工具 Case studies 范例 What is assessment? 什麽是评估? Assessment is the gathering of meaningful or purposeful data that will provide information that informs, improves, or confirms. 评估是有意义的或有目地的收集一些数据; 这些数据包括了能帮助提升或肯定图书馆 服务品质的信息。 Purpose of assessment 评估的目的 Making decisions 做决定 Defending the decisions 为决定辩护 Providing the “evidence” for: 提供证据 Development of services and programs 拓展服务和项目 Improvement of services and programs 改善服务和项目 Informed decision making 明智的决定 Accountability to show others that the services and programs are effective 有责任向他人展示服务和项目的有效性 Demonstration of value or worth of an information service to the user’s life or work 示范信息服务对读者生活及工作的 价值 Why assess? 为什麽执行评估 Planning Improvement Decision making Accountability Values & worth 规划 改进 决策 负责任 经济 效益 Library assessment 图书馆的绩效评估 所有的评估方法都是用来加强决策…..我们需要 数据来帮助我们做政策规划,人员分配,馆藏 建设,和提供服务计划的决定,以期最大限度 的发挥图书馆资源和服务的效益。 “All methods of evaluation lead to enhanced decision making…. Data are needed for decisions about developing policies, allocating staff, building collections, and planning service delivery.” Public Library Assessment 公共图书馆绩效评价 图书馆服务的绩效评价可以帮助我们在管理 中,能够有足够的数据、事实、调查和分 析来帮助我们做出明智的决定,从而最大 限度地发挥图书馆资源和服务的效益。 “Decisions are based on facts, research, and analysis, and where services are planned and delivered in ways that maximize positive outcomes and impacts for customers and stakeholders.” Culture of assessment 评估的文化 一个有利评估的组织环境 这系统和结构是基于不断的评估和评价 图书馆职员有不断的衡量,评价和评估的活动 一种以客户为中心并有系统使用评估的 文化 为了改善全体职员为客户服务的能力,改进为 客户服务的成果及对服务质量的改善 价值观和奖励成果 Evaluation model 评价的模式 Resources 资源 Capability 潜力 Utilization 应用 Resources: Input measures Capability: Process measures Utilization: Output measures Impact: Outcome measures Impact 影响 投入评估 过程评估 产出评估 效果评估 Measurement and Evaluation 衡量与评价 Input measures: resources allocated (annual budget, size of collection, number of staff) 投入评估:资源分配(年度预算,馆藏规模,人员数量) Process measures: transform resources into activities (quantify time or cost to perform specific task or activity such as ordering, receiving, cataloging) 过程评估:把资源转化为活动(完成某项任务比如订书, 收书,编目所需的时间或费用) 衡量与评价 (续) Output measures: how inputs and processes are utilized (annual circulation, number of reference questions answered, number of users served) 产出评估:投入和过程中的应用(年流通量,咨 询问题总数,服务对象人数) Outcome measures: difficult to assess, relates to both individual served and to community 效果评估:难以估计,与服务对象的人数以及社区 有关 Measurement and Evaluation 衡量与评价 U.S. Institute of Museum and Library Services 美国 联邦博物馆和图书馆服务总署2006 年资料 图书馆服务 运行资金开支 馆藏 工作人员 新馆建设,旧馆更 新,馆舍维修 运行资金来源 服务区域面积 What to measure? 需要评估什麽? Client satisfaction 客户满意度 Collections and usage 馆藏及其使用 用户满意度 图书馆对教学的影响 馆藏的广度与方便存取 图书馆对研究的影响 图书馆的设施和空间 Strategic alignment 策略与务实协调 通晓行情 图书馆业务成本和服务效率 组织能力 What to measure? 需要评估什麽? 图书馆使用者和非使用者 图书馆藏书 电子资源 参考服务 技术服务 馆际互借 图书馆在线系统 客户服务 书目指导及信息素养 Assessment practices & methods 评估的方法 Needs assessment Quality improvement Performance measurement Outcome measurement 需求评估 质量改进 工作表现衡量 成果衡量 Needs assessment 需求评估 定义:找出差距或需要 卓越的公共图书馆是通过本地的条件来评 估当地社区对图书馆的需求 服务的角色或社区的反应 – 界定图书馆能 为公众提供何种服务以满足对当地社区的 特定需求 本地规划过程 - 选择并对服务回应区分优 先次序 Quality improvement 质量改进 目的: 努力改善图书馆的服务,项目或过程 全面质量管理 (Total Quality Management) 质量管理原则 (Quality Management Principles) 组织承诺, 赞助 注重过程 员工参与 客户至上 学习型组织 受数据的驱策 Dudden (2007). Using Benchmarking, Needs Assessment, Quality Improvement, Outcome Measurement, and Library Standards, p. 105-7. Performance measurement 工作表现衡量 定义:工作表现评估是用于回答本地问 题的措施: 你准备做什麽? 你达成了这项任务吗? 三种基本的衡量: 受到某种服务或项目服务的用户人数 用户对图书馆服务如何满足他们需求的意见 图书馆采用衡量尺度来决定所需的服务单位 或服务事务 Outcome measurement 成果衡量 IMLS 界定成果是要对用户有利益的: 具体而言,就是项目参与者的图书馆 技能,知识,态度,行为,条件,或 生活状况因而获得成就或改变 文献理念 图书馆和图书馆员如何 帮助用户? 如何塑造成果 示范结果系列 Outcome measurement: Public library outcomes and service responses 结果衡量:公共图书馆的成果和服务反应 基本的素养 商业及职业信息 公众聚会场所 社区推介 消费者信息 文化意识 当前的主题和标题 正规学习辅助支持 一般信息 政府信息 信息素养 终生学习 当地的历史和族谱 Tools used for assessment 评估的工具 The Public Library Service: IFLA/UNESCO Guidelines for Development 2001 公共图书馆服务:国 际图联/联合国科教文 组织发展准则 Tools Used for Assessment 评估的工具 Public Library Data Service Statistical Report http://www.ala.org/ala/mgrps/divs/pla/plap ublications/pldsstatreport/ 公共图书馆数据服务 统计报告 Tools Used for Assessment 评估的工具 U.S. State Standards – each different 美国各州的标准-每个 州都不同 Standards for Illinois Public libraries以伊利 诺伊州公共图书馆的标 准为例 Tools used for assessment 评估的工具 U.S. Institute of Museum and Library Services and National Center for Education Statistics 美 国联邦博物馆暨图书馆服务总署与国家教育 统计中心数据 http://harvester.census.gov/imls/compare/index.asp 这是对全美 9000多个公共图书馆进行统计。提 供的数据可以是个别馆的,也可以是在州和国家 为层次的 也可以选择公共图书馆进行数据比较并形成报告 Tools used for assessment 评估的工具 Hennen’s American Public Library Ratings (HAPLR)美国公共图书馆评价系统 http://www.haplr-index.com • • • • • • • • 经费 馆藏的经费比例 人均图书经费 工作人员 (每千人) 期刊 (每千人) 图书 流通费用 人均访问次数 • 馆藏借还 • 流通时间 • 流通 • 参考 • 每小时流通量 • 每小时访问人次 • 每次访问流通量 The table below compares the HAPLR rating data for the 1999 edition to that of the 2008 and 2009 editions. 美国公共图书馆评价系统 Data Number of Libraries Population served Staff (Full time equivalent) Collection Expenditure Total Expenditure Book Volumes Periodical Subscriptions Hours Open Visits 1999 Edition 2008 Edition 2009 Edition From 2008 Edition 10 Year Average 8,752 9,076 9,080 0.0% 0.4% 259,463,453 285,579,896 291,302,705 2.0% 1.2% 117,741 136,014 140,438 3.3% 1.9% $840,956,250 $1,142,839,506 $1,259,636,602 10.2% 5.0% $5,551,991,409 $8,632,693,011 $9,578,451,862 11.0% 7.3% 709,424,788 803,013,857 805,008,471 0.2% 1.3% 1,854,165 1,820,422 1,832,775 0.7% -0.1% 33,098,377 35,915,538 36,181,122 0.7% 0.9% 1,012,614,319 1,320,647,162 1,381,561,074 4.6% 3.6% Reference 284,416,840 303,914,504 294,442,201 -3.1% 0.4% Circulation 1,641,514,552 2,008,090,565 2,098,751,934 4.5% 2.8% Expenditure per capita $21.40 $30.23 $32.88 8.8% 5.4% Percent Budget to materials 15.1% 13.2% 13.2% -0.7% -1.3% Materials Expenditure Per capita $3.24 $4.00 $4.32 8.1% 3.3% FTE staff per 1000 population 0.45 0.48 0.48 1.2% 0.6% Periodicals per 1000 population 7.15 6.37 6.29 -1.3% -1.2% Book Volumes per Capita 2.73 2.81 2.76 -1.7% 0.1% $3.38 $4.30 $4.56 6.2% 3.5% Visits per capita 3.90 4.62 4.74 2.6% 2.2% Book Collection turnover 2.31 2.50 2.61 4.3% 1.3% Circulation per FTE Staff Hour 6.70 7.10 7.18 1.2% 0.7% Circulation per Capita 6.33 7.03 7.20 2.5% 1.4% Reference per capita 1.10 1.06 1.01 -5.0% -0.8% Circulation per hour 49.60 55.91 58.01 3.7% 1.7% Visits per hour 30.59 36.77 38.18 3.8% 2.5% 1.62 1.52 1.52 -0.1% -0.6% Operating Expenditure per circulation Circulation per visit Tools used for assessment 评估的工具 美国星级图书馆(America’s Star Libraries): 评价图书馆所在的社区, 组织结构, 资金, 图书 馆的领导与管理 依据下列数据 (IMLS 2006): 人均流通次数 人均访问次数 参加图书馆各种活动人次 计算机的使用 全美国 256 个图书馆被评为三星,四星和五星级 图书馆 建议各图书馆馆长依据此星级标准衡量本馆工作 始于 2008 年 (LJ) Tools used for assessment 评估的工具 Special Awards 特别奖项 Library Journal 图书馆学刊www.libraryjournal.com of the Year 年度最佳图书馆奖 Movers & Shakers 推动者和热门人物 Library Carnegie/New York Times I Love My Librarian Award 由卡内基/纽约时报主办-我喜爱的图书馆员奖 http://www.ilovelibraries.org/ Local outlets – newspapers, etc.地方渠道,报刊新闻 Tools used for assessment 评估的工具 数据收集和分析法 问卷调查 Focus groups 焦点小组 Observation 观察 Interviews 访谈 Mining the automated systems自动化系统的资料采集 Surveys 评价项目中的沟通技巧- 观众,有效的写作, 简报, 团队工作, 聆听,面谈, 电话和电子邮件沟通 美国的公共图书馆 Fate of most public libraries in U.S. is entirely a local matter 在美国大部分公共图书馆的命运 完全是由所在地决定的 Libraries enrich lives 图书馆丰富生活 Library assessment is an integral part of successful library management. It is a means and process that “libraries of all kinds are looking more closely at how and how well they are serving their users.” 图书馆的绩效评估是成功的图书馆管理的 重要组成部分。它是一种方法也是一个过 程,它是“所有各种图书馆更积极找寻如何 有效的为图书馆用户提供服务”的方法。 Wright and White (2007). Library Assessment. Series: SPEC kit, 303. p. 11. References 参考书目 Dudden, Rosalind F. Using benchmarking, needs assessment, quality improvement, outcome measurement, and library standards. New York : Neal-Schuman Publishers, c2007. Matthews, Joseph R. Measuring for results : the dimensions of public library effectiveness. Westport, Conn. : Libraries Unlimited, 2004. Nelson, Sandra S. The new planning for results : a streamlined approach. Chicago : American Library Association, 2001. Thank You! 谢谢! Karen T. Wei 陈同丽 Head, Asian Library Professor of Library Administration University of Illinois at Urbana-Champaign 伊利诺伊大学亚洲馆馆长, 教授 kwei@illinois.edu