大學校院如何建置學生學習成果評量機制?

advertisement
如何建置
學生學習成效評鑑機制?
彭森明
國立台灣師範大學
教育研究與評鑑中心
一、研習大綱
1. 為什麼要做學生學習成效評鑑?
2. 學習成效評鑑要評量哪些項目?
3. 如何建置機制,有系統、有效率地推
展評鑑及革新方案?
希望今天的研習會能帶動各校早日建置評鑑機
制,為下一波系、所及校務評鑑做好準備。
Part I. 為什麼要做學生學習成效評鑑?
一、緣起 (1-2)


大學教育快速擴張帶來大學生素質低落的隱憂。
政府及社會大眾開始關注學生在校學習成效,以
及大學文憑所代表之實質意義與價值。
上述現象,美國早在1970年代即已產生,許多學
者即建議實施學習成果評量,進行品質管控,並
提供改進辦法。到了1990年代,學生學習成效評
量,已被公認為是最有效、最具體之教學績效評
鑑方案 ,聯邦政府也要求各地區負責大學及系、
所認證評鑑之機構,加強運用各校提供之評量結
果,做為重要認證指標。
一、緣起 (2-2)



其他國家如英國、澳大利、日本、韓國等也已實
施學習成效評鑑。
國內情況已趨向與美國相似的發展。在下一波校
務評鑑時,也計劃推展以學生學習成效為主軸的
評鑑。
因此追求教學卓越化、提升學生素質與競爭力,
做好校內各項學生學習成效評量,是一項必要措
施,也是國際趨勢。
二、評鑑效益 (1-2)
–
–
–
–
–
了解學生專業學科知識與技能之學習成效與變
化。
了解學生核心能力、態度與品格、以及職場能
力之薰陶成效。
診斷學生學習弱點以及教師教學缺失,提供學
校改革之依據。
帶動學生積極投入有方向,有目標,有標竿的
學習。
促使教師進一步思考要教學生什麼、評量什麼、
以及用什麼方法評量。
二、評鑑效益 (2-2)
–
–
–
提供重要指標供稽核學校及各系所辦學資源、
策略及績效。
以學習成效來界定優良校院:一所校院,不論
大小,不論公、私立,只要能有效地達成其教
育目標,就是好校院。
總之,評鑑對學習與教學,有如航船之羅盤針,
駕車之GPS,能幫助學校有效地達成教學目的,
提升學生素質。
Part II.學習成效評鑑要評量哪些項目?
一、知識、能力、態度與品格 (1-5)

學習成效是指學生接受大學教育所獲得之知識、
技能、態度與品格 之增長與變化。因此學習
成效廣泛、多元。

大學教育主要有專業學門教育,以及共同或通
識博雅教育,因此學習成效評量應包含:
–
–
專業學門教育成效評量,以及
通識博雅教育成效評量, 含課外活動以及其他學
習環境造成的成效。
一、知識、能力與品格 (2-5)



專業學門教育旨在傳授專業學門或從事某種職
業所需之知識、技能與態度等。
博雅或通識教育主要在孕育所謂「核心能力」,
即是所有大學生,不論主修何種學門科系,都
應該具有的能力與特質,包括「基本技能」
(essential skills) 、「核心素養」或「關鍵能
力」的培養。
通識教育不單指通識學程,也應融入專業課程
之教學中。
一、知識、能力與品格 (3-5)

「基本技能」(essential skills) 、「核心素養」或
「關鍵能力」含括:
–
–
–
–
–
科學及人文基本知識 ﹔
高層次思考能力(如解決問題能力、批判思考能力、推
理能力、創造能力等)﹔
人品素養(如公民意識、家庭與社會關懷、國際視野、
價值觀、倫理與道德情操等)。
職場能力(如人際與溝通能力、領導能力、敬業精神、
負責態度、積極與自動自發精神,團隊合作能力、實踐
力、抗壓力、時間與情緒管理能力等)﹔
自主學習與進修能力 ( 包括閱讀能力、基本數理知識、
基本資訊科技能力以及資訊搜尋能力)。
一、知識、能力與品格 (4-5)


一般來說,各學科專業知識及技能、專業學科
基礎能力,以及自我學習與進修能力,比較具
體且容易界定,測驗也容易開發,因此爭議較
少。
其他職場能力、高層次思考能力,以及人品素
養等則比較抽象,其內容廣泛複雜,不容易獲
得共識,而且評量工具也很困難製作。但這些
能力的培養卻是大學教育極為珍貴的目標,是
先進國家最重視研發的評量。
一、知識、能力與品格 (5-5)

目前語文溝通能力,高層次思維能力(如批判
思考 、解決問題 、運用資訊與科技技術能
力), 以及團隊合作與敬業精神是最受先進
國家重視之核心能力。

由上述可知,學習成效相當多元,因此學校開
始實施學生學習成果評鑑時,可以依學校的辦
學宗旨與目標,選擇優先項目,進行評鑑。等
評鑑文化養成之後,再逐步增加項目。
二、與學習相關之因素
評鑑亦需同時評量與學習相關之因素,例如:
 學生投入學習之程度(engagement)
 學習機會 (programs and activity offerings)
 學習環境 (learning environment and climate)
 課程設計 (curriculum)與學習要求
 教師教學與評量方法
 教師教學與學生學習輔導措施
 學校對教學之重視與資源之投入
以便檢視教育缺失,尋求改進方案。
三、學習成效評鑑的檢核要點 (1-3)
綜合國內外現況與趨勢,未來評鑑檢核的要點,將不外
乎下列項目:
1. 檢視學校是否已建立起全校性的學生學習成果評量機
制?包括
1) 學校及各系、所是否訂定教學目標,比如學校與
系、所有無建立起學生的核心能力。學校到底想
培養學生具備哪些核心能力,必須要能清楚的羅
列出來。
2) 學校是否成立評鑑督導單位
(續下一頁)
三、學習成效評鑑的檢核要點 (續)
3) 學校是否積極對教師及學生宣導評鑑之重要性及
必要性
4) 學校是否訂定相關政策與執行方針,例如:
-- 學校是否要求系、所訂定評量方法,評量學生
核心能力,強化教師的教學與學生的學習。
-- 系、所如何適當的配置課程、經費與人力,以
使學生逐步掌握核心能力。
5) 學校是否為評鑑編列經費、提供人力資源
6) 學校是否建置評鑑資訊庫及傳播網站
三、學習成效評鑑的檢核要點 (2-3)
2. 檢視系、所對學生學習成效評量的執行情形
1) 學生學習的成效到底如何?
- 有無直接評量?結果如何?
- 有無間接評量?結果如何?
2) 與學習相關因素之資料收集、分析、與應用之情形
3) 依評量結果進行教學改進之情形
一旦學生無法達到學習目標,學校或系所有無進行
改善?例如
調整學習目標?
調整教學方法?或者
調整課程、經費與人力的配置?
三、學習成效評鑑的檢核要點 (3-3)
3. 高教評鑑中心規劃之重點

評鑑中心對學生學習成效機制已訂定自我評鑑
作業方向 (評鑑雙月刊,27期,2010.9,7-13) 。
Part III. 如何建置機制,有系統、有效率地
推展評鑑及革新方案?
一、奠定良好評鑑基礎 (1-12)
具體措施包括:
1. 明確宣示學習成效評鑑之必要性
2. 釐清學校辦學宗旨
3. 要求各學院、系所及課程詳訂具體、完整教學目標
4. 設置評鑑任務單位,配備人力與資源,展 示上級決心
5. 訂定學校評鑑方針與原則
6. 進行宣導與溝通,爭取全校師生之熱誠合作與參與
7. 要求各系、所研擬評鑑及革新實施方案
8. 要求全校使用統一評鑑架構與程序 (分別說明如下)
一、奠定良好評鑑基礎 (2-12)
1. 明確宣示學習成效評鑑之必要性

以馬利蘭大學為例,學校明確宣示
“Assessment of student learning is an important means
for improving teaching and learning in higher education.
Student learning outcomes assessment has become a
focus of national efforts to improve higher education (such
as the Spellings Commission) as well as a key concern for
higher education accrediting organizations (such as the
Middle States Commission on Higher Education). Within
institutions of higher education there is a movement
toward a “culture of assessment” that focuses attention on
student learning and the improvement of teaching. The
University of Maryland is committed to the assessment of
student learning under the direction of the Provost’s
Commission on Learning Outcomes Assessment.”
一、奠定良好評鑑基礎 (3-12)
2. 釐清學校辦學宗旨

以美國Western Michigan University, Kalamazoo為
例,其辦學目標是: 辦理以學生為中心的研究型大學,
培育學生學術思考,探究與研發能力。

再以美國Iowa State University為例,其大學教育目
標如下:
“我們期待所有大學部學生,在愛荷華州立大學就讀
期間,都能充實一般知識與技能,獲得一、兩門專業
學門高深學識,並培育優良人際溝通與領導能力,以
便未來能開創豐富的人生及有效地履行公民義務”
一、奠定良好評鑑基礎 (4-12)
3. 要求各學院、系所及課程詳訂具體、完整教學目標
(1-2)
以University of Virginia 為例,其 Civil Engineering
Program, School of Engineering and Applied
Sciences的教學目標摘錄如下,

Program Mission Statement (教學宗旨): To provide
our students with a fundamental, innovative Civil
Engineering education in a way that fosters a lifetime
of learning and leadership to address the needs of
society.
(續下一頁)
一、奠定良好評鑑基礎 (續)

Goals (教學目標)
• To provide graduates with the technical competencies
and insight necessary to practice civil engineering and
have an impact on the profession.
• To provide a solid foundation of knowledge, skills, and
abilities for successful study at leading graduate and
professional institutions.
• To promote a breadth of abilities and knowledge,
including quantitative and analytical skills,
communication skills and social insight, to allow graduates
to pursue careers in a diversity of
fields including engineering, business, management, and
information technology.
• To prepare graduates for a lifetime of learning, for
leadership, and for service to the profession and society.
(續下一頁)
一、奠定良好評鑑基礎 (續)

Program Outcomes/Objectives (學習成效目標)
A graduate of Civil Engineering:
1. Can design a component of a civil engineering system,
incorporating social, economic, ethical, and contractual
considerations.
2. Can develop a major research or design proposal for an
engineering problem, complete the analysis, and
prepare and present the results, while demonstrating an
understanding of the role and impact of engineering
research and practice on society.
3. Will demonstrate both leadership and teamwork
capabilities.
一、奠定良好評鑑基礎 (5-12)
3. 要求各學院、系所及課程詳訂具體、完整教學目標
(2-2)
再以 the University of Virginia 為例,其 general
education student learning outcomes for critical
thinking 為:

Undergraduate students graduating from the
University should be able to:
–
–
–
Carefully interpret, analyze, and evaluate evidence,
statements, graphics, questions, etc.
Construct well-supported and sustained arguments.
Justify conclusions based on well-supported
arguments.
一、奠定良好評鑑基礎 (6-12)
4. 設置評鑑任務單位,配備人力與資源,展示上級決心
以馬利蘭州立大學為例,
“the Provost's Commission on Learning Outcomes Assessment provides the
leadership and organizational procedures for our engagement in such
assessment. … The Commission's charge is to work with all academic units in
developing student learning outcomes and ongoing assessments.
The Commission is made up of four interacting groups of UM faculty and
administrators: A Steering Committee of Deans. College Coordinators, named by
each College to serve as a liaison for their respective colleges. A Planning Team
consisting of colleagues from Undergraduate Studies; Institutional Research,
Planning and Assessment; and the Graduate School. And Faculty Working Groups,
named by the Steering Committee, made up of teaching and research faculty for
specific assessment needs.”

一般大學都設立 institutional research and
assessment office,專職從事這方面的工作。目前
國內尚無此機制,值得思考改進。
一、奠定良好評鑑基礎 (7-12)
5. 訂定學校評量方針與原則 (1-2)
以美國密西根西部州立大學為例,其評量方針包括:
1. 學校之任務與責任是提供高品質的課程與教學活動,
讓學生準備好在未來錯綜複雜的世界中,能過著有生
產力與貢獻的生活。
2. 學校之學術及課外活動方案將關注學生之學術成就表
現以及其他核心能力的發展。
3. 學校將以學生學習成果以及學校持續改進與創新做為
治校績效標竿。
(續下一頁)
一、奠定良好評鑑基礎 (續)
4. 全校各部門在制訂改進行動方案時,必須審慎分析多
元評量資料。
5. 從學校層級來看,沒有任何單一教育目標要比其他優
先。
6. 科、系、所之間的複雜性與多元性無法用同一評量架
構涵蓋所有學習成果項目。
7. 任何特一知識或技能不是由特一課程、系、所或經驗
養成,因此學校評量資料不宜與單一課程或教師連結。
8.評量結果只用來檢定個別學生以及學程的強項與弱點,
做為輔導與改進之依據。
一、奠定良好評鑑基礎 (8-12)
5. 訂定學校評量方針與原則 (2-2)
再以維州大學 (University of Virginia)為例,其所採取地方針是
1. Assessments should be useful, feasible, and minimize the
burden on faculty and students.
2. Each academic program should define its own most
important outcomes.
3. Assessment methods should be kept as simple as possible
and connected to what faculty and students are already
doing.
4. The unit of analysis for learning outcomes assessments
should be at the academic program level.
5. Faculty involvement is essential.
6. Results should be actively used to make program
improvements.
一、奠定良好評鑑基礎 (9-12)
6. 進行宣導與溝通,爭取全校師生之熱誠合作與參與
推展評鑑最大的阻力是參與評鑑的人員不清楚地了解為什麼要做評
鑑,評鑑有什麼好處,評鑑結果做什麼用。
假如大部分教師及學生都不清楚評量之目的與用途,認為評量與他
/她們無關,不論是學校自主或政府推行之評鑑,其推展工作都會
有困難。
因此評量單位應利用適當機會與教師及學生進行溝通,說明
評量原由與目的,讓他/她們了解評量的重要性,對她們會有
什麼好處或利害關係,並輔導各單位運用評量資訊做決策及
改進,以降低教師之防衛心態,提高學生之熱誠參與。
(續下一頁)
一、奠定良好評鑑基礎 (續)
宣導方式包括:
1. 舉辦研習會或說明會,可以全校性或分別在
院或系、所分別舉行。
2. 印製說明書
3. 建置資訊網站,彙集各項資訊,以供宣導及
參考。
一、奠定良好評鑑基礎 (10-12)
7. 要求各系、所研擬評鑑及革新實施方案 (1-3)
評鑑主要以系、所為考核單位,所以各校都會要求校內各
系、所提出評鑑計畫並定期提出實施成果報告。
以美國為例,University of North Carolina at Chapel Hill要求
“All academic and administrative units on campus are
expected to maintain an assessment plan which articulates
its intended student learning outcomes or administrative
outcomes as appropriate. The plan must contain the
mission of the program or unit, intended outcomes,
methods to be used to measure the extent to which the
outcomes are met, and an appropriate schedule for
conducting the assessments. ”
一、奠定良好評鑑基礎 (11-12)
7. 要求各系、所研擬評鑑及革新實施方案 (2-3)
同樣地,the University of Illinois UrbanaChampaign 也要求
“All academic units develop plans to assess student
achievement in their undergraduate and graduate
programs. In the Unit Assessment Plans all academic
programs identified (a) the process followed to
develop the plan, (b) desired student outcomes, (c)
measures and methods for assessing student
achievement of the outcomes, and (d) plans to use
the assessment results for program improvement.”
一、奠定良好評鑑基礎 (12-12)
8. 要求全校使用統一評鑑架構與程序
以下是University of Virginia 爲系、所提供之評鑑七步驟。
Step 1. Begin with a brief statement of the mission and general
goals for your program.
Step 2. Identify the most important student learning outcomes of
the program.
Step 3. Identify useful and feasible assessment methods
Step 4. Develop the assessment plan and complete the
Assessment Matrix.
Step 5. Develop assessment instruments and fine-tune the
methodology
Step 6. Tabulate, analyze, and report the results.
Step 7. Communicate the findings and consider appropriate
actions
二、輔助教師落實課堂教學成效評鑑 (1-6)
1. 目標
–
–
–
–
評鑑實務工作要從學校基層做起。許多評鑑工作都須融
入教師之教學過程,以發揮其帶動學習之效能。
各系、所應要求並輔導所有授課教師詳細訂定教學目標
與要求,以及運用適當方法進行學習評量。
學校可定期為教師們舉辦評量研習活動,一方面宣導學
校評鑑政策與計畫,一方面介紹並討論各種評量原理原
則與方法,提供實例做參考,以提昇教師評量知識與技
能,引導學生從事更廣泛、更深度之學習。
研習活動中應強調教師課堂教學成果評量之主要目的在
幫助教師了解學生學習進展情形,診斷學生學習以及教
材及教法之缺失,做為改進教學之依據,而不是只為學
生打分數。
二、輔助教師落實課堂教學成效評鑑 (2-6)
2. 具體方案
1). 提交授課大綱
2). 落實教師教學評鑑
3). 提供服務與輔助
(分別說明如下)
二、輔助教師落實課堂教學成效評鑑 (3-6)
2. 具體方案
1). 提交授課大綱
許多學校會要求授課教師提供授課大綱,其中包括
(1) 明確之學習目標與標準
(2) 採用多元方式評量學習進度與成果,比如
–
–
–
辦理課前試測,以了解學生程度。
觀察學生課堂行為表現,以了解學生能力。 學生課堂參與
討論的程度可顯示學生對該課題之瞭解程度。
運用學生研究報告及其他家庭作業,檢視學生運用所學之
程度。
以口頭報告檢視學生口語溝通及表達能力。
–
(續下一頁)
二、輔助教師落實課堂教學成效評鑑 (續)
2. 具體方案
–
–
–
–
運用教師自製簡單試卷,探測學生學習進度。
實施傳統考試或小考,以檢視學習缺失。
舉行共同科目多班級教學之統一會考。
運用學生作品卷宗評審,以檢視學習成長。
(3) 於各評量方式中植入高層次能力評量,如批判、分
析、組合能力等。
(4) 兼顧通識教育核心能力評量(語文、合作、自我學
習等)
(5) 如何運用評量結果改進教學
二、輔助教師落實課堂教學成效評鑑 (4-6)
2. 具體方案
2). 落實教師教學評鑑 (1-2)

各系、所宜採用以學生學習成效為導向的教師評鑑措施。
評鑑首重明確的教學目標與詳細內容規範及學習標準。
這些目標、規範與標準也可成為教學指引,引導教師進
行教學並依指標打分數。教師亦可以將計分指標提供給
學生,讓學生清楚地瞭解教師的期望。

另外學習評鑑可幫助學校改變對教師的教學評鑑,可採
用以學習成效為主軸,將傳統以教師行為與特質為導向
的評鑑,改變為以學生行為與成效為主軸的評鑑,以便
更深入了解教師教學成效。
二、輔助教師落實課堂教學成效評鑑 (5-6)
2. 具體方案
2). 落實教師教學評鑑 (2-2)
以學生行為與成效為主軸之教師教學評量項目範例:







此課程助長我的批判思考能力
此課程助長我的自學能力.
此課程使我感到能更自在地表達意見.
此課程讓我學到如何參與討論
此課程讓我深深感到是此班級之成員
此課程提高我對此學門之興趣
此課程讓我學到很多新知識與技能
二、輔助教師落實課堂教學成效評鑑 (6-6)
2. 具體方案
3) 提供服務與輔助
(1) 舉辦研習會
(2) 提供有關資訊與諮詢服務
(3) 提供獎助,鼓勵教師運用評量結果改進教學
三、推展院、系、所教學績效評鑑 (1-7):
1. 目標
學生學習成果評鑑著重在考核系、所之教學績效,檢
視學生接受大學教育之後獲得之知識、技能以及行為、
思想及態度上之變化,以便協助教師們回答下列問題。
–
–
–
–
Are our students learning what we think is important?
Are they learning what they need to success in this field
or profession?
Should our curriculum or teaching strategies be
modified?
Are there other techniques or additional resources that
would help our students learn more effectively.
三、推展院、系、所教學績效評鑑 (2-7)
2. 具體方案
1). 實施畢業生綜合性專業學識與能力評量
2). 協助全校性核心能力評量、在校生及畢業
生問卷調查
3). 檢視各科教學教案及教學評量並提供改進
方案
4). 定期舉行院、系、所焦點座談
5). 運用評量結果改進系、所教學方案
(分別說明如下)
三、推展院、系、所教學績效評量 (3-7)
2. 具體方案
1) 實施畢業生綜合性專業學識與能力評量
–
–
–
–
標準測驗,直接評量學生學識與能力。
開授並要求本科學生必修總結性課程 (capstone
course),以專題研究報告或其它成品方式,進行
總結性評量,以檢視各學門主修學生之程度。
研究報告或其它成品除了用來考核專業學門知識與
技能之外,也可以藉此考核學生之核心能力,如批
判思考能力、解決問題能力,以及語文能力等。
此項評量適用於每一屆學生,學校可要求學生通過
此種評量才能畢業,以確保學生素質。
(續下一頁)
三、推展院、系、所教學績效評量 (續)
2. 具體方案
–
–
為了達到評審研究報告或其它成品的客觀、公平、
與正確性,除了評審委員們事先得參與討論評量規
範之外,一般都需要先制定評分手冊,詳列評量項
目與計分標準,做為評量準則。
總結性評量計分,除總分之外,亦可以針對評量細
項,分別計分。比如語文能力,可分詞彙,文法,
表達方式,思路組織與邏輯等細項,分別給分數,
然後加總成為總分。比較各細項的分數卽可知道個
人之強項與弱項,具診斷性功能,所以用此方式計
分可增加評量之資訊,使評量更有價值。
三、推展院、系、所教學績效評量 (4-7)
2. 具體方案
2). 協助全校性核心能力評量、在校生及畢業生問卷調查
全校性學習成果評量,主要包括核心能力評量測驗以
及在校生和畢業生問卷調查。
核心能力主要的有語文溝通能力以及批判思考及問題
解決能力。
這些測驗可在大一及大四上學期,採全體學生或抽樣
方式實施。評量結果可做為全校及各系、所分析比較,
因此需要各、所全力合作與參與。
三、推展院、系、所教學績效評量 (5-7)
2. 具體方案
3). 檢視各科教學教案及教學評量並提供改進方案
如前節所述,教師每學期開學前都要提交教學
大綱,而在期末也會接受學生評量。系、所主
管及教師評審委員應檢視這些資訊,確保各科
教學合乎系、所教學目標,並提出改進意見,
供教師做參考。
三、推展院、系、所教學績效評量 (6-7)
2. 具體方案
4). 定期舉行院、系、所焦點座談
–
–
–
焦點座談是一種有重點的小組座談,旨在收集深度、廣
泛的質化資料,適合於用來評量科、系、所教學措施以
及整體學生之態度、品行及價值觀等。
參與座談人員只針對選定之三至五題的議題,提供看法
與意見,因此參與座談人員之選擇非常重要,需對評量
議題有相當程度的認知,否則外行人很難提供深入、切
題的觀點與建言。
討論應不拘型式,但要鼓勵座談人員盡量發言。討論需
由一人引領。此人之職責是促進互動,確使每位參與者
都有機會發言,不為一、二人獨占,並控制時間和維持
討論不離主題。座談時間以不超過九十分鐘為宜。
三、推展院、系、所教學績效評量 (7-7)
2. 具體方案
5). 運用評量結果改進系、所教學方案
評量之主要目的在診斷缺失,以求改進。以the University
of Illinois at Urbana-Champaign, 為例,其改進方案很多,
最常見的是下列幾項:
–
–
–
–
–
–
–
–
Revised/redesigned curriculum
Added new course(s)
Revised course(s)
Changes of course requirements
Improved outcomes assessments
Improved monitoring of student progress
Modified qualifying exam procedures
Developed new concentration or minor
四、推展全校性整體教學績效評鑑 (1-9)
1. 目標
有些評鑑工作是全校性跨領域的,宜由校級評
鑑任務單位統籌規劃與執行,以利有效運用資
源,提升評鑑效率與品質保證,以及有效推動
跨校院及系、所比較。
四、推展全校性整體教學績效評鑑 (2-9)
2. 具體方案
1) 彙整現成資料,編製學習成果指標
2) 定期實施學生核心能力測驗
3) 定期實施間接性評量
4) 定期實施畢業生追蹤調查
5) 要求院、系、所定期提交評鑑及革新實施
成果報告
6) 定期舉行焦點座談
7) 將評鑑做為學校改革之一環,依據評鑑結
果改進教學環境與措施 (分別說明如下)
四、推展全校性整體教學績效評鑑 (3-9)
2. 具體方案
1) 彙整現成資料,編製學習成果指標


資料收集不容易,不僅費時、費力,而且又會增加
相關人員之工作負擔,因此應盡量減少重複收集資
料的現象。負責評量的單位可先從檢視學校現有教
務及學務資料開始,建製學校及系、所多元的學習
成果指標,然後再逐漸推展到全面性的能力測驗,
以降低對學校與學生的壓力。
現成的學校資料很多,包括學生修課情形,準時畢
業,以及轉、休、退學百分比等,可用來評量學生
在校學習行為及表現。
(續下一頁)
四、推展全校性整體教學績效評鑑 (續)
2. 具體方案


另外亦應先採用合適的政府或專業機構舉辦之證照檢定結
果,來編製學習成果指標。證照檢定,如律師、會計師、
精算師、工程師、程式設計師、系統設計師、廚師以及教
師等由專業團體或政府以專業標準與要求所舉辦之檢定考
試,以及一般國家公務人員高普考、技術人員考試等,都
有全國統一標準,具公信力。
還有政府機構或民間研究機構往往已有可用之資料庫,比
如目前台灣教育部資助之全國大專畢業生流向平台,已有
完整系統運作,提供豐富畢業生追蹤資料,可供各校使用
與比較。資料包括畢業後之流向(就業、深造),工作是
否符合所學專長,上研究所時是否轉修其他學門,是否考
取證照,是否通過相關檢定考試,以及職場表現(職位、
職務、薪資)等,藉由這些行為表現可以推論大學教育成
效 (http://www.cher.ntnu.edu.tw)。
四、推展全校性整體教學績效評鑑 (4-9)
2. 具體方案
2) 定期實施學生入學時及畢業前核心能力測驗


學校可針對某些核心能力,如寫作溝通能力,批判思考能力,
論證分析能力,以及解決問題能力等,設計測驗卷,或以成
品集,檢測學生之程度與成長。雖然這些能力不容易評量,
但卻是大學教育極為重要的成果,受到國際重視。
目前許多美國大學推展此種評量,其中常見的測驗有「教育
測驗服務中心」 (Educational Testing Service) 研製的
「學術技能程度評量」(Measures of Academic
Proficiency and Progress)﹔密蘇里大學評量資源中心
(University of Missouri-Columbia Assessment
Resource Center) 所推動的「大學基礎學科知能測驗」
(College Basic Academic Subjects Examination);
(續下一頁)
四、推展全校性整體教學績效評鑑 (續)
2. 具體方案



美國大專校院考試中心 (American College Testing) 研製
的「大學學習成果評量」 (College Outcome Measures
Program) ﹔ 以及「美國教育補助委員會」(Council for
Aid to Education, CAE)所研製的「大學生學習評量」
(Collegiate Learning Assessment)。
可惜國內目前尚無此種測驗,有待政府或學術專業機構輔
助研發。
此項評量,可依學校情況,對每屆學生在大一及大四時實
施,檢視學生之成長,或每隔三、四年進行一次,也可以
採用抽樣方式,只推估群體學生之能力。
測驗宜先做小型試測,檢測測量效度與信度,確保評量內
容與程序品質。有了成功經驗之後再擴大方案,可以避免
許多困擾與阻礙。
四、推展全校性整體教學績效評鑑 (5-9)
2. 具體方案
3) 定期實施間接性評量

依據過去許多研究發現,知道一些學生行為,例如積極投入
學習活動以及在校學習態度與行為表現(如準時繳作業、上
課不遲到、不缺席、積極參與討論、熱心學校活動等),與
學習成果有高度相關。這些行為又可以客觀、正確地評量,
資料收集比較容易,因此可以用評量這些行為之結果來間接
地推測學生學習成果 (簡稱間接性評量)。比如美國印第安納
大學 (Indiana University, Bloomington) 所設計之「大學生
學習經驗問卷調查」(College Student Experiences
Questionnaire Assessment Program ) 以及「全國性學生
學習投入程度調查」(National Survey of Student
Engagement ) 等,都可以用來做間接地推估學生學習成果。
這種方式亦可幫助學校及教師找出學習過程缺陷,做為改進
教學或學習之依據,因此目前被美國大學校院廣泛使用。(續下
一頁)
四、推展全校性整體教學績效評鑑 (續)
2. 具體方案

國內也有類似調查,如教育部贊助國立台灣師範大學
教育研究與評鑑中心所進行之大一及大三學生調查,
收集豐富資料,包括學習經驗、自我能力評量、以及
對學校各項措施與學習環境等滿意度等。這些資料,
可供各校院及、所分析。詳情請參閱國立台灣師範大
學「全國高等教育資料庫整合計畫」網站,網址是:
http//www.cher.ntnu.edu.tw。
四、推展全校性整體教學績效評鑑 (6-9)
2. 具體方案
4) 定期實施畢業生追蹤調查
畢業生之成就與表現是學校素質之一項良好表徵,因此學校應定期
實施畢業生追蹤問卷調查,由學生自行報告在校學習行為及畢業後
之表現等,並表達個人思想與態度等心理意識,以及對自己各種知
識與能力的認知。
我國自2004年以來,在國科會及教育部贊助下,已建置大學
畢業生流向平台,定期收集資料,可供各校院及系、所分析使
用。資料內容豐富,除就業與進修狀況與表現之外,亦有對學
校各方面的回饋意見。各校可自行分析自己學校之資料,進行
校內各學院或科、系間之比較,也可參照全國各類型學校之資
料,進行同儕學校之比較。詳情請參閱國立臺灣師範大學「全
國高等教育資料庫整合計畫」網站:
http//www.cher.ntnu.edu.tw。
四、推展全校性整體教學績效評鑑 (7-9)
2. 具體方案
5) 要求院、系、所定期提交評鑑及革新實施成果報告
以美國為例,University of North Carolina at
Chapel Hill要求
“Each academic year, the unit is responsible for
submitting to its Dean or Vice Chancellor’s office
a report describing the assessments conducted,
a summary of the results, and how the results
have been used to improve student learning or
administrative expectations.”
四、推展全校性整體教學績效評鑑 (8-9)
2. 具體方案
6) 定期舉行焦點座談
如系、所舉行之焦點座談一樣,主要目的在收集深度、
廣泛的質化資料,用來評量學校教學措施以及整體學
生之態度、品行及價值觀等。學校可分別邀請主管、
教師、在校學生、畢業生以及家長和校外人士參與座
談,針對選定之三至五題的議題,提供深度看法與意
見。
參與座談人員之選擇非常重要,需對評量議題有相當
程度的認知,否則外行人很難提供深入、切題的觀點
與建言。
四、推展全校性整體教學績效評鑑 (9-9)
2. 具體方案
7). 將評量作為學校改革之一環,鼓勵各系、所及教師運用
評鑑結果改進教學環境與措施
一旦學生無法達到學習目標,學校或系所應積極進行改善工作,例
如調整學習目標,調整教學方法,或者調整課程、經費與人力的配
置等。不同的科、系學門往往有不同的問題,需要不同的改進措施。
當評量被學校列為推動改革之一環時,評量才最有可能引導改進,
只有在決策者積極徵詢實徵評量資訊做為決策依據的情況下,評量
才最有可能引導改進。在一個明顯重視並積極改進教學與學習的校
園,評量的貢獻最大。在這種校園內,推展改革,提升教育成效應
是學校領導人的首要目標,改進教學品質應是學校規劃,經費預算,
人事調整的重心。在這種校園內,學生學習成果自然是決策主環之
一,決策者會積極徵詢實徵評量資訊,因此評量最能發揮引領改革
工作之效益。
全校性評量範例 (1-2)

Western Michigan University
–
–
–
–
通識教育評量:分三面向:通識教育目標是否達成,
課程開設與分佩是否合適,評量結果是否顯示學生
已具備學習專業學門的準備。
大學部學生及研究生主修學科學習成果評量:其目
的在評量學生主修學門的知識與技能。採用多元評
量策略,由系所決定。每四年執行一次。
學生參與及投入學習狀況調查及滿意度調查:評量
學生在學校參與學習及課外活動之情形,並檢視學
校所提供之機會與服務是否與學生期待相符。
全校性學生服務績效評量。
全校性評量範例 (2-2)

George Mason University -- Mason’s General Education
program comprises twelve areas of study
–
–
–
–
–
–
–
–
–
–
–
–
Quantitative reasoning
Scientific Reasoning
Written communication
Oral communication
Information Technology
Critical thinking
Arts
Literature
Western civilization
Social and behavioral sciences
Global understanding
Synthesis
五、建置評鑑資料庫

為永續發展,學校應建置評鑑資料庫及網站,
以倉儲並傳播有關評量資訊與經驗,供教師參
考。

評鑑單位應彙集學校相關資料,包括學生背景、
學習環境、各項教學資源之運用、學習輔導、
社團活動等,以便做深入分析,探討影響學生
學習之相關因素,提供給行政主管及教師做改
進之依據。
六、建置評鑑資訊網站 (1-3)

許多美國大學校院都有評量網站,傳播評鑑資
訊給教師,增進教師評鑑知識與能力。以加州
柏克萊大學 (University of California at
Berkeley) 為例 ,其網站一方面報導學校動態,
一方面提供校內不同學院、系、所以及教師使
用的學生學習評量實例,供教師參考或取用。
六、建置評鑑資訊網站 (2-3)

再以加州州立大學洛杉磯分校 (California
State University, Los Angeles) 為例,其網
站列述各種資訊與工具,以超連接方式,提供
教師做為課堂或系所評量之參考或使用, 包
括評量架構與標準 (Rubrics), 評量計畫案例
(Assessment Plans), 樣版格式或表格
(Templates), 和標準與能力指標
(Standards/Competency)。
六、建置評鑑資訊網站 (3-3)

又如紐約州立大學,歐本尼分校(State
University of New York at Albany)設立網站 ,
鍊結到許多有關資源網站,提供教師有用之資訊,
包括一般資訊 (General Information),整合式課
程 (Capstone Courses),融入課程教學之評量
措施 (Course-Embedded Assessment),實作
導向之評量 (Performance-based Assessment),
學生成品集評量 (Student Portfolios),以及各式
測驗 (Tests)等相關文件及範例。其內容相當豐
富,提供對教師們很大的幫助,值得借鏡。
Part IV 結語
一、總結 (1-2)




推展學生學習成效評量是保障學生素質最有效
方法,是國際趨勢。
近年來國內重視教學卓越化以確保學生高尚素
質,因此推展學習成效評鑑,是一項必要工作。
各校院宜儘早設置評量機制,以達成此項工作。
學習成效多元,學校必先明訂教育目標,界定
學習評量範疇,採取適當方式評量。
評量宜由教師課堂教學評量做起。教師需熱忱
參與。
(續下一頁)
一、總結 (2-2)



學校應有校級任務單位,負責統籌規畫與執行評量。
學校應將學習成效評鑑納入學校改進方案,依據評鑑
結果提出具體方案,進行改革。只有在決策者積極徵
詢實徵評鑑資訊做為決策依據的情況下,評鑑才會受
到重視,才會受到師生之支持。
評鑑中心對學校的評鑑,其重點應在檢視學校所設計
的評量機制是否完整適當,是否能確切地評量學生學
習成效,是否善用評量結果改進教學,達成學校教育
目標,指出其優缺點,並提供改進建言。
二、參考資訊網站
Website of Selected Universities
1. George Mason University: https://assessment.gmu.edu/
2. State University of New York at Albany:
http://www.albany.edu/assessment/index.html
3. University of Illinois Urbana-Champaign:
http://cte.illinois.edu/outcomes/unit_assess.html
4. University of Maryland at College Park:
https://www.irpa.umd.edu/Assessment/LearningOutcomes/
5. University of Massachusetts at Amherst:
http://www.umass.edu/oapa/oapa/index.php
6. University of Michigan:
http://www.provost.umich.edu/reports/slfstudy/ir/assessment.html
7. University of North Carolina at Chapel Hill: http://oira.unc.edu/
8. University of Texas at Austin:
http://www.utexas.edu/academic/ctl/assessment/outcomes.php
9. University of Virginia:
http://www.web.virginia.edu/IAAS/assessment/assessment.shtm
10. University of Washington:
http://www.washington.edu/oea/services/research/assessment/index.html
11. University of Wisconsin: http://www.provost.wisc.edu/assessment/
12. Western Michigan University: http://www.wmich.edu/poapa/assessment/
Download
Related flashcards

Corporate governance

23 cards

System administration

65 cards

Management

61 cards

Corporate governance

32 cards

Create Flashcards