1 / 67

以學生學習成效為主軸的評鑑實務

以學生學習成效為主軸的評鑑實務. 黃淑玲 博士 研究發展處研究員 99 年 11 月 18 日 國立台灣師範大學綜合大樓演講廳 202. 簡報大綱. 本會以學生學習成效為核心的評鑑 何謂學生學習成效 檢視學生學習成效的優點 學生學習成效之評量重點 高等教育評鑑中心基金會 ( 以下簡稱本會 ) 的角色. 本會以學生學習成效為核心的評鑑. 檢視評估學生學習成效：機制落實的情形，從第一週期教師本位，走向第二週期學生本位： 民國 100 年校務評鑑 行政評鑑：引導評估學生學習成效機制之建立 的情形。 民國 101 年系所評鑑

nelson
Download Presentation

以學生學習成效為主軸的評鑑實務

An Image/Link below is provided (as is) to download presentation Download Policy: Content on the Website is provided to you AS IS for your information and personal use and may not be sold / licensed / shared on other websites without getting consent from its author. Content is provided to you AS IS for your information and personal use only. Download presentation by click this link. While downloading, if for some reason you are not able to download a presentation, the publisher may have deleted the file from their server. During download, if you can't get a presentation, the file might be deleted by the publisher.

E N D

Presentation Transcript

  1. 以學生學習成效為主軸的評鑑實務 黃淑玲博士 研究發展處研究員 99年11月18日 國立台灣師範大學綜合大樓演講廳202

  2. 簡報大綱 • 本會以學生學習成效為核心的評鑑 • 何謂學生學習成效 • 檢視學生學習成效的優點 • 學生學習成效之評量重點 • 高等教育評鑑中心基金會(以下簡稱本會)的角色

  3. 本會以學生學習成效為核心的評鑑 檢視評估學生學習成效：機制落實的情形，從第一週期教師本位，走向第二週期學生本位： • 民國100年校務評鑑 行政評鑑：引導評估學生學習成效機制之建立 的情形。 • 民國101年系所評鑑 專業評鑑：機制的落實情形，與初步運作的成 果。

  4. 何謂學生學習成效（Student Learning Outcomes）? • 學生規律地上某一（些）課程，並學習。 • 學習成效面向多樣化，學生經過積極參與授課過程的經驗裡，在課程結束後所累積的專業知識、技術、與行為。 CHEA Special Report: Accreditation and Accountability. 2006. Retrieve online http://www.chea.org/pdf/Accreditation_and_Accountability.pdf

  5. 簡報大綱 • 本會以學生學習成效為核心的評鑑 • 何謂學生學習成效 • 檢視學生學習成效的優點 • 學生學習成效之評量重點 • 本會的角色

  6. 檢視學生學習成效的優點 • 學生學習的主動性 • 教師教學的目的性 • 學校發展的特色性

  7. 學生學習的主動性 • 擁有學習過程與結果(ownership)：瞭解教師預期的核心能力，學習更有重心，參與和投入更主動。 • 學習者中心(learner-centered)：與教師共同建構教與學的過程，將教師的講授內與學生學習融合。 • 發展方向：學生更清楚自己的強、弱項與程度。

  8. 教師教學的目的性 • 學生學了沒?：教師瞭解知識傳遞的效果、教與學的差距、藉由評估加以紀錄。 • 塑造學習經驗：設計學習情境 (如小組合作、畢業專題), 增加主動學習、積極參與，深化核心能力。 • 積極協助學系(程) 整體教育品質的提升。

  9. 學校發展的特色性 • 核心能力成為學校特色、區隔。 • 利害關係人瞭解學校核心價值：公告核心能力與成效,讓利害關係人(學生、家長、未來的學生雇主、補(贊)助單位、社會大眾)瞭解學校(與系所、學程)之核心價值。 • 學校特色立基於科學研究：發展目標明確、有針對性，將教育目標的內涵具體化(如培育21世紀的優秀人才、世界公民等)。

  10. 簡報大綱 • 本會以學生學習成效為核心的評鑑 • 何謂學生學習成效 • 檢視學生學習成效的優點 • 學生學習成效之評量重點 • 高教評鑑中心基金會的角色

  11. 學生學習成效之評量重點 1. 如何制訂學生核心能力? 2. 如何評量學生核心能力? 3. 如何配置課程(活動)與學習資源? 4. 如何運用學生學習成效結果？

  12. 學生學習成效之評量重點 1. 如何制訂學生核心能力? 2. 如何評量學生核心能力? 3. 如何配置課程(活動)與學習資源? 4. 如何運用學生學習成效結果？

  13. 1. 如何制定學生核心能力? • 制定原則： • 明確具體，但不狹隘； • 可觀察，才能測量； • 項目以少為多：可行、能執行為要； • 教師共同協調制定具體核心能力，並媒合院、校級較抽象的能力目標； • 行政與教學配合：由上而下、由下而上。

  14. 行政與教學配合：由下而上 • 系內 • 教師： • 首要評量者：鼓勵與資助、自願為首 • 個人自主vs.團隊合作： • a. 建立系核心能力，達成共識。 • b. 配置適切的核心能力與預期成效。 • 課程委員會: • 討論課程安排(如全系課程規劃、課程地圖等) • 系所目標與學院目標、設校宗旨。

  15. 行政與教學配合：由上而下 • 校內 • 一級主管(如副校長、教務長)的支持與推動。 • 評鑑組織 • 教育品質要求； • 推動校內品質保證的動力。

  16. 案例一：UC-Berkeley Faculty-driven, discipline-specific, locally-owned • 系、院：課程規劃、核心能力規劃自主 • 校級：教學與學術規劃室（副校長辦公室）a. 推動大學生學習創新計畫(USLI)：建立核心能力提供平台、實施成效評估實驗計畫(pilot study) b. 教授諮詢會議(FAC)檢視小型計畫 c. 評鑑組織對口單位(ALO) d.自治共享: 行政、學術議會、教授諮詢會議協商 • 評鑑組織：參與講習、提供建議

  17. 案例一：*UC-Berkeley 化工系 • 專業知識-身具數、理基礎以備工程運用與創新；-引用科學與工程法則，以利設計、分析與融合理、化體系，利於社會。 • 技能-整合現代資訊科技、電腦與工程工具並運用於工程實務;-運用口語、文字或圖表有效溝通。

  18. 案例一：*UC-Berkeley 化工系 (續) • 外顯行為-擔任知識領導者，團隊中發揮己力，有創意並獨立思考。 • 態度-體悟活到老學到老，珍惜學習機會。 • 價值觀念-運用時，體認為道義、專業道德與公民義務。

  19. 案例二：中原大學核心能力 從校到系：從抽象到具體 資料來源：許政行。(2010)。學生能力指標地圖與學習成效評估。中原大學。 學生學習成效評估諮詢會議報告，台北：財團法人高等教育評鑑基金會，民國99年8月12日。

  20. 案例二：中原大學核心能力 (續)心理系為例 系級：培育基本能力，依系所特色與學生特性制定系能力指標與定義，突顯學生於該系之核心能力表現。 培育具有心理學專業知識及敬業精神，且具人文素養之心理學人才 *教學六大目標：1.基礎心理學知識的傳授；2.心理學應用知識的教育；3.心理學知識的實踐；4.科學性思考與問題解決能力之訓練；5.團隊精神與合作之教育；6.人文素養之培養 整合 *學生十項能力：1. 專業知識分析；2. 知識分析；3. 問題解決；4. 實驗操作；5.思考統整與表達；6.實務操作與應用；7.社會責任與倫理；8.生命關懷；9.熱誠與抗壓；10.溝通與合作。 資料來源：許政行。(2010)。學生能力指標地圖與學習成效評估。中原大學。學生學習成效評估諮詢會議報告，台北：財團法人高等教育評鑑基金會，民國99年8月12日。

  21. 案例三：高雄醫學大學核心能力建制 行政流程 核心能力指標暨課程積分審議流程： 三級三審課程委員會 資料來源：鍾飲文。(2010)。課程地圖與學生核心能力雷達圖建置分享。高雄醫學大學。學生學習成效評估諮詢會議報告，台北：財團法人高等教育評鑑基金會，民國99年8月12日。

  22. 學生學習成效之評量重點 1. 如何制訂學生核心能力? 2. 如何評量學生核心能力? 3. 如何配置課程(活動)與學習資源? 4. 如何運用學生學習成效結果？

  23. 2. 如何評量學生核心能力? A. 媒合教、學與核心能力 B. 蒐集學生學習成效事證； C. 評估(assess)事證； D. 分析(analyze)學習成效。

  24. A. 媒合教、學與核心能力 課程程度低、中、高，對應評估方式： • 初階屬於記憶、瞭解，評估多圍繞記憶或瞭解正確與否。評估以是非、選擇、填空、簡易問答最常見。 • 中階多屬應用、分析、詮釋等評估方式可採案例分析。 • 高階多屬研究、創造、規劃、建構，評估方式則多屬學生發展計畫(如專題研究、課程實作等)。 • 態度、行為表現等核心能力配合專業素養內涵。

  25. A. 媒合教、學與核心能力：舉例說明 課程難易度配合預期的核心能力 • 核心能力 x、y 問題在那裡？ • 科目B的問題在哪裡？ • 貴系/校解決方式與程序為何？ • 配置態度、行為表現等核心能力？

  26. 2. 如何評量學生核心能力? B.蒐集學生學習成效事證 • 事證種類(what) • 如何蒐集 (how) • 誰評量誰 (who)

  27. B. 蒐集學生學習成效事證 *事證種類(what) • 直接事證(direct evidence) • 間接事證(indirect evidence) *資料型式質化與量化並陳,相互佐證。 *直接與間接事證相互佐證。 *校內、校外事證相互佐證。

  28. 事證種類：直接事證 • 個人層次： • 專業/臨床/臨場等表現； • 課程實作、畢業專題（研究）、學習歷程檔案。 • 全系/學程層次： • 系內教師針對核心能力，共同設計之標準測驗； • 校外會考，如證照考試、語言測驗。

  29. 直接事證案例一：高雄醫學大學 • 多元學習成效評估-評量方式多元: • 該校20個學系必修課考核方式 • ★執行成果：設計有2種以上評估方式的專業必修課程比例自52%，增加至75%。 資料來源：鍾飲文。(2010)。課程地圖與學生核心能力雷達圖建置分享。高雄醫學大學。 學生學習成效評估諮詢會議報告，台北：財團法人高等教育評鑑基金會，民國99年8月12日。

  30. 直接事證案例一：高雄醫學大學(續) • 多元的學習成效評估方式 • 1. 實作成果 • 系所學生專業核心能力OSCE評估：評估臨床技能，檢核學生蒐集病人資料的臨床知識與溝通能力。 系對學生 校對學生 • 2. 校級專業核心技能評估校級專業核心技能「基本救命術(Basic Life Support, BLS)」，97學年起納入全校大一必修。 資料來源：鍾飲文。(2010)。課程地圖與學生核心能力雷達圖建置分享。高雄醫學大學。學生學習成效評估諮詢會議報告，台北：財團法人高等教育評鑑基金會，民國99年8月12日。

  31. 直接事證案例二：銘傳大學 系對學生 資料來源：王金龍。(2010)。銘傳大學學習成果評量推動之經驗分享。評鑑雙月刊，28，p.26 。

  32. 直接事證案例二：銘傳大學(續） 系對學生：教師共同設計之標準測驗 測驗藍圖-會考: • 將重要之教學目標列出，並描述測驗中所應該包含的 內容以及核心能力。 • 釐清教學目標和學習內容的關係，以確保評量的內涵 是預期之學習結果。 • 確保試卷的品質，避免命題者隨意性和盲目性命題。 • 設計雙向細目表為命題依據。 資料來源：王金龍。(2010)。學生學習成果評量。銘傳大學。學生學習成效評估諮詢會議報告，台北：財團法人高等教育評鑑基金會，民國99年8月12日。

  33. 間接事證種類 教師對學生 • 學生學習經驗問卷調查 • 大四生問卷(senior survey)； • 畢業校友表現 (升學、工作)； • 畢業校友(2-5年) 經驗回顧問卷； • 雇主滿意度調查。 • 課前課後晤談、導生時間、出席點名等。 系/校對學生

  34. 間接事證案例-高雄醫學大學 • 畢業生就業滿意度： -「95學年度大專學生畢業後一年問卷」調查：畢業生目前工作與大學就讀科系相關程度高（非常相關佔73.4%，大部分相關佔14%），對目前工作滿意者達88%（滿意佔64.5%，很滿意佔23.5%）。 • 雇主滿意度： - 對畢業生表現在「專業能力」及「溝通能力-很滿意。-「具備多元的知能」、「具有領導能力」及「具有積極主動的精神」方面表現 -「尚可」至「表現佳」之間。 資料來源：鍾飲文。(2010)。課程地圖與學生核心能力雷達圖建置分享。高雄醫學大學。 學生學習成效評估諮詢會議報告，台北：財團法人高等教育評鑑基金會，民國99年8月12日。

  35. 2. 如何評量學生核心能力? B.蒐集學生學習成效事證 • 事證種類(what) • 如何蒐集 (how) • 誰評量誰 (who)

  36. 如何蒐集 (how) 形成性評量 (formative assessment) vs. 總結性評量(summative assessment)

  37. 如何蒐集(how)：形成性評量 • 教學過程中所蒐集到的事證 • 瞭解學生學習的過程，如平時測驗、期中、期末、課程特別設計之評量時間點

  38. 總結性評量案例-高雄醫學大學 【以X系A生專業核心能力為例】 資料來源：鍾飲文。(2010)。課程地圖與學生核心能力雷達圖建置分享。高雄醫學大學。 學生學習成效評估諮詢會議報告，台北：財團法人高等教育評鑑基金會，民國99年8月12日。

  39. 總結性評量案例-UCLA 直接、間接事證的運用方式 校對系 大學自治，自我檢視。 透過自評自我檢視，深植評鑑文化。 廣加宣傳學生核心能力，讓所有利害關係人得到訊息。

  40. 如何蒐集 (how) 規劃 • 教授可針對某特定課程、核心能力跨班級、跨學年蒐集事證。 • 學程(系)針對某特定課程、核心能力進行跨科、跨年蒐集資料，才不至於事證資料過度龐大繁雜，致使分析事證時有實際上的困難。 • 多年期規劃蒐集事證，讓事證呈現完整的趨勢，以利學系(程)改善。

  41. 2. 如何評量學生核心能力? B.蒐集學生學習成效事證 • 事證種類 (what) • 如何蒐集 (how) • 誰評量誰 (who)

  42. B. 蒐集學生學習成效事證誰評量誰 • 評量單位(Unit of Analysis)： • 評鑑組織對學校 • 學校對系所 • 系所/學程透過教師對學生

  43. 本會對學校 1. 機制完整：學習成效自評機制完整，從課程系與學校的層次分明。 2. 教師教學與資源配置妥適。 3. 學生學習與輔導資源充分、合理。 4. 成果報告對校內、外開誠佈公，並確實將評量結果作為學校改善教學之用。 5. 畢業校友追蹤，並蒐集回饋意見，以利系所持續改善。

  44. 本會對學校(續) • 尊重各校自訂之學習標準與評量機制 • 教師依據該校(系、所)評量規劃評量學生； • 學校定期進行全校性學習成果資料蒐集與分析，自我評鑑文化深植學校； • 鼓勵超越符合評鑑要求的思維，提升教育 品質為目的。

  45. 誰評量誰案例一：北亞立桑那大學(NAU) 校對系 • Office of Academic Assessment (OAA) 對各系的學生學習成效評量五大問題： • 請概述貴系過去這一年內的評量活動有哪些 (例如教師討論、設計新問卷、蒐集data、評量計畫或學習成效修正)。

  46. NAU – OAA (續) 校對系 2. 詳述特定的學生學習成效結果(各個學程分別陳述)，並說明與學習成果相關的客觀因素或情境。請附上學生學習成效結果(如77%的大四生有足夠能力做解決專業問題, 符合此大四課程的教學目標)。 3. 請描述貴系各學程如何反饋學生學習成效評量的結果(如向教師們做報告、做成報告交給系主任或是院長、公告在網站上以供學生參考、校友期刊、與學生在課內或課外討論等) 。

  47. NAU – OAA (續) 校對系 4.過去這一年，貴系如何運用學習成效的評量結果，表揚學生的成就、或改善課程(如設立學生獎項、慶祝會、庚善學程、學習目標甚至改變評量方法等等。) 5.描述過去這一年來貴系的評量計畫有何更動, 評量過程中的挑戰, 或具教育意義的經驗。

  48. 誰評量誰NAU-OAA (續) 校對系 OAA檢視各系學習成效結果之標準： • 各系如何評量學生學習成效 • 各系如何公開評量結果 • 各系所使用的評量工具之信度、效度與可行性 • 各系執行評量是否吻合當初之規劃 • 各系執行評量是否與師、生達成共識 • 評量分析是否皆包含量化與質性分析 • 評量結果是否作為設立學生獎項或促進學生學習之用 • 評量結果是否昨為庚善課程設計之依據 • 先前的校外評量是否被適當地納入改善計畫 • https://www4.nau.edu/assessment/documents/ROAR_draft_08.pdf

  49. 2. 如何評量學生核心能力? A.媒合教、學與核心能力； B.蒐集學生學習成效事證； C. 評估(assess)事證； D. 分析(analyze)學習成效果。

  50. 評量矩陣案例：銘傳大學 資料來源：王金龍。(2010)。學生學習成果評量。銘傳大學。學生學習成效評估諮詢會議報告，台北：財團法人高等教育評鑑基金會，民國99年8月12日。

More Related