教學評量 1. 從 TASA 談起 2. 教學評量的意涵 3. 多元評量的種類 4. 教學現場的實施 5. 教學評量的未來展望 陳新豐屏東教育大學初等教育學系助理教授
教學評量理論與實務研討會台灣學生學習成就資料庫之建置 TASA:Taiwan Assessment of Student Achievement 國內長期缺乏量化指標和標準化測量工具來檢視學生學習成就的表現及其差異, 以致無法確實瞭解課程實施的成效, 亦不利於課程發展之進行與相關教育政策之研擬 ( 國內 ) 針對全國國民中小學 高中職學生之學習成效如何, 目前尚無跨年級 跨學科之學生學習成就長期性的資料庫 隨著國際互動日益密切, 國內急需建置一完整且客觀的學生學習成就資料庫, 以利客觀且量化的國際比較 當資料庫建置完成, 可提供國內專家學者或學術單位進行基礎性研究 ( 美國 )
教學評量理論與實務研討會研究目的 針對上述背景及動機, 特提出本研究計畫, 建置台灣學生學習成就評量資料庫 其主要目的如下 : 一 建立國民中小學及高中職學生學習成就長期資料庫, 以追蹤 分析學生在學習上變遷之趨勢, 進而檢視目前國家教育體制與政策實施之成效 二 瞭解國內學校教育之現況, 作為教育部研訂課程與教學政策, 縣市政府教育局及學校推動補救教學之重要參據 三 分析學生在學習成就上之表現差異, 藉此評估學生未來在學術方面能力之發展與社會期許 四 提供完整 標準化的量化資料, 以供國內外相關研究人員深入探討學生學習成就方面的相關政策議題 五 建立本國學生學習成就評量資料庫, 同時考慮與國際接軌, 利於加入國際比較行列, 藉以瞭解台灣教育之獨特面與優缺點
教學評量理論與實務研討會資料庫架構圖
教學評量理論與實務研討會資料庫內容設計 一 資料庫將以趨勢研究 (trend study) 為主要建置骨幹, 對國小 國中 高中職等三個教育階段進行施測 然而為更進一步瞭解其環境脈絡 (context), 藉以提昇施測結果分析之全面性 (completeness), 將取小部份具代表性的樣本進行追蹤小組研究 (panel study) 二 資料庫主要以學科屬性劃分, 例如 自然學習成就評量資料庫 再依其學科屬性分為國小 國中 高中職等三個教育階段
教學評量理論與實務研討會資料庫內容設計 三 資料庫內容主要包含國語 ( 文 ) 英語 ( 文 ) 數學 自然科學 社會等五個學科領域, 以分年建置方式逐步完成 測驗內涵包括認知 技能 情意三大層面, 初步規劃以認知層面為主, 技能及情意部分則採小規模方式研發 四 資料庫內容主要在收集學生學習成就表現方面的資料, 對於影響學生學習成就之相關因素, 亦將同時進行資料的蒐集 影響學生學習成就之相關因素, 將由問卷研發小組負責
教學評量理論與實務研討1. 為確保 臺灣學生學習成就評量資料庫 之建立所抽取之樣本具全國代表性, 本研究採分層隨機抽樣, 全面平均分配樣本, 確保所施測之樣本具有全國代表性 2. 因台灣各縣市人口多寡有異, 為充分顯現台灣學生學習成就實際表現情形, 將採二階段隨機抽樣設計 3. 第一階段為分層叢集隨機抽樣, 根據全國二十五縣市 鄉鎮人口密度及班級數等三個變項進行分層, 抽取樣本學校名單 4. 第二階段則根據所抽取到之樣本學校所分配的抽樣學生名額, 以學生個人為單位, 於該校六年級學生名單 ( 排除 12 類障礙類別及在家教育者 ) 中進行簡單隨機抽樣, 抽取樣本學生, 如下圖所示 : 5. 12 類障礙類別包括 : 智能障礙 視覺障礙 聽覺障礙 語言障礙 肢體障礙 身體病弱 嚴重情障 學習障礙 多重障礙 自閉症 發展遲緩及其他顯著障礙, 在家教育者亦排除在外 會抽樣設計 ( 一 )
教學評量理論與實務研討會抽樣設計 ( 二 )
教學評量理論與實務研討會抽樣設計 ( 三 )
教學評量理論與實務研討會研究工具 一 本研究將參考國民小學九年一貫課程綱要 高中職課程綱要內涵 各版本教科書內容及國際試題, 發展標準化成就測驗工具 二 每一學科將建立具有複本之測驗工具, 測驗時間以四十分鐘為限, 試題將依其學科領域作適當的考量 題型以選擇題為主, 輔以非選擇題部分 ( 例如 : 實作題 performance exercise 情境開放試題 open-ending exercise) 之施測 三 除發展各學科領域的測驗評量工具, 亦將編製問卷, 針對學生本人 家長 老師及學校行政人員進行問卷調查, 以蒐集影響學生學習成就相關因素之資訊
教學評量理論與實務研討會測驗與評量的昨日與今日 漢朝與隋唐時代的科舉制度 英國 Francis Galton(1822~1911) 現代心理測驗運動之父 Jams McKeen Cattell(1860~1944) 首先使用心理測驗 (mental tests) 1905Alfred Binet & Throdore Simon(1837~1961) 比西量表 (Binet & Simon Scale) 行為主義的興起 第一次世界大戰 / 第二次世界大戰 資訊科技的發明與進步 電腦化適性測驗 (computerized adaptive testing) Missing concept 的教學 Intelligent tutoring system E-learning
教學評量理論與實務研討會測驗與評量的關係 考試 (examination) 測驗 (testing) 評量 (assessment) 評定等第評估 (evaluation) : 對數量下價值判斷價值判斷 (valuing) 觀察分數測量 (measurement) : 以數字來量化特質量化 (scaling) 評量 (assessment) 筆紙測驗 其他工具 測驗 (tests) : 一種工具 例如 : 成就測驗, 興趣測驗, 態度測驗等 例如 : 評定量表, 檢核表, 觀察記錄, 投射工具等 測驗, 測量, 評量, 評估的關係 ( 引自余民寧, 民 86,p.35)
教學評量理論與實務研討會測驗與評量的道德議題 測驗可能侵犯學童的隱私 測驗可能帶來焦慮並干擾學習 測驗難免會將學童分類, 以致影響學生自尊 測驗可能對創意高或聰明的學童不公平 測驗可能對語文能力較差的人不公平 測驗的範圍只能涵蓋學習成果的一部分 測驗可能會帶來自我應驗的效果 (selffulfilling prophecies)
教學評量理論與實務研討會評量的趨勢 靜態評量 (static assessment) 變為動態評量 (dynamic assessment) 機構化評量 (institutional assessment) 變為個人化評量 (individual assessment) 單一評量 (single assessment) 變為多元評量 (multiple assessment) 虛假評量 (spurious assessment) 變為真實評量 (authentic assessment)
教學評量理論與實務研討會教學評量與教學目標的結合 評量 : 任何可以用來了解學生目前學習狀況的方法 有意義的學習 陳述性與程序性知識 表面 (surface: 外顯 ) 與深度 (deep: 內隱 ) 的知 1. 傳統的包袱 2. 教學評量的基礎 ( 認知 ) 3. 連結教學與評量的階段
教學評量理論與實務研討會背景 ( 學習方法 ) 機械式學習 1. 被動學習 2. 強調死記 3. 重複練習 4. 無趣 5. 適合無背景知識者 有意義學習 1. 強調主動 2. 強調理解 3. 新舊概念間的聯結 4. 活潑有趣 5. 適合有背景知識者
教學評量理論與實務研討何謂 有意義學習? 意義 : 會指學習者主動將新學習的概念, 連結成關聯到他原有原有的認知結構中既存的概念上, 以統整成為一個更龐大的認知結 構 ( 所謂認知結構, 即是指長期記憶中的知識結構或結構性知識 )
教學評量理論與實務研討會D.P.Ausubel 的名言 如果我必須把所有的教育心理學理論化約成一個原則的話, 我寧願這麼說 : 影響學習的一個最重要的因素, 即是學習者已經知道的事 (what the learner already knows), 只要確信這一點, 並且以此作為教學的依據即可
教學評量理論與實務研討會有意義學習的條件 學習材料本身必須是有意義的 學習者必須具備與該項學習相關的知識或概念 ; 即具備所謂的 先備知識 或 概念架構 學習者必須顯示出有意義學習的心向 ; 即願意為自己的學習負起責任
教學評量理論與實務研討會 孩子的世界 的概念圖
教學評量理論與實務研討會教學評量的傳統包袱 標準本位 常態分配本位 缺點本位 評量本位
教學評量理論與實務研討會評量與教學連結的基礎 統整教學與評量, 教學者必須了解的三個前提 : 成為未來世界的成功者, 學生需要知道或學會什會 多元的評量向度如何運用 成功的評量情境如何設計 成功的學習之評量指標 Stiggins(1994): 教師面臨的三大挑戰 社會教育改革的輿論 學習結果的定義更複雜 社會變遷的速度 (whitehead,1929: 僵化的知識 (inert knowledge)) 瞭解的表現 發現問題與解決問題的能力 :Dewey(1965) 發現了問題, 等於解決了問題的一半 學習思考與態度
教學評量理論與實務研討會Bloom 教育目標分類系統新舊版本對照圖 ( 譯自 Anderson et al, 2001, p.268)
教學評量理論與實務研討會評量與教學連結的基礎 成功的多元評量向度 多元處方箋理論 (prescriptive assessment) 符合學習理論的學習項目成為評量與課程設計的目標 從學生學習的各向度去評析學習, 了解學習的全貌 多元評量 多元資訊 多元領域及多元目標
教學評量理論與實務研討會評量與教學連結的基礎 成功的評量情境設計要素 清楚傳達成功表現的指標 學生特質 ( 個別差異 ) 課程內容與特性 評量媒體與資源 教學回饋 ( 評量結果的決策與教學結果的回饋 ) 知識的建構方面 教學模式的效果 ( 標準教學 開放教育或建構式教學 特殊教育教學程序 ) 學習動機 ( 動機與焦慮 )
教學評量理論與實務研討會連結評量與教學的階段 評量的目的 : 教育政策 學校行政人員及策劃者 教師的教學 父母與學生的決策 Nitko(1992) 安置決策 診斷決策 監控決策 成就決策 安置與教學前決策 : 起點行為 監控與診斷決策 : 評量項目的難度及評量資料對學生的解讀程度 成就與後測決策 : 總結性評量
教學評量理論與實務研討 評量必須反映有價值的學科內容本質 評量必須具備實用性, 而不是訓練學生成為考試的機器 適切性教學評量應注意原則 : 評量應符合學習心理會 評量必須是豐富的且是整合性的 評量應重發現問題和形成問題的技巧 評量應包括多元的解決方法和解決途徑, 鼓勵學生多元的表現
教學評量理論與實務研討會多元評量的策略 教學評量的發展趨勢 知識結構取向, 如課程本位評量 (curriculumbased assessment), 圖形評量 (graph-based assessment) 情境 行動取向, 如真實評量 (authentic assessment) 實作評量 (performance assessment) 檔案評量 (portfolio assessment) 生態評量 (ecological assessment) 等 準確 效率取向, 如電腦化測驗 (computer-based testing) 互動 協助取向, 如動態評量 (dynamic assessment)
教學評量理論與實務研討會演講結束 敬請指教
教學評量理論與實務研討會國內目前建置之教育資料庫 建置一完整且客觀的全國性學生學習成就資料庫, 是刻不容緩的工作, 以縱向瞭解學生的學習表現, 特別是在九年一貫課程實施之後, 作為日後決策之參據 就國內而言, 建置中的教育資料庫主要有 : 1. 台灣教育長期追蹤資料庫 ( TEPS ), 主要在蒐集全國中等學校學生在身心發展 學習活動 學習成就表現及其影響因素的多面向資料 ; 2. 台灣高等教育資料庫之建置及相關議題之探討, 在建立有關全國高等教育校院特質與狀況 課程 經費 校園環境設備 校園文化 各科系在校學生素質 學習行為與表現 各學門畢業生 以及教職員素質等資料的全國性資料庫
教學評量理論與實務研討會美國建置之教育資料庫 美國對於評量該國學生學習成就及國際性的比較接軌一直不遺餘力, 且頗有成就, 值得我國借鏡效法 以國際性來說, 四個有關學生成就評量的整合型研究計畫簡略如下 : 1. 國際數理趨勢研究 (The Trends in International Mathematics and Science Study, TIMSS) http://timss.bc.edu/ 2. 國家教育進展評量 (National Assessment of Educational Progress, NAEP) http://nces.ed.gov/nationsreportcard/about/ 3. 國際學生評量 (Program for International Student Assessment, PISA) http://nces.ed.gov/surveys/pisa/aboutpisa.asp 4. 國際閱讀發展研究 (Progress of International Reading Literacy Study, PIRLS) http://timss.bc.edu/
教學評量理論與實務研討會影響學生學習成就之相關因素 資料庫內容主要在蒐集學生學習成就表現方面的資料, 亦將陸續蒐集影響學生學習成就之相關因素 所謂影響學生學習成就之相關因素, 大致可歸納為五大類 : 1. 學生個人基本資料, 包括性別 居住地 在校學期成績 喜歡科目 交友情形 課餘的學習情形 ( 如補習 上才藝班 ) 2. 學生家庭資料, 包括家庭結構 家庭經濟, 父母教育程度 婚姻狀況 社經地位 父母對子女的教養態度 教育期望及家庭讀書 生活環境 ; 3. 班級結構, 包括人數 編班情形 班級氣氛 ; 4. 教師的教學方式與策略 (pedagogies and instructional strategies) 教學態度 與學生相處情形 5. 學校規模等