網 頁 多 媒 體 試 卷 編 輯 系 統 的 發 展 與 應 用 - 電 腦 化 自 我 導 向 練 習 與 課 堂 評 量 Develop a web-based test-sheet authoring tool for self-regulating drill and classroom assessment 李 忠 憲 賴 阿 福 臺 北 市 立 教 育 大 學 資 訊 科 學 系 摘 要 本 研 究 主 要 目 的 在 於 設 計 一 套 以 網 頁 為 基 礎 的 互 動 式 多 媒 體 網 頁 試 卷 編 輯 工 具 ( 名 為 Gentest), 它 具 備 多 媒 體 題 型 編 製 測 驗 計 時 自 動 評 分 即 時 回 饋 等 功 能, 除 了 可 以 做 為 課 堂 測 驗 工 具 之 外, 還 能 提 供 離 線 測 驗 ( 下 載 後 ), 運 用 於 自 我 導 向 練 習 為 驗 證 系 統 適 用 性, 本 研 究 以 臺 北 市 某 國 小 五 年 級 健 康 與 體 育 領 域 為 例, 探 討 學 生 對 網 頁 化 形 成 性 評 量 的 態 度, 並 針 對 使 用 過 該 系 統 的 教 師 進 行 訪 談, 以 了 解 對 該 工 具 的 使 用 評 價 關 鍵 字 : 網 頁 化 測 驗 網 頁 試 卷 多 媒 體 試 題 自 我 導 向 練 習 課 堂 評 量 Abstract The main purpose of this study is to develop a web-based multimedia test-sheet authoring tool whose name is Gentest. The functions of Gentest include multimedia test item authoring, on-line and off line testing, test time control, automatic scoring, real-time feedback. It can be used for self-regulating drill and practice, and classroom assessment. In order to investigate the suitability of the system application, this study conducted a formative assessment experiment on the 5 th grade in the health and physical education domain and surveyed the learners attitude toward web-based test. To collect the comment from the teachers ever employed Gentest, this study interviewed the teachers as well. Keywords: Web-Based Test, Web-Based Test-Sheet, Multimedia Test Item, Self-Regulation Drill, Classroom Assessment. 1. 研 究 動 機 與 目 的 近 年 來 資 訊 科 技 融 入 教 學 的 應 用 被 廣 泛 討 論, 並 實 際 導 入 到 中 小 學 教 育 現 場 [1], 電 子 化 教 材 的 開 發 成 為 教 師 的 基 本 資 訊 素 養 [2], 從 早 期 的 教 學 文 件 電 子 化, 到 多 媒 體 電 子 簡 報, 再 進 一 步 演 變 成 網 頁 化 數 位 教 材 [3], 如 何 運 用 無 所 不 在 的 網 際 網 路 優 勢, 成 為 新 一 代 數 位 教 材 製 作 的 重 心 然 而 製 作 多 媒 體 網 頁 化 教 材, 對 於 一 般 老 師 來 說, 門 檻 依 然 太 高, 必 須 求 助 於 商 業 應 用 軟 體, 例 如 :MicroSoft Producer Adobe Captivate 大 多 數 使 用 工 具 所 製 作 出 來 的 網 頁 互 動 功 能 有 限 ( 例 如 :MicroSoft Producer), 學 生 的 學 習 活 動 僅 止 於 靜 態 閱 讀, 閱 讀 內 容 可 能 為 文 字 圖 片 或 影 片, 所 提 功 的 互 動 效 果 也 僅 止 於 點 選 要 閱 讀 的 章 節 少 數 工 具 所 提 供 的 互 動 效 果, 則 必 須 依 靠 特 殊 的 多 媒 體 技 術, 例 如 :Java Applet 或 Flash 網 頁 教 材 所 提 供 的 互 動, 主 要 目 的 是 提 高 學 生 學 習 興 趣 引 起 學 習 動 機 操 作 虛 擬 環 境 或 模 擬 資 料 以 觀 察 變 化 透 過 互 動 遊 戲 進 行 練 習 透 過 互 動 測 驗 檢 核 學 習 成 果 等 尤 其 是 互 動 測 驗 除 了 可 以 檢 核 學 生 的 學 習 成 果, 還 可 以 讓 學 生 澄 清 價 值 形 成 概 念, 並 進 而 調 整 自 己 的 學 習 步 調, 視 需 要 複 習 或 深 究 教 材 的 內 容 互 動 功 能 及 多 媒 體 表 現 將 測 驗 轉 換 成 遊 戲 型 式, 能 刺 激 學 生 反 覆 練 習 的 意 願, 這 是 電 腦 化 測 驗 所 帶 來 的 優 勢 近 年 來 的 電 腦 化 測 驗 多 集 中 焦 點 於 適 性 化 測 驗 的 研 究, 較 少 著 墨 於 多 媒 體 題 型 與 批 閱 功 能 的 開 發, 至 於 課 堂 教 學 應 用 與 自 我 導 向 練 習 所 需 要 的 可 攜 性 和 互 動 性 相 關 研 究 更 是 付 之 闕 如 一 套 能 適 用 於 課 堂 評 量 與 自 我 導 向 練 習 的 電 腦 化 測 驗 系 統, 應 具 備 以 下 特 性 :1) 能 遠 端 連 線 管 理, 隨 時 隨 地 更 改 試 題 ;2) 能 提 供 分 享 試 卷 以 及 合 作 編 製 試 卷 的 機 制 ;3) 試 卷 需 能 使 用 瀏 覽 器 直 接 開 啟, 以 利 於 攜 帶 與 交 換, 或 結 合 到 網 頁 教 材 中 成 為 教 材 的 一 部 份 ; 4) 能 支 援 多 媒 體 播 放, 以 發 展 變 化 題 型 ;5) 試 卷 需 能 自 動 批 閱 評 分, 不 需 將 答 案 送 回 後 端 系 統 後 再 由 系 統 閱 卷, 以 減 少 數 位 落 差 之 問 題 ; 6) 試 卷 需 能 提 供 即 時 回 饋 ;7) 試 卷 ; 能 反 覆 練 習 目 前 教 師 自 製 的 多 媒 體 網 頁 化 教 材 所 提 供 的 測 驗 功 能, 大 部 份 為 靜 態 頁 面, 若 使 用 一 般 網 頁 編 輯 軟 體 來 製 作 不 但 麻 煩, 而 且 無 法 提 供 互 動 功 能, 除 非 教 師 自 行 設 計 網 頁 並 撰 寫 程 式, 才 能 符 合 自 己 教 學 上 的 需 要, 這 對 一 般 教 師 而 言 不 是 一 件 容 易 的 事 本 研 究 的 動 機 就 是 要 提 供 一 個 方 便 的 編 輯 工 具 以 供 教 師 編 輯 網 頁 試 卷, 且 製 作 出 來 的 試 卷 不 但 要 能 提 供 多 媒 體 題 型 測 驗 計 時 功 能 自 動 評 分 即 時 回 饋, 而 且 提 供 學 童 下 載 離 線 練 習, 以 便 有 效 的 降 低 教 師 製 作 數 位 教 材 所 須 互 動 測 驗 的 門 檻 及 電 腦 化 測 驗 之 可 用 性
TrackB- 網 路 服 務 與 應 用 2. 文 獻 探 討 形 成 性 評 量 的 主 要 目 的 在 於 發 現 學 習 者 的 學 習 困 難, 並 做 為 改 進 教 學 的 依 據 Brown 和 Knight[4] William 和 Black[5] 指 出 形 成 性 評 量 的 主 要 目 的 在 於 提 供 學 生 回 饋 而 不 是 評 鑑 其 學 習 效 益 縮 短 理 想 表 現 與 真 實 表 現 的 差 距 依 據 Bransford 等 人 [6] 針 對 教 師 使 用 形 成 性 評 量 輔 助 學 生 學 習 所 提 出 的 建 議 : 教 師 應 該 利 用 形 成 性 評 量 提 供 學 生 大 量 的 機 會 進 行 評 量 獲 得 回 饋 與 修 正 錯 誤, 可 知 教 師 在 形 成 性 評 量 過 程 中 提 供 學 習 者 重 複 作 答 與 即 時 回 饋 等 機 會 是 十 分 重 要 的, 也 是 本 研 究 發 展 系 統 重 要 考 量 在 網 路 教 學 環 境 中, 數 位 教 材 放 置 於 網 站 上 提 供 給 學 生 自 我 導 向 學 習 (self-directed learning), 由 於 教 師 不 在 現 場, 因 此 如 何 提 供 具 有 重 複 作 答 與 即 時 回 饋 特 性 的 形 成 性 評 量, 以 幫 助 學 生 掌 握 自 己 的 學 習 成 果, 對 於 自 我 導 向 學 習 模 式 的 成 功 機 會 起 著 關 鍵 性 的 作 用 Gardner, Sheridan 和 White[7] 設 計 了 一 個 稱 為 Self-Assessment 的 網 路 形 成 性 評 量 工 具, 其 架 構 可 以 讓 大 學 學 生 在 進 行 完 網 路 學 習 後, 可 自 由 地 以 異 時 異 地 的 方 式 進 入 該 環 境 練 習 教 師 所 準 備 的 測 驗 題 目 Gardner 等 人 指 出 該 Self-Assessment 設 計 對 於 網 路 學 習 效 益 有 顯 著 的 幫 助, 並 指 出 學 生 喜 歡 以 此 功 能 輔 助 自 己 在 網 路 上 進 行 學 習 然 而, 上 述 的 網 路 學 習 模 式 要 在 國 小 階 段 普 遍 實 施 有 很 大 的 困 難, 原 因 主 要 在 於 學 生 社 經 背 景 不 同 所 帶 來 的 數 位 落 差, 以 首 善 之 都 臺 北 市 為 例, 根 據 臺 北 市 資 訊 中 心 2004 年 的 統 計 指 出 [8], 臺 北 市 約 有 八 成 四 家 庭 可 上 網, 六 成 三 家 庭 使 用 寬 頻 上 網, 尚 有 將 近 37% 的 學 生 家 庭 沒 有 寬 頻 上 網 環 境 因 此, 網 頁 試 卷 除 了 能 在 課 堂 上 練 習 以 外, 提 供 試 卷 下 載 離 線 練 習 將 有 助 於 改 善 數 位 落 差 問 題 離 線 之 網 頁 試 卷 必 須 與 線 上 試 卷 相 仿, 應 提 供 自 動 評 分 與 即 時 回 饋 功 能 自 我 導 向 學 習 的 概 念 由 Tough [9] 提 出 後, 引 起 許 多 學 者 的 探 討 與 研 究 其 中 學 者 Knowles [10] 認 為 學 習 是 內 在 的 歷 程, 個 體 的 自 我 導 向 可 以 創 造 出 最 棒 的 學 習, 而 自 我 導 向 的 過 程 是 個 人 在 沒 有 或 是 有 他 人 的 協 助 下, 主 動 地 診 斷 學 習 需 求, 規 劃 學 習 目 標, 尋 求 對 於 在 學 習 上 所 需 的 人 力 或 是 物 質 資 源, 選 擇 並 執 行 適 當 的 學 習 策 略, 評 鑑 學 習 成 果 的 過 程 其 中 評 鑑 學 習 成 果 成 為 學 習 者 繼 續 學 習 時, 自 我 調 節 與 擬 定 學 習 計 畫 的 重 要 參 考 指 標 然 而, 要 有 效 的 評 鑑 學 習 成 果 卻 不 容 易, 特 別 是 在 缺 乏 教 師 介 入, 僅 透 過 電 腦 化 測 驗 的 評 鑑 模 式 裡 更 是 如 此 過 去 一 段 時 間 的 電 腦 化 測 驗 都 聚 焦 於 適 性 化 測 驗 的 研 究, 其 所 運 用 的 題 型 多 為 選 擇 題, 並 以 文 字 呈 現 為 主, 少 部 分 題 目 則 搭 配 圖 片, 並 未 充 分 運 用 到 電 腦 多 媒 體 的 特 性 如 果 想 要 提 供 較 多 較 真 實 的 題 意 訊 息, 使 學 生 更 能 瞭 解 題 意 而 充 份 作 答, 運 用 電 腦 多 媒 體 特 性 的 題 型 是 一 種 有 效 的 方 法 [11] 為 了 達 到 這 個 目 的, 多 媒 體 題 型 除 了 應 用 文 字 圖 片 以 外, 應 該 要 包 含 影 音 ( 例 如 : wmv avi mpg 格 式 ) 聲 音 ( 例 如 :wav mp3 wma 格 式 ) 動 畫 ( 例 如 :swf 格 式 ) 的 形 態 [12], 同 時 在 學 生 作 答 操 作 上, 應 該 提 供 更 好 的 互 動 工 具, 而 非 僅 止 於 下 拉 式 選 單 與 核 取 方 塊 的 操 作 3.Gentest 系 統 架 構 與 功 能 3.1 系 統 架 構 Gentest 是 一 套 client-server 架 構 的 HTTP 應 用 程 式, 程 式 區 分 為 用 戶 端 的 網 頁 試 卷 伺 服 器 端 的 試 卷 管 理 兩 個 部 份 前 者 可 以 於 下 載 後, 在 瀏 覽 器 中 離 線 執 行, 為 了 達 到 反 覆 練 習 自 動 評 分 與 即 時 回 饋 功 能, 因 此 採 用 AJAX (Asynchronous Java Script and XML) 開 發 模 式 來 設 計 AJAX 引 擎 透 過 DOM 來 改 變 網 頁 的 外 觀 與 功 能, 藉 以 達 到 與 使 用 者 即 時 互 動 的 效 果, 僅 在 需 要 時 才 傳 輸 數 據 回 伺 服 器, 讓 使 用 者 不 需 等 待 伺 服 器 的 回 應, 只 要 透 過 AJAX 引 擎 進 行 網 路 連 通 偵 測, 就 能 夠 讓 網 頁 針 對 線 上 (on line) 與 離 線 (off-line) 兩 種 不 同 環 境, 對 應 不 同 的 互 動 測 驗 模 式 圖 1 系 統 架 構 圖 試 卷 管 理 部 份 由 編 輯 試 卷 和 紀 錄 得 分 的 管 理 介 面 所 組 成, 為 了 透 過 學 校 現 有 的 校 務 行 政 系 統 資 料 庫 進 行 認 證, 採 用 ASP 語 言 設 計, 並 使 用 MicroSoft SQL Server 作 為 後 端 資 料 庫 臺 北 市 國 民 小 學 校 務 行 政 電 腦 化 於 1996 年 陸 續 辦 理 軟 硬 體 建 置 工 作, 目 前 臺 北 市 全 部 國 小 一 百 四 十 所 均 使 用 相 同 系 統 Gentest 為 了 運 用 該 系 統 相 關 資 源, 採 用 模 組 化 設 計, 透 過 連 線 會 期 (session) 取 得 認 證 後 之 身 分 資 訊, 並 根 據 身 份 來 區 分 權 限, 只 要 是 能 提 供 同 一 格 式 會 期 資 訊 (session variable) 的 網 頁 應 用 系 統 都 可 以 與 Gentest 相 互 整 合 結 合 現 有 行 政 電 腦 化 系 統, 以 減 少 測 驗 管 理 時 所 須 學 生 帳 戶 資 料 之 轉 移 負 擔 或 不 一 致 性 網 頁 試 卷 部 分 採 用 Java Script 語 言 設 計, 採 用 雛 型 (Prototype) 物 件 導 向 設 計 方 法, 將 試 題 區 分 為 五 種 不 同 題 型 物 件 表 徵, 並 使 用 陣 列 (Array) 來 集 收 每 個 物 件 均 提 供 顯 示 試 題 (showform) 閱 卷 評 分 (iscorrect) 顯 示 回 饋 (showcorrect) 三 個 介 面 供 外 部 程 式 呼 叫, 各 物 件 結 構 如 圖 2 測 驗 結 束 後, 透 過
XMLRequest 連 線 物 件, 將 分 數 送 回 試 卷 管 理 介 面 中 之 成 績 紀 錄 程 式 進 行 處 理, 以 便 回 寫 到 遠 端 資 料 庫 中 圖 3 Gentest 系 統 功 能 與 架 構 圖 2 網 頁 試 題 題 型 之 物 件 類 別 圖 教 師 於 試 卷 管 理 介 面 編 輯 好 試 卷 後, 由 系 統 依 照 資 料 庫 中 的 試 題 資 料, 自 動 生 成 網 頁 試 卷 所 需 的 HTML 內 容 以 及 AJAX 程 式 碼 其 中 之 AJAX 核 心 程 式 碼 如 下, 是 用 來 建 立 上 述 五 種 試 題 物 件 : 試 題 物 件 建 立 後, 透 過 底 下 的 程 式 碼 將 試 題 顯 示 於 網 頁 上 : for (var i=0; i<quiz.length; i++) quiz[i].showform(i); 網 頁 的 內 容 包 含 一 個 隱 藏 的 計 時 器 物 件 和 一 個 圖 形 超 連 結, 用 來 控 制 交 卷 當 測 驗 時 間 結 束, 或 使 用 者 按 下 超 連 結 時, 進 行 批 閱 考 卷 以 及 自 動 評 分, 然 後 顯 示 回 饋, 並 將 分 數 送 回 伺 服 器 3.2 系 統 功 能 及 編 輯 流 程 伺 服 器 端 的 試 卷 管 理 介 面 採 用 ASP 程 式 語 言 開 發, 主 要 架 構 如 圖 3 所 示 網 頁 試 卷 的 使 用 者 可 區 分 為 三 種 身 分 : 學 生 出 題 者 其 他 教 師, 依 三 種 不 同 身 分 的 需 求, 包 含 : 試 卷 管 理 ( 編 輯 ) 多 媒 體 檔 案 管 理 複 製 試 卷 試 卷 下 載 線 上 測 驗 等, 如 圖 4 所 示 圖 4 Gentest 使 用 案 例 圖 試 卷 編 輯 的 流 程 為 : (1) 出 題 者 上 傳 試 卷 所 需 使 用 之 多 媒 體 檔 案 ( 如 圖 5), 不 同 老 師 所 上 傳 的 多 媒 體 檔 案 均 可 以 自 由 取 用, 但 僅 限 上 傳 者 有 權 限 刪 除 (2) 接 著, 由 出 題 者 新 增 試 卷, 輸 入 試 卷 名 稱 ( 考 試 範 圍 ) 測 驗 時 間 限 制 與 是 否 提 供 正 確 答 案 等 資 料 ( 如 圖 6), 然 後 進 行 試 題 編 輯 (3) 試 題 編 輯 包 含 五 種 基 本 題 型 ( 是 非 題 單 選 題 複 選 題 填 充 題 配 合 題 ) 的 題 幹 選 項 題 組 與 參 考 答 案, 都 可 以 在 所 見 即 所 得 的 編 輯 環 境 中 加 入 多 媒 體 檔 案 並 進 行 視 覺 編 排, 設 定 題 目 順 序 正 確 答 案 和 分 配 分 數, 如 圖 7 及 8 所 示 (4) 編 輯 完 成 之 試 卷, 以 標 準 答 案 卷 型 式 顯 示 於 網 頁, 並 可 預 覽 進 行 測 試 其 他 教 師 可 以 直 接 使 用 該 試 卷 進 行 課 堂 測 驗, 或 下 載 後 打 包 成 網 頁 封 存 格 式 (*.mht) 提 供 給 學 生 練 習 如 果 試 題 有 修 改 的 必 要, 須 先 將 試 卷 複 製 起 來, 才 能 進 行 修 改, 原 始 試 卷 除 了 出 題 者 外, 其 他 教 師 均 無 法 編 修, 如 圖 9 所 示 (5) 學 童 在 接 受 測 驗 完 成 後, 網 頁 試 卷 會 自 動 進 行 批 閱 評 分 ( 如 圖 10), 並 視 需 要 提 供 正 確 答 案 給 學 生 核 對, 如 圖 11 所 示 (6) 測 驗 結 果 可 以 透 過 成 績 查 閱 介 面 瀏 覽, 教 師 可 以 查 看 全 班 分 數, 而 學 生 僅 能 查 閱 自 己 在 不 同 試 卷 的 得 分 ( 如 圖 12) 如 果 是 下 載 後 的 離
TrackB- 網 路 服 務 與 應 用 線 試 卷, 倘 測 驗 實 施 地 點 可 以 接 取 網 路, 則 分 數 將 自 動 寫 回 系 統, 否 則 分 數 將 僅 作 為 個 人 練 習 結 果 之 參 考 的 題 組 與 參 考 答 案, 數 量 可 自 訂 不 一 定 要 相 等, 正 確 答 案 可 以 是 一 對 一 或 一 對 多 對 應, 如 圖 8 圖 5 多 媒 體 檔 案 管 理 圖 8 編 輯 配 合 題 題 組 與 參 考 答 案 圖 6 新 增 試 卷 圖 9 線 上 測 驗 或 離 線 練 習 學 生 作 答 圖 7 視 覺 化 試 題 編 輯 器 Gentest 系 統 具 有 下 列 特 色 : (1) 使 用 此 系 統 編 製 的 網 頁 試 卷, 透 過 瀏 覽 器 提 供 的 Client-Side Script 運 作, 因 此 能 以 離 線 方 式 在 任 何 一 個 提 供 瀏 覽 器 的 裝 置 上 使 用, 包 含 : 桌 上 型 電 腦 筆 記 型 電 腦 平 板 電 腦 PDA 等, 且 上 網 並 非 必 備 的 功 能 (2) 網 頁 試 卷 可 以 單 獨 執 行 或 者 與 網 路 教 材 結 合, 整 合 到 SCORM 格 式 中, 做 為 網 路 學 習 物 件 以 利 於 進 行 交 換 (3) 此 系 統 與 校 務 行 政 系 統 整 合, 使 用 者 登 入 系 統 時, 透 過 校 務 行 政 系 統 資 料 庫 判 斷 使 用 者 身 份, 並 賦 予 適 當 之 權 限 至 於 學 生 學 籍 異 動 班 級 編 配 與 教 師 名 錄, 均 即 時 同 步 更 新, 不 需 額 外 的 管 理 成 本 (4) 所 有 考 題 都 可 以 單 獨 配 分, 總 分 可 以 不 必 是 100 分, 以 打 破 分 數 迷 思, 如 圖 7 (5) 試 卷 以 一 次 一 卷 的 方 式 顯 示, 以 利 於 設 計 系 列 關 聯 題 組, 如 圖 10 (6) 單 選 題 複 選 題 之 選 項 數 量 沒 有 限 制, 不 同 題 目 之 間 選 項 數 量 可 以 不 同 配 合 題 圖 10 批 閱 評 分 圖 11 核 對 正 確 答 案 圖 12 查 閱 測 驗 成 績
(7) 支 援 各 種 多 媒 體 格 式 檔 案, 從 常 見 的 圖 片 ( 例 如 :gif jpg png bmp) 到 影 音 ( 例 如 : wmv avi mpg 格 式 ) 聲 音 ( 例 如 :wav mp3 wma 格 式 ) 動 畫 ( 例 如 :swf 格 式 ) 甚 至 是 其 他 能 支 援 <EMBED> 語 法 的 外 掛 程 式, 例 如 :Authorware(aam 格 式 ), 都 可 以 拿 來 出 題, 如 圖 5 (8) 網 頁 試 卷 只 要 重 新 整 理 就 可 以 反 覆 練 習 重 新 評 分, 試 卷 的 操 作 方 式 與 傳 統 試 卷 接 近, 學 生 不 需 事 前 訓 練 就 會 使 用, 如 圖 9 (9) 閱 卷 結 果 直 接 批 註 於 試 卷 上, 答 對 及 答 錯 題 目 一 目 了 然, 出 題 者 可 以 視 考 卷 的 用 途 選 擇 要 不 要 提 供 正 確 答 案, 如 圖 10 11 (10) 試 題 編 輯 採 用 所 見 即 所 得 模 式, 可 以 使 用 各 種 字 體 變 化, 並 加 入 超 過 一 個 以 上 的 多 媒 體 檔 案 獨 立 的 多 媒 體 檔 案 管 理 介 面, 讓 教 師 事 先 可 以 預 覽 上 傳 下 載, 如 圖 7 (11) 支 援 多 樣 式 多 媒 體 物 件, 使 基 本 題 型 可 以 衍 生 變 化, 例 如 : 是 非 題 結 合 圖 片 或 影 片, 可 以 變 成 圖 形 辨 識 題 填 充 題 結 合 聲 音 檔, 可 以 變 成 聽 寫 題 ; 結 合 Flash 動 畫 檔 可 以 變 成 實 作 題 選 擇 題 結 合 聲 音 檔, 可 以 變 成 翻 譯 題 為 進 一 步 呈 現 系 統 特 色, 將 本 系 統 與 其 他 工 具 或 系 統 比 較, 如 表 1 所 示 但 由 於 各 系 統 在 使 用 對 象, 測 驗 目 標 不 同, 故 表 1 之 比 較 並 不 代 表 系 統 的 優 劣 表 1 電 腦 輔 助 測 驗 工 具 及 系 統 之 功 能 比 較 表 思 考 的 題 型, 在 這 些 題 型 中 多 媒 體 物 件 的 角 色, 並 非 只 用 來 補 充 題 幹 文 字 敘 述 的 不 足 使 題 意 的 呈 現 更 為 具 體 而 已, 而 是 要 求 學 生 進 行 觀 察 辨 認 價 值 判 斷 甚 至 是 操 作, 也 因 此 試 題 可 以 朝 向 激 發 批 判 思 考 與 創 造 力 來 設 計 下 列 呈 現 以 Gentest 所 設 計 部 份 的 高 層 次 思 次 思 考 的 題 型 : (1) 圖 形 辨 識 題 型 : 此 題 型 結 合 圖 片 與 是 非 題, 題 目 要 求 學 生 觀 察 圖 片, 然 後 根 據 題 幹 判 斷 文 字 敘 述 是 否 與 圖 片 相 符 在 此 題 型 中, 圖 片 不 是 用 於 集 中 注 意 力 或 增 進 題 目 的 覺 知, 而 是 進 一 步 要 求 學 生 分 析 圖 片 特 徵, 找 出 判 斷 題 意 文 字 的 基 準, 並 進 行 價 值 判 斷 圖 13 圖 形 辨 識 題 型 (2) 聽 寫 題 型 : 此 題 型 結 合 聲 音 與 填 充 題, 學 生 播 放 聲 音 檔 聆 聽 教 師 預 錄 的 英 語 例 句, 然 後 將 原 文 填 寫 於 填 充 題 的 答 案 格 中 學 生 可 以 反 覆 聆 聽 至 可 以 辨 讀 為 止 聲 音 檔 在 此 題 型 中 做 為 題 幹 使 用, 讓 英 語 試 卷 不 再 侷 限 於 單 字 的 記 憶 與 文 法 的 理 解, 而 可 以 擴 展 至 聽 寫 翻 譯 語 調 與 語 意 判 斷 等 較 高 認 知 層 次 的 應 用 圖 14 聽 寫 題 型 (3) 翻 譯 題 型 : 此 題 型 結 合 聲 音 與 選 擇 題, 學 生 播 放 聲 音 檔 聆 聽 教 師 預 錄 的 英 語 例 句, 然 後 從 選 項 中 找 出 最 接 近 的 翻 譯 圖 15 翻 譯 題 型 4.Gentest 應 用 案 例 與 評 估 4.1 多 媒 體 測 驗 題 型 舉 例 Gentest 系 統 不 但 能 用 來 設 計 基 本 試 題 類 型, 結 合 圖 片 影 音 多 媒 體 動 畫 物 件 後, 更 可 以 衍 生 出 不 同 的 題 型 變 化, 都 是 屬 於 高 層 次 圖 16 實 作 題 型
TrackB- 網 路 服 務 與 應 用 (4) 實 作 題 型 : 此 題 型 結 合 Flash 物 件 與 單 選 題, 學 生 依 照 題 目 要 求 操 作 Flash 檔 案 找 出 解 答, 並 將 答 案 填 寫 於 答 案 格 中 在 此 題 型 中, Flash 物 件 用 來 模 擬 真 實 環 境 讓 學 生 依 據 題 幹 的 文 字 敘 述, 進 行 實 務 操 作 的 模 擬 演 練, 並 依 照 操 作 結 果 勾 選 正 確 答 案 4.2 自 我 導 向 練 習 應 用 案 例 臺 北 市 於 2003 年 開 始 在 各 級 學 校 推 廣 數 位 教 材 製 作, 使 用 之 製 作 軟 體 為 Microsoft PowerPoint Producer, 然 後 使 用 SCORM 封 裝 程 式 打 包 成 SCORM 格 式 (*.zip), 該 封 裝 程 式 乃 依 循 中 央 研 究 院 制 定 之 TWLOM2.0 交 換 標 準, 可 與 任 何 支 援 SCORM 之 LMS(Learning Management System) 及 LCMS(Learning Content Management System), 如 MOODLE 進 行 整 合 在 本 案 例 中 教 師 運 用 Gentest 系 統 製 作 網 頁 試 卷, 並 使 用 前 述 之 SCORM 封 裝 程 式 與 數 位 教 材 整 合 在 一 起, 經 過 課 程 專 家 評 審 後 上 傳 到 臺 北 市 數 位 學 習 網, 學 生 可 由 家 中 或 學 校 進 行 遠 距 學 習, 並 在 稍 後 使 用 教 材 提 供 的 網 頁 試 卷 進 行 自 我 導 向 練 習 在 臺 北 市 三 玉 國 小 數 位 教 材 網 (http://spsportal.syups.tp.edu.tw/) 數 學 領 域 有 兩 件 徵 選 審 查 合 格 之 作 品 採 用 Gentest 系 統 設 計 自 我 導 向 練 習 之 網 頁 試 卷 4.3 課 堂 形 成 性 評 量 應 用 案 例 為 探 討 網 頁 試 卷 在 課 程 中 形 成 性 評 量 之 接 受 度, 本 研 究 以 臺 北 市 某 國 小 五 年 級 四 個 普 通 班 級 共 108 名 學 生 為 對 象, 課 程 內 容 為 該 校 五 年 級 健 康 與 體 育 科 統 一 教 材, 教 學 方 法 為 資 訊 融 入 與 傳 統 問 思 教 學 法 之 混 合 模 式, 前 面 幾 個 單 元 的 評 量 都 採 用 傳 統 紙 筆 測 驗, 最 後 一 個 單 元 於 2007 年 5 月 開 始 進 行 電 腦 化 課 程 評 量 及 自 我 導 向 練 習 之 實 驗, 實 施 教 學 一 個 月 後, 在 六 月 初 採 用 本 研 究 設 計 之 網 頁 態 度 量 表 進 行 集 體 線 上 施 測, 藉 以 瞭 解 學 生 對 網 頁 試 卷 的 受 測 態 度, 且 輔 以 教 師 訪 談 以 蒐 集 課 堂 觀 察 之 結 果 應 用 Gentest 的 評 價 該 問 卷 由 研 究 者 依 研 究 之 需 求 自 行 編 製, 採 用 Likert 五 點 評 量 方 式 填 答, 問 卷 區 分 為 焦 慮 偏 好 適 應 信 任 度 多 媒 體 測 驗 態 度 等 五 個 分 量 表, 分 別 為 9 6 9 9 7 題, 並 經 該 領 域 資 深 教 師 ( 教 學 生 涯 18 22 年 ) 及 電 腦 測 驗 專 家 效 化 後 作 為 研 究 工 具 整 體 量 表 之 內 部 一 致 性 係 數 為.955, 顯 示 量 表 之 信 度 極 佳 調 查 結 果 問 卷 回 收 108 份, 去 除 填 答 不 完 整 及 隨 意 填 答 問 卷, 得 到 有 效 樣 本 91 份, 其 中 男 生 37 人 女 生 54 人 各 分 量 表 描 述 性 統 計 結 果 如 表 2 所 示 表 2 網 頁 測 驗 問 卷 各 分 量 表 調 查 結 果 結 果 顯 示 學 生 不 分 性 別 對 於 網 頁 試 卷 都 有 很 高 的 偏 好, 並 且 適 應 良 好, 對 於 網 頁 試 卷 所 具 備 的 多 媒 體 特 性 多 持 正 向 肯 定 的 態 度 在 焦 慮 分 量 表 上 的 得 分 也 是 正 向 的, 雖 然 有 性 別 上 的 差 異 但 沒 有 達 到 顯 著 水 準 在 信 任 度 的 部 份, 女 生 比 較 不 信 任 網 頁 試 卷 的 評 量 結 果, 達 到.05 顯 著 水 準 從 個 別 題 目 分 析 發 現 學 生 不 信 任 網 頁 試 卷 評 量 結 果 的 原 因 主 要 有 兩 個, 分 別 是 我 很 擔 心 電 腦 在 考 試 進 行 中 當 機 或 發 生 故 障 (Q15) 我 擔 心 電 腦 會 出 錯 (Q28) 表 4 Q15 及 Q28 填 答 結 果 統 計 對 於 網 頁 試 卷 多 媒 體 特 性 的 態 度 則 趨 於 正 向 ( 如 表 5), 結 果 顯 示 多 媒 體 物 件 以 及 互 動 功 能 的 設 計, 能 夠 引 起 學 生 受 測 動 機, 提 高 試 題 的 誘 答 率, 並 能 使 學 生 更 容 易 理 解 試 題 網 頁 試 卷 的 即 時 回 饋 功 能 讓 學 生 了 解 自 己 的 程 度, 對 於 學 生 掌 握 學 習 進 度 調 整 學 習 行 為 有 一 定 的 助 益 網 頁 試 卷 使 用 滑 鼠 及 鍵 盤 來 作 答, 不 需 塗 改 就 能 更 正 答 案 的 設 計, 這 些 都 是 學 生 喜 愛 並 偏 好 網 頁 試 卷 的 理 由 表 5 多 媒 體 特 性 分 量 表 填 答 結 果 統 計 除 了 問 卷 調 查 以 外, 本 研 究 並 針 對 應 用 此 系 統 之 教 師 群 進 行 訪 談, 訪 談 結 果 教 師 們 認 為 網 頁 試 卷 能 有 效 改 變 學 生 對 傳 統 試 卷 的 負 面 印 象, 學 生 變 得 喜 歡 考 試 學 生 反 覆 練 習 欲 罷 不 能, 要 他 們 下 課, 他 們 都 不 願 意 離 開 學 生 為 了 有 好 的 成 績, 會 上 網 搜 尋 答 案 或 查 閱 課 本, 有 些 同 學 會 相 互 討 論, 因 此 在 出 題 上 我 儘 量 出 課 外 或 開 放 性 題 目 在 即 時 回 饋 部 份, 除 了 一 位 教 師 為 顧 及 考 試 公 平 性, 未 使 用 回 饋, 其 餘 教 師 則 認 為 當 成 回 家 功 課 時, 因 為 有 即 時 回 饋, 學 生 都
能 跟 據 自 己 的 錯 誤 更 正 答 案, 一 位 教 師 認 為 由 於 看 不 到 學 生 練 習 過 程 的 得 分, 教 師 並 無 法 瞭 解 學 生 的 錯 誤 概 念 在 哪 裡, 也 無 法 得 知 學 生 進 步 的 情 形, 希 望 系 統 就 此 部 份 功 能 進 行 改 善 在 多 媒 體 題 型 編 製 及 運 用 上, 多 數 教 師 認 為 製 作 多 媒 體 檔 案 太 困 難 了, 我 們 又 不 是 電 腦 老 師 衍 生 題 型 要 出 得 好, 很 不 容 易, 需 要 有 電 腦 老 師 協 助 我 們 我 們 也 知 道 要 多 利 用 多 媒 體 檔 案, 但 又 擔 心 會 有 版 權 問 題 除 此 之 外 部 份 使 用 IE 7.0 的 教 師 反 應 開 啟 多 媒 體 檔 案 會 有 蹦 現 視 窗, 容 易 造 成 測 驗 時 的 干 擾, 但 在 學 校 操 作 又 沒 有 這 個 問 題 在 系 統 管 理 介 面 上, 所 有 教 師 都 認 為 網 頁 試 卷 的 下 載 方 式 太 麻 煩, 封 裝 過 程 中 浪 費 很 多 時 間, 能 不 能 不 要 封 裝? 5. 結 論 與 建 議 從 問 卷 調 查 之 量 化 和 訪 談 質 性 分 析 可 知 其 一 致 性, 且 顯 示 學 生 對 於 網 頁 試 卷 具 有 很 高 的 偏 好, 對 於 網 頁 試 卷 所 具 備 的 多 媒 體 特 性 其 態 度 是 正 向 的, 但 對 於 在 電 腦 可 上 網 的 環 境 中 施 測, 學 生 的 信 任 度 仍 然 沒 有 預 期 高, 推 測 主 要 的 原 因 為 電 腦 教 室 的 硬 體 設 備 老 舊 不 穩 定, 容 易 發 生 故 障 當 機, 同 時 在 多 媒 體 的 軟 體 支 援 上 較 為 不 足, 可 能 會 出 現 無 法 顯 示 播 放 或 正 常 操 作 的 錯 誤, 這 兩 個 因 素 使 得 學 生 無 法 信 任 評 量 結 果 的 公 平 性 在 操 作 網 頁 試 卷 時, 學 生 樂 於 反 覆 練 習 的 原 因, 除 了 因 為 網 頁 試 卷 具 備 多 媒 體 物 件 及 互 動 功 能 比 較 活 潑 生 動 外, 也 與 網 頁 試 卷 具 備 的 即 時 回 饋 功 能 有 關 調 查 結 果 教 師 與 學 生 多 認 為 網 頁 試 卷 能 讓 學 生 了 解 自 己 學 習 不 足 之 處, 對 於 學 生 掌 握 學 習 進 度 調 整 學 習 行 為 是 有 助 益 的 關 於 訪 談 與 調 查 結 果 反 映 出 來 的 問 題, 也 針 對 未 來 的 研 究, 提 出 以 下 建 議 : (1) 多 媒 體 試 題 的 編 製 門 檻 較 高, 仍 需 要 更 多 的 教 師 專 業 成 長 訓 練, 或 透 過 產 學 合 作 的 模 式 來 加 以 補 足 (2) 系 統 回 饋 與 試 卷 下 載 機 制 仍 待 改 善 : 目 前 系 統 所 提 供 的 簡 單 回 饋 對 學 習 的 幫 助 並 不 是 很 大, 將 來 考 慮 增 加 逐 題 講 解 模 組, 透 過 這 個 模 組 來 提 供 漸 進 式 回 饋 網 頁 試 卷 的 離 線 下 載, 目 前 只 能 將 檔 案 一 一 下 載 到 同 一 資 料 夾, 再 儲 存 成 網 頁 封 存 格 式 (*.mht) 將 來 應 進 一 步 研 究 該 格 式 自 動 生 成 的 可 行 性, 或 以 其 它 格 式 取 代 的 可 能 性 (3) 整 合 其 他 多 媒 體 技 術 朝 測 驗 標 準 化 邁 進, 並 與 網 路 學 習 系 統 整 合 : 多 媒 體 檔 案 無 論 是 線 上 施 測 或 離 線 下 載, 都 會 遭 遇 到 頻 寬 的 困 難, 採 用 串 流 技 術 也 許 是 解 決 方 法 之 一, 未 來 可 繼 續 以 其 他 媒 體 技 術 進 行 測 試 與 改 善, 例 如 : 整 合 HTML 及 SMIL 語 言 的 可 行 性 隨 著 SCORM 以 及 QTI 的 誕 生, 網 路 學 習 標 準 的 制 訂 儼 然 成 形 Gentest 所 製 作 的 網 頁 試 卷, 已 經 可 以 整 合 到 SCORM 課 程 中, 作 為 學 習 物 件 的 一 部 份, 但 如 果 要 達 到 更 好 的 測 驗 效 果, 提 供 QTI 格 式 的 匯 出 功 能 是 一 個 可 行 的 解 決 方 案, 這 將 有 助 於 實 現 網 頁 試 卷 在 不 同 平 臺 之 間 相 互 交 換 實 施 的 理 想 未 來 更 能 與 網 路 學 習 系 統 如 LMS 及 LCMS 整 合, 為 此 類 系 統 提 供 測 驗 外 掛 模 組 參 考 文 獻 [1] 教 育 部 推 動 資 訊 教 育 擴 大 內 需 案, http://rs.edu.tw/information/expand/extplan.html [2] 教 育 部 中 小 學 資 訊 教 育 總 藍 圖, http://masterplan.educities.edu.tw/conference/total.sht ml [3] 臺 北 市 網 路 線 上 學 習 計 畫, http://elearning.tp.edu.tw [4]Brown, S., & Knight, P. (1994). Assessing learners in higher education. London: Kogan Page. [5]William, D., & Black, P. (1996). Meanings and consequences: A basis for distinguishing formative and summative functions of assessment? British Educational Research Journal, 22, 537-548. [6]Bransford, J. D., Brown, A., & Cocking, R. (2000). How people learn: mind, brain, experience and school, expanded edition. Washington, DC: National Academy Press. [7]Gardner, L., Sheridan, D., & White, D. (2002). A web-based learning and assessment system to support flexible education. Journal of Computer Assisted Learning, 18, 125-136. [8] 網 路 新 都 推 動 成 果, http://www.taipei.gov.tw/cgi-bin/sm_theme?page=43 9ce051 [9]Tough, A. (1 966). The assistance obtained by adult self teachers. AdultEdllcation, 17, 30-37. [10]Knowles & Malcolm (1970). The modern practice of adult education: Andragogy versus pedagogy. New York: Association Press. [11] 翁 全 志 (2003), 九 年 一 貫 自 然 與 生 活 科 技 能 力 指 標 之 網 路 多 媒 體 教 材 與 測 驗 評 量 研 究, 國 立 交 通 大 學 網 路 學 習 學 程 碩 士 論 文, 未 出 版, 新 竹 [12] 游 光 昭 張 鑫 安 蕭 顯 勝 (2005), 應 用 題 型 模 版 概 念 於 網 路 多 媒 體 測 驗 編 輯 系 統 之 開 發, 論 文 發 表 於 第 九 屆 全 球 華 人 計 算 機 教 育 應 用 大 會, 夏 威 夷, 美 國 [13] 國 家 華 語 測 驗 推 動 工 作 委 員 會 - 網 路 多 媒 體 測 驗 系 統,http://cpt.mtc.ntnu.edu.tw/tma2/ [14] 多 媒 體 線 上 系 統,http://class.kghs.kh.edu.tw/olt/ [15] 線 上 測 驗 服 務 中 心,http://onlinetest.org/ [16]Hot Potatoes, http://web.uvic.ca/hrd/hotpot/index.htm [17]Adobe Captivate, http://www.adobe.com/products/captivate/