學習評鑑先導研究一：電腦化適性測驗系統與題庫之建立

Transcription

1 多 元 智 慧 電 腦 化 適 性 測 驗 指 導 手 冊 陳 柏 熹 國 立 台 灣 師 範 大 學 教 育 心 理 與 輔 導 學 系 雲 端 測 驗 中 心

2 目 錄 壹 測 驗 目 標 貳 編 製 流 程 參 信 度 肆 效 度 伍 施 測 計 分 常 模 與 解 釋 陸 常 模 更 新 與 測 驗 修 訂 規 畫 1

3 壹 測 驗 目 標 本 測 驗 的 主 要 目 標 是 要 使 用 試 題 反 應 理 論 (item response theory; IRT) 與 電 腦 化 適 性 測 驗 (computerized adaptive testing; CAT) 的 技 術 發 展 出 能 測 量 國 小 中 高 年 級 國 中 高 中 ( 職 ) 大 專 院 校 學 生 的 多 元 智 慧 電 腦 化 適 性 測 驗 ( 以 下 簡 稱 本 測 驗 ), 以 提 供 學 生 了 解 自 我, 規 劃 未 來 學 習 與 生 涯 方 向 之 參 考 多 元 智 慧 電 腦 化 適 性 測 驗 主 要 是 以 多 媒 體 試 題 的 形 式 來 編 製 題 目, 所 有 的 題 目 情 境 都 主 要 都 需 要 用 到 下 述 八 項 智 慧 中 的 其 中 一 項 智 慧 來 解 決 問 題 每 個 題 目 都 有 一 個 主 要 的 評 量 目 標 ( 某 一 項 智 慧 ), 並 根 據 在 該 目 標 表 現 較 佳 與 較 差 的 人 所 可 能 作 出 的 反 應 或 解 決 問 題 的 方 式, 設 計 四 到 五 個 選 項 ( 一 ) 多 元 智 慧 哈 佛 大 學 教 授 Howard Gardner 在 他 的 著 述 心 智 架 構 (Frames of Mind) 一 書 中, 對 智 慧 有 了 全 新 的 註 解 和 說 明 (Gardner, 1983) Gardner 用 多 元 智 慧 (multiple intelligences) 一 詞 來 詮 釋 個 體 所 擁 有 的 智 能 是 多 元 的, 即 是 每 個 人 都 擁 有 包 括 語 文 智 慧 視 覺 空 間 智 慧 音 樂 節 奏 智 慧 邏 輯 數 學 智 慧 自 然 觀 察 者 智 慧 人 際 關 係 智 慧 內 省 智 慧 肢 體 動 覺 智 慧 等 八 大 智 慧 從 生 物 學 的 觀 點, 我 們 在 生 活 中 常 需 運 用 我 們 的 多 元 智 慧 經 驗 知 識 與 能 力 去 面 對 各 種 情 境 解 決 各 種 問 題, 這 樣 我 們 才 能 適 應 這 個 社 會 Gardner 的 八 大 智 慧 簡 介 如 下 : 1. 語 文 智 慧 (linguistic intelligence): 包 含 語 言 表 達 文 字 思 考 和 寫 作 能 力 等 例 如 記 者 演 講 家 作 家 就 需 要 展 現 出 較 高 的 語 文 智 慧 2. 視 覺 空 間 智 慧 (spatial intelligence): 能 透 過 心 中 的 影 像 來 控 制 視 覺 感 官 所 接 受 到 的 刺 激, 譬 如 判 別 方 位 的 能 力 能 很 快 的 將 所 看 到 的 影 像 記 在 腦 中, 像 設 計 師 建 築 師 就 需 要 展 現 出 較 高 的 視 覺 空 間 智 慧 3. 音 樂 節 奏 智 慧 (musical intelligence): 對 於 音 樂 節 奏 有 高 敏 感 度, 能 創 造 歌 曲 或 是 演 奏 樂 曲 ; 對 於 曲 子 演 奏 上 的 細 微 變 化 能 判 辨 的 出 來 像 鋼 琴 家 作 曲 家 就 需 要 展 現 出 較 高 的 音 樂 節 奏 智 慧 4. 邏 輯 數 學 智 慧 (logical-mathematical intelligence): 透 過 歸 納 演 繹 的 方 法 來 解 決 問 題, 譬 如 計 算 能 力 的 運 用 科 學 推 理 等 像 科 學 家 數 學 家 就 需 要 展 現 出 較 高 的 邏 輯 數 學 智 慧 5. 自 然 觀 察 智 慧 (naturalist intelligence): 能 對 自 然 景 觀 有 所 體 悟 和 感 受, 能 敏 感 察 覺 到 大 自 然 現 象 的 變 化 情 況 像 生 態 學 家 動 植 物 專 家 就 需 要 展 現 出 較 高 的 自 然 觀 察 者 智 慧 6. 人 際 智 慧 (interpersonal intelligence): 能 善 用 言 語 或 是 適 當 的 策 略 來 進 行 有 效 的 人 際 互 動, 善 於 用 合 作 團 隊 的 方 式 處 理 事 件 ; 或 是 對 於 需 要 關 懷 的 伙 伴 能 具 有 同 理 心 像 公 關 人 員 外 交 官 社 工 員 就 需 要 展 現 出 較 高 的 人 際 關 係 智 慧 2

4 7. 內 省 智 慧 (intrapersonal intelligence): 能 了 解 自 己 調 適 自 己 和 發 展 自 己, 例 如 自 我 分 析 自 我 評 價 等 像 心 理 學 家 哲 學 家 就 需 要 展 現 出 較 高 的 內 省 智 慧 8. 肢 體 動 覺 智 慧 : 善 於 利 用 身 體 語 言 來 進 行 溝 通 與 表 達, 或 透 過 肢 體 的 變 化 來 展 現 意 念, 譬 如 能 跳 一 段 優 美 的 華 爾 茲 舞 蹈 像 舞 蹈 選 手 游 泳 選 手 就 需 要 展 現 出 較 高 的 肢 體 動 覺 智 慧 由 於 肢 體 動 覺 智 慧 必 須 要 請 受 測 者 以 實 際 做 出 動 作 方 式 才 能 作 較 精 準 的 測 量, 較 難 以 電 腦 化 測 驗 的 方 式 來 進 行 測 量, 因 此 本 測 驗 暫 時 不 列 入 此 外, 有 鑑 於 情 緒 智 慧 對 適 應 現 代 社 會 生 活 的 重 要 性, 本 測 驗 改 成 測 量 情 緒 智 慧 (Goleman, 1995;Salovery & Mayer, 1990), 其 定 義 如 下 : 情 緒 智 慧 (emotional intelligence): 了 解 自 己 與 他 人 的 情 緒 感 受 能 適 度 的 表 達 與 管 理 情 緒 反 應 例 如 : 演 員 客 服 人 員 就 需 要 展 現 出 較 高 的 情 緒 智 慧 ( 二 ) 本 測 驗 的 目 標 與 內 容 說 明 在 參 考 上 述 Gardner 的 多 元 智 慧 與 Goleman 的 情 緒 智 慧 概 念 後, 本 測 驗 將 測 量 目 標 界 定 如 表 1 所 示 表 1 中 各 向 度 之 詳 細 內 容 與 範 例 說 明 如 下 : 表 1 多 元 智 慧 電 腦 化 適 性 測 驗 各 向 度 內 容 一 語 文 智 慧 五 自 然 觀 察 者 智 慧 : 辨 識 觀 察 能 力 表 達 辨 識 動 植 物 非 生 物 理 解 現 象 推 理 能 力 分 析 二 視 覺 - 空 間 智 慧 六 人 際 關 係 智 慧 視 覺 化 心 像 操 作 空 間 關 係 三 音 樂 - 節 奏 智 慧 辨 識 樂 器 聲 音 辨 別 音 調 節 奏 感 音 樂 推 理 四 邏 輯 - 數 學 智 慧 表 徵 歸 納 演 繹 數 字 運 作 圖 表 運 作 了 解 與 尊 重 個 別 差 異 同 理 心 溝 通 能 力 互 助 合 作 衝 突 解 決 七 內 省 智 慧 自 我 了 解 自 我 調 適 自 我 發 展 八 情 緒 智 慧 情 緒 理 解 情 緒 表 達 情 緒 管 理 3

5 1. 語 文 智 慧 (1) 辨 識 能 從 一 段 句 子 或 話 語 中 區 別 出 形 或 音 的 異 同 譬 如, 編 製 題 目, 而 不 是 編 制 題 目 ; 或 能 聽 出 不 同 的 聲 調 符 號, 例 如 : 二 聲 與 三 聲 的 差 別 (2) 表 達 能 夠 依 據 情 境 將 自 己 的 想 法 清 楚 且 具 體 地 表 達 出 來 譬 如, 當 受 測 者 被 問 到 為 什 麼 喜 歡 打 棒 球? 他 能 具 體 回 答 出 理 由, 例 如 : 打 球 可 以 強 身 培 養 合 作 精 神 等 而 不 是 回 答 : 因 為 我 很 喜 歡 啊! (3) 理 解 能 了 解 話 語 中 或 文 章 中 所 要 表 達 的 意 涵 譬 如 : 我 們 常 看 到 兩 人 在 爭 執 時, 若 出 現 下 面 的 對 話 你 敢 拿 走 試 試 看!, 表 示 不 能 把 東 西 拿 走 的 意 思 (4) 分 析 能 從 話 語 中 或 文 章 中 的 意 思 來 推 測 可 能 的 現 象, 包 括 時 間 地 點 人 物 背 景 或 作 者 潛 藏 的 立 場 等 也 就 是 更 進 一 步 思 考 話 語 中 或 文 章 中 所 隱 含 的 意 義 例 如 : 當 母 親 跟 孩 子 說 : 不 要 只 穿 T 恤, 快 把 外 套 穿 上, 可 推 知 道 當 時 的 季 節 可 能 是 冬 季 或 早 晚 溫 差 很 大 的 時 節 2. 視 覺 空 間 智 慧 (1) 視 覺 化 能 透 過 視 覺 觀 察 將 看 到 的 事 物 轉 化 成 腦 中 的 影 像 並 記 住 它 例 如 : 看 到 一 台 很 喜 歡 的 筆 記 型 電 腦, 走 回 家 的 路 上 還 能 回 憶 起 這 台 電 腦 的 形 狀 與 樣 式 (2) 心 像 操 作 能 對 腦 中 的 影 像 進 行 旋 轉 翻 轉 組 合 等 操 作 例 如 : 知 道 如 何 將 腦 中 的 正 五 邊 方 形 圖 案 分 割 成 五 個 全 等 三 角 形 (3) 空 間 關 係 能 知 覺 不 同 人 事 物 的 所 在 位 置 與 相 對 關 係, 包 含 方 位 與 相 對 位 置 等 例 如 : 能 夠 一 邊 開 車 看 著 所 經 過 的 路 線, 一 邊 看 著 地 圖 找 出 現 在 的 位 置, 以 及 要 如 何 到 達 目 標 3. 音 樂 節 奏 智 慧 (1) 辨 識 樂 器 能 在 單 種 或 是 多 種 聲 音 的 樂 曲 中, 區 辨 出 各 種 樂 器 的 聲 音 例 如 : 在 聽 完 30 秒 的 樂 曲 後, 能 判 斷 出 該 樂 曲 是 由 哪 些 樂 器 所 演 奏 出 來 的 (2) 辨 別 音 調 4

6 能 區 辨 抑 揚 頓 挫 的 高 低 音 調 例 如 : 在 幾 段 由 鋼 琴 演 奏 的 音 調 中, 能 夠 辨 別 哪 一 段 是 音 調 較 高 或 較 低 (3) 節 奏 感 能 聽 出 一 段 音 樂 中 拍 子 的 快 慢, 或 是 泛 指 規 律 性 變 化 的 事 物 例 如 : 能 在 聽 完 一 段 鼓 聲 後, 掌 握 住 鼓 聲 節 奏 感 (4) 音 樂 推 理 能 將 樂 曲 的 各 項 特 徵 與 生 活 事 物 作 連 結, 或 判 斷 出 適 合 用 來 描 述 事 物 的 音 樂 或 節 奏 表 達 方 式 例 如 : 從 四 段 音 樂 中 找 出 最 適 合 用 來 描 述 清 晨 鳥 叫 聲 的 音 樂 4. 邏 輯 數 學 智 慧 (1) 表 徵 能 適 當 地 使 用 抽 象 符 號 來 表 示 事 物 間 的 關 係 例 如 : 使 用 數 學 關 係 式 來 描 述 生 活 中 的 算 數 問 題 (2) 歸 納 綜 合 幾 項 不 同 的 事 件 與 現 象, 獲 得 一 個 統 整 的 結 論 例 如 : 從 東 京 對 日 本 的 意 義, 及 首 爾 對 韓 國 的 意 義, 判 斷 出 所 要 探 討 的 主 題 是 首 都 對 國 家 的 意 義 (3) 演 繹 根 據 幾 個 事 件 與 現 象 間 的 關 係, 推 演 過 去 或 後 續 可 能 的 狀 況 例 如 : 若 知 道 A>B, 且 B>C, 則 可 推 測 出 A>C (4) 數 值 運 算 能 利 用 數 字 與 符 號 的 運 作 來 解 決 數 學 問 題 或 生 活 問 題 例 如 : 能 運 用 數 學 算 式 來 解 決 日 常 生 活 中 的 買 賣 物 品 的 問 題 (5) 圖 表 應 用 能 了 解 圖 表 所 表 達 的 意 義, 或 應 用 途 了 來 進 行 推 論 例 如 : 出 國 前, 可 從 當 地 氣 象 局 提 供 的 氣 溫 統 計 表, 得 知 當 地 目 前 的 氣 候 狀 況, 以 及 該 準 備 何 種 衣 物 5. 自 然 觀 察 者 智 慧 (1) 基 本 觀 察 能 力 能 敏 感 地 察 覺 到 人 事 物 的 特 徵 與 變 化 例 如 : 能 比 較 兩 張 圖 片 找 出 其 差 異 之 處, 或 有 改 變 之 處 (2) 辨 識 動 物 與 植 物 特 徵 能 區 辨 動 物 和 植 物 的 各 種 特 徵, 並 能 根 據 其 特 徵 來 進 行 分 類 比 較 例 如 : 觀 察 動 物 的 骨 骼 齒 模, 可 分 辨 出 哪 些 是 肉 食 性 動 物, 哪 些 是 草 食 性 或 雜 食 性 動 物 5

7 (3) 現 象 推 理 能 力 根 據 所 觀 察 到 的 現 象 推 測 過 去 或 未 來 可 能 發 生 的 事 件 例 如 : 從 一 個 球 體 運 動 狀 況 的 變 化, 可 以 推 測 出 它 受 到 了 哪 些 力 量 的 影 響 6. 人 際 關 係 智 慧 (1) 了 解 與 尊 重 個 別 差 異 能 夠 了 解 自 己 與 他 人 在 想 法 習 慣 與 生 活 形 態 上 的 差 異, 並 且 接 納 不 同 的 觀 點 例 如 : 當 家 人 或 朋 友 所 持 的 觀 點 與 自 己 不 同 時, 能 了 解 並 接 納 他 們 的 想 法 (2) 同 理 心 設 身 處 地 去 感 受 與 體 會 別 人 的 想 法 與 感 覺, 就 好 像 是 把 自 己 當 成 是 當 事 人 一 般 例 如 : 能 從 一 段 人 際 互 動 的 影 片 體 會 到 影 片 中 主 角 的 想 法 與 感 覺 (3) 溝 通 能 力 能 了 解 互 動 情 境 中 的 語 言 或 非 語 言 訊 息, 並 做 適 當 的 回 應 例 如 : 要 對 身 體 不 舒 服 的 同 學 表 達 關 心 時, 能 知 道 要 用 哪 些 話 語 與 口 氣 來 表 達 自 己 的 關 心 之 意 (4) 互 助 合 作 能 使 用 各 種 技 巧 來 促 使 自 己 與 群 眾 達 成 團 體 的 目 標 例 如 : 開 班 會 擔 任 主 席 時, 能 掌 握 整 個 流 程 的 進 行, 讓 想 發 言 的 同 學 順 利 發 言, 使 議 題 能 夠 順 利 討 論 完 (5) 衝 突 解 決 能 運 用 同 理 心 與 溝 通 技 巧 分 析 人 際 間 的 需 求 差 異, 並 用 適 當 方 法 解 決 爭 執 或 對 立 的 情 況 例 如 : 當 大 家 在 分 工 進 行 教 室 布 置, 有 同 學 對 自 己 的 工 作 分 派 不 滿 意 時, 負 責 同 學 能 了 解 原 因, 並 知 道 要 如 何 溝 通 才 能 協 調 出 大 家 可 接 受 的 分 工 結 果 7. 內 省 智 慧 (1) 自 我 了 解 能 從 與 自 己 有 關 的 資 訊 中 了 解 自 己 的 能 力 與 特 質 之 優 勢 與 劣 勢 例 如 : 能 適 當 的 解 讀 能 力 測 驗 與 性 格 測 驗 結 果 對 自 己 的 意 義, 以 了 解 自 己 能 力 與 人 格 特 質 (2) 自 我 調 適 當 自 己 面 對 挫 折 或 失 敗 情 境 時, 能 夠 發 現 自 己 的 問 題, 並 運 用 正 向 的 思 考 來 調 整 對 自 己 的 想 法 例 如 : 當 考 試 成 績 不 理 想 時, 不 會 先 否 定 自 己, 而 是 去 設 法 找 出 問 題 以 及 解 決 的 方 法 (3) 自 我 發 展 能 根 據 自 己 的 能 力 或 人 格 特 質, 發 展 出 適 當 的 目 標, 以 及 達 成 目 標 的 規 劃 例 如 : 能 根 據 自 己 在 過 去 的 各 項 表 現, 發 展 出 未 來 適 合 自 己 的 學 習 方 向 或 就 業 方 6

8 向, 並 適 當 地 規 劃 未 來 的 生 涯 進 程 8. 情 緒 智 慧 (1) 情 緒 理 解 能 夠 言 語 或 表 情 中 了 解 他 人 的 情 緒 感 受 或 心 情 狀 態 例 如 : 當 別 人 對 你 瞪 了 一 眼, 就 可 以 知 道 此 人 可 能 正 在 生 氣 (2) 情 緒 表 達 能 夠 透 過 語 言 或 非 語 言 的 方 式, 適 當 地 表 達 情 緒 感 受 例 如 : 面 對 他 人 對 你 的 無 理 指 責, 能 夠 以 適 當 的 語 言 或 行 為 表 達 出 你 的 情 緒 感 受 (3) 情 緒 管 理 面 對 各 種 壓 力 情 境 時, 能 夠 以 適 當 方 式 處 理 抒 發 或 滿 足 自 己 的 情 緒 感 受 例 如 : 考 試 前 很 緊 張 無 法 專 心 念 書 時, 能 使 用 適 當 的 方 式 來 使 心 情 放 輕 鬆 ( 三 ) 電 腦 化 適 性 測 驗 本 測 驗 要 測 量 的 智 慧 項 目 有 八 種, 這 些 智 慧 反 應 在 日 常 生 活 中 的 層 面 極 廣, 傳 統 紙 筆 測 驗 對 這 些 智 慧 的 測 量 效 果 有 限 為 了 提 高 題 目 情 境 的 真 實 性, 並 加 強 題 目 與 各 項 智 慧 的 關 聯, 本 測 驗 利 用 電 腦 多 媒 體 的 形 式 來 設 計 題 目, 並 將 此 測 驗 發 展 成 電 腦 化 適 性 測 驗 每 一 種 智 慧 的 題 目 都 是 以 最 適 合 表 達 該 智 慧 的 多 媒 體 類 型 來 設 計 題 目 例 如 : 視 覺 空 間 智 慧 題 目 盡 量 以 圖 片 來 呈 現 ; 人 際 互 動 智 慧 題 目 盡 量 以 人 際 互 動 的 影 片 來 呈 現 ; 音 樂 節 奏 智 慧 都 使 用 聲 音 或 樂 曲 來 設 計 題 目 ; 自 然 觀 察 智 慧 題 目 盡 量 以 圖 片 或 影 片 來 呈 現 ; 數 學 邏 輯 智 慧 盡 量 使 用 圖 表 與 符 號 等 藉 由 電 腦 化 的 多 媒 體 技 術 來 提 高 測 驗 的 效 度, 以 測 量 到 真 正 想 測 量 的 智 慧 內 涵 有 關 電 腦 化 適 性 測 驗 (CAT) 的 特 點 詳 見 陳 柏 熹 (94) 的 文 章 簡 單 來 說, 電 腦 化 適 性 測 驗 包 含 了 電 腦 化 測 驗 的 多 媒 體 特 性 與 適 性 測 驗 的 優 勢 測 驗 的 電 腦 化 讓 圖 片 聲 音 動 畫 影 像 互 動 操 作 等 項 目 可 以 加 入 測 驗 情 境 中, 提 高 測 驗 的 真 實 性 與 生 動 感 ; 測 驗 的 適 性 化 讓 受 試 者 只 接 受 一 半 的 題 數 就 能 達 到 與 傳 統 非 適 性 測 驗 相 同 的 測 量 精 準 度, 提 高 了 測 驗 的 效 率 CAT 主 要 是 利 用 電 腦 的 快 速 運 算 能 力, 根 據 受 試 者 的 答 題 反 應 即 時 估 計 出 其 能 力, 並 且 立 刻 挑 選 出 適 合 該 受 試 者 能 力 的 下 一 道 試 題 讓 受 試 者 作 答 由 於 受 試 者 所 接 受 到 的 試 題 都 很 接 近 其 能 力 水 準, 因 此 只 要 用 較 少 的 題 數 就 可 以 達 到 與 傳 統 測 驗 相 同 的 測 量 精 確 度 (Sand, Water, & McBride, 1997; Wainer, Dorans, Flaugher, Green, Mislevy, Steinberg, & Thissen, 1990; Weiss, 1985) CAT 理 論 基 礎 主 要 是 源 自 於 試 題 反 應 理 論 (IRT) 基 於 IRT 的 單 向 度 (unidimensionality) 與 局 部 獨 立 性 (local independency) 基 本 假 設, 我 們 可 以 根 據 受 測 者 的 作 答 反 應 與 題 目 難 易 度 算 出 反 應 概 似 函 數 (likelihood function), 並 以 此 估 計 受 測 者 的 能 力 高 低, 而 接 受 不 同 試 題 的 受 測 者 能 力 還 可 以 放 在 同 一 個 尺 度 上 互 相 比 較 (Hambleton & Swaminathan, 1985; Wainer et al., 1990) 不 過 單 向 7

9 度 假 定 也 限 制 了 的 CAT 的 應 用, 使 CAT 大 都 侷 限 在 單 向 度 能 力 的 測 量 上 對 於 人 格 量 表 多 元 性 向 測 驗 綜 合 能 力 測 驗 等 多 向 度 測 驗, 以 及 一 些 含 有 多 向 度 題 的 測 驗 而 言, 目 前 尚 無 法 用 CAT 來 進 行 為 了 突 破 單 向 度 IRT 的 限 制, 近 年 來 學 者 們 紛 紛 提 出 多 向 度 試 題 反 應 理 論 (multidimensional item response theory, MIRT)(Adams, Wilson & Wang, 1997; Hattie, 1981; McDonald, 1967; Mckinley & Reckase, 1983; Sympson, 1978; Whitely, 1980), 並 將 之 應 用 到 多 向 度 電 腦 化 適 性 測 驗 (multidimensional computerized adaptive testing, MCAT) 的 程 序 中 ( 陳 柏 熹, 民 95; Wang & Chen, 2004; Luecht, 1996; Segall, 1996) 由 於 MCAT 同 時 包 含 了 多 向 度 分 析 與 適 性 程 序 的 優 勢, 因 此 其 測 量 精 準 度 又 比 單 向 度 電 腦 化 適 性 測 驗 (unidimensional computerized adaptive testing, UCAT) 更 高 而 本 測 驗 就 是 以 多 向 度 試 題 反 應 理 論 為 基 礎 來 建 置 測 多 元 智 慧 測 驗 題 庫, 並 發 展 成 多 向 度 電 腦 化 適 性 測 驗, 以 提 高 測 量 的 效 益, 讓 受 測 者 不 必 作 答 許 多 題 目 就 能 有 可 接 受 的 測 量 精 準 度 本 測 驗 為 示 範 性 的 多 向 度 電 腦 化 適 性 測 驗 系 統, 是 世 界 上 較 新 的 測 驗 技 術 目 前 關 於 多 向 度 電 腦 化 適 性 測 驗 在 理 論 上 與 實 務 上 的 研 究 仍 在 持 續 進 步 中, 而 本 測 驗 也 會 不 斷 注 意 這 些 研 究 結 果, 定 期 更 新 本 測 驗 系 統 的 作 法, 或 比 較 不 同 策 略 的 優 點 與 限 制, 發 展 出 克 服 相 關 問 題 的 策 略 因 此, 本 測 驗 除 了 希 望 能 提 供 給 各 學 齡 階 段 學 生 一 個 瞭 解 自 己 多 元 智 慧 的 最 有 效 率 方 式, 也 希 望 能 運 用 測 驗 所 得 的 資 料 對 此 新 興 領 域 提 出 前 導 性 的 實 徵 研 究 結 果, 供 未 來 測 驗 發 展 者 參 考 所 以 本 測 驗 的 參 與 者 必 須 同 意 將 資 料 作 為 相 關 研 究 分 析 之 用, 但 所 有 受 測 者 的 基 本 資 料 都 會 做 嚴 格 的 保 密, 研 究 結 果 中 的 絕 對 不 會 有 任 何 個 人 基 本 資 料 呈 現 出 來 8

10 貳 編 製 流 程 一 本 測 驗 的 編 製 流 程 圖 多 元 智 慧 電 腦 化 適 性 測 驗 試 題 與 題 庫 的 發 展 是 依 據 標 準 化 的 測 驗 編 製 流 程 來 進 行, 主 要 的 步 驟 如 圖 1 所 示 包 含 決 定 測 驗 目 標 建 立 測 驗 內 容 細 目 表 決 定 題 目 的 評 量 目 標 根 據 命 題 原 則 編 製 試 題 修 題 與 審 題 進 行 預 試 分 析 試 題 特 徵 建 立 題 庫 等 步 驟 其 中 測 驗 的 目 的 與 題 目 的 評 量 目 標 如 第 一 章 所 述 以 下 針 對 其 它 步 驟 分 別 陳 述 : 決 定 測 驗 目 的 決 定 題 目 的 評 量 目 標 試 題 修 改 與 審 查 舉 辦 命 題 研 習 會 預 試 根 據 命 題 原 則 編 製 試 題 試 題 分 析 合 格 編 入 正 式 題 庫 不 合 格 二 試 題 設 計 與 修 審 1. 試 題 設 計 圖 1 多 元 智 慧 電 腦 化 測 驗 題 庫 發 展 流 程 本 測 驗 主 要 是 以 多 媒 體 試 題 的 形 式 來 編 製 題 目, 所 有 的 題 目 情 境 都 主 要 都 需 要 用 到 第 壹 章 所 敘 述 的 八 項 智 慧 中 的 某 一 項 智 慧 來 解 決 問 題 也 就 是 說, 每 個 題 目 都 有 一 個 主 要 的 評 量 目 標 ( 某 一 項 智 慧 ), 題 目 設 計 是 用 最 適 合 呈 現 該 智 慧 與 情 境 的 媒 題 作 為 題 幹, 並 以 在 該 題 評 量 目 標 表 現 較 佳 與 較 差 的 人 所 可 能 作 出 的 反 應 設 計 四 到 五 個 選 項 命 題 者 包 含 國 小 教 師 國 中 教 師 高 中 職 教 師 大 學 教 師 大 學 相 關 科 系 學 生 與 研 究 生 等 所 有 命 題 者 皆 需 先 經 過 2 小 時 以 上 的 命 題 研 習 訓 練 ( 學 生 與 研 究 生 需 經 過 十 小 時 以 上 的 相 關 課 程 訓 練 ), 說 明 本 測 驗 對 各 項 智 慧 的 定 義 與 內 涵, 以 及 各 項 命 題 原 則 概 念 結 束 後 請 命 題 者 先 嘗 試 設 計 一 題, 當 場 進 行 討 論 確 定 命 題 者 皆 了 解 命 題 理 念 後, 再 根 據 其 專 長 分 配 試 題 每 位 命 題 者 最 多 只 能 設 計 十 題, 以 增 加 題 目 風 格 的 多 樣 性 9

11 2. 試 題 修 改 與 審 查 在 試 題 修 改 與 審 查 方 面, 本 測 驗 收 回 的 每 一 題 試 題 初 稿 都 需 要 經 過 試 題 檢 核 表 的 審 查, 如 表 二 所 示 試 題 修 改 與 審 查 主 要 是 以 團 體 討 論 的 方 式 來 進 行 每 一 道 試 題 都 先 由 研 究 人 員 與 心 理 測 驗 專 家 根 據 各 項 命 題 原 則 來 進 行 質 性 的 檢 核 與 修 改, 以 確 保 試 題 在 進 行 預 試 前 都 能 符 合 命 題 原 則 符 合 命 題 原 則 的 題 目, 需 要 先 對 其 媒 體 檔 案 重 新 製 作 後, 才 能 鍵 入 預 試 題 庫 ; 不 符 合 命 題 原 則 的 題 目, 需 先 進 行 初 步 修 改, 確 定 該 試 題 完 全 符 合 命 題 原 則 後 才 進 行 媒 體 重 新 製 作, 並 鍵 入 預 試 題 庫 表 二 多 元 智 慧 電 腦 化 適 性 測 驗 試 題 檢 核 表 命 題 原 則 檢 查 項 目 是 否 1. 試 題 的 表 達 方 式 是 否 適 合 該 題 所 要 測 量 的 智 慧? 2. 答 對 該 題 是 否 表 示 具 備 該 題 的 所 要 測 量 的 智 慧? 3. 試 題 能 否 清 楚 的 表 達 題 意? 4. 試 題 是 否 只 問 到 一 個 最 主 要 的 問 題? 5. 題 幹 與 選 項 的 文 法 是 否 符 合? 邏 輯 上 是 否 連 貫? 6. 選 項 的 性 質 與 表 達 方 式 ( 包 括 措 辭 文 法 與 長 度 ) 是 否 相 同? 7. 選 用 的 圖 表 或 題 材 是 否 符 合 該 題 所 要 測 量 的 智 慧? 8. 選 用 的 多 媒 體 題 材 是 否 符 合 該 題 所 要 測 量 的 智 慧? 9. 試 題 中 的 題 材 對 不 同 群 體 ( 性 別 居 住 地 區 ) 而 言 是 否 公 平? 10. 受 測 者 答 對 本 題 的 機 率 主 要 受 到 其 所 要 測 量 的 智 慧 所 影 響? 11. 試 題 未 曾 在 其 他 測 驗 或 出 版 品 中 出 現 過? 12. 試 題 中 的 媒 體 取 材 符 合 智 慧 財 產 權 的 規 範 ( 需 註 明 媒 體 來 源 )? 本 測 驗 的 試 題 經 過 修 整 審 定 後, 由 研 究 者 依 據 每 個 向 度 的 題 數 比 例 編 入 預 試 題 本 本 測 驗 的 預 試 設 計 採 用 不 等 組 定 錨 題 (non-equivalent group anchor test; NEAT) 設 計, 每 個 學 習 階 段 的 預 試 題 本 中 皆 有 共 同 試 題, 並 採 用 同 時 估 計 法 (concurrent estimation) 進 行 試 題 參 數 估 計, 以 使 所 有 試 題 參 數 能 被 放 在 同 一 量 尺 上 目 前 編 入 預 試 題 庫 中 的 題 目 共 有 552 題, 大 學 147 題 高 中 職 125 題 國 中 144 題 國 小 136 題 各 學 習 階 段 在 各 項 智 慧 上 的 題 數 分 佈 詳 見 表 三 表 三 多 元 智 慧 電 腦 化 適 性 測 驗 預 試 題 庫 國 小 國 中 高 中 ( 職 ) 大 專 合 計 語 文 智 慧 視 覺 空 間 音 樂 節 奏 邏 輯 數 學 自 然 觀 察 人 際 智 慧 內 省 智 慧 情 緒 智 慧 合 計

12 三 預 試 預 試 工 作 程 序 包 含 建 立 學 校 名 錄 建 立 抽 樣 母 群 抽 樣 過 程 聯 繫 接 洽 預 試 學 校 內 容 及 實 行 預 試 工 作 內 容 1. 先 根 據 教 育 部 統 計 處 網 站 九 十 五 年 所 公 布 之 學 校 名 錄 與 班 級 數, 建 立 學 校 名 單, 並 從 學 校 名 單 中 以 亂 數 抽 選 適 當 數 量 之 學 校 2. 對 隨 機 抽 樣 到 的 學 校 寄 發 公 文, 以 取 得 學 校 同 意 3. 與 同 意 受 測 學 校 聯 繫 施 測 時 間, 並 於 指 定 時 間 派 監 試 人 員 到 該 校 進 行 預 試 原 則 上 每 校 施 測 兩 班 4. 目 前 已 接 受 過 預 試 學 校 共 67 所, 分 佈 於 台 灣 北 中 南 東 各 地 其 中 國 小 20 所 國 中 22 所 高 中 22 所 大 專 院 校 3 所 大 學 雖 然 只 有 3 所, 但 受 測 者 分 佈 在 17 個 學 群 共 53 個 系 所 各 學 習 階 段 的 受 測 人 數 為 小 學 1100 人 國 中 1261 人 高 中 職 1361 人 大 專 院 校 1145 人 除 了 預 試 前 需 要 進 行 修 題 與 審 題 外, 預 試 後 還 要 根 據 試 題 分 析 的 結 果 再 進 行 修 題 與 審 題 預 試 後 的 修 題 與 審 題 是 由 心 理 測 驗 專 家 與 試 題 研 究 人 員 根 據 量 化 的 試 題 分 析 結 果 解 讀 試 題 的 評 量 效 果, 並 對 造 成 題 目 預 試 結 果 不 佳 的 可 能 因 素 進 行 討 論 與 修 改 修 改 過 的 題 目 須 再 重 新 編 號, 鍵 入 預 試 題 庫, 並 重 新 安 排 時 間 預 試 當 試 題 的 質 性 與 量 化 特 徵 皆 符 合 本 測 驗 的 要 求 後 才 能 進 入 正 式 電 腦 化 適 性 測 驗 題 庫 中 目 前 預 試 結 果 優 良 且 已 編 入 正 式 電 腦 化 適 性 測 驗 題 庫 之 題 目 有 353 題, 有 關 這 些 試 題 的 特 徵 將 在 下 一 節 中 做 詳 細 的 描 述 四 試 題 分 析 本 研 究 採 用 多 向 度 試 題 反 應 理 論 (multidimensional item response theory) 來 進 行 試 題 分 析 雖 然 目 前 大 部 分 的 CAT 都 是 建 立 在 IRT 單 向 度 假 定 的 基 礎 上, 亦 即 測 驗 中 所 有 試 題 都 是 在 測 量 同 一 種 特 質 但 是 實 際 生 活 情 境 中 有 許 多 的 問 題 並 非 靠 單 一 能 力 或 潛 在 特 質 就 能 解 決 的, 測 驗 的 作 答 也 是 如 此 (Bejar, 1986; Kelderman, 1996) 當 受 試 者 答 對 試 題 的 機 會 受 到 不 只 一 種 能 力 所 影 響 時, 已 經 違 反 了 單 向 度 IRT 的 理 論 假 設, 因 此 不 應 該 以 單 向 度 IRT 來 進 行 分 析 Ackerman(1991) 的 研 究 顯 示, 當 試 題 測 量 不 只 一 種 能 力 時, 如 果 以 單 向 度 IRT 來 進 行 參 數 估 計 會 使 鑑 別 度 較 大 的 能 力 向 度 被 擴 大 鑑 別 度 較 小 的 向 度 被 縮 小 或 忽 略 掉, 產 生 偏 差 的 試 題 參 數 估 計 值, 而 且 所 估 計 出 來 的 能 力 其 意 義 已 經 模 糊 了, 不 適 合 放 在 同 一 個 向 度 上 互 相 比 較 從 測 量 精 準 度 的 角 度 來 看, 單 向 度 IRT 無 法 藉 著 各 向 度 能 力 的 相 關 性 來 提 升 對 各 向 度 能 力 的 估 計, 因 此 每 個 向 度 都 需 要 很 多 題 才 能 到 達 某 個 信 度 水 準 這 也 是 為 什 麼 目 前 大 部 分 的 人 格 量 表 興 趣 量 表 或 性 向 測 驗 的 題 數 都 這 麼 多 多 向 度 IRT 在 估 計 能 力 時 可 以 將 向 度 間 的 相 關 納 入 估 計, 提 升 了 各 向 度 能 力 估 計 的 精 確 性, 因 此 每 個 向 度 只 要 少 數 幾 題 其 各 向 度 的 信 度 就 很 高 了 Wang, 11

13 Chen 與 Cheng(2003) 的 研 究 顯 示, 當 向 度 之 間 為 高 相 關 時, 多 向 度 IRT 分 析 可 以 大 幅 提 高 各 向 度 的 信 度, 由 原 本 的 0.6( 單 向 度 IRT 分 析 ) 提 昇 至 0.8 為 了 使 測 量 信 度 能 夠 更 加 提 升, 並 突 破 試 題 只 能 測 量 一 種 能 力 的 限 制, 近 幾 年 來 MIRT 的 概 念 漸 漸 被 提 出 來 近 代 學 者 們 提 出 來 的 多 向 度 IRT 模 式 大 多 是 單 向 度 IRT 模 式 的 衍 生 模 式 例 如 :Mckinley 與 Reckase(1983) Hattie(1981) 與 Adams Wilson 與 Wang(1997) 的 多 向 度 IRT 模 式 其 中,Adams Wilson 與 Wang ( 1997 ) 等 人 所 提 出 來 的 多 向 度 隨 機 係 數 多 項 洛 基 模 式 (multidimensional random coefficients multinomial logit model, MRCMLM) 為 Rasch 模 式 的 衍 生 模 式, 其 反 應 模 式 如 公 式 (1) 所 示 : f ( X ik exp( bik ' θ aik ' ξ) 1; ξ θ), (1) Ki exp( b ' θ a ' ξ) k 0 ik ik 其 中 X ik 為 受 試 者 反 應 型 態,K i 為 第 i 試 題 的 計 分 類 別 數 其 中 b ik 為 第 i 題 在 第 k 個 反 應 類 別 上 的 計 分 向 量 ; 為 受 試 者 能 力 向 量 ;a ik 為 第 i 題 中 第 k 個 反 應 類 別 的 設 計 向 量 ; 為 試 題 參 數 向 量 舉 例 來 說, 若 一 份 測 驗 中 測 量 到 了 D 種 能 力, 分 別 為 1, 2, 3,, D 等 ; 而 受 試 者 在 第 i 個 試 題 回 答 出 第 k 個 反 應 類 別 時, 在 這 D 個 向 度 能 力 上 所 得 到 的 分 數 為 b ik = ( b ik1, bik 2,... bikd )', 此 計 分 向 量 應 該 根 據 當 初 設 計 試 題 時 的 建 構 來 決 定 的, 也 就 是 試 題 設 計 的 理 論 建 構 與 計 分 方 式 必 須 一 致 在 方 面, 若 測 驗 試 題 共 有 3 題, 第 1 題 的 計 分 為 0~2 的 部 份 給 分, 其 餘 兩 題 為 0,1 的 二 元 計 分, 則 第 一 題 需 要 估 計 2 個 參 數 ( 難 度 ) 其 餘 兩 題 各 估 計 1 個 參 數, 共 估 計 了 11, 12, 2, 3 等 4 個 參 數, 即 =,,, )' a ik 稱 為 設 計 向 量 (design vector), 是 估 計 每 個 試 題 參 數 時 所 使 ( 用 的 係 數, 也 就 是 描 述 了 第 i 題 的 第 k 類 別 反 應 是 否 要 用 來 估 計 某 個 參 數 ik, 這 可 以 根 據 研 究 者 的 目 的 自 行 設 計, 詳 見 Wu Adams 與 Wilson(1998) 有 關 此 三 類 MIRT 模 式 之 比 較, 詳 見 陳 柏 熹 (2001) 與 陳 柏 熹, 王 文 中 (2004) 大 致 來 說,MRCMLM 功 能 較 多 且 包 容 性 較 廣, 舉 凡 最 原 始 的 Rasch 模 式 (Rasch, 1960; Wright & Stone, 1979) Fischer(1973) 的 邏 輯 斯 地 潛 在 特 質 模 式 (logistic latent trait model; LLTM) Andrich(1978) 的 評 定 量 尺 模 式 (rating scale model) Masters(1982) 的 部 份 給 分 模 式 (partial credit model) 等, 都 是 它 的 特 例 就 計 分 方 式 來 說,MRCMLM 可 以 適 用 在 二 元 計 分 多 元 計 分 評 定 量 尺 等 計 分 方 式 上 ; 就 能 力 向 度 來 說, 可 以 用 來 估 計 單 向 度 與 多 向 度 能 力, 而 且 各 向 度 間 可 以 具 有 相 關 性 該 模 式 目 前 已 經 發 展 出 參 數 估 計 軟 體 ConQuest(Wu et al., 1998), 在 使 用 上 相 當 方 便 由 於 本 研 究 是 以 該 模 式 作 為 理 論 基 礎 來 發 展 多 元 智 慧 之 MCAT 能 力 估 計 與 選 題 算 則, 因 此 在 預 試 資 料 的 試 題 分 析 亦 採 用 該 模 式, 以 ConQuest 軟 體 進 行 估 計 試 題 分 析 流 程 本 測 驗 的 試 題 分 析 相 關 工 作 流 程 如 圖 2 所 示 詳 細 過 程 說 明 如 下 : 12

14 系 統 作 答 反 應 輸 出 ConQuest 軟 體 符 合 優 良 試 題 標 準 進 行 試 題 分 析 不 符 合 優 良 試 題 標 準 題 目 重 新 配 分 針 對 有 問 題 試 題 進 行 修 審 題 幹 及 選 項 修 改 重 新 預 試 進 入 正 式 適 性 題 庫 圖 2: 資 料 分 析 程 序 1. 從 預 試 系 統 中 將 受 測 者 的 作 答 反 應 輸 出 2. 以 ConQuest 進 行 試 題 分 析 採 用 多 向 度 多 元 計 分 模 式 進 行 試 題 參 數 估 計 估 計 參 數 過 程 完 成 後, 可 得 到 每 一 試 題 之 難 度 參 數 ( 表 示 試 題 難 度 ) 以 及 每 位 受 試 學 生 能 力 估 計 參 數 ( 包 含 8 個 能 力 參 數 ) 本 測 驗 是 參 考 Linarce( ) 的 試 題 評 斷 指 標 作 為 評 估 試 題 品 質 是 否 優 良 之 依 據 其 中 infit MNSQ 需 介 於 之 間,Z 檢 定 值 需 介 於 +2.0 之 間 除 此 之 外, 若 試 題 為 多 元 計 分 題 型 還 需 要 檢 查 每 個 閾 難 度 值 (step) 是 否 正 常, 原 則 上 較 低 分 數 的 閾 難 度 值 必 須 低 於 較 高 分 數 的 閾 難 度 值 所 有 違 反 上 述 原 則 的 試 題 都 被 提 出 來 重 新 修 審 3. 針 對 問 題 試 題 再 次 修 審, 若 有 需 要 就 重 新 預 試 預 試 後 的 修 審 題 工 作 需 同 時 檢 核 試 題 題 意 與 選 項 表 述 是 否 恰 當 淺 顯 易 懂, 該 試 題 難 度 是 否 確 實 為 受 試 學 生 所 能 負 荷, 以 及 所 測 得 能 力 與 試 題 所 預 測 得 能 力 是 否 相 符 因 此, 進 入 此 階 段 的 試 題, 可 能 更 改 其 題 意 或 選 項 敘 述, 增 加 圖 表 以 及 影 片 等 多 媒 體, 或 重 新 配 分 若 試 題 更 改 過 內 容 均 需 另 製 成 一 新 試 題, 重 新 進 入 預 試 流 程 後, 再 進 行 試 題 參 數 估 計 ; 若 僅 是 更 改 配 分, 則 僅 需 於 試 題 參 數 估 計 步 驟 中 更 改 語 法 重 新 估 計 試 題 參 數 即 可 修 改 的 作 法 如 下 : a. 重 新 給 分 : 針 對 試 題 分 析 後 難 度 階 有 問 題 之 試 題, 若 修 改 其 選 項 得 分 者, 直 接 於 語 法 中 修 改 給 分, 並 重 新 估 計 試 題 參 數 b. 修 改 題 幹 或 選 項 敘 述 : 針 對 試 題 適 合 度 不 佳 之 試 題, 修 改 其 題 幹 或 選 項 敘 述, 並 於 測 驗 系 統 中 重 新 給 予 新 題 號, 以 便 未 來 重 新 預 試 五 正 式 適 性 題 庫 現 況 在 各 內 容 的 題 數 方 面, 目 前 正 式 題 庫 中 的 題 數 共 353 題 其 中 國 小 80 題 國 中 99 題 高 中 73 題 大 專 101 題 各 階 段 在 各 智 慧 向 度 上 的 題 數 如 表 四 所 13

15 示 由 於 本 測 驗 為 電 腦 化 適 性 測 驗, 正 式 施 測 時 題 庫 中 所 有 題 目 皆 鍵 入 同 一 題 庫 中 進 行 選 題, 不 分 學 齡 階 段 只 有 在 初 選 試 題 階 段 會 先 依 受 測 者 學 習 階 段 來 挑 選 試 題, 後 續 題 目 都 是 根 據 受 測 者 的 IRT 能 力 估 計 值, 選 出 最 適 合 該 能 力 水 準 的 題 目 來 施 測, 不 分 學 習 階 段 但 為 避 免 題 目 情 境 差 異 太 大 而 影 響 受 測 者 的 答 對 機 率, 每 個 學 習 階 段 受 測 者 最 多 僅 能 跨 到 鄰 近 學 習 階 段 挑 選 試 題 例 如 : 國 中 學 生 僅 能 作 答 到 國 小 國 中 與 高 中 ( 職 ) 試 題, 不 能 作 答 大 專 階 段 的 試 題 表 四 多 元 智 慧 電 腦 化 適 性 測 驗 正 式 題 庫 國 小 國 中 高 中 ( 職 ) 大 專 合 計 語 文 智 慧 視 覺 空 間 音 樂 節 奏 邏 輯 數 學 自 然 觀 察 人 際 智 慧 內 省 智 慧 情 緒 智 慧 合 計 表 五 為 題 庫 中 各 學 習 階 段 試 題 的 難 易 度 分 佈 情 形 ( 多 元 計 分 試 題 以 平 均 難 度 呈 現 ), 其 中 數 值 若 為 0 表 示 題 目 難 易 度 為 該 學 習 階 段 群 體 的 平 均 能 力 從 表 中 可 以 看 出 本 測 驗 的 題 目 難 易 度 大 致 呈 常 態 分 佈, 大 部 分 試 題 都 是 難 易 度 適 中, 而 難 的 題 目 較 少 若 要 對 所 有 不 同 能 力 者 都 能 發 揮 較 佳 的 測 量 精 準 度, 未 來 還 需 要 再 增 加 一 些 較 難 的 題 目 表 五 正 式 適 性 題 庫 之 試 題 難 度 分 佈 ( 單 位 :logit) 難 度 國 小 國 中 高 中 ( 職 ) 大 專 全 部 比 率 < % -2.49~ % -1.99~ % -1.49~ % -0.99~ % -0.49~ % 0.01~ % 0.51~ % 1.01~ % 1.51~ % 2.01~ % Total

16 正 式 適 性 題 庫 中 各 向 度 試 題 在 難 度 上 的 平 均 難 度 與 難 度 範 圍 如 表 六 所 示, 整 體 而 言 正 式 適 性 題 庫 中 的 試 題 略 偏 簡 單, 未 來 需 要 增 加 較 難 的 試 題 其 中 人 際 智 慧 內 省 智 慧 與 情 緒 智 慧 的 題 目 較 簡 單, 平 均 難 度 都 很 接 近 -1; 語 文 智 慧 與 音 樂 節 奏 智 慧 的 題 目 是 中 等 略 微 偏 易, 平 均 難 易 度 約 為 -0.6 左 右 ; 而 視 覺 空 間 智 慧 數 學 邏 輯 智 慧 與 自 然 觀 察 智 慧 的 題 目 難 易 度 最 適 當 從 各 學 習 階 段 在 不 同 智 慧 向 度 上 的 試 題 難 易 度 來 看, 國 小 的 音 樂 節 奏 智 慧 情 緒 智 慧 題 與 高 中 ( 職 ) 的 內 省 智 慧 試 題 難 度 範 圍 較 窄, 缺 乏 難 的 試 題, 未 來 需 要 再 多 增 加 難 的 題 目 表 六 正 式 適 性 題 庫 中 各 向 度 試 題 難 度 平 均 值 與 範 圍 ( 單 位 :logit) 向 度 國 小 國 中 高 中 ( 職 ) 大 專 全 部 語 文 智 慧 (-2.05~0.53) (-2.27~0.84) (-1.83~1.53) (-3.35~0.25) (-3.35~1.53) 視 覺 空 間 (-1.76~1.12) (-1.52~1.68) (-1.75~0.82) (-2.07~0.30) (-2.07~1.68) 音 樂 節 奏 (-2.24~-0.08) (-2.03~0.97) (-4.15~2.15) (-2.29~2.46) (-4.15~2.46) 邏 輯 數 學 (-3.49~2.11) (-1.98~0.59) (-1.64~0.47) (-3.16~1.44) (-3.49~2.11) 自 然 觀 察 (-1.51~1.66) (-2.34~1.86) (-1.63~1.15) (-1.60~1.92) (-2.34~1.92) 人 際 智 慧 (-2.65~0.20) (-2.85~0.46) (-2.61~0.63) (-4.10~2.25) (-4.10~2.25) 內 省 智 慧 (-2.05~0.49) (-3.11~0.60) (-2.41~-0.42) (-1.88~1.12) (-3.11~1.12) 情 緒 智 慧 (-2.13~-0.20) (-2.78~1.80) (-2.03~0.97) (-2.93~1.83) (-2.93~1.83) 全 部 (-3.49~2.11) (-3.11~1.86) (-4.15~2.15) (-4.10~2.46) (-4.15~2.46) 15

17 參 信 度 IRT 的 信 度 概 念 與 傳 統 測 驗 的 概 念 略 有 不 同 在 古 典 測 驗 理 論 中 (classical test theory; CTT), 信 度 的 測 量 方 法 有 許 多 種, 例 如 : 可 以 用 來 瞭 解 測 驗 結 果 是 否 隨 著 時 間 的 變 化 而 仍 具 有 穩 定 性 的 再 測 信 度 (test-retest reliability); 或 用 來 瞭 解 測 驗 結 果 是 否 會 隨 著 行 為 取 樣 而 仍 具 有 穩 定 性 的 複 本 信 度 (parallel form reliability); 或 是 用 來 瞭 解 測 驗 內 部 一 致 性 的 折 半 信 度 庫 李 20 係 數, 以 及 Cronbach s α 係 數 不 論 是 哪 一 種 信 度 指 標, 古 典 測 驗 理 論 都 有 一 項 基 本 假 設, 就 是 所 有 接 受 相 同 測 驗 的 受 測 者 其 測 量 結 果 的 信 度 都 相 同, 也 就 是 不 同 能 力 者 的 測 量 標 準 誤 (standard error of measurement; SEM) 都 相 同 由 於 測 驗 信 度 的 主 要 目 的 就 是 要 瞭 解 測 量 的 誤 差, 有 了 相 等 測 量 標 準 誤 的 假 設, 我 們 就 可 以 利 用 測 驗 信 度 及 受 測 群 體 分 數 的 標 準 差 來 計 算 出 大 家 的 測 量 標 準 誤, 即 : 測 量 標 準 誤 = 群 體 分 數 標 準 差 1 信 度 然 而, 這 項 相 等 測 量 標 準 誤 的 假 設 卻 是 不 合 理 的, 因 為 測 驗 題 目 的 難 易 度 並 不 像 一 般 的 尺 上 面 的 刻 度 一 樣 呈 現 均 勻 分 佈, 大 部 分 的 測 驗 都 是 中 等 難 易 度 的 題 目 較 多, 而 較 難 與 較 簡 單 的 題 目 較 少 因 此, 大 部 分 測 驗 其 真 正 的 測 量 誤 差 情 形 應 該 是 對 中 間 能 力 者 的 測 量 誤 差 較 小, 而 對 高 能 力 者 與 低 能 力 者 的 測 量 誤 差 較 大, 如 圖 3 中 兩 端 為 圓 形 的 線 所 示 這 就 好 像 用 刻 度 間 距 為 1 公 分 的 尺 來 量 人 的 身 高, 會 比 用 刻 度 間 距 為 10 公 分 的 尺 來 得 精 準 低 能 力 者 中 能 力 者 高 能 力 者 簡 單 試 題 中 等 難 度 試 題 困 難 試 題 圖 3 一 般 非 適 性 測 驗 的 測 量 誤 差 在 試 題 反 應 理 論 (IRT) 中, 並 不 假 設 每 個 人 的 能 力 估 計 誤 差 相 同, 而 是 針 對 每 個 人 的 作 答 反 應 情 形 估 計 出 每 個 人 的 能 力 估 計 誤 差 所 以 不 同 能 力 者 的 能 力 估 計 誤 差 並 不 相 同 ; 即 使 能 力 相 同, 如 果 作 答 反 應 型 態 不 同 其 能 力 估 計 誤 差 也 可 能 會 不 同, 例 如 亂 答 者 與 認 真 作 答 者 即 使 答 對 相 同 題 數, 其 能 力 估 計 誤 差 應 該 是 不 相 同 的 IRT 的 測 量 誤 差 就 是 以 這 樣 的 概 念 來 計 算 每 一 位 受 測 者 的 測 量 精 準 度 IRT 的 測 量 精 準 度 並 不 是 使 用 傳 統 測 驗 的 信 度, 而 是 採 用 訊 息 量 (information) 的 概 念, 它 表 示 試 題 與 測 驗 在 不 同 能 力 點 上 的 測 量 精 準 度, 以 I(θ) 來 表 示 訊 息 量 愈 高 表 示 試 題 對 該 能 力 點 的 測 量 精 準 度 愈 高, 其 計 算 公 式 為 : 16

18 2 Pi ' Ii ( ), (2) PQ 其 中 P i 是 某 人 在 某 題 上 的 答 對 率, 這 會 隨 著 所 使 用 的 IRT 模 式 不 同 而 改 變, 在 本 測 驗 中 是 以 公 式 (1) 來 計 算 P i 2 為 P i 對 能 力 ( ) 的 一 階 微 分 平 方 從 另 一 方 面 來 解 釋, 訊 息 量 也 反 映 出 試 題 在 不 同 能 力 點 的 估 計 誤 差 (standard error, SE), 訊 息 量 愈 高 表 示 測 量 誤 差 愈 小, 兩 者 間 的 關 係 為 : i i 1 SE( ), (3) I( ) 測 量 誤 差 的 概 念 與 古 典 測 驗 理 論 中 的 測 量 標 準 誤 (standard error of measurement; SEM) 的 概 念 很 相 似, 只 是 古 典 測 驗 理 論 認 為 作 同 一 份 測 驗 的 所 有 受 試 者 其 測 量 標 準 誤 都 相 同 ; 但 IRT 卻 可 以 依 據 每 個 受 測 者 的 能 力 與 作 答 反 應 型 態 估 計 出 每 個 人 真 正 的 能 力 估 計 誤 差, 這 才 是 比 較 符 合 真 實 的 測 驗 結 果 而 本 測 驗 的 測 量 精 準 度 就 是 以 能 力 估 計 誤 差 的 方 式 來 表 示 圖 4~ 圖 11 是 本 測 驗 題 庫 中 各 智 慧 向 度 的 能 力 估 計 誤 差 從 圖 中 可 以 看 出, 同 一 智 慧 向 度 的 試 題 若 全 部 施 測 其 能 力 估 計 誤 差 約 在 0.3~0.5 之 間 ; 若 採 用 傳 統 非 適 性 測 驗 施 測 6 題 其 能 力 估 計 誤 差 約 在 0.7~1.2 之 間 ; 若 採 用 本 測 驗 之 全 適 性 版 本 施 測 6 題 則 能 力 估 計 誤 差 約 在 0.4~0.55 之 間, 非 常 接 近 該 智 慧 題 庫 全 部 施 測 的 結 果, 而 且 各 能 力 水 準 的 估 計 誤 差 都 很 接 近, 這 是 本 多 元 智 慧 電 腦 化 適 性 測 驗 最 大 的 優 點 ; 若 接 受 本 測 驗 之 半 適 性 版 本 則 能 力 估 計 誤 差 會 介 於 全 適 性 版 本 與 非 適 性 測 驗 之 間, 當 受 測 者 愈 認 真 作 答, 作 答 反 應 愈 合 理, 則 能 力 估 計 誤 差 會 愈 接 近 全 適 性 版 本 的 測 驗 結 果 ( 本 段 所 述 誤 差 是 以 IRT logit 值 為 單 位, 若 轉 換 成 平 均 數 為 100, 標 準 差 為 15 的 量 尺 分 數, 則 量 尺 分 數 的 估 計 誤 差 值 需 乘 以 15) 在 圖 4~ 圖 11 中 還 可 以 看 出 IRT 在 能 力 估 計 上 的 另 一 種 功 能, 就 是 區 辨 出 作 答 反 應 較 不 合 理 ( 不 符 合 測 驗 模 式 所 預 期 ) 的 受 測 者 在 這 些 圖 中 可 以 看 出 有 少 數 受 測 者 其 能 力 估 計 誤 差 在 1.8~2.0 之 間, 這 些 受 測 者 都 是 在 較 難 的 題 目 上 答 對 較 多 題 卻 在 較 簡 單 的 題 目 上 答 對 較 少 題 這 種 頗 不 合 理 的 作 答 反 應 會 呈 現 在 反 應 概 似 函 數 中 ( 詳 見 第 五 章 公 式 (4) 的 說 明 ), 並 在 能 力 估 計 時 出 現 較 高 的 估 計 誤 差 當 受 測 者 亂 答 或 不 認 真 作 答 時, 很 可 能 會 出 現 作 答 反 應 不 合 理 的 情 形, 而 本 測 驗 使 用 的 IRT 能 力 估 計 方 法 可 以 幫 我 們 找 出 這 些 受 測 者, 並 提 醒 測 驗 使 用 者 要 注 意 這 些 人 的 測 驗 結 果 可 信 度 較 低, 可 能 需 要 重 做, 或 在 解 釋 其 分 數 時 要 特 別 小 心 17

19 圖 4 語 文 智 慧 分 測 驗 之 測 量 精 準 度 圖 5 視 覺 空 間 分 測 驗 之 測 量 精 準 度 圖 6 音 樂 節 奏 分 測 驗 之 測 量 精 準 度 圖 7 數 學 邏 輯 分 測 驗 之 測 量 精 準 度 圖 8 自 然 觀 察 分 測 驗 之 測 量 精 準 度 圖 9 人 際 智 慧 分 測 驗 之 測 量 精 準 度 圖 10 內 省 智 慧 分 測 驗 之 測 量 精 準 度 圖 11 情 緒 智 慧 分 測 驗 之 測 量 精 準 度 18

20 肆 效 度 一 建 構 效 度 建 構 效 度 是 指 測 驗 是 否 能 測 出 所 欲 測 量 的 潛 在 特 質 理 論 建 構, 以 本 測 驗 來 說 就 是 測 驗 藍 圖 中 的 八 項 智 慧 因 此, 在 IRT 中 要 驗 證 建 構 效 度 時, 可 以 分 析 實 際 資 料 符 合 IRT 模 式 的 程 度 這 可 以 從 幾 個 層 面 來 看 : ( 一 ) 絕 對 符 合 度 由 於 本 研 究 主 要 是 以 多 向 度 試 題 反 應 理 論 來 進 行 分 析, 因 此 可 以 從 試 題 分 析 結 果 中 看 出 每 個 題 目 符 合 欲 測 智 慧 向 度 的 程 度 這 種 作 法 與 使 用 因 素 分 析 來 判 斷 試 題 的 智 慧 向 度 與 當 初 所 假 設 智 慧 向 度 是 否 吻 合 的 概 念 是 一 樣 的 只 是 IRT 的 試 題 分 析 概 念 比 較 接 近 驗 證 性 因 素 分 析, 而 不 是 探 索 性 的 因 素 分 析 根 據 第 二 章 第 四 節 所 述, 本 測 驗 是 參 考 Linarce( ) 的 試 題 評 斷 指 標 作 為 評 估 試 題 品 質 是 否 優 良 之 依 據 其 中 infit MNSQ 需 介 於 之 間,Z 檢 定 值 需 介 於 +2.0 之 間 除 此 之 外, 若 試 題 為 多 元 計 分 題 型 還 需 要 檢 查 每 個 閾 難 度 值 (step) 是 否 正 常, 原 則 上 較 低 分 數 的 閾 難 度 值 必 須 低 於 較 高 分 數 的 閾 難 度 值, 也 就 是 說 要 得 到 高 分 比 較 困 難 經 過 預 試 分 析 後, 本 測 驗 有 將 近 85% 的 題 目 都 能 符 合 所 採 用 的 多 向 度 試 題 反 應 模 式 ; 而 不 符 合 模 式 的 試 題 在 本 測 驗 中 一 律 刪 除 或 修 改 後 重 新 預 試 經 過 刪 除 後, 目 前 題 庫 中 所 有 試 題 已 全 部 符 合 本 測 驗 所 採 用 的 多 向 度 IRT 模 式 ( 二 ) 相 對 符 合 度 相 對 符 合 度 指 標 是 比 較 不 同 IRT 模 式 的 差 別, 以 決 定 哪 一 種 IRT 模 式 比 較 符 合 本 測 驗 的 實 際 作 答 反 應 資 料 由 於 模 式 的 種 類 有 無 限 多 種, 無 法 一 一 進 行 比 較, 本 測 驗 僅 列 出 單 一 智 慧 類 模 式 七 項 智 慧 模 式 與 八 項 智 慧 模 式 來 進 行 比 較 其 中 單 一 智 慧 模 式 是 將 所 有 題 目 都 視 為 同 一 項 智 慧, 也 就 是 傳 統 單 一 智 慧 的 概 念 七 項 智 慧 模 式 勢 將 情 緒 智 慧 歸 入 內 省 智 慧 與 人 際 智 慧, 由 於 在 Gardner(1983) 的 多 元 智 慧 理 論 中 並 無 情 緒 智 慧, 因 此 七 向 度 的 智 慧 模 式 是 為 了 符 合 Gardner 的 多 元 智 慧 理 論, 而 將 Goleman(1995) 的 情 緒 智 慧 題 目 併 入 Gardner 的 人 際 智 慧 與 內 省 智 慧 中 八 項 智 慧 模 式 則 為 本 測 驗 發 展 時 所 採 用 的 理 論 架 構, 也 就 是 結 合 Gardner 的 多 元 智 慧 理 論 與 Goleman 的 情 緒 智 慧 表 七 顯 示 三 種 不 同 智 慧 向 度 建 構 的 相 對 比 較 結 果 其 中 模 式 概 率 比 檢 驗 (likelihood ratio test) 是 以 八 項 智 慧 模 式 為 參 照 模 式, 對 其 他 模 式 進 行 比 較, 以 瞭 解 八 項 智 慧 模 式 是 否 顯 著 優 於 其 他 模 式 若 檢 驗 結 果 達 顯 著, 表 示 八 項 智 慧 模 式 與 實 際 資 料 間 的 吻 合 程 度 比 其 他 兩 項 模 式 佳 根 據 表 中 結 果, 兩 項 模 式 相 對 比 較 的 檢 定 皆 達 顯 著, 表 示 受 測 者 的 實 際 作 答 反 應 資 料 比 較 吻 合 本 測 驗 原 本 的 八 項 智 慧 測 驗 建 構, 意 即 測 驗 的 建 構 效 度 佳 19

21 表 七 以 模 式 相 對 比 較 來 檢 驗 本 測 驗 的 智 慧 向 度 建 構 Models 八 項 智 慧 模 式 七 項 智 慧 模 式 單 一 智 慧 模 式 (n=4217) 二 效 標 關 連 效 度 Deviance (-2 log likelihood) Estimated Parameters 20-2 log likelihood ( df) Likelihood ratio test (1) P= (34) P=0.00 由 於 目 前 很 少 以 多 元 智 慧 為 教 育 目 標 之 科 系 或 訓 練 課 程, 因 此 本 測 驗 僅 能 以 高 中 ( 職 ) 與 大 專 院 校 的 科 系 中, 與 多 元 智 慧 中 的 某 項 智 慧 較 有 關 連 之 科 系 當 作 該 科 系 之 優 勢 智 能 ( 高 中 職 各 科 系 之 優 勢 智 慧 對 照 表 詳 見 附 錄 一 ; 大 專 院 校 各 科 系 之 優 勢 智 慧 對 照 表 詳 見 附 錄 二 ), 並 以 優 勢 智 能 群 體 與 非 優 勢 智 能 群 體 在 該 智 慧 分 數 上 的 t 檢 定, 作 為 本 測 驗 效 度 之 參 考 資 訊 表 八 是 先 針 對 高 中 ( 職 ) 的 科 系 特 性 判 斷 其 優 勢 智 慧 後, 再 針 對 優 勢 智 慧 與 非 優 勢 智 慧 的 學 生 進 行 t 檢 定 之 結 果 從 表 八 中 可 以 看 出, 大 部 分 具 備 優 勢 智 慧 的 群 體 其 在 該 智 慧 上 的 IRT 能 力 值 平 均 數 都 比 非 優 勢 智 慧 群 體 來 得 高, 而 且 統 計 檢 定 結 果 都 達 顯 著 差 異, 顯 示 優 勢 智 慧 科 系 在 該 智 慧 上 的 表 現 確 實 比 非 優 勢 智 慧 科 系 來 得 高 例 如 : 高 中 社 會 組 學 生 的 語 文 智 慧 上 都 比 其 他 高 中 職 學 生 高 ; 高 職 美 術 或 設 計 類 科 學 生 的 視 覺 空 間 智 慧 都 比 其 他 高 中 職 學 生 高 ; 高 中 自 然 組 學 生 的 數 學 邏 輯 能 力 與 自 然 觀 察 能 力 都 比 其 他 高 中 職 學 生 高 由 於 缺 乏 與 音 樂 人 際 內 省 情 緒 相 關 的 高 中 職 科 系, 因 此 無 法 提 供 高 中 職 在 這 四 項 智 慧 上 的 效 標 關 連 效 度 資 料 表 八 高 中 ( 職 ) 科 系 的 優 勢 智 能 群 體 與 其 他 非 優 勢 智 能 群 體 之 平 均 數 檢 定 能 力 向 度 優 勢 智 能 群 體 平 均 數 (logit) 非 優 勢 智 能 群 體 平 均 數 (logit) t-test 語 文 智 慧 ** 視 覺 空 間 ** 數 學 邏 輯 ** 自 然 觀 察 ** 表 示 p<0.01;* 表 示 p<0.05 表 九 是 先 針 對 大 專 院 校 的 科 系 特 性 判 斷 其 優 勢 智 慧 後, 再 針 對 優 勢 智 慧 與 非 優 勢 智 慧 的 學 生 進 行 t 檢 定 之 結 果 從 表 九 中 可 以 看 出, 大 部 分 具 備 優 勢 智

22 慧 的 群 體 其 在 該 智 慧 上 的 IRT 能 力 值 平 均 數 都 比 非 優 勢 智 慧 群 體 來 得 高 例 如 : 國 文 系 學 生 在 語 文 智 慧 上 明 顯 比 其 他 科 系 學 生 高 ; 數 學 系 物 理 系 與 資 訊 相 關 科 系 學 生 在 數 學 邏 輯 智 慧 上 明 顯 比 其 他 科 系 學 生 高 ; 而 管 理 相 關 科 系 與 心 輔 相 關 科 系 學 生 在 人 際 智 慧 上 明 顯 比 其 他 科 系 學 生 高 ; 而 心 輔 相 關 科 系 學 生 在 情 緒 智 慧 上 也 明 顯 比 其 他 科 系 學 生 高 不 過 仍 有 少 部 份 具 備 優 勢 智 能 的 科 系 學 生 與 非 優 勢 智 能 科 系 學 生 差 不 多, 例 如 音 樂 系 學 生 的 音 樂 智 慧 與 其 他 科 系 學 生 差 不 多 ; 而 生 物 相 關 科 系 與 地 球 科 學 相 關 科 系 學 生 的 的 自 然 觀 察 智 慧 也 與 其 他 科 系 學 生 差 不 多 究 其 原 因 可 能 是 這 兩 項 智 慧 屬 於 比 較 天 生 的 智 慧 類 型, 即 使 是 非 優 勢 智 慧 科 系 的 學 在 這 方 面 的 能 力 也 還 不 錯, 而 且 這 些 科 系 的 訓 練 學 習 比 較 強 調 在 技 巧 上 ( 例 如 : 音 樂 演 奏 技 巧 ), 不 是 強 調 在 天 生 敏 感 度 的 訓 練, 因 此 不 太 容 易 與 其 他 非 優 勢 智 能 科 系 有 明 顯 差 異 表 九 大 專 院 校 各 科 系 優 勢 智 能 群 體 與 其 他 非 優 勢 智 能 群 體 之 平 均 數 檢 定 能 力 向 度 優 勢 智 能 群 體 平 均 數 (logit) 非 優 勢 智 能 群 體 平 均 數 (logit) t-test 語 文 智 慧 * 視 覺 空 間 音 樂 節 奏 數 學 邏 輯 ** 自 然 觀 察 人 際 智 慧 * 內 省 智 慧 情 緒 智 慧 ** ** 表 示 p<0.01;* 表 示 p<

23 伍 施 測 計 分 常 模 與 解 釋 一 施 測 本 測 驗 一 律 採 用 電 腦 施 測, 並 統 一 由 本 測 驗 中 心 派 受 過 訓 練 之 監 試 人 員 至 各 考 場 進 行 施 測 施 測 時, 受 測 者 需 先 到 指 定 的 電 腦 教 室 ( 考 場 ), 監 試 人 員 會 依 每 位 受 測 者 的 姓 名 學 號 給 予 一 組 帳 號 密 碼 ( 此 帳 號 密 碼 與 受 測 者 的 姓 名 學 號 已 事 先 記 錄 在 資 料 庫 中 ) 作 答 前, 受 測 者 必 須 在 電 腦 上 登 入 該 組 帳 號 密 碼, 之 後 一 律 根 據 電 腦 指 示 進 行 測 驗 回 答 各 項 問 題 依 據 所 預 約 的 測 驗 類 型 不 同, 受 測 者 的 接 受 到 的 作 答 程 序 也 不 同, 分 為 以 下 兩 種 : 1. 半 適 性 測 驗 常 模 擴 建 學 校 的 受 測 者 皆 是 作 答 半 適 性 測 驗 半 適 性 測 驗 是 先 讓 受 測 者 作 答 半 數 的 非 適 性 題 目, 之 後 電 腦 會 根 據 受 測 者 在 這 些 題 目 上 的 答 對 情 形, 選 擇 後 續 半 數 的 適 性 題 目 若 受 測 者 在 之 前 非 適 性 題 目 中 答 對 較 多 題, 則 後 續 適 性 題 目 就 會 比 較 難 ; 若 受 測 者 在 之 前 非 適 性 題 目 中 答 對 較 少 題, 則 後 續 適 性 題 目 就 會 比 較 簡 單 受 測 者 必 須 作 完 所 有 題 目 ( 目 前 設 定 為 32 題 ), 測 驗 才 會 結 束 各 學 習 階 段 被 允 許 的 作 答 時 間 為 小 學 40 分 鐘 國 中 45 分 鐘 高 中 50 分 鐘 大 專 院 校 60 分 鐘 2. 全 適 性 測 驗 全 適 性 測 驗 是 所 有 題 目 皆 是 符 合 受 測 者 能 力 水 準 的 題 目 剛 開 始, 電 腦 會 根 據 受 測 者 自 我 評 估 的 各 向 度 能 力 水 準 選 出 第 1 題, 接 著 再 依 據 受 測 者 的 答 對 與 答 錯 情 形, 立 即 估 計 出 其 暫 時 的 能 力 值, 並 由 電 腦 選 出 下 一 道 最 適 合 受 測 者 的 能 力 的 題 目 讓 他 作 答, 如 此 反 覆 進 行, 直 到 作 答 完 目 標 題 數 ( 目 前 設 定 為 48 題 ) 為 止 各 學 習 階 段 被 允 許 的 作 答 時 間 為 小 學 60 分 鐘 國 中 60 分 鐘 高 中 70 分 鐘 大 專 院 校 80 分 鐘 二 計 分 本 測 驗 題 目 皆 為 多 選 一 的 選 擇 題, 受 測 者 必 須 在 每 題 的 選 項 中 選 出 一 個 最 符 合 題 目 問 題 的 答 案 受 測 者 作 答 每 一 題 後 都 會 得 到 一 個 原 始 分 數, 所 有 原 始 分 數 再 以 多 向 度 試 題 反 應 理 論 (MIRT) 進 行 能 力 估 計, 計 算 出 能 力 值 與 能 力 估 計 誤 差 IRT 的 能 力 估 計 方 式 與 傳 統 測 驗 不 相 同, 其 作 法 是 先 依 據 受 測 者 的 原 始 分 數 以 及 所 使 用 的 IRT 模 式 來 建 立 反 應 概 似 函 數 (likelihood function), 再 解 出 能 夠 使 反 應 概 似 函 數 極 大 化 的 能 力 值 簡 單 來 說, 反 應 概 似 函 數 就 是 受 測 者 在 各 題 目 上 會 得 到 某 種 原 始 分 數 組 型 的 聯 合 機 率, 如 公 式 (4) 所 示 : L( U, b ) i j i 22 k n j 1 i 1 P U i i Q 1 U i i, (4)

24 其 中 U i 表 示 受 測 者 答 對 (U=1) 或 答 錯 (U=0) 某 個 題 目 ;P i 如 公 式 (1) 所 示, 這 要 依 所 採 用 的 IRT 模 式 而 定 而 Q i =1-P i 舉 例 來 說, 如 果 有 一 位 受 試 者 分 別 做 了 5 個 題 目, 這 5 個 題 目 的 難 度 分 別 是 (-1.0, 0, 0.5, 1.0, 2.0), 而 受 試 者 的 作 答 結 果 是 [1,1,0,1,0]; 其 中 1 代 表 答 對, 而 0 代 表 答 錯 若 選 擇 Rasch 模 式, 則 其 反 應 概 似 函 數 ( 在 這 5 題 上 會 得 到 [1,1,0,1,0] 分 數 組 型 的 聯 合 機 率 ) 為 : [ e L [ 1 e ( 1)] ( 1)] ( e 1 e 0) ( 0) ( e [1 1 e 0.5) ( 0.5) ( e ] 1 e 1) ( 1) ( e (1 1 e 2) ( 2) ) 其 中 e=2.718 接 著 再 設 法 找 出 最 有 可 能 產 生 此 反 應 概 似 函 數 的 能 力 值 我 們 可 以 試 著 用 等 不 同 的 θ 值 代 入 概 似 函 數, 看 看 哪 個 數 值 代 入 後 會 使 概 似 函 數 值 最 大, 則 該 θ 值 就 是 受 試 者 最 有 可 能 的 能 力 值 從 表 七 中 可 以 看 出, 會 得 出 [1,1,0,1,0] 分 數 組 型 的 受 試 者 能 力 值 最 有 可 能 是 1.0 表 七 IRT 的 受 試 者 能 力 估 計 過 程 第 1 題 第 2 題 第 3 題 第 4 題 第 5 題 概 似 函 數 值 難 度 (* 為 最 佳 解 ) 答 題 反 應 答 對 [1] 答 對 [1] 答 錯 [0] 答 對 [1] 答 錯 [0] 機 率 值 P P 1-P 1 1-P θ 值 θ 值 θ 值 θ 值 θ 值 θ 值 θ 值 θ 值 θ 值 * θ 值 θ 值 θ 值 θ 值 然 而, 實 際 上 在 進 行 能 力 估 計 時 是 用 所 有 受 試 者 在 所 有 題 目 上 的 答 題 反 應 矩 陣 所 形 成 的 概 似 函 數 來 進 行 估 計, 也 就 是 同 時 估 計 所 有 受 試 者 的 能 力 值 而 且 在 本 測 驗 中, 所 要 估 計 的 能 力 值 並 不 是 單 向 度 能 力, 而 是 多 向 度 的 能 力 由 於 此 反 應 概 似 函 數 相 當 複 雜, 通 常 只 能 計 算 出 近 似 的 解 或 最 佳 的 解, 而 且 需 要 仰 賴 複 雜 的 數 值 運 算 方 式 來 計 算 受 測 者 的 多 向 度 能 力 值 計 算 受 測 者 能 力 值 最 佳 解 的 方 法 有 三 種 : 最 大 概 似 法 (Maximum Likelihood; ML) 貝 氏 最 大 後 驗 法 (maximum a posteriori, MAP) 與 貝 氏 期 望 後 驗 法 (expected a posteriori, EAP) 1. 最 大 概 似 估 計 法 23

25 最 大 概 似 估 計 法 是 直 接 找 出 能 使 受 試 者 的 反 應 概 似 函 數 最 佳 化 的 能 力 值, 就 像 表 七 的 流 程 為 了 快 速 地 找 出 能 使 概 似 函 數 最 大 化 的 能 力 值, 通 常 會 先 對 反 應 概 似 函 數 取 對 數 (log)( 以 避 免 反 應 概 似 函 數 值 太 小 難 以 計 算 ), 再 以 牛 頓 - 約 佛 森 (Newton-Raphson) 法 進 行 疊 代 運 算 疊 代 方 式 如 公 式 (5) 所 示 : ( j) ( j 1) ( j), (5) 其 中, (j) 為 受 試 者 在 第 j 次 疊 代 的 暫 時 能 力 估 計 值 ; ( j) 的 計 算 方 式 為 : ( j) ln L( u) 2 ln L( u), (6) ln L( u) 與 2 ln L( u) 分 別 是 反 應 概 似 函 數 對 數 值 的 一 階 微 分 與 二 階 微 分 使 用 牛 頓 - 約 佛 森 法 來 進 行 疊 代 的 優 點 是 可 以 很 快 地 找 的 受 試 者 的 能 力 值, 而 且 較 為 精 確 2. 最 大 後 驗 估 計 法 最 大 後 驗 估 計 法 是 先 以 受 試 者 所 屬 群 體 的 事 前 能 力 分 布 f (θ) 作 為 加 權 值, 形 成 事 後 機 率 密 度 函 數 f (θ U), 再 來 找 出 能 使 此 事 後 機 率 密 度 函 數 最 大 化 的 能 力 值 事 後 機 率 密 度 函 數 計 算 方 式 如 公 式 (7) 所 示 : f ( U) L( U ) f ( ) f ( U), (7) MAP 法 也 可 以 比 照 ML 法, 先 求 出 事 後 機 率 密 度 函 數 的 對 數 值, 再 以 牛 頓 - 約 佛 森 法 來 進 行 疊 代 MAP 法 的 概 念 就 好 像 是 當 我 們 已 經 知 道 受 試 者 是 來 自 於 資 賦 優 異 的 群 體 時, 我 們 在 估 計 他 的 程 度 值 時 就 可 以 參 考 他 所 屬 的 群 體 的 能 力 分 布 情 形, 如 此 我 們 在 估 計 他 的 程 度 值 時 就 會 比 較 準 確 些 但 是 若 用 來 計 算 的 群 體 能 力 事 前 分 佈 是 錯 誤 的, 反 而 會 得 到 偏 差 的 能 力 估 計 結 果 3. 期 望 後 驗 估 計 法 期 望 後 驗 估 計 法 與 第 二 種 方 法 類 似, 只 是 所 尋 找 的 能 力 值 是 事 後 機 率 密 度 函 數 的 期 望 值 ( 相 當 於 平 均 數 ), 而 不 是 最 大 值 ( 相 當 於 眾 數 ) 如 公 式 (8) 所 示 : EAP k q q 1 f ( U) q q k q q 1 q k q q 1 L( U ) f ( ) q q [ L( U q) f ( q)], (8) 24

26 其 中 q 是 計 算 能 力 期 望 值 時 所 切 割 的 量 化 點,q 點 愈 多, 計 算 得 愈 精 確 不 過 這 種 估 計 方 法 無 法 使 用 牛 頓 - 約 佛 森 法 來 進 行 疊 代, 而 且 隨 著 所 選 取 的 量 化 點 數 愈 多, 所 需 的 計 算 量 較 龐 大, 計 算 時 間 也 比 較 久 尤 其 在 計 算 多 向 度 能 力 時, 這 種 作 法 所 需 的 時 間 太 久 了, 因 此 在 本 測 驗 中 並 不 適 用 ( 陳 柏 熹, 民 95) 在 各 種 能 力 估 計 方 法 的 比 較 上 ( 洪 碧 霞, 吳 裕 益, 吳 鐵 雄, 陳 英 豪,1992; Bock & Mislevy, 1982; Weiss & Mcbride, 1984), MAP 法 與 EAP 法 的 優 點 是 能 力 估 計 誤 差 較 小, 而 且 對 各 種 答 題 反 應 的 受 試 者 皆 可 進 行 估 計 缺 點 是 會 有 廻 歸 性 的 偏 誤, 也 就 是 會 高 估 低 能 力 者 的 能 力 值, 低 估 高 能 力 者 的 能 力 值, 使 所 有 人 的 能 力 值 都 偏 向 群 體 的 平 均 數 ; 而 且 估 計 時 需 要 先 計 算 出 正 確 的 群 體 能 力 平 均 數 與 變 異 數 ML 的 優 點 是 比 較 沒 有 廻 歸 性 偏 誤 缺 點 是 能 力 估 計 誤 差 較 大 ; 而 且 全 部 答 對 或 全 部 答 錯 者 無 法 進 行 能 力 估 計, 受 試 者 的 答 題 反 應 中 必 須 有 答 對 也 有 答 錯 才 能 進 行 能 力 估 計 由 於 在 本 測 驗 中 是 使 用 多 向 度 試 題 反 應 理 論 進 行 能 力 估 計 與 適 性 選 題, 若 採 用 EAP 法 將 造 成 每 題 的 能 力 估 計 與 選 題 時 間 太 久 ( 超 過 1 分 鐘 ); 若 採 用 ML 法 也 會 使 全 部 答 對 者 與 全 部 答 錯 者 的 能 力 值 無 法 估 計 ; 因 此 一 律 採 用 MAP 法 進 行 能 力 估 計 為 了 改 善 MAP 法 的 廻 歸 性 偏 誤 問 題, 本 測 驗 採 用 Chen(2009) 所 提 出 來 的 加 權 貝 氏 估 計 法 (weighted Bayesian estimation ) 該 方 法 是 在 使 用 EAP 或 MAP 進 行 能 力 估 計, 根 據 每 位 受 測 者 符 合 所 屬 群 體 事 前 能 力 分 佈 的 程 度 進 行 加 權, 以 降 低 群 體 的 事 前 能 力 分 佈 對 極 端 能 力 者 的 影 響 力, 減 少 廻 歸 性 偏 誤 三 常 模 算 出 受 測 的 IRT 能 力 值 後, 電 腦 程 式 會 依 據 受 測 者 所 屬 的 常 模, 算 出 受 測 者 在 該 常 模 中 的 Z 分 數, 並 轉 換 成 平 均 數 為 100 分, 標 準 差 為 15 分 的 各 項 智 慧 分 數 最 後 再 依 據 每 個 人 的 分 數 與 測 量 誤 差 繪 製 成 多 元 智 慧 剖 面 圖, 作 為 瞭 解 個 人 多 元 智 慧 表 現 與 協 助 其 生 涯 發 展 之 參 考 此 外, 為 了 讓 受 測 者 與 輔 導 者 直 接 瞭 解 本 測 驗 的 測 量 精 準 度, 本 測 驗 在 成 績 表 上 直 接 將 能 力 估 計 誤 差 以 灰 色 條 狀 圖 顯 示, 如 圖 12 藉 由 同 時 呈 現 能 力 估 計 值 與 能 力 估 計 誤 差 的 作 法, 教 育 大 眾 在 解 讀 測 驗 結 果 時 應 同 時 考 量 每 份 測 驗 的 測 量 誤 差, 而 不 要 太 過 度 強 調 分 數 值 本 測 驗 目 前 的 常 模 分 為 國 小 中 高 年 級 (4-6 年 級 ) 國 中 高 中 ( 職 ) 大 專 院 校 四 組 常 模 由 於 智 慧 的 成 長 在 同 一 學 習 階 段 中 的 變 化 不 大, 因 此 同 一 學 習 階 段 中 不 再 區 分 年 齡 常 模 每 一 學 習 階 段 的 常 模 都 是 從 全 省 抽 樣, 並 逐 年 增 加 樣 本 更 新 常 模 受 測 超 過 六 年 的 受 測 者 將 自 常 模 中 剔 除, 以 維 持 常 模 的 時 效 性 25

27 圖 12 多 元 智 慧 電 腦 化 適 性 測 驗 成 績 表 樣 例 四 分 數 解 釋 在 考 慮 本 測 驗 每 個 智 慧 向 度 的 測 量 題 數 不 多, 測 量 誤 差 稍 大, 因 此 本 測 驗 僅 將 測 驗 分 數 分 成 五 個 等 級, 分 級 標 準 如 表 八 所 示 : 各 智 慧 等 級 之 解 釋 詳 見 附 26

28 錄 二 表 八 多 元 智 慧 電 腦 化 測 驗 結 果 分 級 解 釋 表 智 慧 等 級 量 尺 分 數 範 圍 5. 傑 出 123 分 以 上 4. 良 好 108 分 ~122 分 3. 普 通 93 分 ~107 分 2. 稍 弱 78 分 ~92 分 1. 不 佳 77 分 以 下 本 測 驗 在 解 釋 上 應 注 意 下 列 幾 項 原 則 1. 使 用 本 測 驗 結 果 進 行 解 釋 時, 應 考 慮 所 接 受 的 測 驗 版 本 與 測 量 誤 差 若 受 測 者 是 接 受 半 適 性 測 驗, 由 於 僅 有 半 數 適 性 題 目, 且 題 數 較 少, 其 測 量 誤 差 較 大, 教 師 應 以 受 測 者 的 智 慧 等 級 來 解 讀 其 各 項 智 慧 的 表 現, 並 要 同 時 考 慮 測 驗 成 績 表 上 所 繪 製 的 各 智 慧 向 度 估 計 誤 差 ( 灰 色 條 狀 範 圍 ) 2. 盡 量 以 各 項 智 慧 的 相 對 表 現 來 進 行 解 釋, 協 助 受 測 者 找 出 優 勢 智 慧 由 於 每 個 人 都 某 方 面 的 優 勢 智 慧 與 弱 勢 智 慧, 為 了 協 助 受 測 者 的 學 習 發 展 與 生 涯 發 展, 教 師 可 以 依 據 學 生 在 各 項 智 慧 表 現 上 的 相 對 優 勢 智 慧, 配 合 學 生 的 學 習 或 職 業 興 趣, 作 為 建 議 學 生 學 習 發 展 與 生 涯 發 展 的 參 考 請 勿 使 用 本 測 驗 分 數 來 進 行 個 體 之 間 智 慧 表 現 的 比 較, 或 作 為 升 學 管 道 的 唯 一 參 考 指 標 3. 對 低 分 者 的 解 釋 應 格 外 小 心, 務 必 先 確 認 受 測 者 作 答 當 時 的 狀 態 造 成 本 測 驗 測 量 結 果 不 佳 的 原 因 很 多, 可 能 是 因 為 在 受 測 時 沒 有 認 真 作 答, 也 可 能 是 對 電 腦 的 操 作 不 熟 悉, 或 是 有 其 他 身 心 障 礙 ( 視 覺 聽 覺 或 閱 讀 障 礙 ) 導 致 在 本 測 驗 中 的 分 數 表 現 不 佳 教 師 應 先 釐 清 原 因, 確 定 排 除 這 些 因 素 後 才 能 下 結 論 並 且 應 鼓 勵 學 生 本 測 驗 的 測 量 誤 差 較 大, 且 智 慧 表 現 是 可 以 訓 練 的, 不 必 太 在 意 弱 勢 的 智 慧, 應 盡 量 針 對 優 勢 智 慧 來 規 劃 自 己 未 來 的 學 習 與 生 涯 4. 對 高 中 ( 職 ) 與 大 專 院 校 類 群 對 照 表 的 解 釋 與 應 用 若 高 中 ( 職 ) 與 大 專 院 校 學 生 受 測 全 適 性 版 本 的 多 元 智 慧 電 腦 化 適 性 測 驗, 本 測 驗 額 外 提 供 分 類 群 對 照 表 此 類 群 對 照 表 是 依 教 育 部 之 大 專 院 校 17 學 群 與 高 中 ( 職 )15 類 群 的 分 類 標 準, 將 兩 常 模 之 受 測 者 進 行 分 類 後 所 計 算 出 來 的 各 項 智 慧 平 均 數 對 照 表 由 於 各 學 群 人 數 不 多, 且 現 職 學 生 的 表 現 並 不 能 完 全 代 表 該 類 群 的 典 型 表 現, 或 被 期 待 的 表 現, 因 此 僅 適 合 作 為 受 測 者 規 劃 未 來 學 習 生 涯 的 參 考 依 據 之 一, 應 該 要 多 配 合 其 他 方 面 的 表 現 與 興 趣 來 協 助 生 涯 規 劃 27

29 陸 常 模 更 新 與 測 驗 修 訂 規 劃 由 於 測 驗 的 發 展 需 要 建 立 常 模, 而 常 模 的 建 立 需 要 大 量 樣 本 與 施 測 時 間, 因 此 目 前 大 部 分 測 驗 的 常 模 都 是 建 立 好 之 後 就 使 用 很 久, 即 使 要 更 新 也 是 經 過 十 年 以 上 才 更 新, 或 是 常 模 年 代 久 遠 已 經 不 符 合 當 代 受 測 者 的 實 際 狀 況 為 了 改 善 這 個 問 題, 本 測 驗 預 計 每 年 更 新 常 模, 利 用 每 年 廣 徵 常 模 擴 建 合 作 學 校 的 方 式 來 使 本 測 驗 的 常 模 符 合 當 代 社 會 的 受 測 者 實 際 狀 況 本 測 驗 的 常 模 更 新 方 式 是 將 每 年 新 增 加 的 樣 本 加 入 本 測 驗 的 常 模 中, 而 超 過 六 年 的 樣 本 則 自 常 模 中 淘 汰, 因 此 受 測 者 每 年 所 使 用 的 常 模 對 照 表 都 是 以 累 積 前 六 年 的 所 有 受 測 者 所 建 立 出 來 的, 再 將 每 個 分 測 驗 轉 換 成 平 均 數 100 分 標 準 差 15 分 的 量 尺 除 此 之 外, 目 前 大 部 分 標 準 化 心 理 測 驗 的 題 目 都 是 固 定, 所 有 受 測 者 都 作 答 相 同 的 題 目 這 種 作 法 用 在 無 標 準 答 案 的 性 格 類 測 驗 上 或 許 可 行, 但 是 若 用 在 能 力 類 型 的 測 驗 上 卻 會 有 試 題 外 洩 的 疑 慮 如 果 有 受 測 者 事 先 知 道 測 驗 題 目 內 容, 則 其 測 驗 結 果 將 不 準 確 目 前 許 多 市 面 上 販 售 的 智 力 測 驗 練 習 題 目 與 正 式 智 力 測 驗 幾 乎 相 同 就 是 因 為 試 題 外 洩 的 結 果 ; 而 且 有 些 家 長 為 了 讓 小 孩 能 有 機 會 進 入 資 優 班, 就 讓 學 生 事 先 作 這 些 練 習 題, 造 成 測 驗 結 果 與 其 真 實 能 力 不 符 合 的 問 題 而 這 種 固 定 題 目 作 法 的 測 量 效 益 也 比 較 差, 也 限 制 了 測 驗 對 不 同 能 力 受 測 者 的 應 用, 高 能 力 者 與 低 能 力 者 的 測 量 誤 差 都 會 比 較 大, 如 第 三 章 所 述 本 測 驗 另 一 項 特 色 就 是 會 每 年 根 據 題 庫 的 難 度 分 佈 狀 況 來 增 加 新 題 目, 並 淘 汰 曝 光 率 較 高 的 題 目 這 種 作 法 一 方 面 可 以 保 護 試 題 安 全 性, 讓 本 測 驗 的 題 目 不 容 易 被 外 界 知 道 ; 另 一 方 面 可 以 使 題 庫 的 可 測 量 範 圍 變 得 更 廣, 讓 各 種 能 力 者 都 能 有 適 合 的 題 目 可 以 測 量 此 外, 配 合 本 測 驗 的 電 腦 化 適 性 程 序 還 能 使 本 測 驗 的 測 量 效 益 更 高, 只 用 少 數 的 題 目 就 能 對 受 測 者 的 多 元 智 慧 作 精 準 的 測 量 28

30 參 考 文 獻 陳 柏 熹 ( 民 94) 電 腦 化 適 性 測 驗 的 理 論 與 應 用 國 家 菁 英,1(1), 陳 柏 熹 ( 民 95) 能 力 估 計 方 法 對 多 向 度 電 腦 化 適 性 測 驗 測 量 精 準 度 的 影 響 教 育 心 理 學 報,38(2), 陳 柏 熹 王 文 中 ( 民 93) 曝 光 率 控 制 對 多 向 度 電 腦 化 適 性 測 驗 能 力 估 計 信 度 之 影 響 : 以 2001 年 國 中 基 本 學 力 測 驗 資 料 為 例 教 育 與 心 理 研 究,27(1), Wang, W.-C., Chen, P.-H., & Cheng, Y.-Y. (2004). Improving measurement precision of test batteries using multidimensional item response models. Psychological Method,.9(1), (SSCI) Wang, W.-C., & Chen, P.-H. (2004). Computerized adaptive testing for multidimensional between- and within-items. Applied Psychological Measurement, 28(4), (SSCI) Adams, R. J., Wilson, M. & Wang, W.-C. (1997). The multidimensional random coefficients multinomial logit model. Applied Psychological Measurement. 21, Davey, T., & Parshall, C. G. (1995). New algorithms for item selection and exposure control with computerized adaptive testing. Paper presented at the annual meeting of the American Educational Research Association, San Francisco. Davey, T., Oshima, T. C., & Lee, K. (1996). Linking multidimensional item calibrations. Applied Psychological measurement, 20, Gardner, H. (1983). Frames of mind: The theory of multiple intelligences. New York: Basic books. Goleman, D. (1995). Emotional intelligence. New York: Bantam Books. Hambleton, R. J., & Swaminathan, H. (1985). Item response theory: Principles and applications. Boston: Klvwer Nijhoff. Hattie, J. (1981). Decision criteria for determining unidimensional and multidimensional normal ogive models of latent trait theory. Armidale, Australia: The University of New England, Center for Behavioral Studies. Hoijtink, H., Rooks, G., & Wilmink, F. W. (1999). Confirmatory factor analysis of items with a dichotomous response format using the multidimensional Rasch model. Psychological Methods, 4, Luecht, R. M. (1996). Multidimensional computerized adaptive testing in a certification or licensure context. Applied Psychological Measurement, 20, McDonald, R. P. (1967). Nonlinear factor analysis. Psychometric Monograph, 15,

31 Mckinley, R. L. & Reckase, M. D. (1983). MAXLOG: A computer program for the estimation of the parameters of a multidimensional logistic model. Behavior Research Methods & Instrumentation, 15, Salovey, P., & J. D. Mayer (1990). Emotional intelligence. Imagination, Cognition, and Personality, 9, Sand W. A., Water, B. K., & McBride, J. R. (Eds.) (1997). Computerized adaptive testing: From inquiry to operation. Washington, DC: American Psychological Association. Segall, D. O. (1996). Multidimensional adaptive testing. Psychometrika, 61, Stocking, M. L., & Lewis, C. (1995a). A new method of controlling item exposure in computerized adaptive testing. (Research Report 95-25). Princeton, NJ: Educational Testing Service. Stocking, M. L., & Lewis, C. (1995b). Controlling item exposure conditional on ability in computerized adaptive testing. (Research Report 95-24). Princeton, NJ: Educational Testing Service. Sympson, J. B. (1978). A model for testing with the multidimensional items. In D. J. Weiss (Ed.) (1978). Proceedings of the 1977 computerized adaptive testing conference (pp ). University of Minnesota, Department of Psychology, Psychometric Methods Program. Sympson, J. B., & Hetter, R. D. (1985). Controlling item exposure rates in computerized adaptive testing. Paper presented at the annual meeting of the Military Testing Association. San Diego, CA: Navy Personnel Research and Development Center. Wainer, H., Dorans, N. J., Flaugher, R., Green, B. F., Mislevy, R. J., Steinberg, L., & Thissen, D. (Eds.) (1990). Computerized adaptive testing: A primer. Hillsdale, NJ: Erlbaum. Wang, W.-C., & Chen, P.-H. (2004). Implementation and measurement efficiency of multidimensional computerized adaptive testing. Applied Psychological Measurement, 28(4), Wang, W.-C., Chen, P.-H., & Cheng, Y.-Y. (2004). Improving measurement precision of test batteries using multidimensional item response models. Psychological Method,.9(1), Weiss, D. J. (Eds.) (1985). Item response theory and computerized adaptive testing conference proceedings. University of Minnesota, Department of Psychology, Psychometric Methods Program. Whitely, S. E. (1980). Measuring aptitude processes with multicomponent latent trait models. (Technical Report NIE-80-5 ). Lawrence: University of Kansas. Wu, M. L., Adams, R. J., & Wilson, M. R. (1998). Acer ConQuest. Melbourne, Australia: Australian Council for Educational Research. 30

32 附 錄 一 高 中 ( 職 ) 受 測 科 系 與 多 元 智 慧 優 勢 智 能 對 照 表 學 校 名 稱 學 校 類 別 班 級 類 科 類 科 優 勢 智 能 1 優 勢 智 能 2 土 庫 商 工 第 一 班 高 職 建 築 科 工 業 群 視 覺 空 間 基 隆 商 工 第 一 班 高 職 廣 設 科 設 計 群 視 覺 空 間 基 隆 商 工 第 二 班 高 職 廣 設 科 設 計 群 視 覺 空 間 基 隆 商 工 第 三 班 高 職 廣 設 科 設 計 群 視 覺 空 間 基 隆 商 工 第 四 班 高 職 廣 設 科 設 計 群 視 覺 空 間 土 庫 商 工 第 二 班 高 職 廣 設 科 設 計 群 視 覺 空 間 員 林 高 中 第 二 班 綜 合 高 中 社 會 組 社 會 組 語 文 智 慧 曉 明 女 中 第 一 班 高 中 社 會 組 社 會 組 語 文 智 慧 滬 江 高 中 第 二 班 綜 合 高 中 社 會 組 社 會 組 語 文 智 慧 台 中 二 中 第 一 班 高 中 社 會 組 社 會 組 語 文 智 慧 曉 明 女 中 第 二 班 高 中 社 會 組 社 會 組 語 文 智 慧 員 林 高 中 第 一 班 綜 合 高 中 自 然 組 自 然 組 數 學 邏 輯 自 然 觀 察 台 中 二 中 第 二 班 高 中 自 然 組 自 然 組 數 學 邏 輯 自 然 觀 察 台 中 一 中 第 二 班 高 中 自 然 組 自 然 組 數 學 邏 輯 自 然 觀 察 台 中 一 中 第 一 班 高 中 自 然 組 自 然 組 數 學 邏 輯 自 然 觀 察 北 一 女 第 一 班 高 中 自 然 組 自 然 組 數 學 邏 輯 自 然 觀 察 北 一 女 第 二 班 高 中 自 然 組 自 然 組 數 學 邏 輯 自 然 觀 察 明 雄 農 工 第 二 班 高 職 園 藝 科 農 業 群 自 然 觀 察 桃 園 農 工 第 一 班 高 職 畜 產 保 健 農 業 群 自 然 觀 察 明 雄 農 工 第 一 班 高 職 園 藝 科 農 業 群 自 然 觀 察 桃 園 農 工 第 二 班 高 職 電 子 科 工 業 群 參 照 群 體 桃 園 農 工 第 三 班 高 職 電 子 科 工 業 群 參 照 群 體 樹 人 家 商 第 一 班 高 職 資 處 科 商 業 群 參 照 群 體 滬 江 高 中 第 一 班 綜 合 高 中 資 處 科 商 業 群 參 照 群 體 北 斗 家 商 第 二 班 高 職 資 處 科 商 業 群 參 照 群 體 樹 人 家 商 第 二 班 高 職 資 處 科 商 業 群 參 照 群 體 北 斗 家 商 第 一 班 高 職 商 業 事 務 科 商 業 群 參 照 群 體 31

33 附 錄 二 大 專 院 校 受 測 科 系 與 多 元 智 慧 優 勢 智 能 對 照 表 多 元 智 慧 項 目 語 文 智 慧 視 覺 空 間 音 樂 節 奏 邏 輯 數 學 自 然 觀 察 具 優 勢 智 慧 之 科 系 國 文 相 關 科 系 語 文 教 育 相 關 科 系 美 術 相 關 科 系 設 計 相 關 科 系 音 樂 相 關 科 系 數 學 相 關 科 系 統 計 相 關 科 系 物 理 相 關 科 系 生 物 相 關 科 系 地 球 科 學 相 關 科 系 化 學 相 關 科 系 人 際 智 慧 管 理 相 關 科 系 心 理 相 關 科 系 衛 生 教 育 相 關 科 系 公 關 或 領 導 相 關 科 系 內 省 智 慧 情 緒 智 慧 心 理 相 關 科 系 心 理 相 關 科 系 32

34 附 錄 三 : 各 項 智 慧 等 級 的 解 釋 語 言 智 慧 5 傑 出 4 良 好 3 普 通 2 稍 弱 1 不 佳 語 言 智 慧 傑 出 表 示 受 試 者 能 正 確 辨 識 字 形 字 音 的 異 同 有 能 力 根 據 情 境, 精 確 具 體 的 表 達 自 己 的 想 法, 並 且 能 正 確 了 解 他 人 話 語 中 所 要 陳 述 的 意 涵 此 外 亦 能 透 過 文 章 或 話 語, 正 確 推 測 可 能 的 現 象, 精 準 的 了 解 其 中 的 隱 含 意 義 語 言 智 慧 良 好 表 示 受 試 者 能 辨 識 字 形 字 音 能 根 據 情 境 表 達 自 己 的 想 法 與 了 解 他 人 話 語 中 所 要 陳 述 的 意 涵, 但 偶 有 不 流 暢 之 處 此 外 能 透 過 文 章 或 話 語, 推 測 可 能 的 現 象, 大 致 了 解 其 中 的 隱 含 意 義 語 言 智 慧 普 通 表 示 受 試 者 尚 能 分 辨 字 形 字 音 的 異 同 面 對 特 定 情 境 下 能 表 達 自 己 的 想 法 和 理 解 他 人 話 語 中 所 要 陳 述 的 意 涵, 但 不 容 易 做 到 清 楚 具 體 能 透 過 文 章 或 話 語, 嘗 試 推 測 可 能 的 現 象 或 了 解 其 中 的 隱 含 意 義, 但 偶 有 誤 解 狀 況 語 言 智 慧 稍 弱 表 示 受 試 者 無 法 輕 鬆 區 辨 字 形 字 音 在 面 對 特 定 情 境 下, 對 於 表 達 自 己 的 想 法 和 理 解 他 人 話 語 中 的 意 涵 感 到 困 難 另 外 不 容 易 透 過 文 章 或 話 語, 推 測 可 能 的 現 象 或 了 解 其 中 隱 含 意 義 語 言 智 慧 不 佳 表 示 受 試 者 區 辨 字 形 字 音 時 經 常 出 錯 於 特 定 情 境 下 較 難 清 楚 表 達 自 己 的 想 法 和 理 解 他 人 話 語 中 所 要 陳 述 的 意 涵 閱 讀 文 章 或 話 語 後, 比 較 無 法 推 測 可 能 的 現 象 或 其 中 隱 含 的 意 義 視 覺 - 空 間 智 慧 5 傑 出 4 良 好 3 普 通 2 稍 弱 1 不 佳 視 覺 - 空 間 智 慧 傑 出 表 示 受 試 者 能 自 由 的 將 視 覺 觀 察 所 見 轉 換 成 心 中 的 影 像, 並 且 能 輕 鬆 流 暢 的 將 心 中 影 像 進 行 旋 轉 翻 轉 組 合 等 操 作 此 外 亦 能 清 楚 知 覺 不 同 人 事 物 之 間 的 所 在 位 置 視 覺 - 空 間 智 慧 良 好 表 示 受 試 者 能 將 視 覺 觀 察 轉 換 成 心 中 影 像, 並 且 能 將 心 中 影 像 進 行 旋 轉 翻 轉 組 合 等 操 作, 但 偶 有 不 流 暢 之 處 此 外 尚 能 清 楚 知 覺 不 同 人 事 物 之 間 的 所 在 位 置 視 覺 - 空 間 智 慧 普 通 表 示 受 試 者 大 致 能 將 視 覺 觀 察 轉 換 成 心 中 影 像, 亦 能 將 心 中 影 像 進 行 旋 轉 翻 轉 組 合 等 操 作, 但 會 有 不 流 暢 之 處 此 外 不 容 易 清 楚 知 覺 不 同 人 事 物 之 間 的 所 在 位 置 視 覺 - 空 間 智 慧 稍 弱 表 示 受 試 者 較 不 容 易 自 由 將 視 覺 觀 察 所 見 轉 換 成 心 中 影 像, 對 將 心 中 影 像 進 行 旋 轉 翻 轉 組 合 等 操 作 感 到 有 些 許 困 難 此 外 不 容 易 知 覺 不 同 人 事 物 之 間 的 所 在 位 置 視 覺 - 空 間 智 慧 不 佳 表 示 受 試 者 較 難 將 視 覺 觀 察 轉 換 成 心 中 影 像, 且 很 難 將 心 中 影 像 進 行 旋 轉 翻 轉 組 合 等 操 作 此 外 亦 較 難 知 覺 不 同 人 事 物 之 間 的 所 在 位 置 33

35 音 樂 - 節 奏 智 慧 5 傑 出 4 良 好 3 普 通 2 稍 弱 1 不 佳 音 樂 - 節 奏 智 慧 傑 出 表 示 受 試 者 能 精 確 的 區 辨 各 種 樂 器 的 聲 音 聲 音 的 音 調 高 低 和 音 量 大 小, 亦 能 正 確 掌 握 音 樂 的 節 奏 穩 定 性 能 從 音 樂 欣 賞 中 清 楚 理 解 其 中 的 情 感 表 達 和 推 測 可 能 的 意 義 音 樂 - 節 奏 智 慧 良 好 表 示 受 試 者 能 清 楚 區 辨 各 種 樂 器 的 聲 音 聲 音 的 音 調 高 低 和 音 量 大 小, 亦 能 掌 握 音 樂 的 節 奏 大 致 能 從 音 樂 欣 賞 中 清 楚 理 解 其 中 的 情 感 表 達 和 推 測 可 能 的 意 義 音 樂 - 節 奏 智 慧 普 通 表 示 受 試 者 尚 能 清 楚 區 辨 各 種 樂 器 的 聲 音 聲 音 的 音 調 高 低 和 音 量 大 小, 對 於 音 樂 的 節 奏 也 有 一 定 的 掌 握, 但 有 時 會 產 生 錯 誤 尚 能 從 音 樂 欣 賞 中 理 解 其 中 的 情 感 表 達 和 推 測 可 能 的 意 義 音 樂 - 節 奏 智 慧 稍 弱 表 示 受 試 者 不 容 易 區 辨 出 各 種 樂 器 聲 音 聲 音 的 音 調 高 低 和 音 量 大 小, 不 太 容 易 掌 握 音 樂 的 節 奏 亦 不 容 易 從 音 樂 欣 賞 中 理 解 其 中 的 情 感 表 達 和 其 中 可 能 的 意 義 音 樂 - 節 奏 智 慧 不 佳 表 示 受 試 者 較 難 區 辨 各 種 樂 器 聲 音 聲 音 的 音 調 高 低 和 音 量 大 小, 對 於 音 樂 節 奏 的 掌 握 能 力 差 較 難 從 音 樂 欣 賞 中 理 解 其 中 的 情 感 表 達 和 推 測 其 中 可 能 的 意 義 邏 輯 - 數 學 智 慧 5 傑 出 4 良 好 3 普 通 2 稍 弱 1 不 佳 邏 輯 - 數 學 智 慧 傑 出 表 示 受 試 者 能 精 確 的 利 用 抽 象 的 符 號 來 表 示 事 物 間 的 關 係, 亦 能 正 確 利 用 數 字 與 符 號 運 作 解 決 問 題 能 正 確 閱 讀 理 解 圖 表, 找 出 重 點 意 義 並 且 進 行 思 考 推 論 幫 助 解 決 問 題 並 且 能 根 據 不 同 事 件 和 現 象, 歸 納 統 整 形 成 正 確 結 論 或 推 演 後 續 可 能 狀 況 邏 輯 - 數 學 智 慧 良 好 表 示 受 試 者 能 利 用 抽 象 的 符 號 來 表 示 事 物 間 的 關 係, 亦 能 利 用 數 字 與 符 號 運 作 解 決 問 題, 但 偶 有 不 流 暢 之 處 能 閱 讀 理 解 圖 表, 找 出 重 點 意 義 並 且 進 行 思 考 推 論 幫 助 解 決 問 題 此 外 尚 能 根 據 不 同 事 件 和 現 象, 歸 納 統 整 形 成 結 論 或 推 演 後 續 可 能 的 狀 況 邏 輯 - 數 學 智 慧 普 通 表 示 受 試 者 尚 能 利 用 抽 象 的 符 號 來 表 示 事 物 間 的 關 係, 亦 能 利 用 數 字 與 符 號 運 作 解 決 問 題 能 閱 讀 理 解 圖 表, 嘗 試 找 出 重 點 意 義 進 行 思 考 推 論, 但 偶 有 錯 誤 之 處 不 容 易 根 據 不 同 事 件 和 現 象, 進 行 歸 納 統 整 或 推 演 後 續 可 能 狀 況 邏 輯 - 數 學 智 慧 稍 弱 表 示 受 試 者 不 容 易 利 用 抽 象 的 符 號 來 表 示 事 物 間 的 關 係, 和 利 用 數 字 與 符 號 運 作 解 決 問 題 能 閱 讀 圖 表, 嘗 試 理 解 找 出 重 點 意 義 進 行 思 考 推 論 幫 助 解 決 問 題, 但 常 有 錯 誤 之 處 面 對 不 同 事 件 和 現 象 進 行 歸 納 統 整 或 後 續 可 能 狀 況 的 推 演 能 力 較 差 邏 輯 - 數 學 智 慧 不 佳 表 示 受 試 者 較 難 利 用 抽 象 的 符 號 來 表 示 事 物 間 的 關 係, 亦 較 難 利 用 數 字 與 符 號 運 作 解 決 問 題 閱 讀 與 理 解 圖 表 能 力 稍 弱, 不 容 易 正 確 理 解 找 出 重 點 意 義 和 進 行 思 考 推 論 幫 助 解 決 問 題 亦 較 難 根 據 不 同 事 件 和 現 象 進 行 歸 納 統 整 或 推 演 後 續 可 能 狀 況 34

36 自 然 觀 察 者 智 慧 5 傑 出 4 良 好 3 普 通 2 稍 弱 1 不 佳 自 然 觀 察 者 智 慧 傑 出 能 敏 感 的 察 覺 到 人 事 物 的 變 化, 且 能 依 據 特 徵 精 確 的 進 行 分 類 比 較 亦 能 運 用 系 統 性 的 觀 察 能 力, 從 諸 多 規 律 中 進 行 推 論, 從 而 明 白 觀 察 事 物 的 原 則 與 定 義 自 然 觀 察 者 智 慧 佳 能 察 覺 人 事 物 的 變 化, 並 且 有 能 力 依 據 特 徵 進 行 分 類 比 較 具 有 系 統 性 的 觀 察 能 力, 能 從 觀 察 事 物 中 嘗 試 找 出 規 律 或 原 則, 但 偶 有 不 流 暢 之 處 自 然 觀 察 者 智 慧 普 通 能 察 覺 人 事 物 的 變 化, 有 能 力 依 據 特 徵 進 行 分 類 比 較, 具 有 觀 察 的 能 力, 能 將 有 趣 或 特 殊 的 現 象 做 有 系 統 的 觀 察 與 整 理, 嘗 試 找 出 規 律 或 原 則, 但 偶 有 錯 誤 產 生 自 然 觀 察 者 智 慧 稍 弱 能 察 覺 人 事 物 的 有 趣 或 特 殊 現 象, 有 能 力 發 現 事 物 的 特 徵, 但 偶 不 流 暢 之 處 能 進 行 觀 察 但 不 容 易 做 有 系 統 的 觀 察 與 整 理, 亦 不 容 易 從 中 找 出 規 律 或 原 則 自 然 觀 察 者 智 慧 不 佳 對 人 事 物 存 有 好 奇 心, 但 不 容 易 發 現 事 物 的 特 徵, 能 嘗 試 透 過 觀 察 進 行 整 理 或 推 論, 但 常 有 錯 誤 之 處 人 際 關 係 智 慧 5 傑 出 4 良 好 3 普 通 2 稍 弱 1 不 佳 人 際 關 係 智 慧 傑 出 能 夠 尊 重 自 己 與 他 人 在 想 法 特 質 上 的 不 同 具 有 優 秀 的 互 動 與 溝 通 能 力, 能 精 確 的 瞭 解 互 動 情 境 中 各 項 訊 息, 做 出 適 當 回 應, 促 進 合 作 達 成 團 體 目 標, 並 且 能 適 當 的 解 決 自 己 與 他 人 或 團 體 間 的 衝 突 人 際 關 係 智 慧 佳 能 尊 重 自 己 與 他 人 在 想 法 特 質 的 不 同 能 與 他 人 進 行 有 效 互 動 與 溝 通, 但 偶 有 不 流 暢 之 處 在 各 個 環 境 中, 可 以 妥 善 地 扮 演 好 自 己 的 角 色, 嘗 試 解 決 衝 突 人 際 關 係 智 慧 普 通 能 瞭 解 自 己 與 他 人 在 想 法 特 質 上 的 不 同, 願 意 嘗 試 傾 聽 別 人 的 想 法, 關 懷 別 人 的 感 受 尚 能 與 他 人 進 行 有 效 的 溝 通 互 動 面 對 自 己 與 他 人 或 團 體 間 的 衝 突, 能 嘗 試 協 調 解 決, 但 偶 有 不 流 暢 之 處 人 際 關 係 智 慧 稍 弱 能 嘗 試 理 解 自 己 與 他 人 在 想 法 特 質 上 的 不 同, 但 不 容 易 做 到 設 身 處 地 為 他 人 著 想 和 進 行 有 效 的 互 動 與 溝 通 亦 不 容 易 處 理 自 己 與 他 人 或 團 體 間 的 衝 突 人 際 關 係 智 慧 不 佳 不 容 易 理 解 他 人 與 自 己 在 想 法 特 質 上 的 不 同, 常 要 求 他 人 進 行 改 變 較 難 進 行 有 效 的 互 動 與 溝 通, 亦 較 難 處 理 自 己 與 他 人 或 團 體 間 的 衝 突 35