個案善用科技精進試務品質與效率 : 個案 善用科技精進試務品質與效率 : 精進閱卷技術, 提升閱卷品質, 縮短閱卷時程, 創造國考閱卷 e 化新紀元 資訊管理處 壹 個案目標 98 年 1 月考試院會議通過之本屆考試委員 施政綱領, 考選機關配合 全球化 資訊化發展趨勢, 積極建構與國際接軌之考選制度, 改善閱卷品質, 以增進評量效能, 並善用現代科技, 以提升試務效率與效能 考試院並自 98 年起, 將 推動線上閱卷作業, 提升閱卷品質, 增進閱卷效能, 列為年度施政計畫 善用資訊化工具, 推動線上閱卷, 進而提升閱卷之信度與效度 亦列為考選部 98 至 101 年之中程施政計畫績效目標與各年度之執行計畫中積極推動 綜觀施政綱領 施政計畫及執行計畫, 推動國家考試線上閱卷係現階段考選重要政策 國內外測驗機構辦理線上閱卷已行之多年, 能縮短管卷 理卷 登分 核校之流程, 節省人力成本及免除試卷保管與流通所擔負的風險外, 並得以擴大採行平行兩閱或一卷多閱措施, 以降低主觀影響, 確保閱卷的客觀與公平性, 並維護應考人權益 是以推動國家考試線上閱卷, 已是考選部刻不容緩 積極努力的目標 貳 個案背景一 推動緣起與目標 國家考試試題品質之良窳及委員評閱試卷是否正確 客觀與公正, 係決定考試信度與效度之兩大關鍵要素 國家考試要能為國掄才, 舉拔真正人才, 首要需能提升委員命題 閱卷品質 考選部於 96 年 8 月部務會議, 部長裁示 : 未來國家考試申論式試卷可否採行電腦線上閱卷, 請相關單位組成 47
第一試務大樓掃描作業工作站 試卷整理 逐包裁切試卷 逐包試卷掃描 國家考場8樓電腦試場 閱卷場所 線上閱卷 閱卷伺服主機群 試卷掃描管理 試卷數位化管理 閱卷分配管理 試題管理 試卷評閱管理 成績統計分析 權限管理 憑證管理 圖1 閱卷監控作業 透過網路連線 操控 閱卷作業達成線上即 時分析 閱卷監控 進度管理等功能 線上閱卷作業示意圖 專案小組進行研議 提出可行規劃構想後 再決定是否逐步推動實施 茲由專技考試司 資訊管理處於97年1月提出 國家考試申論式試卷線上閱 卷可行性研究報告 歷經2年研議 並多次參訪國內測驗機構辦理線上閱 卷 於賴前部長峰偉99年8月到任後 旋即指示全力推動線上閱卷政策 線 上閱卷作業示意圖 如圖1所示 推動線上閱卷政策目標如下 一 創新閱卷作業改革 提高閱卷效率 將現行申論式試卷紙本 透過 快速掃描設備轉換為影像資料檔 讓應考人作答原樣呈現在電腦螢 幕 供閱卷委員進行線上閱卷 並善用資訊化工具 建立試卷評閱輔 助機制 以提高閱卷效率與正確性 二 精進閱卷技術 提升選才信度與效能 實施線上公評 模擬試評作業 並隨機分配試卷 以降低主觀影響或寬嚴不一的評量標準 增加評閱 結果之穩定性及一致性 三 遠距線上閱卷準備 透過數據傳輸 在中 南部設置集中之閱卷據 點 提升閱卷委員參與意願 節省交通 住宿時間與費用 48
個案善用科技精進試務品質與效率 : 二 國內外測驗採行線上閱卷情形 ( 一 ) 國內測驗機構 1. 大學入學考試中心 : 於民國 88 年開始研發電腦螢幕閱卷系統,95 年大學入學考試指定科目考試化學科第 1 次實施, 近年來已陸續將物理 化學 地理 生物 歷史 國文等指考科目, 採將紙本作答之試卷經掃描後, 再以人工於電腦螢幕閱卷, 另 100 學年度學科能力測驗, 國文及英文考科的非選擇題亦全面採用螢幕閱卷 2. 國立臺灣師範大學心理與教育測驗研究發展中心 : 民國 95 年起, 接受教育部委託辦理 國民中學學生寫作測驗 線上閱卷作業, 歷經 95 年試辦 96 年正式辦理, 已有 6 年辦理線上閱卷之經驗 寫作測驗之紙本作答試卷經掃描後, 再以人工於電腦螢幕閱卷 3. 財團法人中華民國電腦技能基金會 : 於民國 95 年起開始辦理 中文寫作能力分級測驗, 中文寫作之紙本作答試卷經掃描後, 再以人工於電腦螢幕閱卷 ( 二 ) 國外測驗機構 1. 美國教育測驗服務社 (Educational Testing Service, ETS): 民國 86 年首度使用線上閱卷系統 (Online Scoring Network, OSN), 提供閱卷委員可以使用家中或辦公室的個人電腦, 連上網路, 對於開放式題型 (open-ended) 的應考人作答給予評分 如美國會計師考試 (AICPA) 托福網路測驗口語和寫作評分 英語口語測驗 (TSE evox scoring) 等 2. 香港考試及評核局 (Hong Kong Examinations and Assessment Authority): 前稱香港考試局, 是香港專責安排及統籌考試的部門, 民國 96 年開始以網上評卷系統評閱中學會考中 英文科的答卷, 並逐步在所有公開考試採用網上評卷系統 3. 中國大陸司法官考試 : 為法官 檢察官 律師三考合一之考試, 每年約 30 萬份紙本試卷, 均透過掃描機將來自全國各地應考人的試卷, 隱去應考人姓名, 掃描成圖片, 由閱卷委員在電腦螢幕上 49
進行評閱 大陸其他如監所管理員等公務員考試 成人高考或其他升學考試, 均已有許多採行申論題線上閱卷案例 三 推動辦理情形 ( 一 ) 成立 線上閱卷推動委員會 : 由政務次長率單位主管定期召開推動委員會議, 並由資訊管理處葉處長炳煌主持雙週工作小組會議, 整合考選部各相關單位意見, 全力推動線上閱卷 ( 二 ) 辦理 4 次參訪活動 1. 100 年 1 月由資訊管理處劉副處長春明率專案工作小組成員計 17 人, 參訪永豐餘造紙公司土城廠, 了解試卷印刷 噴印 組卷等流程與資安監控等環節 2. 100 年 2 月由部長率二位次長及各單位主管同仁共計 20 人, 參訪大學入學考試中心線上閱卷事宜 3. 100 年 2 月由資訊管理處劉副處長春明率資訊管理處同仁共計 5 名, 參訪國防部史政編譯室, 實際了解該單位掃描作業 使用掃描機具及相關掃描作業流程等情形 4. 100 年 4 月由政務次長率推動委員會成員共計 12 名參訪永豐餘造紙公司土城廠, 了解試卷印刷 噴印 組卷等流程與資安監控等環節 ( 三 ) 經工作小組 19 次雙週會議及 6 次推動委員會議, 決定事項如下 : 1. 試辦申論式試卷格式 2. 申論式試卷作答注意事項 3. 國家考試線上閱卷作業試辦注意事項 4. 擇定二項考試試辦線上閱卷 ( 四 ) 以 100 年公務人員特種考試稅務人員考試 100 年交通事業公路人員升資考試, 作為試辦考試, 考試時採用新式試卷格式, 並以現行人工評閱方式進行, 至考試放榜訴願期結束後, 再進行試卷裁切 掃描 評閱等後續線上閱卷試辦作業 : 50
個案善用科技精進試務品質與效率 : 1. 100 年公務人員特種考試稅務人員考試財稅法務類科總報考 311 人, 計 6 科, 總到考本數 859 本, 於 100 年 5 月 25 日榜示 ;100 年交通事業公路人員升資考試總報考 695 人, 到考 624 人, 總到考本數 1,202 本, 於 100 年 6 月 28 日榜示 2. 二項試辦考試分別於 100 年 8 9 月在考選部第一試務大樓 2 樓拆排室進行試卷數位化流程作業, 進行試卷整理 試卷裁邊 試卷掃描 後端條碼辨識 試卷影像檢閱 試卷影像分題合併 浮水印 簽章 電子彌封等試卷影像處理作業 3. 100 年 8 9 月在國家考場 8 樓電腦試場分別進行二項試辦考試模擬試卷評閱作業, 進行閱卷委員評閱 ( 從報到領取閱卷 IC 卡 登入系統 選擇逐題或逐卷評閱 開始進行評閱給分 登出系統 繳還閱卷 IC 卡等 ) 管卷人員監控作業 閱卷期間各項統計表列印 酬勞核發 召集人抽閱 檢測資料庫評閱結果及閱卷資料調閱等作業 4. 試辦作業期間就各項系統操作 畫面呈現 評閱流程 管卷人員監控閱卷情形 成績統計報表 酬勞核發 召集人抽閱等各項功 國家考試線上閱卷試辦考試展示數位化流程 51
能加以檢測, 並就各項處理流程 問題反應及建議事項, 完成作業改進及修改系統功能事宜 ( 五 ) 辦理 國家考試申論式試卷線上閱卷實務討論會 : 為了解閱卷委員對於線上閱卷評閱系統之接受情形並使系統功能更臻完備,100 年 8 月由政務次長主持, 於考選部國家考場 8 樓電腦試場, 聘請 3 位年齡代表為 老 中 青 之法律學者到部實務討論, 並填寫功能使用意見調查表, 提供線上閱卷評閱系統操作上建議 3 位學者一致表示線上閱卷評閱系統在操作上並不困難, 並對於系統提供功能表示理想 彙整調查表結果及各項建議與改善措施, 詳如表 1 表 2 表 1 國家考試線上閱卷系統評閱功能使用意見調查表 三位法律學者 評閱功能操作意見 委員 A ( 老 ) 委員 B ( 中 ) 委員 C ( 青 ) 1. 線上閱卷評閱系統在操作上並不困難 同意同意同意 2. 使用 IC 卡登入評閱系統, 利用電子簽章功能, 可確保試卷評閱的安全性及不可否認性 3. 線上閱卷評閱系統提供的 2 種評閱方式 : 逐卷評閱及逐題評閱, 增加了評閱試卷的便利性 4. 線上閱卷評閱系統所呈現出的試卷影像品質很理想 5. 線上閱卷評閱系統所提供的影像放大 縮小等功能很完備 有點不同意有點同意有點同意 有點同意同意同意 有點同意同意同意 有點同意同意同意 6. 線上閱卷評閱系統的退卷功能很理想 有點不同意同意同意 7. 線上閱卷評閱系統的調閱全卷 參考答案 試題很理想 同意同意同意 8. 線上閱卷評閱系統的給分方式操作容易 有點同意同意有點同意 9. 線上閱卷評閱系統的各項訊息提示清楚明瞭 10. 線上閱卷評閱系統提供之個人閱卷情形相關統計資料很理想 有點同意同意有點同意 無意見同意同意 11. 線上閱卷評閱系統之整體性功能很理想 無意見同意同意 52
個案善用科技精進試務品質與效率 : 表 2 對於線上閱卷評閱系統建議與改善措施表 委員對於線上閱卷評閱系統建議改善措施加強試卷掃描影像檢查, 注意不同 B 1. 應確保電腦影像的品質, 適合個別閱卷品牌螢幕光源穩定度, 以確保電腦 ( 中 ) 委員的視覺感受度與適宜度 影像品質 2. 掃描如能針對考生答題部分掃入, 而不為確保試卷影像完整性及安全性, B 包括空白未作答部分, 比較能節省閱卷並避免掃描作業之複雜度, 爰維持 ( 中 ) 委員可給分的時間 掃描整本試卷之作法 3. 對於 IC 卡與閱卷委員身份的核對, 應該強化管卷人員核發閱卷 IC 卡之身分核 B 包括委員暫時離開閱卷操作區時, 應收校程序, 並嚴控閱卷場所之人員出 ( 中 ) 回 IC 卡, 或有相片供識別證核對, 以避入管理 免有冒名閱卷之情事發生 B 4. 閱卷場地的光線與通風 溫度及噪音應持續保持閱卷場所最佳狀態 ( 中 ) 保持最佳狀態 1. 對於電腦系統操作較為不純熟的委員可 C 未來將辦理多梯次閱卷前之評閱系能較為費時, 未來或許可再訓練委員的 ( 青 ) 統教育訓練 技巧 C ( 青 ) 2. 完成系統效能調校, 已改善下載試下載試卷速度慢了一些 卷速度 3. 每一題一定要將滑鼠拉到最底才有 給閱卷委員需進行所有頁面的閱卷, 予分數 的選項出現, 事實上有些題目 C 系統才會出現 給予分數 的選項解答較短, 拉到最底有時很浪費時間, ( 青 ) 提供委員進行給分, 此舉係為避免技術上是否能夠在解答的 80% 左右就可發生漏閱情事, 以維應考人權益 以跳出 給予分數 即可 4. 逐卷閱卷的方式每一題 給予分數 的 C 完成系統功能修改, 給予分數 選項有時跳不出來, 要在下一題時才會 ( 青 ) 的選項已可正常顯示 出現, 可能會有點浪費時間 ( 六 ) 辦理 國家考試線上閱卷第二次試辦考試展示 :100 年 9 月於辦理第二項試辦考試作業之際, 分別進行試卷影像數位化作業及試卷評閱作業展示, 由部長率同次長 單位主管及工作小組成員參加, 神通電腦股份有限公司蔣總經理臺方亦親自到場陪同, 俾利部內長官及同仁實地了解線上閱卷作業流程及系統功能, 使作業流程更為周延 53
( 七 ) 辦理 希臘人為什麼有智慧 : 生命應該打造的八根柱子 一書讀後心得報告採線上閱卷系統模擬評閱作業 : 設計線上閱卷模擬試卷, 由專門委員 科長 編纂及專員等人員以問答題方式於模擬試卷上分題撰寫讀後心得報告, 並採平行兩閱, 由該單位主管 參事及研究委員進行線上評閱試卷, 於 100 年 11 月完成繳交模擬試卷及線上評閱作業 ( 八 ) 線上閱卷後續推動 : 鑑於二項考試試辦作業順利完成並達預期目標, 且展示作業圓滿完成, 賴前部長旋即指示, 由常務次長主持後續推動事宜 1. 成立後續推動委員會 : 由考選部各單位副主管及資訊管理處處長擔任推動委員, 由資訊管理處處長兼任執行秘書, 負責會議召開事宜, 並視會議需要邀請相關單位與會討論, 俾共同推動國家考試申論式試卷實施線上閱卷 2. 通過國家考試申論式試卷線上閱卷後續推動計畫, 決定辦理 7 項考試施作線上閱卷 : 國家考試申論式試卷線上閱卷實務討論會評閱情形 54
個案善用科技精進試務品質與效率 : (1) 第 1 項考試擴大辦理委員實際參與線上閱卷評閱之操作程序, 擇定已榜示之 100 年專門職業及技術人員普通考試地政士考試, 每科目挑選 30 份試卷,5 科共 150 份試卷, 先由專技考試司試務工作人員謄寫至新試卷, 再聘請委員進行線上評閱作業 (2) 擇定 101 年 6 項考試辦理線上閱卷單軌作業 詳如表 3 3. 請考選規劃司及考試司全面檢視考試相關法規命令 行政規則, 有無與線上閱卷法制面扞格之處, 並請考選規劃司儘速辦理修法事宜, 俾作為單軌作業之法源依據 表 3 101 年考試辦理線上閱卷單軌化作業 編號 考試名稱 類科 預定考試日期 101 年第二次專門職業及技術人員 中醫師 1 高等考試中醫師 營養師 心理營養師師考試 101 年專門職業及技術人心理師 101.7.28( 六 ) 7.30( 一 ) 員高等考試法醫師考試 法醫師 2 101 年公務人員特種考試民航人員考試 飛航管制 101.9.15( 六 ) 9.17( 一 ) 3 101 年公務人員高等考試二級考試 金融保險 101.10.6( 六 ) 10.7( 日 ) 4 101 年公務人員特種考試司法官考試第二試 司法官 101.10.13( 六 ) 10.14( 日 ) 5 101 年專門職業及技術人員高等考試律師考試第二試 律師 101.10.27( 六 ) 10.28( 日 ) 6 101 年警察人員升官等考試 消防人員 101.11.10( 六 ) 11.11( 日 ) 四 建置國家考試線上閱卷資訊系統 善用資訊化工具, 推動線上閱卷 為考選部中程施政計畫目標, 在賴前部長指示全力推動下, 考選部於 99 年 9 月開始建置 國家考試線上閱卷管理資訊系統, 國家考試線上閱卷正式進入執行階段 建置系統專案目標如下 : ( 一 ) 創新閱卷作業方法 : 提供完善之國家考試閱卷管理作業方案, 透過作 55
業流程再造及試卷重新設計, 建立並執行國家考試閱卷期間標準作業程序, 以控管並增進試務效率, 提升閱卷品質, 減省人力作業, 提高整體考試效能 ( 二 ) 提升閱卷品質 : 閱卷前實施線上公評及模擬試評作業, 取得不同委員間或同一委員不同評閱時段評閱標準之一致性 ; 閱卷過程, 隨時給與公評卷, 檢測閱卷過程評分標準之穩定性 ; 並得以擴大採行平行兩閱或一卷多閱措施, 以降低主觀影響或寬嚴不一的評量標準, 增加評閱結果之穩定性及一致性, 提升考試信度 ( 三 ) 強化及確保掃描品質 : 掃描作業即時完成條碼資料辨識, 完整監控與檢測掃描影像品質, 確保掃描的完整性 正確性, 避免影像偏移歪斜 上下左右顛倒 張冠李戴, 使數位化後的試卷能原貌呈現 ( 四 ) 嚴謹數位簽章及確實電子彌封 : 透過數位簽章技術, 確保檔案傳送的安全性, 並進行必要之簽章驗證程序, 確認影像檔未經破壞 塗改或置換 ; 電子彌封隱藏應考人座位號碼及條碼等應試資訊, 確保閱卷的客觀與公平性, 以維護應考人權益 ( 五 ) 優質電腦螢幕評閱介面 : 評閱試卷之閱卷系統, 除將作答原貌呈現, 並透過影像強化, 具有放大 縮小 旋轉 字跡加深, 減少滑鼠使用之輔助功能, 以減輕眼睛疲勞度, 降低眼力的耗損 ( 六 ) 縝密資訊安全防護及監控 : 確保資料在網路上傳遞能達成資料完整性 資料隱密性 身分鑑別 授權以及不可否認的目標 ; 全程翔實監控自動記錄閱卷電腦所有操作行為 ( 七 ) 即時閱卷效率分析與進度控管 : 提供閱卷委員閱卷情形分析及閱卷進度查詢, 使能隨時掌握批閱分數異常及進度落後等狀況, 並即時因應解決, 進而提升閱卷品質 ( 八 ) 新式試卷格式設計 : 便於掃描 分題評閱之進行, 且完成試卷印製 分場封裝等作業流程之規劃及考畢到考試卷掃描之測試, 確保資料之正確性 安全性 ( 九 ) 預為遠距線上閱卷準備 : 透過數據傳輸, 閱卷地點得以分散, 提升閱 56
個案善用科技精進試務品質與效率 : 卷委員參與意願, 節省交通 住宿時間與費用 五 投入經費情形 工欲善其事, 必先利其器, 考選部為推動線上閱卷, 辦理國家考試線上閱卷管理資訊系統建置案, 並進行國家考試線上閱卷資訊平臺建置案, 並於 101 年初完成所有設備整合建置 另在試卷印製部分, 由於新式試卷為題本式試卷格式, 且二項試辦考試所需印製試卷量少, 因此國文試卷每本約 20 元, 一般申論式試卷每本約 15 元成本較高 爾後全面推動線上閱卷進行大量試卷採購, 應可大幅降低印刷成本 六 推動線上閱卷預期效益 ( 一 ) 減省試務人力及經費支出 : 線上閱卷縮短管卷 理卷 登分 核校之流程, 以考選部 97 年度各項考試閱卷人力分析, 初估可減省全年登分及核校約 500 人力, 約 1,000 萬元之支出 ( 二 ) 創新閱卷作業流程 改善紙本閱卷缺點 : 透過閱卷作業流程再造, 免除試卷人工保管與流通所擔負的風險, 更避免試卷閱卷過程污損的困擾, 提升試卷安全性與保密性, 考試完畢立即試卷作答影像存檔, 以保持試卷之完整性, 更避免人為舞弊情事, 提高整體考試效能 ( 三 ) 提升閱卷品質 評分信度 : 得以擴大採行平行兩閱或一卷多閱措施, 以降低主觀影響, 確保閱卷的客觀與公平性, 並維護應考人權益 委員評閱情形可以藉由系統進行檢查, 避免漏閱 溢給分數 題分顛倒錯置 分數加總錯誤等情形, 增進試務效率, 進而提高閱卷效率 正確性 ( 四 ) 成立中南部線上閱卷中心 : 配合中 南部閱卷委員生活及工作作息, 可透過影像數據傳輸, 與通過考選部認證電腦化測驗試場合作, 在中 南部各設置一個線上閱卷中心 採用中央監控方式, 將應考人試卷影像傳輸至中 南部線上閱卷中心, 僅派遣少數同仁協助管理即可, 將有效提升閱卷委員參與閱卷意願, 並節省閱卷委員交通及住宿時間與費用 57
( 五 ) 電子化政府的重要體現 : 結合資訊科技於政府的服務中, 更落實我國電子化政府之推行, 另即時分析閱卷效率與進度控管, 以掌握閱卷進度與品質, 提高試務效率, 精進閱卷技術 ( 六 ) 創造國考閱卷 e 化新紀元 : 改變歷年閱卷委員傳統紙本閱卷習慣, 創新國家考試閱卷技術, 確立國家考試閱卷新里程碑 參 問題討論 一 如何規劃並善用考選部各項資訊化設備? 二 如何有效規劃使用考選部各試務場所? 三 如何建置系統資訊安全防護? 四 如何提高閱卷委員接受度? 肆 個案解析一 考選部各項資訊化設備之規劃運用 ( 一 ) 透過資訊工具的優勢及運用, 規劃線上閱卷系統有效達成預期目標之主要功能如下 : 1. 掃描過程中即時對每一試場檢測試卷數量 頁數 頁次是否正確, 藉以發現試卷問題並儘早因應, 不用等到閱卷委員要評閱時, 拆封卷包才發現試卷異常問題 2. 掃描後影像檔立即由系統進行版面完整性檢查, 並加上浮水印 電子簽章確保檔案之機密性 完整性及不可否認性, 避免任何人為接觸造成試卷遺失 汙損, 甚至竄改之風險 ; 目前申論式試卷僅保存 1 年即予以銷毀, 未來數位化後將便於長期保存, 且利於未來調閱及研究 3. 透過電子彌封技術, 隱藏應考人入場證號碼及條碼等應試資訊, 確保閱卷的客觀與公平性, 以維護應考人權益, 省卻現行考試期間管卷人員黏貼及閱卷完成後為登分刷取條碼而撕下彌封籤貼紙動作 58
個案善用科技精進試務品質與效率 : 4. 電腦隨機分配試卷, 增加閱卷之公平性並避免舞弊情事之發生, 省卻人為試卷分配作業之困擾, 確實達到公平原則 5. 可採行分題評閱 平行兩閱或一卷多閱, 讓不同委員同時評閱, 降低主觀影響或寬嚴不一的評量標準, 以提升考試信度 ; 反觀現行作法紙本試卷須第一位委員閱畢才能交由第二位委員評閱, 尤其平行兩閱時尚得先彌封第一位委員評分資訊再交第二位委員評閱, 較為耗時又耗力 6. 相關各科目試題 參考答案 公評卷可透過掃描方式, 將檔案上傳至系統中, 供閱卷委員評閱試卷時隨時參考, 減省紙張浪費並達節能減碳之效 ; 而現行每試場到考試卷袋均由監場人員加裝 2 份試題, 供閱卷時委員隨時檢視題目, 參考答案 公評卷亦需提供紙本供閱卷委員參考 7. 監控閱卷期間所有委員閱卷情形 ( 含需閱 已閱 未閱數量 閱畢率及平均閱卷時間等 ) 及所有問題試卷發生等統計, 統計結果即時又正確, 相對現行人工計算費時又容易產生計算誤差 8. 隨時提供閱卷委員查看閱卷情形及閱卷進度 ( 含需閱 已閱 未閱數量 平均數 標準差及圖表等 ), 使能隨時掌握批閱分數異常及進度落後等狀況, 並即時因應解決 9. 可由系統隨機抽選進行試卷公評, 或閱卷過程適時給與公評卷, 檢測閱卷過程評分標準之穩定性 ; 另於閱卷前可選擇是否進行試評, 以熟悉系統相關操作 ; 還有閱卷期間可選擇部分試卷評分暫存於暫存區, 並隨時可調出評閱給分 10. 可選擇定時提醒委員休息之功能及於每日閱卷結束前 10 分鐘之提示功能 11. 進行閱卷委員評閱分數範圍檢查, 由系統加總題分, 可避免人為錯誤及節省三校人力檢核 卷面題分謄寫之重工等 並結合數位簽章技術, 建立不可否認性之功能, 並以委員給分為認定得分, 減免閱卷期間三登三校登分程序 ; 另邊緣成績核校除有標準答 59
案之計算題等特殊試卷尚需以人工檢查外, 應可大幅降低人工負擔, 大大提高閱卷效率及正確性 ( 二 ) 規劃購置或洽借影像數位化設備, 以達到節能減碳目的 1. 採購安全快速裁紙機 : 購置具自動壓紙 油壓壓板 裁切厚度可達 80mm( 含 ) 以上 裁切深度可達 450mm( 含 ) 以上 裁切寬度可達 475mm( 含 ) 以上 安全裝置有安全鎖可切斷電源 須雙手同時操作才可裁切 裁切中放手立即停止並收回原位等功能 2. 採購高速影像掃描設備, 確保掃描影像的品質 : 購置掃描速度每分鐘 130 張之機型, 進行全彩試卷單雙面掃描, 解析度 200dpi 以上影像, 確保掃描的完整性及正確性, 使數位化後的試卷能原貌呈現, 以每日作業 6 小時計, 每部一天約可處理 46,800 張 3. 於推動初期, 掃描設備需求量小, 規劃由考選部自購掃描機因應, 至於長期全面性推動, 考量在短時間內即需完成大量試卷掃描, 建議採委外辦理掃描方式, 由廠商攜帶相關設備並提供掃描服務, 以節省考選部人力及物力 二 有效規劃使用考選部各試務場所 ( 一 ) 善用現有空間, 規劃掃描場所 1. 初期目標 : 鑑於考選部試務工作空間有限, 規劃使用第一試務大樓拆排室進行申論式試卷拆排場地, 讀卡室做為掃描場所, 申論式試卷每一卷包在拆封 裁切試卷後立即進行掃描作業, 掃描完畢整包試卷再封回原卷包袋中, 掃描作業完成後即集中封存, 此一作法與現行測驗式試卡拆 讀卡作業程序相同, 將可免除試卷評閱時保管與流通所擔負的風險 ; 另於掃描完成後可將相關設備移出, 以增加場所使用率 2. 中 長期目標 : 線上閱卷考試 ( 類科 ) 比例逐步增加後即有固定場所之需要, 建議使用第一試務大樓 2 樓第一閱卷室作業, 因其與讀卡室及拆排室位於同一樓層, 作業空間將可滿足掃描機及裁切機之進駐 60
個案善用科技精進試務品質與效率 : ( 二 ) 優質電腦試場, 規劃為閱卷場所 1. 初期目標 : 初期規劃以國家考場之電腦試場作為線上閱卷場地, 共有 366 個座位, 足以因應中小型考試之試辦, 其優點除增加電腦使用率外, 電腦試場中的機房 網路設備等亦可共用, 減少環境建置之期程, 增加系統之安全性 2. 中期目標 : 待第三試務大樓完工後, 建議將目前第一試務大樓 5 樓改建為線上閱卷場所, 逐漸達成可辦理大型考試之目標 3. 長期目標 : 各項考試均採線上閱卷後, 可再將第一試務大樓 3 4 樓全部作為線上閱卷場所, 並可建置為電腦化測驗考試之備用試場, 增加設備之使用率 4. 未來更可透過影像數據傳輸, 與通過考選部認證電腦化測驗試場合作, 成立中南部線上閱卷中心 三 建置嚴謹縝密的安全性系統為確保申論式試卷影像檔之完整性 機密性, 閱卷程序之公平性 不可否認性, 透過嚴謹數位簽章及確實電子彌封 縝密資訊安全防護及監控, 以強化線上閱卷流程之資訊安全, 才能真正維護應考人權益, 規劃如下 : ( 一 ) 試卷數位化管理 1. 結合電子憑證確認所上傳的影像檔案, 確實由合法之掃描工作站 合法的掃描人員上傳, 並確認影像檔之完整性 2. 建立電子彌封試卷影像檔, 係將應考人試卷進行裁切處理並建立與原入場證對照檢核機制 3. 利用浮水印隱藏資料 ( 如應考人的入場證號 ) 到各題答案影像內, 當資料庫毀損時, 系統可利用該資料進行還原 4. 完整紀錄系統操作歷程 ( 二 ) 憑證管理 1. 建立 PKI(Public Key Infrastructure) 機制, 採行數位簽章驗證 61
2. 支援同時採多種憑證的驗證功能 3. 以電子憑證及電子簽章技術, 進行身分認證 數位簽章及加解密等功能 ( 三 ) 資安管理 1. 依據 ISO/IEC 27001:2005 國際資訊安全標準之要求, 進行系統規劃 開發與運作平臺之建置, 請第三方公正機構或持有有效 ISO 27001 資安認證之公司開具資安檢測服務報告 2. 提供使用者登入系統 ( 帳號 / 密碼 ) 與 IC 晶片卡 ( 如自建憑證 自然人憑證 )2 層以上身分驗證功能 3. 確保資料在網路上傳遞能達成資料完整性 資料隱密性 身分鑑別 授權以及不可否認的目標 ( 四 ) 系統監控作業 1. 透過數位簽章技術, 確保檔案傳送的安全性, 並進行必要之簽章驗證程序, 確認影像檔未經破壞 塗改或置換 2. 全程翔實監控記錄閱卷電腦所有操作行為 四 提高閱卷委員接受度閱卷委員能否願意且樂於使用線上閱卷, 為推動線上閱卷成功之關鍵點, 持續提高閱卷委員接受度更是至為重要 特別是線上閱卷對視力之負擔 閱卷環境之舒適 閱卷操作之便利以及評閱介面之人性化皆是閱卷委員反映最具代表性之需求, 因此為達到以上友善評閱環境要求, 規劃如下 : ( 一 ) 減輕閱卷委員視力負擔 : 採 200dpi 全彩影像掃描以確保影像品質, 並使用 17 吋電腦液晶螢幕, 提供較舒適的瀏覽畫質 另優質電腦螢幕評閱介面, 除將作答原貌呈現, 並具有放大 縮小 旋轉 字跡加深, 減少滑鼠使用之輔助功能, 以減輕眼睛疲勞度, 降低眼力的耗損, 且提供可選擇定時提醒委員休息及於每日閱卷結束前 10 分鐘之提示功能, 維持閱卷委員的最佳狀態 62
個案善用科技精進試務品質與效率 : ( 二 ) 去除閱卷委員對系統操作疑慮 : 辦理線上閱卷系統實機講習訓練, 讓閱卷委員熟稔系統操作及明瞭閱卷規則及程序, 並製作閱卷委員操作流程數位課程, 放置於考選部全球資訊網典試委員管理系統平臺, 以提供閱卷委員自主進行學習課程及模擬操作, 另閱卷委員進行評閱時, 也可隨時透過系統介面點選輔助功能及問題說明, 解決操作上之問題 ( 三 ) 電子簽章確保評閱不可否認性 : 閱卷委員到考選部閱卷場所時, 領取每人唯一的 IC 卡片或使用自然人憑證, 作為登錄系統的身分辨識, 更是評閱給分之電子簽章, 以代替現行紙本逐一試卷的評閱簽名行為, 並確保評閱過程之安全性及不可否認性 ( 四 ) 評閱介面之人性化功能 : 考量閱卷委員長時間操作滑鼠評閱給分, 造成手臂酸痛及眼睛疲勞問題, 因此取消紙本圈點形式以減少點擊滑鼠次數 另透過資訊系統優勢, 閱卷委員登錄個別題分時, 系統即能自動總分加總, 取代現行人工加總分數之不便, 給分範圍檢查避免溢給分數, 並適時閱卷進度提醒及成績統計等功能, 方便閱卷工作之進行, 還有隨時提供參考答案及試題題目影像, 即時作為評閱給分之參考 ( 五 ) 舒適的評閱環境 : 國家考場 8 樓電腦試場共有 366 個座位, 備有完善之電腦軟硬體設施, 另外線上閱卷評閱系統提供線上點餐功能, 方便閱卷委員餐點選擇, 另外也可參考大考中心作法, 提供菊花枸杞茶等護眼飲品, 加上考選部閱卷試務工作人員長久以來積極的服務態度, 足以提供友善的評閱環境 ( 六 ) 傳達推廣線上閱卷優勢 : 適時於典試會 試卷評閱會議向閱卷委員說明考選部的努力, 以提高閱卷委員接受度, 並說明未來將透過數據傳輸 資安防護與完善監控作業, 在臺北以外地區設立遠距線上閱卷據點, 便利閱卷委員交通往返, 並提升參與意願 伍 結論 國家考試閱卷委員評閱試卷是否正確 客觀與公正, 一直是各應考人所 63
關切的, 更是考驗考選部評閱信度重要一環, 國家考試要能為國掄才, 舉拔真正人才, 應積極, 除縮短閱卷時程 提升閱卷品質, 並得以擴大採行平行兩閱或一卷多閱措施, 降低主觀影響, 確保閱卷的客觀與公平性, 更維護應考人權益 推動線上閱卷是國家考試的一項重大政策, 也是國家考試資訊技術一大突破, 因此我們應擺脫傳統閱卷作業思維, 跳脫現行閱卷行為框架, 積極規劃如何以資訊系統輔助閱卷行為 簡化作業程序, 並協力分工進行各項推動事宜, 期達國家考試公平 公正的目標, 提升閱卷之信度與效度, 共同創造國家考試閱卷 e 化新紀元 個案教師 : 劉春明 個案彙編 : 蔡蕙仲 個案學習成員 : 陳素貞 倪惠真 李豐銘傅玉娥 謝仁德 個案學習日期 : 100.9.6 100.9.8 100.9.22 100.10.4 100.10.25 64