系統識別號 | U0002-2706200520565300 |
---|---|
DOI | 10.6846/TKU.2005.00929 |
論文名稱(中文) | 網路化學習成效分析系統建置之研究 |
論文名稱(英文) | Developing of Web-Based Learning Assessment System |
第三語言論文名稱 | |
校院名稱 | 淡江大學 |
系所名稱(中文) | 教育科技學系碩士班 |
系所名稱(英文) | Department of Educational Technology |
外國學位學校名稱 | |
外國學位學院名稱 | |
外國學位研究所名稱 | |
學年度 | 93 |
學期 | 2 |
出版年 | 94 |
研究生(中文) | 陳錫安 |
研究生(英文) | His-An Chen |
學號 | 792100108 |
學位類別 | 碩士 |
語言別 | 繁體中文 |
第二語言別 | |
口試日期 | 2005-06-16 |
論文頁數 | 123頁 |
口試委員 |
指導教授
-
蔡秉燁
委員 - 趙貞怡 委員 - 李世忠 |
關鍵字(中) |
學生問題分析表 網路評量系統 學習診斷 試題分析 |
關鍵字(英) |
Student-Problem Table Web-Based Assessment System test item analysis learning diagnosis |
第三語言關鍵字 | |
學科別分類 | |
中文摘要 |
本研究之主要目的在於建立網路化學習成效分析系統,並探討其於學校環境實際施行之可行性,是否可以協助教師分析診斷學生的學習困難以及是否可以協助教師進行試題分析與建立題庫等問題。 網路化學習成效分析系統採用系統化教學設計之步驟建構而成,透過文獻分析作為開發之理論依據、設計系統功能與架構、發展系統、實施系統測試、評鑑系統進而印證理論提出建議。 本研究所建置之系統功能包含班級管理、人員管理、考試科目管理、題庫管理、試卷管理、評量分析與學習診斷功能,由於試題分析方法種類繁多,本系統僅就難度(difficulty)、鑑別度(discrimination)、誘答力(distraction)、S-P表(student problem chart)、差異係數(disparity index)、注意係數(caution index)分析之。 透過132位國小學童於學校網路環境實際測試,系統運作穩定、學童樂於使用、教師亦認為能夠大幅減少分析試題與了解學生學習狀況的時間,協助建立良好試題題庫。 |
英文摘要 |
The main purpose of this research was to establish the Web-Based Learning Assessment System (WBLAS) and to discuss the questions as follows: the feasibility of building the WBLAS in the school environment, whether WBLAS could assist teachers to analyze students’ learning difficulties, or to help teachers analyze the test items and build the testing database. The WBLAS was developed according to the steps of the Instructional System Design Model, i.e. literature analysis to set up its theory base, design for its system functions and framework, development of its system, implementation and test of the system, evaluation of the system to confirm or even offer suggestions to the theory. The functions of the WBLAS included class management, member management, testing subject management, testing database management, test paper management, evaluation analysis and learning diagnosis, etc. There were various methods to analyze the test items, but the WBLAS would focus on test items like difficulty, discrimination, distraction, student-problem chart (S-P Chart), disparity index, and caution index. The WBLAS worked smoothly when testing among 132 primary school students. Students were glad to use this system, and teachers also thought that the WBLAS helped a lot to decrease the time of analyzing the test items as well as the time of understanding students’ learning situations. Furthermore, it helped teachers to build the database of well-designed test item. |
第三語言摘要 | |
論文目次 |
目錄 第一章 緒論 1 名詞釋義 2 一、試題分析(item analysis) 2 二、S-P表(student-problem score table 或 student-problem chart) 3 壹 評量與教學 4 一、評量的意義 4 二、評量的功能 6 三、評量與教學的關係 7 四、評量的發展趨勢 11 五、網路評量系統的發展 11 貳 學生問題分析S-P表 12 一、 S-P表的理論 12 二、 S-P表的編製 13 三、 差異係數 19 四、 注意係數 20 五、 S-P表的分析 22 六、歷年S-P表研究結果與建議 35 參 試題分析 37 一、試題分析的重要 37 二、試題分析的功用 37 三、試題分析的方法 38 第三章 研究架構與設計 47 壹 分析階段 47 一、需求分析 47 二、使用者分析 48 三、內容分析 48 四、資源分析 49 貳 設計階段 50 參 發展與實施階段 52 肆 評鑑階段 53 第四章 系統實作 54 壹 系統架構 54 貳 系統運作流程簡介 56 叁 系統功能模組簡介 58 肆 系統試用 75 伍 試用分析與討論 91 第五章 結論與建議 109 壹 結論 109 貳 建議 110 參考文獻 111 附錄一 117 常態分配表 117 附錄二 120 網路化學習成效分析系統評鑑表 120 表目錄 表2-2-1 差異係數之DB(M)值 20 表2-3-1 試題與學生得分狀況表 42 表2-3-2 Eble & Frisbie鑑別度標準表 43 表2-3-3 誘答力分析例一 44 表2-3-4 誘答力分析例二 45 表2-3-5 誘答力分析例三 45 表2-3-6 誘答力分析例四 46 表4-5-1 學生問卷之情緒分析結果與討論第一題 92 表4-5-2 學生問卷之情緒分析結果與討論第二題 92 表4-5-3 學生問卷之情緒分析結果與討論第三題 93 表4-5-4 學生問卷之反應分析結果與討論第四題 93 表4-5-5 學生問卷之反應分析結果與討論第五題 94 表4-5-6 學生問卷之反應分析結果與討論第六題 94 表4-5-7 學生問卷之反應分析結果與討論第七題 94 表4-5-8 學生問卷與傳統方式比較結果與討論第八題 95 表4-5-9 學生問卷與傳統方式比較結果與討論第九題 95 表4-5-10 學生問卷與傳統方式比較結果與討論第十題 95 表4-5-11 學生問卷與傳統方式比較結果與討論第十一題 96 表4-5-12 學生問卷之系統呈現方式結果與討論第十二題 96 表4-5-13 學生問卷之系統呈現方式結果與討論第十三題 97 表4-5-14 網路化學習成效分析系統評鑑表 100 圖目錄 圖2-1-1 測驗、測量、評量、評鑑之間的關係 5 圖2-1-2 教學評量基本模式 5 圖2-1-3 Kibler的教學模式 8 圖2-1-4 Gronlund & Linn的教學模式 8 圖2-2-1 S-P原表 14 圖2-2-2 S-P表之學生答題高低排序 15 圖2-2-3 S-P表之試題被答高低排序 16 圖2-2-4 S曲線 17 圖2-2-5 P曲線 18 圖2-2-6 S-P表類型一 23 圖2-2-7 S-P表類型二 23 圖2-2-8 S-P表類型三 24 圖2-2-9 S-P表類型四 24 圖2-2-10 S-P表類型五 25 圖2-2-11 S-P表類型六 25 圖2-2-12 得分學生數分佈之S-P表類型一 26 圖2-2-13 得分學生數分佈圖類型一 27 圖2-2-14 得分學生數分佈之S-P表類型二 27 圖2-2-15 得分學生數分佈圖類型二 28 圖2-2-16 得分學生數分佈之S-P表類型三 29 圖2-2-17 得分學生數分佈圖類型三 29 圖2-2-18 得分學生數分佈之S-P表類型四 30 圖2-2-19 得分學生數分佈圖類型四 30 圖2-2-20 認知層次S-P表 31 圖2-2-21 平均回答層次圖 32 圖2-2-22 14號學生回答層次雷達圖 32 圖2-2-23 學生注意係數與問題注意係數判斷類別S-P表 33 圖2-2-24 試題診斷分析圖 34 圖2-2-25 學生診斷分析圖 35 圖3-2-1 系統架構圖(一) 51 圖3-3-1 工作流程圖 52 圖4-1-1 系統架構圖(二) 55 圖4-2-1 管理者、教師系統運作流程 56 圖4-2-2 學生之系統運作流程 57 圖4-2-3 家長之系統運作流程 57 圖4-3-1 登入系統步驟一-選擇使用者身份畫面 58 圖4-3-2 登入系統步驟二-輸入使用者名稱與密碼畫面 58 圖4-3-3 管理者功能選單畫面 59 圖4-3-4 教師功能選單畫面 60 圖4-3-5 學生功能選單畫面 60 圖4-3-6 家長瀏覽成績畫面 61 圖4-3-7 測驗模組畫面 61 圖4-3-8 測驗結果顯示模組畫面 62 圖4-3-9 測驗結果顯示模組畫面 62 圖4-3-10 班級管理模組畫面 63 圖4-3-11 教師管理畫面 63 圖4-3-12 學生管理畫面 64 圖4-3-13 科目管理模組畫面 64 圖4-3-14 題庫管理模組畫面 65 圖4-3-15 選擇科目畫面 66 圖4-3-16 挑選試題畫面 66 圖4-3-17 選擇考試科目與試卷畫面 67 圖4-3-18 選擇施測班級畫面 67 圖4-3-19 試卷開考模組之選擇考試科目畫面 68 圖4-3-20 分配試卷開考班級畫面 68 圖4-3-21 開考控制台之學生連線狀態與結束考試畫面 69 圖4-3-22 評量分析模組之試卷分類主頁面 69 圖4-3-23 難度指標分析畫面 70 圖4-3-24 鑑別度指標分析畫面 70 圖4-3-25 誘答力分析畫面 71 圖4-3-26 S-P表分析畫面 71 圖4-3-27 學習診斷畫面 72 圖4-3-28 試題診斷畫面 73 圖4-3-29 成績列印與查詢畫面 73 圖4-3-30 成績寄送畫面 74 圖4-3-31 公告管理模組畫面 74 圖4-4-1 網路化學習問題分析系統首頁畫面(一) 75 圖4-4-2 選擇身分及鍵入使用者名稱、密碼畫面 75 圖4-4-3 學生操作主畫面 76 圖4-4-4 學生排定試卷畫面 76 圖4-4-5 學生試卷作答畫面 77 圖4-4-6 學生交卷畫面 77 圖4-4-7 學生歷次成績一覽表畫面 78 圖4-4-8 學生「學習診斷」主畫面 78 圖4-4-9 學生於該次考試之學習診斷分析 79 圖4-4-10 學生介面之Help畫面 79 圖4-4-11 網路化學習問題分析系統首頁畫面(二) 80 圖4-4-12 教師操作主畫面 80 圖4-4-13 教師操作介面:學生管理畫面 81 圖4-4-14 教師操作介面:科目管理畫面 81 圖4-4-15 教師操作介面:題庫管理畫面 82 圖4-4-16 教師操作介面:試卷管理主畫面 82 圖4-4-17 教師操作介面:試卷管理功能之「新增試卷」功能畫面 83 圖4-4-18 教師操作介面:試卷排程選定科目後出現畫面 83 圖4-4-19 教師操作介面:顯現該教師可挑選應考班級之畫面 84 圖4-4-20 教師操作介面:學生連線狀況畫面 84 圖4-4-21 教師操作介面:學生交卷狀況畫面 85 圖4-4-22 教師操作介面:切斷連線結束考試畫面 85 圖4-4-23 教師操作介面:評量分析主畫面 86 圖4-4-24 教師操作介面:試卷分析畫面 86 圖4-4-25 教師操作介面:學生與試題學習診斷畫面 87 圖4-4-26 教師操作介面:學生學習診斷畫面 87 圖4-4-27 家長登入畫面 88 圖4-4-28 家長登入首頁畫面 88 圖4-4-29 家長介面:學習診斷試卷一覽表 89 圖4-4-30 家長介面:學習建議處方簽畫面 90 圖4-5-1 三年級S-P表 圖4-5-2 三年級得分-學生注意係數圖 103 圖4-5-3 三年級答對率-問題注意係數圖 103 圖4-5-4 五年級S-P表分析 105 圖4-5-5 五年級得分-學生注意係數圖 106 圖4-5-6 五年級答對率-問題注意係數圖 106 |
參考文獻 |
參考文獻 Anastasi.(1982). Psychologic testing. New York:Macmillan Publishing. Bloom, B, S.(1956).(Ed.), Taxonomy of Educational Objectives. HandbookⅠ: Cognitive Domain. New York::David McKay. Bunderson, C.V., Inouye, D.I.,& Olsen, J.B.(1989). The four generations of computerized educational measurement. In R.L. Linn(Ed.). Educational measurement(3rd ed., pp.367-407). New York: American council on Education Chacko,I.(1998). S-P chart and instructional decisions in the classroom. International journal of mathematical education in science & technology,29(3),445-450. Dinero, T.E., Blixt, S.L.(1988). Information about tests from Sato’s S-P chart. College teaching, 36(3),123-128. Ebel, R. L. & Frisbie, D. A.(1979). Essentials of educational measurement(3rd ed.). Prentice-Hall: Englewood Cliffs, N.J..Fan, C. T. Gronlund N.E. & Linn R.L.(1985) Measurement and Evaluation in Teaching(5th ed.), pp.8. Macmillan, New York. Haladyna, T. M.(1994). Developing and validating multiple-choice test items. Hillsdale, NJ: Lawrence Erlbaum Associates, Publishers. Harnisch, D.L. & Linn, R.L.(1981a). Analysis of item response patterns: Questionable test data and dissimilar curriculum practices. Journal of Educational Measurement, 18,133-146. Kelly, T. L.(1939). The Selection of Upper and Lower Groups for the Validation of Test Items. Journal of Educational Psychology, 30, 17-24. Kibler, R.J., Cegala, D.J., Barker, L.L. & Miles, D.T.(1974).Objectives for instruction and evaluation. Boston:Allyn and Bacon. Michaelis, J. U.(1980). Social studies for children: A guide to basic instruction.(7th ed.). Englewood Ciffs, New Jersey:Prentice-Hall, Inc. 448 Sato, T.(1969). A method of analyzing data gathered by the Response Analyzer for diagnosis of student performance and the quality of instructional sequence. Proceedings of IECE of Japan annual conference. S12-1. Sato, T.(1975). The Construction and Interpretation of S-P Table. Tokyo:Meiji Tosho. Sato, T.(1985). Introduction to student-problem curve theory analysis and evaluation. Tokyo:Meiji Tosho. Scannell, D. P & Tracy, D. B.(1975). Performance Assessment in Science. Apply measurement in Education, 4(4), 347-362. Scott W. Bonham, Robert J. Beichner, Aaron Titus & Larry Martin(2000).Education Resaerch Using Web-Based Assessment Systems. Journal of Research on Computing in Education, 33(1), 28-43. Stevens, S.S.(1959).Measurement , Psychophysics ,and Utility .In C.W.Churchman & P. Ratoosh(Ed).Measurement :Definition and Theories. New York:Wiley,19. Weiss, C .M.(1972).Evaluation Research: Methods of Assessing Program Effectiveness, Englewood Cliffs.N.J:Prentice-Hall. William W.Lee & Diana L. Owens.(2000/2003).Multimedia-Based Instructional Design: Computer-Based Training, Web-Based Training, Distance Broadcast Training. New York:Wiley. 王子華、黃世傑(2001)。網際網路評量與試後分析系統(WATA)之設計。2001資訊與教育雜誌特刊,276-286。 白慧如(2003)。國民小學教師資訊素養與教學效能關係之研究。臺中師範學院國民教育研究所碩士論文,未出版。 呂秋文(1988)。S-P表注意係數在數學科上之應用研究。國立政治大學學報,59,117-193。 李世忠(1999)。教學科技—評鑑與應用(頁247-250)。台北:五南圖書。 何英奇(1989)。精熟學習策略配合微電腦化S-P表分析診斷對學生學習效果的實驗研究。師大教育心理學報,22,191-214。 何英奇(1992)。教學評量的基本原則。教學評量研究(頁3-30)。台北,五南。 何榮桂(1997)。從「測驗電腦化與電腦測驗化」再看網路化測驗。測驗與輔導,144,2972-2974。 余民寧(1995)。認知診斷測驗的發展趨勢。教育研究雙月刊,45,14-22 。 余民寧(1997)。圖形評量。教育測驗與評量-成就測驗與教學評量。台北:心理出版社。 周苡靖(2003)。國民小學學生資訊素養之研究─以雲林縣北港鎮各國小為例。南華大學資訊管理學研究所碩士論文,未出版。 吳裕益(2000)。教學評量的新趨勢。教育研究,70,6-9。 林裕集(2001)。適用於電腦教室之網路測驗系統:以國小英語科為例。國立台中師範學院教育測驗統計研究所碩士論文,未出版。 林清山(1980)。多變量分析統計法。台北市:東華。 林清山(1995)。心理與教育統計(5版)。台北市:東華。 郭生玉(1990)。心理與教育測驗(5版)。台北市:精華。 郭生玉(1996)。 心理與教育測驗(10版)。台北市:精華。 陳玟秀(2000)。國民中學資源班學生數學科診斷測驗編制之研究。國立高雄師範大學特殊教育學系碩士論文,未出版。 莊智陵(2000)。SPRT電腦適性測驗對國中學生受測態度影響之研究—以中山國中二年級為例,私立淡江大學教育科技學系碩士論文,未出版。 陳新豐(1999)。多媒體線上適性測驗系統發展及其相關研究。國立台南師範學院國民教育研究所碩士論文,未出版。 陳騰祥(1986)。S-P表分析在學習診斷的應用法及其實作感受之探究。輔導學報,9,275-311。 陳騰祥(1989)。學習輔導課程及其利用S-P表分析實作教學效果的實徵研究。輔導學報,12,85-141。 黃桂君,吳裕益(2001)。應用S-P 分析模式診斷學生數學計算能力-以聽障學生分數減法學習為例。國立台南師範學院特殊教育學系:特殊教育與復健學報,9,101-131。 康龍魁(1994)。教學評量與命題之探討。商業教育,17,1-9。 黃雅君(1999)。台北市立國民小學教師資訊素養知能及其相關設備利用情形之研究。國立台灣師範大學社會教育研究所碩士論文,未出版。 張春興,林清山(1991)。教育心理學。台北市:東華。 張俊紳(1993)。教學評量與回饋。國教之聲,26(4),54。 楊世安(2002)。網路教學平台教學成效管理元件之開發與評估。國立中正大學資訊管理學系研究所論文,未出版。 劉奕樟(2002)。網路多媒體評量與學習診斷系統之建置。國立交通大學網路學習學程研究所碩士論文,未出版。 劉亞平(1998)。教育改革的關心程度問卷與線上測驗之研究。國立台南師範學院資訊教育研究所碩士論文,未出版。 劉豐銘(2001)。應用專家系統之學習評量診斷策略。國立台灣師範大學工業教育研究所碩士論文,未出版。 潘道仁(2002)。國民中學九年一貫課程實施現況調查研究。國立高雄師範大學教育學系碩士論文,未出版。 謝依儒(2003)。線上評量診斷系統之發展研究-以國中學生成就測驗為例。國立高雄師範大學資訊教育研究所碩士論文,未出版。 簡茂發(1986)。教學評量原理與方法。國民中小學學習成就評量—理論與命題示例彙編。台灣省政府教育廳。 簡茂發(1999)。多元化評量之理念與方法。教師天地,99,11-17。 簡茂發(2001)。心理測驗與統計方法(3版)。台北市:心理。 |
論文全文使用權限 |
如有問題,歡迎洽詢!
圖書館數位資訊組 (02)2621-5656 轉 2487 或 來信