臺灣博碩士論文加值系統

本研究將研究工作分為三個階段，分別為系統功能需求分析、程式撰寫、系統評估，其最終目的是結合電腦與測驗理論，發展並評估一套遠距評量系統。系統完成之時，將可針對教師提供評量的支持系統，包括線上的即時編製試卷，並能透過網路的優勢，與其他教師共享題庫資源；而針對學生部分除了正式線上測驗的進行，並可提供學生在課餘時自我評量的學習管道。
本研究所發展的網路評量系統是以自然學科的教學評量為背景，在系統發展的三個階段中，首先透過文獻分析作為本研究的理論基礎，並編製系統功能需求分析問卷，問卷內容分為「帳戶管理」、「試卷管理」、「題庫管理」、「考試監控」、「試後回饋」、「雙向溝通」、「輔助工具」等七個單元主題，每個主題列出若干功能項目讓教師依需求強度進行勾選，而後針對問卷結果進行系統架構規劃，並進行程式撰寫。在系統設計初步完成後進行系統的評估工作，分別進行專家、教師、學生等三方面的評估，以驗證系統的適用性。
專家評估的目的是要評估所開發的系統能否有效輔助教師進行評量工作。本研究共邀請一位系統專家與三位評量專家，請他們在實際試用後針對系統的各項功能評論其優缺點並提供建議。專家在實際使用後針對各項功能大多持正面的看法，認為本系統的功能架構規劃相當完善，對於教師的評量工作將是一個相當不錯的支持系統。而專家的建議大多偏向於系統的操作介面與版面規劃方面，有效改善系統各方面的親和性。
本研究共邀請三位國中教師參與研究的進行，除了隨時收集教師在使用上的需求，並能實際了解教師在使用時可能遇到的困難。三位國中教師在針對任教班級學生進行多次線上測驗後，研究者再與教師進行質性資料的收集；而針對學生則是要求學生填寫感受問卷，總計收得有效問卷220份。
根據資料分析的結果，教師普遍認為這是一個相當容易上手的評量系統，且試後的即時閱卷與統計分析的功能，確實大大減輕評量工作的負擔，是教師覺得最滿意的部分。此外教師認為本系統提供題組型試題的出題方式，在出題之前提供問題情境，讓學生依據情境回答多道分布各層面的試題，如此能夠評量較高層次的認知能力，滿足九年一貫教學目標的需求。而學生大多能接受線上測驗的主要原因為，線上測驗的即時回饋功能以及試後的再練習功能，對於學習有相當大的幫助。

The tasks of the research were divided into three stages, which are analysis of demands of system functions, writing programs, and assessment of the system. The ultimate goal is to combine computer and test theories to develop and evaluate a distance assessment system. With the completion of the system, teachers can be provided with a supportive system of assessment, including on-line real-time making of the exam papers, and sharing of item bank resources with other teachers. As to students, in addition to conducting official on-line test, the system provides students learning means through self-assessment after school as well.
The on-line assessment system developed in the research is based on the instructional assessment of science classes. In the three stages of developing the system, the researcher firstly found theoretical ground through analysis of literatures, and then compiled analysis questionnaire on the demands of system functions. The content of the questionnaire includes seven subjects, which are “management of account”, “management of exam papers”, “management of item bank”, “monitoring exams”, “feedback after exams”, “two-way communication”, and “assistance tools”. Several function items were listed under each subject, allowing teachers to select in according with the strength of their demands. The scheming of system structure was conducted afterward in the light of the results of questionnaires, followed by the writing of programs. After the rudimentary completion of the system, evaluations on it were performed, including evaluations from experts, teachers, and students, to verify the availability of the system.
The goal of assessments from experts is to evaluate that if the system developed can effectively help teachers perform assessments. One system expert and three experts in assessment participant this study and asked them to comment on advantages and disadvantages of the functions of the system and provide suggestions after trial. The experts, after trial, hold positive opinions to the system, considering the construction of functions ideal, and that it will be a good supportive system to the teachers’ assessments. Their suggestions are mostly about the interface of operation and arrangements of the layout, which effectively improved the accessibility of the system.
In addition, three teachers in junior high school also participate the process of the research to grasp their demands in using the system, and to find out possible difficulties encountered when using the system. After performing several on-line tests to their students, the researchers proceeded to collect qualitative information with these teachers. The students were asked to fill out questionnaire about their impressions, and 220 effective questionnaires in total were received.
According to the result of data analysis, the teachers generally consider the assessment system accessible. The functions of real-time exam paper review and statistical analysis after exams, which were considered the most satisfactory parts, greatly reduce the load of reviewing exam papers. Besides, the system provides function of making up exams with context-dependent items that provide context of the problem, making students answer, according to the context, questions scattered over all levels. The teachers considered the function able to evaluate higher levels cognitive abilities which fulfills the instructional goals of Nine-year integrate Curriculum. As to the students, most of them accept on-line test mainly because that the functions of real-time feedback and re-practice after exam are quite helpful to their learning.

目 次
中文摘要……………………………………………………………Ⅰ
英文摘要……………………………………………………………Ⅲ
誌謝…………………………………………………………………Ⅴ
目次…………………………………………………………………Ⅵ
表次…………………………………………………………………Ⅷ
圖次…………………………………………………………………Ⅸ
附錄次………………………………………………………………Ⅹ
第壹章 緒論
第一節 研究背景與研究動機………………………………………… 1
第二節 研究目的……………………………………………………… 4
第三節 名詞解釋……………………………………………………… 5
第四節 待答問題……………………………………………………… 6
第貳章 文獻探討
第一節 測驗在教學歷程中重要性…………………………………… 7
第二節 線上評量對網路學習環境的重要性…………………………18
第三節 線上評量系統的類型及其發展現況…………………………23
第參章 研究方法
第一節 研究程序………………………………………………………32
第二節 研究對象………………………………………………………35
第三節 研究工具………………………………………………………37
第四節 資料收集與處理………………………………………………39
第肆章 結果與討論
第一節 功能需求分析…………………………………………………41
第二節 系統架構分析…………………………………………………45
第三節 系統功能評估…………………………………………………55
第四節 教師適用性分析………………………………………………66
第五節 學生適用性分析………………………………………………73
第伍章 結論與建議 ……………………………………………………76
參考文獻 ……………………………………………………………………78
表 次
表2-1 四類成就測驗的比較………………………………………………… 9
表2-2 生物期中考命題雙向細目表…………………………………………10
表2-3 客觀測驗題與論文測驗題之比較……………………………………11
表2-4 電腦化測驗指導原則…………………………………………………26
表2-5 常見之網路評量系統之比較…………………………………………30
表3-1 參與研究工作之人員資料……………………………………………36
表4-1 功能需求分析統計結果………………………………………………42
表4-2 各單元主題的平均最高得分項目……………………………………42
表4-3 各單元主題的平均最低得分項目……………………………………43
表4-4 使用者身分與系統功能配置表………………………………………47
表4-5 專家在系統各方面的評價與建議統計………………………………55
表4-6 專家對於試卷管理的具體建議事項與處理情形……………………56
表4-7 專家對於題庫管理的具體建議事項與處理情形……………………58
表4-8 專家對於線上測驗功能的具體建議事項與處理情形………………59
表4-9 專家對於成績查詢與試後分析功能的具體建議事項與處理情形…61
表4-10 專家對於雙向互動功能的具體建議事項與處理情形……………62
表4-11 專家對於整體系統架構的具體建議事項與處理情形……………63
表4-12 教師在實際使用系統後提出的具體建議事項與處理情形………71
表4-13 遠距評量系統學生試後回饋問卷統計結果………………………73
表4-14 遠距評量系統學生試後回饋問卷依主題統計結…………………74
圖 次
圖2-1 難度與鑑別力的關係圖………………………………………………14
圖3-1 研究程序圖……………………………………………………………34
圖4-1 功能需求分析…………………………………………………………41
圖4-2 三層式主從架構圖……………………………………………………46
圖4-3 系統架構圖……………………………………………………………48
圖4-4 試卷管理功能架構分析圖……………………………………………52
圖4-5 題庫管理功能架構分析圖……………………………………………53
圖4-6 試卷管理頁面…………………………………………………………57
附錄次
附錄一 遠距評量系統功能需求問卷……………………………………82
附錄二 遠距評量系統學生試後回饋問卷………………………………85

中文部份
江憲坤、林志豪（1999）。群體合作學習機制在Web教學環境上之探討。大葉學報，8(2)，63-78。
何榮桂（1997a）。遠距測驗-Dear CAT的設計與實施。物理教育，1(1)，51-62。
何榮桂（1997b）。從「測驗電腦化與電腦化測驗」再看網路化測驗。測驗與輔導，144，2972-2974。
何榮桂（2000a）。遠距測驗及其相關問題之探討。論文發表於國立交通大學主辦之「2000網路學習理論與實務研討會」，新竹。
何榮桂（2000b）。量身訂製的測驗-適性測驗。論文發表於國立交通大學主辦之「2000網路學習理論與實務研討會」，新竹。。
何榮桂（2000c）。網路環境題庫與測驗之整合系統。科學發展月刊，28(7)，534-540。
余民寧（1992）。測驗編製與分析技術在學習診斷上的應用。教育研究雙月刊，28，44-60。
吳裕益（1995）。電腦在測驗上的應用。教育實習輔導季刊。5，10-13。
吳裕益、張酒雄、張玉茹（1998）。國中學生英語學習成就測驗的編製、分析與常模建立。中國測驗學會測驗年刊，45(2)，109-134。
李台玲（2001）。遠距教學之評量。生活科技教育，34(8)，30-37。
李正源（1996）。試題品質的決定－測驗與量表的試題分析實務。中等教育，47(4)，44-61。
周倩（1998）。電腦網路輔助測驗與評量：發展趨勢與研究方向。第十四屆科學教育學術研討會論文彙編，15-24。
周倩（2000）。網路學習的趨勢與原理。論文發表於國立交通大學主辦之「第一屆大學教學方法與網路課程研討會」，新竹。
周倩、簡榮宏（1997）。網路評量系統之發展與研究。遠距教育，4，12-15。
林奇賢、馬榮燦、林志能(2000)。網路學習與網路學校的發展對教師專業表現的衝擊。資訊與教育雜誌，79，2-12。
林珊如，卓宜青，劉旨峰，袁賢銘（2000）。網路化學習歷程與同儕互評系統之建構經驗。資訊與教育，80，57-64。
林鴻源（1999）。線上測驗回饋型態對國小學童學習影響之分析研究。國立台南師範學院國民教育研究所碩士論文，未出版，台南。
邱關誼（2000）。應用線上測驗評量試題難易之網路題庫系統。資訊與教育雜誌，76，47-55。
洪榮昭（1986）。原理與應用-電腦輔助教學之設計。松崗電腦圖書資料有限公司，台北巿。
張基成(無日期)。網路化學習檔案之系統化建構經驗及相關問題探討。2002年4月30日，取自http://140.122.87.110/43203.htm/
郭生玉（1998）。心理與教育測驗。台北縣中和巿：精華書局。
陳英豪、吳裕益（1995）。測驗與評量。高雄：複文圖書出版社。
陳麗如（1997）。從CAI中的題目到Internet上的題庫。測驗與輔導，144，2989~2993。
楊家興（2001）。網路虛擬教室的完全設計。管理與資訊學報，6，113-134。
劉旨峰、林珊如、袁賢銘（2001）。基於網路同儕互評之學習歷程之信效度研究。論文發表於國立中正大學，教育部主辦之「TANET 2001台灣區網際網路研討會」，嘉義。
蔡振昆（2001）。傳統教學與網路教學之比較研究-從教學媒體、班級經營及教學評量來探討。國立中山大學資訊管理研究所碩士論文，未出版，高雄。
盧信彰（2000）。「網路學習環境」建構之探討。生活與科技教育，33(6)，14-20。
鍾斌賢、吳育龍等（2001）。於網際網路上應用概念圖輔助學習之研究。論文發表於國立中正大學，教育部主辦之「TANET 2001台灣區網際網路研討會」，嘉義。
簡茂發（1989）。教學評量原理與方法。載於中國教育學會（主編），有效教學研究（頁395-422）。台北：台灣書店。
英文部份
Airasian P. W. & Madaus G. F. (1972). Functional types of student evaluation. Measurement and Evaluation in Guidance, 4, 221-223.
Alessi S. H. & Trollip S. R. (1991). Computer-based instruction: Methods and development, pp.205-243. Englewood Cliffs, NJ: Prentice-Hall.
Allen M. J. & Yen W. M. (1979). Introduction to measurement theory. Monterey CA: Brooks/Cole Publishing Co..
Banderson C. V., Inouye D. I., Olsen J. B. (1989). The four generations of computerized educational measurement. In R. L. Linn (Ed.). Educational measurement (3rd ed., pp. 367-407).New York: American Council on Education.
Bugbee A.C. “The Equivalence of Paper-and Pencial and Cimputer-based Testing”. Journal of Research on Computing in Education, 28(3), 282-297, 1996.
Crocker L. & Algina J. (1986). Introduction to classical and modern test theory. New York: Hold, Rinehart, and Winston.
Gronlund N. E. (1990). Measurement and evaluation in teaching(6th). New York: Macmillan.
Gronlund N. E. (1993). How to make achievement tests and assessments(5th ed). Needham Heights, MA: Allyn and Bacon.
Mark D. Reckase. (1997). The Next Generation of Computerized Tests: Impilcation for Testing of Advances in Multimedia, Intelligent Tutoring System, and Language Process. 教育測驗新近發展趨勢學術研討會論文集，13-28.
Mehrens W. A., Lehmann I. J. (1984). Measurement and evaluation in education and psychology(3th). New York: Holt, Rinehart and Winston.
Nitko A. J. (1983). Educational Tests and Measurement. New York:Harcourt Brace Jovanovich, Inc.
Osterlind S. J. (1994). Constructing test items (3rd). Boston: Kluwer Academic Publisher.
Perkins Robert F. (1996). Using hypermedia programs to administer tests: effects on anxiety and performance. Journal of Research on Computing in Education. 28(2).
Skinner B.F. (1986). The techonnlogy of teaching. New York: Appleton-Century-Crofts.
Veen W., Lam I.,Taconis R.(1998). A virtual workshop as a tool for collaboration: Towards a model of telematic learning environments. Computers Educations, 30, 31-39.