建构智慧型网际网路线上题库系统之研究.docx

1、建构智慧型网际网路线上题库系统之研究建構智慧型網際網路線上題庫系統之研究以彰化師大附工為例計畫主持人：鍾瑞國 博士協同主持人：陳聰浪 博士 研究員：林有昭、許榮添、李宏鑫、陳俊焜吳德清、羅玉孺、陳瑞洲、陳鎮潦王怡文、陳崇彥、張允、廖昭蕊葉晉良、陳志強、廖鴻銘、廖美緣摘要本研究係利用全球資訊網(WWW)，來建構智慧型網際網路線上題庫系統，並利用本系統對學生進行團體施測或個別學習評量之後，再針對每一個題目作答情形加以記錄、統計、分析，來評量該題目之難易度及選項的有效性。老師亦可依據本系統對試題的分析進行題目修改，以及系統對試題所評鑑的難易度來製作試卷，以避免試題過於簡單或困難。本系統操作功能建立在

2、網際網路(Internet)上，老師只須透過簡單操作介面，即可直接由瀏覽器(Browser)上執行命題、授權測驗對象及印製考卷的功能；而經由老師授權測驗的學生同樣只需透過瀏覽器(Browser)操作介面即可完成學習評量以及作答狀況的查詢。壹、前言老師命製一份評量試卷，要達到難易適中，又能評量出學生學習成效的試題，常常是出題老師很大的挑戰。這是由於沒有對試題作分析所致。針對上述問題，本行動研究提出一套建立在網際網路(Internet)上，結合學生資料設定、使用教師設定、線上測驗、記錄、分析、統計答題結果評量題目難易度及選項有效性分析，並依據難易度線上製作考卷之智慧型網際網路線上題庫系統，以解決上

3、述的難題。本題庫系統具備下列特色:1. 系統對每一個題目之作答情形加以記錄、分析、統計，並動態的評定其難易度及選項有效性分析。2. 學生可以依照老師指定授權的試卷題目做線上測驗，測驗後系統立即告知答題結果與成績，並記錄成績。3. 老師可以根據難易度挑選題目，或選擇難易度及題數由電腦隨機出題。4. 試卷可以由瀏覽器(Browser)上預覽，並可直接由瀏覽器(Browser)上列印。5. 所有介面都建立在網際網路(Internet)上，介面親切，操作簡單。貳、研究目的1. 建構一套可以分析、統計題目難易度與選項有效性分析的題庫系統。2. 提供老師一套容易命題，閱卷的題庫系統，以節省教師之工作負荷。

4、3. 提供學生一套可自我學習評量的題庫系統，以增進學生學習成效。參、系統架構與原理一.系統環境與架構本系統建立在 Microsoft Window 2000 Server作業平台上，WEB Server 為 Microsoft IIS5.0，資料庫是建立在 Microsoft Access 2000 上，其架構如圖一所示。若學校設備許可，建議用三層架構，將WEB SERVER 與 DATABASE SERVER 分開，資料庫可以採用SQL Server 2000，如此更能提升系統效率，彈性管理網站及系統資料庫。其三層架構如圖二所示。圖一二層式Clinet-Server架構圖圖二三層式架構圖二.

5、系統工作原理本研究題庫系統是以ACCESS 2000當作資料庫,用來儲存各科的測驗試題、學生資料及答題情況紀錄。使用者利用要求執行後端伺服器( Web Server) 的ASP (Active Server Pages)程式，將資料庫的ODBC (Open DataBase Connectivity)驅動程式設定完成，再利用ASP 程式，透過 ADO (ActiveX DataObjects) 物件來下達 (Structured Query Language) 指令，存取WEB資料庫。使用者將所要求的科目、章節與題目資料輸入後，瀏覽器(Browser)將這些訊息送至伺服器(Server),再由

6、伺服器透過ADO 物件存取WEB資料庫的資料，最後伺服器再將結果回應給使用者，其動作流程如圖三所示。肆、系統功能說明本系統共計有四項主要功能：包括教師管理、學生資料、實施測驗及試題分，如圖六所示。圖六 網路線上題庫系統主畫面一、教師管理系統利用登入的帳號來區分使用者的身份是老師還是系統管理者，當登入者是管理者帳號時，其執行畫面如圖七所示。若使用者是一般教師，其執行畫面如圖八所示。圖七管理者登入畫面圖七教師登入畫面二.線上測驗進入線上測驗，如圖八所示，選擇試卷名稱、班級，輸入學號及密碼，按確定後，即可進入線上測驗畫面如圖九所示。圖八 進入線上測驗畫面圖九 實施線上測驗畫面按交卷後，系統即顯示測試

7、者答題結果及成績，如圖十所示。圖十 答題結果及成績教師並可查詢每一測試者成績，如圖十一所示。圖十一 查詢測試者成績 三.製作考卷老師可在主畫面點選線上出題，即可進入製作考卷網頁，試卷輸出如圖十二所示。圖十二 試卷輸出畫面四、試題分析系統針對每一個題目做答情形加以記錄、統計、分析、來評量該題目之難易度及選目的有效性，如圖十三及圖十四所示。圖十三試題分析畫面圖十三試題評鑑統整畫面伍、結論使用網際網路技術連接資料庫以建構網路題庫系統，是必然的趨勢。它可以改進以往單機題庫系統無法共享題庫的缺點。然而要建立一套真正能評量學生學習成效，以及找出學生學習時所遭遇的困難所在，以供老師修正教學方法及技巧，則不能

8、靠一位程式設計師就能夠達成，尚需配合學科專家與測驗專家，以其經驗，精心設計題目才能達成。要命製一份難易適中，又能評量學生學習成效的試卷，並不容易。而透過網際網路利用線上測驗方式，以擴大其受測者範圍，避免局限在一個學校或班級，這樣受測者的答題結果來評鑑試題的難易度與選項有效性，相對的比較客觀可靠。當然，如何去鑑別受測者的身份也是網路線上測驗的一大課題。希望藉此行動研究，落實教學工具的改良，以提升教學與學習成效。陸、參考文獻陳麗如(民86)。從CAI中的題目到Internet上的題庫，測驗與輔導，144，29902993。何榮桂(民80)。題庫中項目參數分配型態對電腦化適性測驗選題的影響，中國測驗

9、學會測驗年刊，38，71-96。劉湘川(民87)。多元化評量系統簡介：提供完整且專業的教學評量資源，以助教學品質之提昇，北縣教育，25，38-45。簡茂發、劉湘川、許天維、郭伯臣(民83)。試題反應理論在國民教育階段國小數學科基本學習成就評量上的運用，中國測驗學會測驗年刊，41，1-18。郭生玉(民88)。心理與教育測驗。台北精華書局。簡茂發(民76)。心理測驗與統計方法。台北：心理出版社。簡茂發與黃光雄(民80)。教育研究法。台北：師大書苑。許擇基、劉長萱（民81）。試題作答理論簡介。台北：中國行為科學社。Alessi, S.M., & Trollip, S.R.(1985). Comput

10、er-based instrustion - Methods and development. Englewood Cliffs, NJ: Prentice-Hall.Criswell, E. L.(1989). The design of computer-based instruction. NY: MaCmillan.Salisbury, D.F.(1988).Effective drill and practice strategies. In D.H. Jonassen (ED.). Instructional designs for microcomputer course-war

11、e. 103-124. Hillside, NJ:Lawrence ErlBaum Associate.Vale,C.D.(1986).Linking item parameters onto a commons cale. Applied PsychologicalMeasurement,10,333-344.Andersen, E. B. (1973). Conditional inference and models for measuring. Copenhagen:Mental hygiejnisk Forlag.Andersen, E. B. (1980) Discrete sta

12、tistical models with social science applications.Amsterdam: North-Holland.Baker, F.B. (1977). Advances in item analysis. Review of Educational Research, 47,151-178.Baker, F. B. (1985). The basics of item response theory. Portsmouth, NH: Heinemann.Bock, R. D. (1972). Estimating item parameters and la

13、tent ability when responses arescored in two or more nominal categories. Psychometrika, 37, 29-51.Bock, R. D., & Aitkin, M. (1981). Marginal maximum likelihood estimation of item parameters: An application of an EM algorithm. Psychometriks, 46, 443-459.Cohen, R. j., Montague, P., Nathanson, L. S., &

14、 Swerdlik, M. E. (1988). Psychalogical testing: An introduction to tests and measurement. Mountain View, CA: Mayfield.Crocker, L., & Algina, J. (1986). Introduction to classical and modern test theory. New York: Holt, Rinehart & Winston. Cronbach, L. J. (1951). Coefficient alpha and the internal str

15、ucture of tests. Psychometrika, 16, 297-334. Embretson, S. E. (Ed.) (1985). Test design: Developments in psychology and psychometrics. Orlando, FL: Academic. Freedle, R. (Ed.) (1990). Artificial intelligence and the future of testing. Hillsdale, NJ: Lawrence Erlbaum Associates. Guilford, J. P. (1954

16、). Psychometric methods. New York: McGraw-Hill. Guion, R. M., & Ironson, G. H. (1983). Latent trait theory for organizational research. Organizational Behavior and Human Performance, 31, 54-87. Gullikson, H. (1987). Theory of mental tests. Hillsdale, NJ: Lawrence Erlbaum Associates. (Originally publ

17、ished in 1950 by New York: John Wiley & Sons) Guttman, L. (1944). A basis for scaling qualitative data. American Sociological Review, 9,139-150. Hambleton, R. K. (Ed.) (1983). Applications of item response theory. Vancouver, BC: Educational Research Institute of British Columbia. Hambleton, R. K. (1

18、989). Principles and selected applications of item response theory. In R. L. Linn (Ed.), Educational measurement (3rd ed., pp. 147-200). New York: MaCmillan. Hambleton, R. K., & Cook, L. L. (1977). Latent trait models and their use in the analysis of educational test data. Journal of Educational Mea

19、surement, 14, 75-96. Hambleton, R. K., & Swaminathan, H. (1985). Item response theory: Principles and applications. Boston, MA: Kluwer-Nijhoff. Hambleton, R. K., Swaminathan, H., & Rogers, H. J. (1991). Fundamentals of item response theory. Newburry Park, CA: SAGE. Hulin, C. L., Drasgow, F., & Parso

20、ns, C. K. (1983). Item response theory: Application to psychological measurement. Homewood, IL: Dow Jones-Irwin. Linn, R. L. (Ed.) (1989). Educational measurement (3rd ed.) New York: Macmillan. Lord, F. M. (1980). Applications of item response theory to practional testing problems. Hillsdale, NJ: La

21、wrence Erlbawn Associates. Lord, F. M., & Novick, M. R. (1968). Statistical theories of mental test scores. Reading, MA: Addison-Wesley. Masters, G. N. (1982). A Rasch model for partial credit scoring. Psychometrika, 47, 149-174.Mislery, R. J., & Bock, R. D. (1982). BILOG: Maximum likelihood item an

22、alysis and test scoring with logistic models for binary items. Chicago: International Educational Services.Rasch, G. (1960). Probabilistic models for some intelligence and attainment tests. Copenhagen: The Danish Institute for Educational Research. Richardson, M. W. (1936). The relationship between

23、difficulty and the differential validity of a test. Psychometrika, 1, 33-49.Suen, H. K. (1990). Principles of test theories. Hillsdale, NJ: Lawrence Erlbaum Associcites.Terman, L. M. (1916). The measurement of intelligence. Boston, MA: Houghton Mifflin. Thurstone, L. L. (1929). Theory of attitude me

24、asurement. Psychological Bulletin, 36, 222-241. Tucker, L. R. (1946). Maximum validity of a test with equivalent items. Psychometrika, 11, 1-13. Wainer, H., & Braun, H. I. (Ed.) (1988). Test validity. Hillsdale, NJ: Lawrence Erlbaum Associates. Wainer, H. et al. (1990). Computerized adaptive testing

25、: A primer. Hillsdale, NJ: Lawrence Erlbaum Associates. Weiss, D. J. (Ed.) (1980). Proceedings of the 1979 computerized adaptive testing conference. Minneapolis: University of Minnesota.Weiss, D. J. (Ed.) (1983). New horizons in testing: Latent trait test theory and computerized adaptive testing. Ne

26、w York: Academic. Wright, B. D., & Panchapakesan, N. (1969). A procedure for sample-free item analysis. Educational and Psychological Measurement, 29, 23-48.Wright, B. D., & Stone, M. H. (1979). Best test design. Chicago: MESA.Guilford,J.P.(1954).Psychometric methods. NewYork: McGraw-Hill.Hambleton,R.K.,&Swaminathan,H.(1985).Item response theory: Principlesandapplications.Boston:Kluwer.Millman,J.,&Arter,J.A.(1984).Issues in item banking.JournalofEducationalMeasurement,21,315-330.