張志芳 MOLTS 研究室
www.ezpass.tw
www.molts.tw

2008年10月5日 星期日

題庫的建立

2008年10月5日 星期日

題庫的建立(Item Banking)~~~~閱讀擇要

        本文主要討論題庫的優點及缺點

以提供有意在學區建立題庫的決策者參考。

許多學區使用標準測驗來評量學業成就。

這些學區每年需重新編制測驗考卷。

不幸地,建立新考卷須消耗大量的人力、物力、和時間,

這包括撰寫適合的題幹、適當的困難度、合適的鑑別度。

而題庫按學科、教學水準、教學測量目標及試題特質來編碼建立。

        題庫的優點包括:

1.可開發測驗考卷。

2.使用題目反應理論建立的題庫,

   可使多元考試成績放在同一量尺來比較。

3.題庫能儲存及提取有需要的試題。

4.題庫的使用能節省相當的時間及精力。

5.題庫的試題能表達不同程度的相對困難度,

   而且能準確提供需要評量的測量特質。

6.試題的校準量尺位置能指示學生相對特別困難的課目。

        題庫的缺點及限制在於,

題庫及試題反應理論不能解決所有的評量問題,

對任何測驗考卷內容及結構保持持續及良好的研判才是重要的環節。

只有高品質的題目才能加入題庫,

而購置的題庫需與課程及技術品質的配合。

發展題庫需充足的準備及計劃,

許多試題須經校準、連結、等化及組織等過程才能進入題庫。

題庫建立後,發展測驗考卷過程中所付出的時間,

金錢及精力都可以減輕。

試題反應理論在測驗上的應用還在持續增加中。

        發展題庫的主要步驟要有周詳計劃才能成功。這包括:

1.)人員準備、如何開始、如何完成。

2.)每位參與人員需對題庫及試題反應理論有充分的了解及能力,

    並能對計劃進行解釋及討論。

3.)機構可於內部舉辦工作坊、會前會議、討論會、研討會等來訓練員工。

4.)資深專業人員能回答及解決建立題庫的技術問題。

5.)電腦專家們能修改電腦程式,建立資料庫系統及操作軟體。

6.)假如有置換或購置題庫時,需要有專業了解題庫系統的人員,

    並需評估試題的技術品質、課程配合、單維度、潛力偏差、...等等。

7.)資訊工程人員在建立題庫過程中,能檢測文件及程式,

    並決定何種程式需要發展及修改。

8.)在建立題庫中盡可能預估未來五年的需求。

        題庫的運作需行政程序及資詢工程師互相配合。

資詢工程師的工作包括

操控資料庫及調配現存電腦系統。

在每一次測驗產生需校準及等化的平衡複本及能力等級等問題時,

他們可於資料庫中校準每次的測驗、等化、和儲存參數。

行政人員協調測驗活動能順利完成。

在計劃程序中,

細目表能確認在預備測驗考卷中使用何種測驗及錨定試題。

行政人員工作需編輯應考須知、安排考試事務、

收集答案、準備輸入電腦的資料。

        題庫的基本功能是儲存及抽提試題。

有兩種方式可儲存更新題庫。

大規模合併購買的試題資料間須經等化才能儲存於題庫。

小規模合併則需應試者測試不同程度的錨定試題。

這些錨定試題只需放置於規則的考試中,

便能在自然的情況下測試。

        在台灣實務上,題庫是否能建立成功,

最高決策當局才是重要因素,

因為研發單位要願意投入相當的財力及人力,

並對民眾推廣現代測驗理論,建立試題參數量尺化的觀念,

題庫的使用才能真正走入民眾心中。

閱讀文章:Item Banking

ERIC Identifier: ED423310

Publication Date: 1998-08-00

Author: Rudner, Lawrence

Source: ERIC Clearinghouse on Assessment and Evaluation Washington DC.

於關山 21:00

沒有留言: