TOEFL試題設計過程揭祕

才智咖 人氣:2.11W

 STEP1 遴選開發者

TOEFL試題設計過程揭祕

TOEFL的考生來自全球,因此ETS在選擇試題開發者時不僅考察測試專家的英語教學能力,也考慮每一組開發者都具有多元的國際化背景。這個環節中,開發者候選人需要完成一個樣本,以供評選。

STEP2 試題開發

開發者遵循詳細的指導方針設計兩方面的內容:

1)試題刺激:閱讀和聽力材料;

2)試題的問題部分。

試題設計基於以下原則:

1)試題清楚,連貫,難度適中,適用於全球文化。

2)不需要任何背景知識即可完成試題刺激部分和問題部分

3)遵循ETS公平指導方針

4)考試內容包含足夠可測試內容

 STEP3 試題審閱

試題開發之後,將有4名以上測試專家審閱每一個試題刺激和相關問題,測試專家提出修改意見或者推翻開發的試題,只有為該試題刺激負責的4名以上專家都判定試題合格,才能投入使用。TOEFL的試題審閱主要包括3個階段:內容審閱,公平審閱和編輯審閱,具體的審閱過程是:第一輪內容審閱-第二輪內容審閱-公平性審閱-編輯審閱-第三輪內容審閱-編輯審閱-第四輪內容審閱。每一個審閱者在進入下一階段之前需要同意上一階段的試題並簽字退出上一階段。

 STEP3.1 內容審閱

內容審閱中,對於試題刺激文字,測試專家遵循以下2個原則:

1)測試中的語言使用清晰,不含複雜邏輯

2)測試內容無須考生具備專業背景知識

內容審閱中,對於單選/多選試題,測試專家遵循以下4個原則:

1)考查點適當

2)答案單一性

3)語言清晰簡明

4)干擾選項吸引力

內容審閱中,對於口語和寫作試題,測試專家遵循以下2個原則:

1)語言無歧義,期待答案公平並可以判分

2)難度與其他試題可做比較

STEP3.2 公平審閱

ETS公平指導方針在2002年,2007年和2009年釋出過3次。所謂公平,指的是測試的效度,核心原則是隻有與測試建構相關的因素才能影響考生的成績,而測試的建構就是測試中諸如知識,技巧和能力的考查點。公平審閱的主要目的是減少與測試的建構或者說測試考差點無關的內容可能對於考生帶來的影響。

 STEP3.3 編輯審閱

所有試題最後需要符合"ETS Style",統一風格做最後檢查。

STEP4 試題整合

上一個階段測試專家給出了單個的試題刺激以及相關問題,這個階段需要對不同問題整合成為一套試題。組合的過程中,我們需要考慮一系列變數,包括問題型別,問題難度,話題選擇等等,以保證TOEFL iBT和PBT等其他形式之間成績可以轉換,也保證不同場測試間的難度基本相同,這也有利於測試的常態分佈。

 STEP5 試題實驗

閱讀和聽力

在標準化考試中,坦率來說,並不是每一套試題都進行試題實驗,用於實驗的部分和正常的計分部分是一致的,考生無法識別,請注意,用於實驗的試題和用於常態分佈(也就是我們常說的加試)的試題是完全不一樣的,我們的加試是為了使得多次考試之間的成績能夠轉換,並不是測試未來的試題。用於實驗的試題如果設計者發現有缺陷將進行修改或者刪去。這對於試題開發者來說,也幫助他們更新對於什麼是一個好試題的概念。

 口語和寫作

口語和寫作每一個部分都包含一定量的實驗性試題,閱卷官進行打分,試題專家稽核考生回答,決定題目是否能夠有效引出考生能力。

 STEP6 正式測試