● 摘要
旧四级考试在进行了将近二十年的时候于2006年改成了新题型。信度、效度是评判试卷优劣的两大重要指标，像大学英语四级这样全国范围的考试很有必要进行不同层面授试群体的试卷信度、效度分析，以确定试卷对不同水平考生的合适程度。本研究旨在确定新四级是否更为可靠、有效以及它的有效性是如何体现的。 北京物资学院的434名大二学生以及北京航空航天大学和北京物资学院的30名教师参与了此项研究。本研究采用了定量和定性两种方法，收集了434名学生的四次考试分数和三次问卷调查的数据。先后有30名教师、60名学生和120名学生参与了问卷调查。所有的数据均通过SPSS 13.0进行统计分析。还举行了一次15个学生参与的回顾性访谈以探索学生的答题策略。所用材料为2006年6月新四级真题、新四级样题、2004年8月托福考试中的阅读题以及上述学生的期末考试题。 通过平行卷信度和再测信度研究，我们发现新四级中新增题型的信度总体来说不低于旧题型。但是，增加了新题型的新四级考试测量了考生更广泛的语言能力，尤其是语言产出能力和语言应用能力。表面效度、内容效度、反映效度、共时效度和结构效度的证据表明新四级在内容上更为全面、真实，在交际语言能力和语言应用能力的反映上更为有效。新四级对学生采用的策略能力也提出了更高的要求。然而，新四级的答题时间比较紧迫、答题指令和监考细则不够清晰。新增题型效度较高，其中听写最为有效。新四级还能在一定程度上反映出学生的日常学习习惯，听力部分尤为突出，这有利于发掘出分数更深层次的含义。因此，我们认为总体上说，新四级和旧四级信度相当，新四级较之旧四级更为有效，它的效度多体现在新增题型上。新四级能更好地反映学生真实的语言能力，更符合现代语言教学和测试理论。