北京华美杰尔教育研究所（简称“研究所”）隶属于北京华美杰尔教育咨询中心，主要受政府、企业、学校的委托，承担各种考试的研发工作，提供教育与心理测量方面专业化、科学化的服务。研究所与国内外著名考试研发机构和学术组织在学术研究成果应用、考试项目开发等方面保持着良好的合作关系。
为了保证考试的科学性与权威性，在考试的每一个环节上，研究所都运用反映当前先进教育与心理测量理论与技术，严加把关，追求高的质量和水平。
首先，建立严格的命（审）题工作机制。对命题、审题人员资质要求严格；命（审）题按照命题、初审、会审、终审（敏感性审查）、校做等步骤依次进行。
其次，坚持预测。为了确保正式考试试题的质量，从而保证试卷能够稳定、有效、公平地测查旨在测查的心理特质，在正式考试之前，所有试题均需通过预测。
再次，严格保证主观性试题评分的客观与准确。具有阅卷资质的人员，须接受针对当次考试的阅卷培训并通过“试评”，方可参加阅卷工作。阅卷采用多人独立评分，得分差距大于规定值提交专家组复评的方法进行；阅卷过程专家实时监控，并通过多种方式考察阅卷人员评分的客观性和一致性。
研究所尤其重视保证考试的公平性。
在证书考试的开发和实施过程中，研究所一直坚持了对考试分数的统计等值处理。对于证书考试来说，如果证书授予标准缺乏稳定性和公平性，如果对使用这一份试卷的人一个标准，对使用另一份试卷的人又一个标准，那么，不仅会大大影响试卷的信度和效度，更会使考生受到不公平的对待。统计等值处理保证了不同试卷的使用者被公平地对待。在等值设计方面，我们综合采用了共同组等值、共同题等值和分半组合的混合设计。
研究所也利用项目功能差异（Differential Item Functioning，简称DIF）理论，对不同的考生群体（如不同的性别、地域、民族、社会经济地位的考生群体）进行题目反应分析，以避免题目不利于某一群体。这保证了使用同一份试卷但隶属于不同群体的考生被公平地对待。分析时，我们一般采用基于经典测验理论的MH方法（Mantel-Haenszel Method)、标准化方法(Standardized Distractor Analysis Method)、SIBTEST方法和基于项目反应理论（IRT）的Raju面积法（Raju’s Area Measures）、Lord卡方（Lord’s chi-square）检验方法和似然比检验(Likelihood Ratio Test) 方法。
另外，研究所建立了基于IRT理论的符合科学化标准的题库，开发了相应的计算机自动生成试卷系统，改变了传统的逐份命题方式，并且为实行计算机化考试打下了基础。
|