影响测验效度的因素很多，在编制测验或选择标准化测验时，都应该考虑到这些因素，以免影响测验结果的有效性。
一、测验本身的因素
1．测题中所用词汇和句型不能过于困难
测题中的词汇和句型应适于被试的文化水平，例如：小学低年级的测题中若有学生未学过的词汇，可以用图画或拼音字母代替，以使被试都能顺利地看懂题目，否则就成了阅读能力测验，而无法测量到所欲测量的学习结果。这也就是编制低年龄儿童智力测验时要采用非文字测验的原因所在。
2．试题的意思应该清楚
题意含糊，容易产生歧义，以致被试产生误解也会降低测验的效度。
3．所编制的测题应该适合所要测量的学习结果
如果所要测量的是数学推理能力，但测题却是过去做过的练习，则所测量到的是记忆力而不是数学推理能力，这就降低了测验的效度。
4．测题中不能提供额外线索
若测题为被试提供了额外线索，就无法确认测题是否真正测量到了所欲测量的学习结果。
5．测题的编制要合理
一般地，测题以由易到难的顺序排列。如果难题在前，水平较低的学生就可能由于受挫而影响进一步答题的积极性，并且，学生可能花很多时间去解答这些题目，而没时间做后面较容易的题目，从而无法测出学生的真实水平，降低测验的效度。
6．选择题的正确答案不能有明显的组型
如果测验正确答案的位置有明显的规律，学生有可能发现规律答对一些原本较难的题目，从而影响测验结果的效度。
7．测题数目
增加测题的数目（即增加测验长度）通常可以提高测验的信度，而效度系数的最大值是信度系数的平方根（即信度指数），因此，增加测题数目也能提高测验的效度。
8．测题的难度要适当
(1)常模参照测验 常模参照测验是通过比较被试得分间的差异，确定某一特定个体在团体中的相对位置，其测题平均难度应在0.5左右，并有适当的难度分布，测题太难或太易都无法区分学生的优劣，从而降低测验的效度。
(2)标准参照测验 它是用来描写教学后学生所能完成的各项工作的，每个研究者当然希望所有学生都能完成各项工作，所以标准参照测验并不强调测验分数间的差异，也就不需要区分学生的优劣，这时的测题难度就应该与教学目标的要求相一致。
二、测验实施和计分方面
测验。隋境，如场地的布置、材料的准备等都会影响到测验的效度，此外，在实施测验的过程中，是否遵照测验使用手册的各项规定进行标准化的施测，指导语是否已将答题方式说明清楚，是否按要求进行时间限制等，也影响到测验的效度。如果没有按照标准化的程序进行施测和客观的评分，就必然会使测验效度降低。
三、被试的主观方面
被试的兴趣、动机、情绪、态度和身体健康状况以及是否充分合作与尽力而为
等，都会影响到测验结果的可靠性和正确性，即效度和信度。
四、进行效度化所依据的有关准则
准则关联效度是用测验分数与准则间的相关表示的。两变量间的最大相关小于等于两变量信度之积的平方根。这表明效度系数值受到三个方面的影响，即测验的信度、准则变量测量的信度、预测变量与准则变量间真正的相关程度，所以，准则的选择一定要慎重。
