效度即测量的正确性,指测验或其他测量工具确实能够测得其所欲测量的构念之程度。测量的效度越高,表示测量的结果越能显示其所欲测量内容的真正特征。一个测量若无效度,则无论其具有其他任何要件,也无法发挥其测量功能。因此,无论选用标准测验或自行编制测量工具,都必须审慎评估其效度,详细说明效度的证据。测量的效度通常以测验分数与其所欲测量的特质之间的相关系数表示,与信度系数一样,其数值大小反映程度上的不同,而非全有与全无的差别,故效度是相对的而非绝对的[106]。从内容来看,效度的评估有三种不同的模式,从测量的内容与范围来着手的内容效度;从外在标准适配程度的评估模式所发展出的效标关联效度;以及强调概念含义的构念效度。
内容效度反映测量工具本身内容范围与广度的适合程度。本研究各项变量具体指标的提出,都经过了适当的界定和发展过程,包括从概念范畴的确定、以往研究所提出的衡量尺度的综合、符合欠发达地区高等教育科学发展战略成效的变量建构到通过实地调研实现的调查量表修订等过程。本研究借鉴了前人研究成果,并请一些学者对研究量表进行了评价,并根据他们的意见对量表进行微调;同时,在调研的过程中,根据不同高校相关部分负责人对此量表提出的意见和建议,对调查量表进行了细小的修改。因此,本研究所提出的各项变量以及相应的指标,应该具有相当的内容效度。
效标关联效度又称实证效度或统计效度,是以测验分数和特定效标(Validity criterion)之间的相关系数,表示测量工具有效性的高低。效标关联效度最关键的问题在于效标的选用。作为测量分数有效性与意义度的参照标准,效标必须是能够反映测量分数内涵与特质的独立测量,同时也必须是为社会大众或一般研究者接受的能够具体反映某项特定内涵的指标。本章的相关效标都具有相关理论文献支持,其合理性在前文已有大量叙述。在前人很少涉及这个领域的情况下,几乎没有现成的评价标准,需要通过实证检验来验证效度。
构念效度是指测量工具能测得一个抽象概念或特质的程度。构念效度的检验,必须建立在特定的理论基础上,透过理论的澄清,引导出关于潜在特质或行为表现的基本假设,并以实证的方法,检验测量结构是否符合理论假设的内涵。因子分析是检验此效度的常用方法[104]。前文已经对问卷的结构设置、各变量的结构进行了较为清晰的描述,因而该量表应具有相当的构念效度。