No.966 如何描述调查工具的信度和效度?
若使用现存的工具,研究者需要描述过去使用该工具得出记录的信度和效度。这意味着,是否有人根据这个工具的测量结果得出了有意义的和有用的推论。效度的三种传统形式是内容效度(题目是否测试了他们想要测试的内容)、预测效度或一致效度(即记录是否预示了一个标准测量?结果是否与别的结果相关)以及结构效度(各项测试题目是否测到了假设的结构或概念体系)。在近来的许多研究中,结构效度也包括了测量的结果是否能为有用的目标服务以及运用后是否有肯定的结果。同时,还要讨论过去使用该工具所得到的记录是否具有信度。查看作者是否报告了测量的内部一致性(如各项测量题的一致性反应是否大于冲突性反应)和测试与再测之间的关联性(如当第二次使用工具时,所得记录是否与第一次一致)。还要确定测试的实施和记录是否协调(如错误是由实施还是记录的粗心造成的)。当研究者在研究中改进或组合了一个调查工具时,如果原有的效度或信度不能支持新的工具,那么在数据分析过程中需重建工具的信度和效度。(摘自《研究设计与写作指导:定性、定量与混合研究的路径》,作者:约翰·W·克雷斯威尔,重庆大学出版社,2007年1月第1版)