衡量效度的方法有哪些:结合调研实操核验测验内容与结果的真实性

衡量效度的方法有哪些:结合调研实操核验测验内容与结果的真实性

上次期末做心理学调研作业,被导师当众追问衡量效度的方法有哪些时,我当场卡壳,那时候才发现自己一直把信度和效度混为一谈,忙活半个月做的问卷,从头到尾都没做过一次正规的效度检验。

最开始想偷懒,觉得问卷题目都是照着文献改的,内容看着贴合主题,就默认效度没问题,直接统计数据整理报告。作业初稿交上去,第一页就被导师批注了大大的红字,没有效度核验的调研数据,全部都是无效数据,根本不具备参考价值。

完全懵了。之前只机械记住效度是测量的真实性、准确性,却不知道落地到实操里,到底该用什么方式去衡量。

折腾好久才搞明白,最先上手的是内容效度检验。当时找了三位专业课的学长和一位授课老师,把问卷所有题目逐一拆分核对,让他们判断每一道题是否贴合大学生情绪内耗的调研主题、是否存在题意模糊、偏离研究核心的问题。全程没有固定公式,就是靠专业人员的主观评审,统计大家的一致认可率,删掉了三道关联性极低的题目,这是最基础、最好上手的效度衡量方式。

做完内容效度,依旧通不过审核。导师说主观评审不够严谨,必须补充量化的衡量方法。

结构效度是我花时间最久的一项。对着SPSS教程一点点摸索,先做KMO检验和巴特利特球形检验,确认数据适合做因子分析后,再提取公因子,对照问卷预设的维度,看题目是否都归到对应的因子下。最开始操作失误,没剔除无效数据,导致因子载荷混乱,题目和维度完全对不上,反复调试三四遍,才理顺了问卷的整体结构合理性。

之后又补了效标效度的核验。当时选取了学界通用的成熟情绪内耗量表作为效标,让同一批调研对象同时填写我的自制问卷和成熟量表,最后对比两组数据的相关系数。相关系数越高,就代表这份问卷的效标效度越好,测量出来的结果越贴合真实情况。

除了这些实操性强的方法,还简单核查了研究的内部效度和外部效度。排查了调研过程里的干扰变量,比如调研时间、填写环境对受访者作答的影响,规避人为偏差,保证研究内部的因果关系真实可信。同时调整了调研样本的范围,避免样本过于单一,让研究结果可以适配更多群体,保障基础的外部效度。

定稿那天晚上,对着电脑屏幕反复刷新数据分析页面,看着各项效度指标全部达标,指尖停在鼠标上,迟迟没有点保存。只觉得之前所有偷懒、敷衍的操作,全都是无用功。

了解更多百科知识请访问 百科