网络调查信效度怎么保证?
网络调查的信效度,不是靠“数据跑出来好看”解决的,而是从问卷设计阶段就要控制。信度指结果稳定可靠,效度指测得准不准。两者保证思路不同,但都贯穿设计、投放、清洗、检验四个环节。
信度怎么保证
信度关注同一构念的多个题目是否指向一致。
• 每个维度多设几题:单一题目无法计算内部一致性,建议每个维度设3—5题,题目之间表述有差异但测量同一概念。
• 避免题目相互矛盾:正向题与反向题要合理搭配,反向题可用于识别随意作答,但比例不宜过高,否则容易误伤认真作答者。
• 预测试先跑一次:正式投放前用30份左右数据做Cronbach's α检验,α系数低于0.7的维度,优先检查并删除与总分相关性低的题项。
• 控制填写环境:设置答题时长下限、必答项、同一设备限填一次,减少随意作答带来的随机误差。
效度怎么保证
效度关注问卷是否真的测到了研究要测的内容。
• 题目来源要有依据:核心量表优先采用成熟量表,或参考已有文献改编,避免完全自创题目。
• 请专家审阅:邀请2—3位相关领域老师或从业者评估题目与研究维度的匹配度,删除偏离主题的题项,这一步叫内容效度检验。
• 做小范围试填:让目标人群试答,确认题目理解无歧义,避免“一问多答”“双重否定”等表述问题。
• 用数据验证结构:正式数据回收后做KMO检验和Bartlett球形检验,KMO大于0.7、Bartlett显著,说明适合做因子分析;再用探索性因子分析看题目是否按预设维度归类。
数据清洗不能跳过
再好的问卷,样本不干净也会拉低信效度。回收后建议删除三类无效问卷:填写时长明显过短、所有选项高度一致、逻辑题前后矛盾。清洗后再跑检验,结果通常更稳定。
常见误区
• 信效度不达标就盲目删题,越删越差,应先回到题目表述和维度设计找原因;
• 用非目标人群凑样本,会导致因子结构混乱;
• 只报α系数,不说明检验工具和样本情况,答辩或评审时容易被质疑。
实际操作中,建议用SPSS或SPSSAU完成检验,并在论文方法部分写明检验工具、样本量、α系数和KMO值,让结论可追溯。
以上内容来自我要调查网:
1、我要调查网是盖洛特数据研究股份公司自主研发的在线调查平台。
2、是专业市场调查与互联网科技的结合。
3、弹指之间,在手指、手机、电脑间完成调查。