3.1.2 调查样本的信度和效度分析
进行问卷式调查研究的统计分析前,应考评问卷的信度和效度,以确保研究结果的可靠性和准确性。
1.问卷信度和效度分析的统计学方法
信度(reliability):主要评价量表的精确性、稳定性和一致性,即测量过程中随机误差造成的测定值的变异程度的大小。常用的信度指标有重测信度、复本信度、折半信度和评价者间信度等。
重测信度(test-retest reliability):是指同一被试者、同一个测验在不同的时间测量两次所得结果的相关系数,反映测验跨越时间的稳定性和一致性,相关程度高,表示前后测量一致性高,稳定性好。一般而言,重测信度系数能达到0.70以上即可。
复本信度(paralle-l forms reliability):是以两个内容等值但题目不同的测验(复本)来测量同一群体所求得的被试者在两个测验上得分的相关系数。复本信度的高低取决于测验的内容取样问题,其高低反映了两个互为复本的测验等价程度,能够避免由于重测带来的记忆效应和练习效应,而且可用于长期追踪研究前后测量,减少了作弊的可能性。
折半信度(split-half reliability):属于内在一致性系数,是测量内部一致性最简单的方法。量表中的项目被分成两半并计算测量结果的相关系数,这两半相关系数高,则说明量表内部一致性高。量表的项目可按序号的奇、偶性分为两半,也可以随机地组合。
如果采用一个问卷由不同的评价者在同一群体中进行测量,从而计算不同评价者间的一致性,则称为评价者间信度,误差主要来源于调查员对问卷理解的差异及其对研究对象的影响,如果量表是自评而不是他评,则不需要计算评价者间的一致性。
课题组采用EpiData 3.0建立临港制造业用户问卷的数据库,并进行数据核对和录入,数据录入计算机后导入SPSS 17.0软件后进行统计分析。资料分析前先对问卷涉及的各个维度进行赋分,以中位数作为集中趋势指标,计算Cronbach's α系数考评问卷各维度的内在信度;以Spearman相关系数计算前后两次测量间的相关性,分析问卷的重测信度;采用探索性因子分析,分析问卷的结构效度;采用Pearson相关和Spearman相关分析,研究问卷10个维度评分与总评分之间的相关性,判定标准关联效度。
2.问卷的信度分析
内在信度的数据来源于所有调查对象的结果,主要计算Cronbach's α系数。重测信度的考评是在预调查的浙江杭州湾新区、宁波北仑区以及温州、台州等地随机抽取50家制造企业,对其在1个月后通过海商网等电子商务平台进行同一份问卷的第2次调查。为了保证两次调查的个体配对,均采取了实名调查。
计算Cronbach's α系数判断问卷的内在信度,取值范围是0.504~0.804。50份问卷经过配对重复测量,主要测量指标的Spearman相关系数均>0.7,表明两次测量的相关性良好(表3-1)。
表3-1 临港制造业用户信息服务需求调查问卷的内在信度和重测信度评价
3.问卷的效度分析
效度分析分为内容效度、结构效度和标准关联效度,其中内容效度的评价主要通过专家主观评价的方法;问卷的结构效度应用探索性因子分析;标准关联效度通过相关法测量量表与效标之间的相关性。效度分析的数据也来源于所有调查对象的结果。
(1)内容效度考核。调查问卷采用自制的“制造企业电子商务应用及信息服务需求调查问卷”,内容效度的考评已在研究设计阶段进行并顺利完成。课题组通过多次讨论,对问卷的题量设置、题项数量、类型和项目领域、内容划分的科学性与合理性进行完善,并用通俗易懂的语言来表达整个问卷。
(2)结构效度考核。将问卷中信度考核中涉及倾向因素、强化因素和促成因素的37个条目进行探索性因子分析,计算结果显示KMO(Kaiser-Meyer-Olkin)检验统计量的值为0.812, Bartlett's球形检验P<0.001,因子分析显示可行。因子分析中获得10个公因子,特征根均大于1,与问卷中设定的10个维度基本符合,解释了问卷结构总变异的81.17%。10个维度进一步提取公因子后,获得4个因子负荷:①倾向因子,包括您所在企业最需要的信息、您所在企业目前采用的信息系统、您所在企业支持跨企业的商务合作和您所在的企业采用的CA认证来自于哪家公司;②强化因子,包括企业面向供应商并支持在线采购活动、在线与代理商共享订购产品的库存量和企业最需要的物流服务信息;③促成因子,包括在线与供应商共享不断更新的计划信息和企业通常需要用到哪些企业的物流服务;④媒体因子,为独立的通过哪些途径获得物流服务商的信息因素。以上结果基本符合预先构建的倾向因素、强化因素和促成因素理论模型;媒体暴露因素原属于促成因素的一部分,而此次研究通过结构效度的评价发现,该因子独立于预先设定的促成因素(如表3-2所示)。
表3-2 临港制造业用户信息服务需求调查问卷的结构效度评价