1.3.4 样本替换
数据质量是调查的生命,质量保证不仅要求有合理的样本设计和可靠的调查问卷,还必须对数据收集过程本身即调查实施环节制定一套严格的质量标准,并系统地监测每次调查过程,以保证调查环节能遵循规定的程序,达到要求的质量标准。2019年,中心在使用计算机辅助访问系统采集数据的基础上,进行了多维度的数据质量监控,通过将计算机辅助访问系统与质量监控系统链接,对实时回传的访问数据及相关的访问并行数据进行实时分析,实现全方位监测每次调查过程、有效核查每个样本数据、准确清理出现的异常数值,保证质量监控与实地访问工作相对同步,及时发现并指导访员纠正在调查中出现的各种错漏。
考虑到执行方式及受访对象特征,中心一般在项目的实时核查阶段采用全方位、多途径的数据质量监控手段,对调查中访问的样本进行全面、严格的审核,包括换样核查、电话核查、录音核查、数据核查、GPS核查、图片核查、重点核查(利用各项核查中异常样本交集与敏感数据缺失情况重点监测)等,全面排查并实时反馈访员的行为与数据的质量,从而保证每个调查样本的数据质量。同时也可以根据项目各自所具有的特点,对调查过程中特定的环节进行核查,或有针对性地对其中某些维度进行审核。
为保证2019年中国家庭金融调查样本的代表性及数据的科学性,中心在前期准备阶段进行了科学抽样,并要求调查员尽最大努力访问到被抽中的社区及样本户,质量监控人员对样本替换执行最严格审核,以最大限度地减轻随意更换样本对样本代表性造成的影响。
(1)换样规则
我们根据调查访问实地情况及调查项目要求,并参考往期调查中出现的各种样本接触情况做出预设,依据预设情景制定严格的样本替换规则,即可以分别针对受访户地址错误/地址不详/拆迁、空户、多次敲门无人应答、拒访、不符合访问条件及其他情况,制定相应的换样规则。对于追踪样本,当出现地址错误/地址不详/拆迁、空户、无人应答等情况时,必须经过中心后台联络、访员前端各种方式追寻无果后,方可申请换样;对于敲门无人应答、拒访两种情景,必须寻求当地社区或联络人协助入户,且经过六次敲门无人应答(其中一次在周末,两次在晚间)、三次拒访时(其中一次必须是在社区工作人员陪同下入户),方可申请换样。
(2)换样审核
在实地访问阶段,中心质控部门安排专人负责审核访员提交的每一个换样申请,严格查看访员每一次实地接触样本情况,包括样本访问失败原因、接触次数、每次接触时间等,根据接触情况判断样本是否仍有争取的可能性,以及是否达到申请换样的既定标准。具体流程如图1-1所示。
图1-1 样本替换具体流程