CATI项目执行规范.docx
《CATI项目执行规范.docx》由会员分享，可在线阅读，更多相关《CATI项目执行规范.docx（15页珍藏版）》请在冰豆网上搜索。
CATI项目执行规范
访问执行标准——电脑辅助访问（CATI）工程
.适用范围
本标准适用于使用电脑辅助访问（ComputerAssistedTelephoneInterviews,简称CATI,下同）的工程,以保证工程执行质量.普通访问工程可参照使用.
2.根本概念
CATI,是应用计算机系统,向自动生成或预置的号码拨号;然后由访问员读出计算机屏幕显示的问卷题目,通过询问调查对象,并直接将被访者的答案输入到电
脑里,结束访问后直接导出数据.有别于传统访问工程,CATI工程的执行过程中某些步骤的含义也有所不同:
（）抽样及号码生成:
通常指利用预设的程序,由计算机自动生成随机的号码,或在现有的号码库里随机或配额抽样,生成访问所需的号码.
（2）编程与问卷生成:
CATI访问开始前,需要由程序员将问卷转化为可以由CATI系统识别的代码,要求将问卷中的题目文字,备选项,逻辑跳转等内容设置好.另外,在大局部的CATI系统中,编程工作还包含配额的控制,数据记录的导出等内容.
（3）问卷出错率:
指复核确认出错问卷数占复核问卷总数的比例.所谓出错问卷数指访问员在同一份问卷发生一处或以上未按要求操作但不至于废卷的错误,包括没按题目原话读题,诱导/提示被访者或归纳被访者的答案.
3工程执行质量控制的根本要求
3.工程组成员岗位设置与职责
3..岗位设置
一般而言,一个CATI工程组的工作人员应设置但不限于总督导,现场访问督导,质量控制（QC）督导,程序员,IT维护员和访问员等岗位,根据工程需要可酌情增设
2相应的岗位,并确定各岗位具体人数.主要成员的职责如下:
3..2各督导岗位人员职责
3...总督导
（）负责整个工程各个环节的组织和协调;
（2）负责与研究部的沟通及协调,针对各地遇到的困难,向研究员提出建议和解决方法;
（3）组织工程内部培训会;
（4）向各地督导了解每天进度,配额,问卷质量,并汇总给研究员/CATI经理;
（5）负责申请抽号/抽样,并分配给各地督导,或将客户提供的名单分配给各地督导;
（6）工作职责还包括访问督导负责的其他各项工作.
（7）使用代理的工程,需要与代理签定合同,跟进代理进度,监控代理问卷质量,出具结算单及填写代理评估表.
3...2访问督导
（）负责组织,监控本城市工程的现场执行,各环节的协调,处理现场突发事件;
（2）负责与总督导的沟通与协调;
（3）做编制执行本钱预算;
（4）组织并主持工程培训,包括问卷讲解,模拟,试访和小结;
（5）检测CATI程序,并在操作系统上建立工程,导入已抽取的号码;
（6）对抽样框的质量作出及时反响,问题严重时及时发出警示;
（7）负责监听,巡场,控制配额,进度及组织定期的访问员班前/班后小结会议;
（8）跟进访问员出勤情况,与兼职管理沟通需要补充的访问员人数;
（9）审卷,检查开放题答案,核对数据,移交问卷和提交原始数据;
（0）跟进QC复核问题,包括删除出错/废卷数据,与访问员小结及安排补问;
（）根据研究部和/或数据录入/处理部门的反响进行查错,改错和安排补问;
（2）针对工程中出现的问题向总督导给出建议和解决方案;
（3）工程结束后,对工程相关资料进行归档,包括整理录音并刻录光盘;
（4）工程结束后,对访问员进行评估;
（5）劳务费结算.
3...4QC总督导/QC督导
（）参加工程内部培训会,掌握工程难点重点,对可能出现的问题向研究部提出建议或意见;
（2）培训复核员,确保其掌握现场及录音监听要点;
（3）负责催促监督复核员的现场及录音的监听;
（4）如发现任何质量问题,负责与访问督导联系.如发现的问题严重影响工程质量的时,在现场有权暂停有问题访问员的访问,并即时知会总督导和研究员处理后续事项;
（5）按时编写复核报告并发送相关部门;
（6）工程结束后,对工程相关资料进行归档.
3...5程序员
（）按照工程的要求,将最终问卷的内容具体实现到CATI程序中,实现问卷目的自动跳转,逻辑关系控制和数据的自动记录;
（2）在程序中实现工程要求的配额控制;
（3）按照问卷确认的Column号编写数据导出程序;
（4）将完成的程序打包发给执行部门;
（5）协助工程督导在完成访问后导出最终数据.
（6）工程结束后,对工程相关资料进行归档.
3...6IT维护人员
（）确保CATI运作所需的计算机设备,网络设备正常运转;
（2）确保CATI运作所需的话务设备,录音设备正常运转;
（3）确保CATI运作涉及到的访问数据,录音数据及时备份.
3..3访问员与督导配备
（）所有参加工程的访问员,应该参加过不低于6小时的根底培训,并通过模拟,上机试访和考核;
（2）督导与访问员的比例应不低于:
20.
3.2号码拨打原那么
（）尽量应用电脑自动拨号,以减少访问员手工拨号偏差;
（2）拨通后振铃五至六次仍无人接听后才挂断（如属机号码或错误号码,可立即挂断）;
（3）对于"无人接听","忙线"或需"预约"者,应至少接触三次;一小时后接触第二次,第二天接触第三次;接触三次仍未能成功访问才予放弃.
3.3录音
（）CATI中心应配置与访问操作系统兼容的访问录音系统（独立或与访问操作系统配套）,可对任一访问通道进行全程同步录音;
（2）即时对所有访问过程进行录音存储,存储信息包括但不限于:
通道编号,访问日期及具体时间,访问长度,拨打的号码以及整个访问过程的对话录音等;
（3）为防止硬盘突然损坏丧失录音,录音系统应具备同步备份录音功能.
（4）为防止录音系统故障,在每天的访问过程中应设专人检查录音是否正常（以及录音硬盘是否被写满）,如有故障应立即排除.如不能及时排除故障,应
5立即通知相关人员.停止使用该录音通道,防止访问无法录音而导致不必要的损失.
3.4监听
监听的原那么是:
（）即时对任一访问通道进行监听;
（2）确保每个访问员的问卷都被监听到,并通过操作系统同步监看其读题和答题（录入答案）情况;
（3）发现问题后,督导应及时向访问员指出,并对普遍性问题向所有访问员进行强调.
3.4.监听的根本要求
在一个CATI工程里,访问督导和QC督导都会进行监听.前者的监听重点在于了解访问员的操作标准,技巧,有哪些方面需要辅导,纠正;后者的监听重点在于访问质
量.虽然两个岗位的督导监听重点有所区别,但以下根本要求带有共性,可参照执行.
3.4..访问监听比例
（）如无特殊要求,一般工程可按0%的现场监听和0%的录音监听比例进行.而且所有监听比例均以成功访问比例为基数计算,不是以工程时间为基数.如工程方案书有额外要求者,从其要求.
（2）监听样本尽量在执行期内每天均匀分布,全程监听数量不得低于监听样本的5%;
（3）在工程前期（例如样本量的30%）,监听督导必须保证监听或复核到每个访问员至少一份成功问卷,并针对具体情况（例如出错）扩大监听比例;
（4）当同一访问员的问卷出错率到达30%或以上时,那么必须增加对该访问员的监听量或录音复核量,比例不能低于50%.
3.4..2QC监听比例
对访问员的现场及录音监听比例是20～30%,复核工作可由复核员进行.而对于复核员监听后的样本,QC督导还应进行再次复核,以抽查复核员的工作是否按标准进行,复核比例为:
（）样本量2500时,监听比例至少为被复核样本量的3%;
（4）样本量≥5000时,监听比例至少为被复核样本量的2%;
（5）样本量≥0000时,监听比例至少为被复核样本量的%.
3.4..3监听内容监听内容包括但不限于:
（）访问员对问卷的熟悉程度,是否能清晰读题目及与被访者沟通是否顺畅;
（2）访问员是否有礼貌,是否有耐心解答被访者疑问,解答方式是否符合工程要求或公司要求;
（3）访问员是否能用流利的普通话或所需当地方言做访问;
（4）访问员的开场白（介绍公司及访问目时）是否符合公司或问卷的要求;
（5）被访者身份是否真实;
（6）访问员是否按原题目读出;
（7）访问员是否有跳题,漏问和多问等情况;
（8）纸质问卷的循环题是否从随机打勾处开始提问;
（9）访问员的单项选择和复选题是否按问卷要求确认选项,半封闭复选题是否按要求追问（单项选择题读完所有选项后让被访者作答,复选题对选项应逐一读出确认而不能连读）;
（0）访问员的开放题是否有按要求操作（一次提问,两次追问,先广度后深度,原话记录）;
（）访问时是否有中途换被访者（除特殊工程外）;
（2）访问过程是否有诱导情况或帮被访者肯定答案;
（3）访问过程中访问员是否有误点击选项的情况;
（4）访问对象是否存在家庭住户成员以外的情况（针对一般RDD抽样工程）;
（5）其它（视工程具体要求而定）.
监听结果处理方法如督导在监听时发现出错情况时,其处理方法是:
（）马上通知工程督导或值班督导,并把情况详细记录在监听报告里;
（2）当监听督导发现作弊情况时须回收问卷作废处理并让工程督导删除数据,且把情况详细记录在监听报告里;
（3）针对有问题的访问员,监听督导只面对工程督导,由工程督导听录音;假设访问员不服从处理结果,必须在工程督导的陪同下与监听督导进行再一次的核对工作;结果的仲裁由监听督导根据监听结果鉴定处理;
（4）监听督导确认作弊的访问员,那么通知工程督导,由工程督导对访问员进行处理或停止其在该工程的访问工作.
3.4.3监听结果处理标准针对监听中发现并确认的情况,判定标准及处理措施是:
序号相应情况结果判定处理措施
没有访问机主本人/由他人代答/中途转换被访者等作弊问卷作废.
2被访者不符合甄别条件（包括RDD工程抽中非家庭的样本仍继续访问）/甄别问卷诱导等作弊问卷作废.
3严重漏问/成心诱导/严重跳问等作弊问卷作废.
4不是成心作弊的漏问/漏追问/没出错如能补问那么作有效样本;但假设经警告两次后有确认模糊答案/对问题理解和解释偏差等仍出错那么当作弊处理,问卷作废.
5没有按培训要求的访问技巧提问/语气不礼貌/没有耐心/和被访者闲聊等出错如能补问那么作有效样本;但假设经警告两次后仍出错那么当作弊处理,问卷作废.对该访问员进行再次培训,仍然无效那么更换访问员
6由于误操作而导致的错选出错能补问那么作有效样本;但假设经警告两次后仍出错那么当作弊处理,问卷作废.
6其它按工程具体要求处理
4工程运作
4.工程建立阶段
4..收到方案书/问卷
收到工程方案书后,马上组建CATI工程组.由CATI经理指定工程总督导及其组员.总督导要写出初步的执行方案安排,把方案书及问卷发给相关执行督导,程序员以及QC,编码和数据处理/分析入员.各位工程督导应尽快详细分析方案书内容:
工程背景,样本条件,问卷长度,访问周期,涉及城市,访问时间（白天/晚上/全天）等,做好准备.
4..2试访
为了解问卷难度,访问长度,发生率,收到问卷后应进行试访,以便合理安排席位和访问员,和更好地执行工程.
（）可使用研究部提供的问卷初,寻找真实的被访者进行试访;
（2）试访时对每一局部的时长（开场白/甄别/主体/背景）,试访中的遇到的问题,困难作好记录.
（3）编写试访报告.内容包括问卷各局部时长,问卷逻辑和潜在问题及建议,预计成功率和建议等.总督导及时把试访报告提交研究部,必要时也提交给CATI经理.
4..3准备访问员
（）工程督导根据试访的得出的发生率,问卷长度等因素,推算合理的席位产能,制定席位安排方案;一般而言,工程开始的前23天（属访问员熟悉问卷的过程）和工程结束前2天（有配额限制）产量较低;
（2）通过试访结果和访问周期测算所需访问员人数,再与组长讨论后制定合理的访问员需求方案,防止访问员资源浪费或紧缺;
（3）向访问员管理小组提出访问员需求方案;
（4）访问员管理小组根据需求方案在现有合格访问员名单中（之前应通过访问员根底培训,模拟访问及考核）,选取适宜的访问员进行通知,询问其在工程执行期间是否可以参与工程;
（5）为保证访问质量,参与工程的新访问员比例应该控制在40%以下.
4..4抽样
在工程正式执行前的3~5天,需要完成抽样工作.总督导先要确定使用哪种抽样方法,根据工程方案书的要求,了解工程是使用随机抽取号码,客户名单,Panel名单还是黄页簿.
4..4.随机抽取号码面向普通消费者的BToC工程,一般采用分层随机抽样法（RDDRandomDigitDialing抽样法）.方法是（以8位数的号码为例）:
（）将每个被访问城区看作一个抽样单位,按比例抽样法,根据各城区人口数,样本量,试访结果和预计发生率确定每个城区需抽样数量;
（2）事先收集每个城区的所有局号,从每个抽样单位（城区）中随机抽出号码的前四位局号;
（3）对每一个抽出的局号,由电脑随机产生后四位;
（4）将所产生的号码进行随机排序,得到用于访问的号码库,确保在任何时候结束访问样本都具有一定的代表性.
（5）将抽好的号码分配给各执行城市的CATI督导.
（6）考虑到有些城市的局号并不一定严格按照城市行政区划来划分（如某些局号可能会跨两个行政区）,为防止样本对应的各行政区人口比例失准,须有补充修正手段.修正手段一,根据常工程积累的样本框筛选跨区域局号的分割大致界限,但存在缺陷;修正手段二,在访问过程中确认该样本号码所在区域,归入相应区域样本（配额）,事后样本框组建管理人员对样本框作出修正.
（7）有条件的,可使用筛号器,将无效号码剔出,以提高成功率.
4..4.2使用客户提供的号码/名单
（）总督导把客户提供的号码/名单按提供的批次做好记录,注意号码的完整性,重复性进行梳理;
（2）如号码量大,可向数据处理部或研究员请求协助;
（3）把整理好的号码/名单分配给各执行城市的CATI督导,并通知督导如何使用名单.
4..4.3使用数据库/Panel名单
总督导向数据库/PANEL管理小组发出工程条件,号码/名单数量,提供日期等要求的方案,数据库/PANEL管理小组按方案从现有数据库/Panel库中抽取号码.
4..4.4使用黄页号码簿
对于BToB工程,尤其是对一些特殊/高端行业,一般可以使用黄页号码簿或企业名录.CATI督导根据工程要求在黄页号码簿里收集企业名单和号码并进行整理.
4..5内部培训及工程预备会
在工程正式执行前,相关部门之间或部门内部,需要进行内部培训或工程预备会,对工程的要求,分工及本卷须知进行沟通.
4..5.内部培训会议
所有工程组成员必须参加跨部门内部培训会议,通常在正式访问前2~3天进行.（）总督导把内培资料和培训时间,地点发通知给各地CATI执行督导,QC,编码,
数据处理/分析,程序员,代理等相关部门和人员,抄送给研究员与CATI经理.
（2）通常由研究员负责主持.（3）内部培训会议主要内容包括但不限于讲解工程背景,问卷结构与逻辑关系,问卷编程特殊要求说明,进度和质量控制的要求;确定各部门提交数据的时间;确认抽样方法,配额,操作方法,复核标准,以及访问员可能的提问及答疑等.有开放题的题目还应说明追问方面的具体要求:
）广度追问的程度（问几遍）;
2）是否需要深度追问;
3）模糊答案的范畴.
（4）研究员提供问卷逻辑指南;
（5）会后,总督导制作访问员访问指南,并把进度等相关表格统一发给各地CATI执行督导,并安排各地督导在规定时间内汇总进度.
4..5.2工程预备会
必要时,在全国性的内部培训会议后,各地执行部门还需要进行工程预备会.工程预备会的主要内容包括但不限于:
（）明确工程组里CATI督导的工作分工,责任到人;
（2）由总督导/当地负责督导按方案制定每天完成的目标（任务量）;
（3）确定劳务费单价;
（4）对于逻辑关系复杂的工程需要和程序员达成一致的意见,防止实际操作时复杂化;并商定程序的测试方案;
（5）对于QC要达成一致的评判标准,落实复核报告的提交时间,要求QC督导及QC复核员听取访问员培训,并在模拟中指出常见的错误操作;
（6）对于CATI督导分工,应明确落实相关工作的负责人:
访问员的考勤,访问员工作效率的分析,QC报告的跟进,巡场和录音监听的问题反响,小结会议的组织及报告,进度报告的汇总,与编码/QC的问卷移交,与数据录入部的数据移交,设备上与IT部门的沟通等.以上相关事项确定后,需以邮件等书面形式发给工程组成员并抄送给CATI经理.
4..6CATI程序编写及检查
4..6.CATI程序编写
CATI访问开始之前,需要由程序员将问卷转化为可以由CATI系统识别的代码,以实现系统自动拨号,问卷显示,逻辑自动跳转,配额自动控制,数据自动记录.
（）尽量获取问卷的最终本,如果研究员不能提供最终本,应要求每次问卷更新时,使用highlight的方式予以醒目标识;
（2）按照问卷的文本内容,是否读出选项等提示标识,逻辑结构,逐题编写程序;
（3）对编程过程中发现的问卷逻辑问题,主动与研究员联系,并据以修改;
（4）编程完毕后,将程序发给研究员,访问部门进行检查;
（5）根据检查发现的问题,修改程序;
（6）根据工程方案书的要求实现配额控制;
（7）根据问卷中标明的Column,编写数据导出程序;
（8）通过试访生成少量数据,供数据录入/分析部门查错,检查逻辑及导数的正确性;
（9）将最终完成的工程程序打包,发给CATI总督导.
4..6.2CATI程序检查
（）总督导解压程序员发出的测试程序,翻开文件.
（2）总督导将测试程序与问卷逐字逐句对照,测试不同情况下的跳问关系,配额控制是否正确,选项读出的提示标识,单项选择和复选是否设置正确.把程序测试遇到的问题通过程序测试反响表,反响给程序员并抄送给研究员.
（3）程序经程序员修改后需重新测试,总督导再次根据程序测试反响表中的问题进行检查,使程序最终可以正常使用.
4..7在系统建立工程及号码导入
因应CATI操作系统的不同,各公司根据系统软件的说明,指引,在工程建立阶段做好工程建立工作,并按操作系统的数据格式,把已抽样号码导入系统中.应注意应删除重复号码,检查预设配额及区号是否正确.
4..8问卷印刷
为了进行访问员培训和正式访问时记录开放题,需印刷培训问卷/指南和开放题问卷.各地工程督导根据工程样本量及培训访问员数量,填写印刷申请单,安排培训问卷/指南和开放题问卷以及?
访问员工程协议?
的印刷.一般而言,培训用问卷数量=总培训人数×~.;开放题问卷=样本量×.2.
4..9访问员工程培训
（）负责访问员管理的督导根据应邀参与工程的访问员名单及其预计出勤情况编订访问员工程排班表给工程督导;
（2）工程督导确定访问员培训时间后做好预定会议室,签到表,工程协议,培训问卷等准备;
（3）访问员到培训现场后,工程督导安排访问员签到并签署工程协议,并再次与访问员确认具体的工程排班表.
（4）工程督导对访问员进行工程培训.培训内容包括单独限于工程背景介绍,时间安排,劳务费标准,讲解问卷,工程操作要求及必要的访问技巧.
（5）工程根本要求及问卷讲解完毕后,需进行模拟访问.由工程督导扮演被访者,访问员分组,按问卷的问题轮流询问.让访问员充分熟悉问卷,了解其逻辑结构,操作方法,并解答疑问.
（6）模拟访问之后,需进行模拟访问小结.工程督导汇总模拟访问的情况,集中给访问员强调需注意的问题,统一解答疑问,确保操作标准和一致性.
（7）考核.工程督导根据培训和模拟访问的情况,对接受培训后的访问员进行考核,不合格者需重新培训或退回访问员管理部重新进行根底培训.
4..0访问员试访/CATI程序现场测试
（）工程督导安排访问员进入访问席位进行问卷试访——访问员互相拨打席位分机进行试访;
（2）访问员根据试访的答复点击屏幕答案,现场运行CATI程序;
（3）各地工程督导做现场试访小结;
（4）总督导把测试数据导出提交给数据录入或分析部门督导查错;
（5）查错后如需要修改程序,那么总督导需要重新检查新程序,确认其可以正常使用,并发给各地CATI访问督导更新.
4.2工程实施阶段执行标准
4.2.访问员工作标准
（）访问员到达CATI中心时,办理考勤签到手续,然后按督导的安排尽快找到相应的坐席,并检查话机/拨号器及麦克风（耳麦）是否齐全,正常,电脑是否可以正常启动并进入操作界面;如有异常,应及时向督导反映;
（2）进入CATI系统访问端,输入自己的编号,密码及当前坐席编号;
（3）在工程栏中寻找须访问的工程代号;
（4）点击工程键进行工程设置;
（5）按工程指引进行自动或手动拨号,号码接通后开始访问.按照电脑屏幕的提示读出问题,客观,中立地询问被访者,并点击相应的答案编号纪录封闭题答案,开放题答案那么纪录在开放题问卷上;
（6）访问结束后,平安退出访问系统,关闭主机和显示器,存放好耳麦;
（7）并将所有问卷（包括空白问卷和废卷）移交给督导;
（8）请寻场督导检查设备后到签到处作考勤记录.
CATI访问督导现场管理标准
4.2.2.工程实施期间
（）每天执行工程前,督导必须先检查访问席位设备,录音系统和线路是否正常.
（2）组织定期的班前或班后访问员小结会议（以下简称班会）,针对工程中的问题进行讨论,指出访问过程中出现的具体问题,并挑选有代表性的录音播给访问员听,纠正操作标准,帮助他们减少出错率,提高访问技巧.
（3）每天务必定时检查访问录音系统是否运作正常,并及时做好备份.
（4）密切关注访问员的出勤情况,如出现较高的流失率,应及时与访问员管理部沟通及时补充访问员.
（5）现场监听.具体要求见前文"3.4监听".
（6）巡场.访问督导通过巡场来留意访问员工作效率,访问中遇到的问题,点击/记录答案是否正确等情况,并以此作为之后的班会小结内容之一,把不能解决的问题跟研究员沟通解决.填写?
督导巡场记录表?
.
（7）通过现场监听,巡场,QC复核报告访问配额情况等信息,访问督导需严格监控工程进度,质量和配额,并及时向工程总督导汇报.
（8）查询号码使用情况,预计号码缺乏时应提前向总督导及相关人员提交工程抽样需求表.
（9）审卷.访问督导应及时检查纸问卷的必答题,追问情况及必要的逻辑关系,对应CATI数据检查记录位置及逻辑关系,如属问题卷应让访问员当场进行更正.督导审核后在问卷封面签名.
（0）核对数据.访问督导应每天核对CATI系统督导端相关数据及问卷数据,是否有差异.
（）与QC密切沟通,重点防范访问员为提高产量而诱导或其他不标准甚至作弊的操作;收到QC复核报告后及时处理,根据复核中发现的问题及时安排补问或补做,将结果反响给QC部门及相关人员.并及时将QC复核的废卷数据删除,并核对纸问卷数据与CATI系统督导端的数据.在班会中讲解出错问题及解决方法,并挑选有代表性的录音播给访问员听.
（2）移交问卷.访问督导定时移交纸（开放题）问卷给当地QC或编码部门,并填写?
问卷移交登记表?
.
（3）每天/每班次的访问督导需提醒并检查访问员在下机时是否做好机器关闭（包括主机和显示器）,将所有问卷（包括空白问卷和废卷）移交给指定人员.下班前访问督导应检查各区域设备,门窗是否关好.
（4）各地工程督导详细填写进度表,接触情况表并按规定时间发给总督导或研究员.
（5）总督导每天向各地CATI督导了解工程运作情况（完成样本量,配额,问卷质量等）,并汇总各地执行情况反响给研究部;帮助解决各地在工程中遇到的问题,及时把情况反响给CATI经理,研究部等相关人员;如发生方案外的问题时应及时跟研究部沟通并提出解决方案.
4.2.2.2工程结束时
在工程实施结束时,访问督导应及时做好以下工作:
（）检查是否已把QC复核的废卷数据删除,并核对纸问卷数据与CATI系统督导端的数据;
（2）把最终的数据导出提交给数据录入部门查错,并把纸质问卷（开放题）移交给QC或编码或数据处理/分析部门,
升级会员 