第三讲--统计调查问卷的设计及数据整理.ppt

统计调查专题研究,第三讲统计调查问卷的设计及数据的整理西南大学宋乃庆2015.11,问题与思考,1.设计统计调查问卷有何意义？2.如何才能设计出一份好的统计调查问卷？3.什么是数据整理？4.统计数据整理的意义是什么？5.统计数据整理一般有哪些步骤？6.统计调查数据收集中的误差产生原因有哪些？,可以突破时空的限制、花费较少的人力、物力、财力，了解被访者的基本态度和行为，能将获得的信息进行量化处理并进行分析，从而进行统计分析和作出决策。,1.明确调查目的、内容、调查对象；2.问题语言简洁、措辞得当、易于理解，不产生歧义，答案完整，不模棱两可；3.问题数量及排列顺序合理；4.数据的整理、分析易于操作；5.小范围试调查，及时修改。,数据整理在统计工作中起到承上启下的作用，既是统计调查的继续，又是进行数据分析的重要前提。通过数据整理，可以从整体上反映和分析事物数量特征，观察事物的本质和发展规律，从而做出正确的决策。,原始数据回收、登记、审核和分组。资料编码和数据录入绘制统计图或统计表,（1）度量性误差：统计指标因计量或者从生产量到价值量换算所产生的误差；（2）知识性误差：统计人员因统计知识不够，对统计指标的涵义不理解或错误理解所产生的误差；（3）态度性误差：统计人员因对统计工作不负责而随意填报统计数据而产生的误差，包括乱报、漏填或不按规定的计量单位填报等；（4）干扰性误差：统计对象或统计部门受某种利益驱动而虚报、漏报或者捏造统计数据所形成的误差。,数据整理：将有误、不全、有杂质及不合要求的原始数据通过检查、核对、规范及净化等整理手段使之转化为清洁、无偏、有序、系统、条理的满足数据分析要求的数据的过程。,第一部分调查问卷的设计与编写,1.2问卷设计的步骤,1.4设计问卷时要注意的问题,1.3统计调查问卷的基本结构,1.1统计调查问卷的类型,第二部分统计调查数据的整理,2.2统计调查数据整理的步骤,2.1统计调查数据整理概述,2.3统计调查数据整理中应该注意的问题,2.4统计数据整理中误差及几点认识,1.1统计调查问卷的类型,除此之外，还可以通过微信、微博等手段进行调查,1.1统计调查问卷的类型,报刊调查问卷随报刊传递分发问卷，请报刊读者对问卷做出书面回答，然后按规定的时间将问卷通过邮局寄回报刊编辑部。,1.1统计调查问卷的类型,邮寄式问卷调查者通过邮局向被选定的调查对象寄发问卷，请被调查者按照规定的要求和时间填答问卷，然后在通过邮局将问卷寄还给调查者。,1.1统计调查问卷的类型,送发式调查问卷调查者将问卷集中发到某些选定的单位，填好后在同一收集。,1.1统计调查问卷的类型,电话调查问卷调查者用电话的方式将问题念给被调查者，并记录答案。,1.1统计调查问卷的类型,访问式问卷是指调查人员通过现场询问，依据被访者的口头回答代为填写答案的问卷形式。,1.1统计调查问卷的类型,网络调查问卷被调查者通过网络参与回答的问卷。由于它成本廉价且快速高效，因此被越来越多地应用于实践中。,1.2统计调查问卷设计的步骤,确定调查的目的和内容首先，应该对想要达到的目的有一个清楚的认识，要知道自己通过这些问题想收集哪些资料，这样才能确保列出的题目都是紧扣主题，所得到的答案才是有价值的。【例】中国工商银行要对个人客户风险能力进行评估，就要了解客户的财务状况、投资经验及风险承受能力等。通过调查帮助客户选择合适的理财类金融产品，更好地配置资产，达到客户的投资目标。,1.2统计调查问卷设计的步骤,收集整理相关资料想要凭空想出十几个甚至数十个问题，几乎是不太可能的，而且很容易落入重复提问的困境。因此要做好充足的准备，多了解一些相关的信息和资料，并且多人合作，集思广益，才能让问卷的质量达到一个比较高的水准。,1.2统计调查问卷设计的步骤,确定调查形式根据要解决的问题确定调查问卷适合的调查形式。【例】实地访谈是面对面进行的，彼此之间可以很方便地交流，适合问一些比较复杂、主观性强的问题。而网上问卷访谈由于是人对机器，所以题目会比较简单一些，不能太深入。,1.2统计调查问卷设计的步骤,制定题目的内容和类型一旦确定了调查形式，就可以着手准备制定题目。【例】实地访谈和电话访谈，问题可以开放性一些，能够让被访问者能够回答更多一些；而问卷访谈由于不能令被调查者与机器实时互动，所以以带选项的选择题或判断题居多，稍稍附上一些主观题。,1.2统计调查问卷设计的步骤,安排问题的顺序一般来说，问题都是按照由易到难、由浅入深或者遵循事物发展的逻辑规律来安排问题的先后顺序。切忌东一榔头西一棒子、玩逻辑思维的大跳跃。排版拟稿所有的问题都罗列出来以后，进行排版，要做到能够吸引被调查者的目光，然后拟出一份初稿，由参与制定者一起审核。,1.2统计调查问卷设计的步骤,试调查在设计调查问卷之后，有必要根据计划举行小规模的试验检查，以得知问卷的格式是否正确，调查的方式是否正确，调查的目的是否达到，调查的编组是否合理等，以便加以改正及控制调查的成本。正式定稿一旦前期准备工作都完成之后，就可以正式定稿，根据相关渠道进行大范围的调查。,1.3统计调查问卷的基本结构,开头部分包括问卷的题目、问候语、填表说明、回收问卷的时间、方式及其他事项（如告诉对方本次调查的匿名性和保密性原则，调查不会对被调查者产生不利的影响，真诚地感谢受调查才的合作，答卷的注意事项等）。指导语旨在告诉被调查者如何填写问卷，包括对某种定义、标题的限定以及示范举例等内容.,1.3统计调查问卷的基本结构,甄别部分也叫过滤，是同对被调查者的特定特征进行识别，筛选掉不需要调查的对象（如需要避嫌的人或单位），从而满足只对特定的调查对象调查的目的，确保调查对象符合调查需要。,【例】如果只需要调查30-50岁的女性，则可以通过第1、2题进行筛选。,1.3统计调查问卷的基本结构,问题部分是调查问卷的主体部分。包含了需要对被调查者收集数据的所有提问及其备选答案。一般有开放式和封闭式两种。a.开放式问题就是调查者不提供任何可供选择的答案，由被调查者自由答题，这类问题能自然地充分反映调查对象的观点，态度，因而所获得的材料比较丰富，生动，但统计和处理所获得的信息的难度较大。可分为填空式和回答式。,1.3统计调查问卷的基本结构,b.封闭式问题后面同时提供调查者设计的几中不同的答案，这些答案既可能相互排斥，也可能彼此共存，让调查对象根据自己的实际情况在答案中选择。,是否式把问题的可能性答案列出两种相矛盾的情况，请被调查人从中选择其一“是”或“否”、“同意”或“不同意。,【例】,1.3统计调查问卷的基本结构,选择式每个问题后列出多个答案，请被调查人从答案中选择自己认为最合适的一个或几个答案并作上记号。,【例】,1.3统计调查问卷的基本结构,评判式后面列有许多个答案，请被调查人依据其重要性评判等级，又称为排列式，是数字表示排列的顺序。,【例】,1.3统计调查问卷的基本结构,1.3统计调查问卷的基本结构,结束语结束语也称致谢语，一般放在问卷的最后，用来简短地对被调查者的合作表示感谢，也可以征询一下被调查者对问卷设计和问卷调查本身的看法和感受。当然，不同问卷的结束语略有不同。,【例】,1.4设计统计调查问卷时要注意的问题,（1）尊重公众，慎重选择所提问题，防止对公众情感造成伤害。【例】您至今未买电脑的原因是什么？a.买不起b.没有用c.不懂d.软件少a.价格高b.用途较少c.不太了解d.其它,显然第二组更有艺术性，更能使被调查者愉快地合作。,1.4设计统计调查问卷时要注意的问题,（2）避免直接提问隐私性问题【例】一般来说，人们对收入问题、送礼等问题相对保密，这类问题直接提问往往会遭拒绝，但如果提供几个收入段“1000以下，1000至2000，2000至3000，3000以上”作为选项，在一定程度上会减少顾虑、降低窘迫性，被访者乐意回答。,1.4设计统计调查问卷时要注意的问题,（3）问题的组织要有顺序，合乎逻辑。问卷中问题的顺序一般按下列规则排列：容易回答的问题放前面，较难回答的问题放稍后，困窘性问题放后面，个人资料的事实性问题放卷尾。封闭式问题放前面，自由式问题放后面。由于自由式问题往往需要时间来考虑答案和语言的组织，放在前面会引起应答者的厌烦情绪。要注意问题的逻辑顺序，按时间顺序、类别顺序等合理排列。,（4）文字简洁、明确、通俗易懂，使用褒义、贬义词或否定词都会影响被调查者的回答。【例】1941年，罗格（Rugg）进行的试验：a.您是否认为美国应该禁止反对民主的公开言论？b.您是否认为美国应该允许反对民主的公开言论？结果A中54%的人回答“是”，b中75%的人回答“否”，过于严格的措辞“禁止”导致了两题结果的显著差异。,1.4设计统计调查问卷时要注意的问题,1.4设计统计调查问卷时要注意的问题,（5）不要用公众难以理解的生僻词或专业术语，不要加太多的形容词。【例1】保险公司调查顾客对本业务的印象，询问：您对本公司的理赔时效是否满意？a.满意b.不太满意c.不满意顾客不理解专业词汇“理赔时效”，即便给出答案也没有意义。【例2】你对B2C的看法是什么？（B2C是Business-to-Customer的缩写，而其中文简称为商对客。是电子商务的一种模式，也就是通常说的直接面向消费者销售产品和服务商业零售模式。）,1.4设计统计调查问卷时要注意的问题,（6）不要用双重提问，即一个问题最好只有一个答案。【例】你喜欢我厂的产品和包装吗？这个提问实际上含有两个问题：“产品”和“包装”，使公众难以回答。（7）措辞准确，防止模糊不清或模棱两可。【例】您一个月在音像制品上花多少钱？虽然“音像制品”是一个常用词语，但是具体下来，很多人难以界定，另一方面，“花钱”也界定不明，花钱可能是买，也可能是租赁，到底是哪一种，还是二者都算，说明不清。,1.4设计统计调查问卷时要注意的问题,（8）避免使用带倾向性和诱导性的措辞。【例】为了加强全厂职工的团结，我厂准备举行厂庆30周年大会，你赞成吗？【例】如“太阳底下最光辉的职业是教师，你喜欢教师职业吗？”（8）问卷的外观同样重要。一般尽量不采用小字号或长问题，排版不要很紧；问题与答案、过渡段落等采用不同字型，答题指南要简短。【例】以下问卷调查从外观上你喜欢哪些？问卷调查案例（9）尽量少用开放式问题。,（10）避免问题过大，不易回答。【例】“您觉得重庆这个城市怎么样？”这个问题表面上有一个清楚的主题，但仔细分析会发现很多地方含糊不清，因为不同的人会对这个问题有不同的理解，可能出现的答案会有多种可能：回答重庆市的经济发展水平？社会治安状况？道路交通状况？市容市貌？政府的管理水平？市民消费水平？,几个案例：调查问卷案例1调查问卷案例2调查问卷案例3调查问卷案例4,1.4设计统计调查问卷时要注意的问题,2.1统计调查数据整理概述,数据整理就是根据调查研究的目的与任务，对搜集到的各种数据，采用科学的方法，进行审核汇总与初步加工，使之条理化、系统化，并以图表的方式显示数据特征，以符合数据分析需要的工作过程。,2.1统计调查数据整理概述,数据整理的作用全面检查数据的质量，保证数据的有用性；是数据分析的基础；是积累及保存资料的客观要求。,2.1统计调查数据整理概述,数据整理应遵循以下原则真实性原则,准确性原则,科学性原则,目的性原则,2.2统计调查数据整理的步骤,第一步：调查资料的回收、登记、审核和分组调查问卷的审核包括完整性审核、及时性审核与准确性审核。完整性审核是看调查单位或填报单位是否齐全、规定的项目是否都有答案。应报资料的份数是否合规定。【例】如下的问卷是不完整的：缺页；整体回答不完全，如没有个人信息、只填了开头，或者大半没填；问卷填写潦草、凌乱、无法辨认；,及时性审核看填报单位是否按时填报了数据，对不报、漏报或迟报的原因要查清。接收问卷时应详细记录接收时间、上送人（访员或者督导），并在问卷的首页规定框或者醒目的位置上为该问卷进行编号。这些要求和规范一方面是为日后的数据整理乃至数据分析建立唯一的查询路径，同时也是要每位项目参与者明白自己身上的责任。,2.2统计调查数据整理的步骤,2.2统计调查数据整理的步骤,准确性审核检查所填报的信息是否正确可靠，有无差错和异常值。常用的方法有两种：逻辑检查从理论或常识上看数据是否有悖常理或矛盾。【例1】一张调查表上年龄是9，职业是教师，则必有一项错误。【例2】在某劳动密集型行业调查中，企业类型是大型，而员工人数是100人，则同样必有一项错误。【例3】在某调查表上，企业的净产值大于了同期总产值，则产生了矛盾，数据有误。计算检查检查各种指标的计算口径、计量单位是否符合规定，并且通过计算的方法来检查各指标的数据之间是否衔接。对不符合调查要求的数据，则应进行筛选。,2.2统计调查数据整理的步骤,分组是将原始数据按照某种标准或目的划分为不同组别，以满足研究的需要。对数值型数据，有等距组距分组和异距组距分组。组距分组中每一组用一定变动范围的两个变量值表示。等距组距分组的基本步骤是：通过排序的数据观察其极大值与极小值，找出变动总范围；确定组数一组数据分成多少组是分组中首先需要确定的。确定各组组距组距与组数成反比；确定组限的表示方法，编制成频数分布表。,2.2统计调查数据整理的步骤,【例】某生产车间50名工人日加工零件数如下（单位：个）。试对数据进行组距分组。极大值：139；极小值：107确定组数：在实际分组时，可以按Sturges提出的经验公式来确定组数K：,2.2统计调查数据整理的步骤,其中n为数据的个数，对结果用四舍五入的办法取整数即为组数。【例】对前例的数据有：，即应分为7组。实际应用时，可根据数据的多少和特点及分析的要求，参考这一标准灵活确定组数。,确定各组的组距组距是一个组的上限与下限的差，可根据全部数据的最大值和最小值及所分的组数来确定，即组距（最大值最小值）组数。【例】对于前例的数据，最大值为139，最小值为107，则组距（139107）74.6为便于计算，组距宜取5或10的倍数，而且第一组的下限应低于最小变量值，最后一组的上限应高于最大变量值，因此组距可取5。,2.2统计调查数据整理的步骤,根据分组整理成频数分布表。比如对上面的数据进行分组，可得到右边的频数分布表。注意：采用组距分组时，需要遵循“不重不漏”的原则。“不重”是指一项数据只能分在其中的某一组，不能在其他组中重复出现；“不漏”是指组别能够穷尽，即在所分的全部组别中每项数据都能分在其中的某一组，不能遗漏。,2.2统计调查数据整理的步骤,【例】异距频数表的编制。,第二步：资料编码和数据录入编码是将问卷的问题及答案转化为计算机可以识别的数字或符号。通过编码，方便录入，适宜电脑进行处理。常用的几种编码方法顺序编码法：是用一个标准对数据进行分类，并按一定的顺序用连续数字或字母进行编码的方式；分组编码法：是根据调查数据的属性特点和处理要求，将具有一定位数的代码单元分成若干组（或区间）,每一个组的数字均代表一定的意义；,2.2统计调查数据整理的步骤,采用键盘录入数据是件枯燥的工作，也是一个极容易出现错误的工作。为了保证数据质量，需要对数据录入的各环节做到精心管理。主要有：录入前，对录入人员进行详细培训；录入时，对录入人员进行工作检查；录入后，对录入数据进行核实检查。在实践中，由于时间和经费等原因，录入结束后的核实检查一般采取抽样的形式进行，通常是抽取30%左右的样本数据进行核实，以检查数据录入的质量。,2.2统计调查数据整理的步骤,信息组码编码法：是把调查数据区分不同的组，给每一个组以一定组码来进行编码的方法；表义式文字编码法：是用数字符号等表明编码对象属性,并依此方式对调查数据进行编码的方法。【例】某睫毛膏市场调查数据编码表。,2.2数据整理的步骤,编码时应注意以下问题：编码符号绝大多数情况下都必须用数字，个别时也可以采用英文字母；可以对某些数字赋予特殊的意义，便于整理资料时识别；编码位数应根据具体情况予以确定。数据的录入是指将问卷或调查表或登录卡上的编码数字读到磁盘、磁带中，或通过键盘直接输入到计算机的工作过程。有手工录入和光电录入两种方式。,2.2统计调查数据整理的步骤,第三步绘制统计表或统计图统计表是表现调查数据的另一个重要形式。是指将一系列说明现象特性的经加工整理后的调查数据，按一定次序和格式排列形成的专用表格。其作用不仅能有效表现数据，更有利于资料的贮存保管，还是积累资料的有效手段。为下一步分析提供基础，为进一步挖掘数据提供便利。,2.2统计调查数据整理的步骤,统计图a.条形图、直方图。条形图和直方图大都是用来表现频数分布。条形图是使用等宽条形的长短或高度来表示数据的多少的图形。,2.2统计调查数据整理的步骤,条形图,直方图是用一定宽度与长度所围成的矩形面积来表示数据大小的图形。矩形的宽度与高度均有意义。此外，还可根据累积频数或累积频率，绘制累积频数及累积频率分布图。,直方图,2.2统计调查数据整理的步骤,b.饼型图、环形图。饼型图及环型图是来描述各种比例的图形。饼型图是用圆内扇形的面积表示数值大小的图形。以圆为整体，形象的说明各部分在总体中所占的份额。,2.2统计调查数据整理的步骤,饼形图,环形图是用圆内各环中每一段的面积来表示数值的大小的图形。能够同时显示多个总体的内部结构。,环形图,2.2统计调查数据整理的步骤,c.茎叶图、箱线图。对未经分组的数值型数据，适合用茎叶图、箱线图来显示。茎叶图是由“茎”和“叶”两部分组成，“茎”代表分组，表示高位数值；“叶”代表频数，列示个位数值。,2.2数据整理的步骤,茎叶图,6,箱线图是用一组数据的五个特征值来描述该组数据的分布状况。既可显示单组数据，也可显示多组数据。其五个特征值分别是一组数据的最小值、最大值、中位数、下四分位数、上四分位数。,箱线图,2.2统计调查数据整理的步骤,d.线图线图即在平面坐标上标注各数据点并连接成折线，表现数量变化规律及特点的统计图。,2.2统计调查数据整理的步骤,e.雷达图反映多个变量多个观察样本数据的图形。在一个平面上绘有多个数轴，每个轴上显示一个变量的取值，每个样本的各观察值分别在各轴上标出。,2.2统计调查数据整理的步骤,（一）虚假的调查数据虚假的数据是最常见的调查数据质量问题，也是危害最为严重的数据质量问题。这类调查数据完全是虚构的杜撰的，毫无事实根据。造成调查数据虚假的因素很多：有意虚报、瞒报调查数据资料，指标制定不严密，调查制度不完善、不配套等。【例1】企业主因怕“露富”或避税而瞒报营业收入和利润，畜禽监测中养殖户为多取得国家补贴而虚报能繁母猪数量；【例2】市场采价员不深入实地调查价格，凭经验和想象胡乱编造数据；为完成上级下达的目标任务随意更改数据。,2.3统计调查数据整理中应该注意的问题,（二）拼凑的调查数据拼凑的数据是把不同地点，不同条件，不同性质的数据在收集、加工、传递过程中，人为地拼凑成同一时间、地点、条件和性质下的同一数据。这种东拼西凑的数据，虽然分别有事实根据，但是从整体上看数据是不符合事实的，其性质与数据虚构相同。【例】调查人员为图省事不按要求深入基层调查，将上年同期同类报表中单位的第一个指标、单位的第二个指标、单位的第三个指标等拼凑到单位报告期报表中，再对平衡关系进行调整，便形成了一张完整的报表。这样的报表虽然是建立在上年调查的基础上，而且没有逻辑错误，但这样的调查数据对单位来说严重脱离了实际，最终会造成推算总体较大偏差。,2.3统计调查数据整理中应该注意的问题,（三）调查数据不完整数据不完整是指被调查单位没有完整如实填报所列指标，或者调查时没有完整搜集调查表所列指标，不符合调查资料完整性的要求。数据不完整，就不可能反映调查对象的基本情况和总体特征，最终也就难以对调查事物变化的规律性做出明确的判断，甚至会得出错误的结论。【例1】有的记账户为减少麻烦，明明已经发生的收支却故意不登记。【例2】畜禽监测调查中因多数养殖户没有仔猪出栏，调查人员便干脆不调查“出售15公斤以下仔猪”此项指标。此类调查数据既不能代表调查个体的基本情况，更难以反映调查对象的总体征，一定程度上失去了调查的目的和意义。,2.3统计调查数据整理中应该注意的问题,（四）指标数值背离指标原意这是由于对指标的理解不准确，或者是因为指标含义模糊，指标计算的随意性大等原因造成的数据质量问题，表现为收集整理的调查数据不是所要求的调查内容，数据与指标原意出现走样，面目全非。【例】规模以下工业企业调查中“利润”这一指标，报表中要求企业填报“纯利润”，通过收入、成本等相关指标的推算，可能会发现计算出的纯利润和实际填写数值严重不符，说明企业填写错误，可能误将利润指标理解成“毛利润”。这类数据质量问题多是因为调查人员业务不熟或调查报表设计不尽科学合理而造成的，如果不影响逻辑关系很难发现，隐性危害较大。,2.3统计调查数据整理中应该注意的问题,（五）调查数据的逻辑性错误调查数据的逻辑性错误是指调查资料的排列不合逻辑，各个数据、项目之间相互矛盾。【例】下表为某生猪养殖规模户2010年度简化报表。,2.3统计调查数据整理中应该注意的问题,仔细审核可发现有两个逻辑性错误：（1）三季度能繁母猪存栏数大于期末全部生猪存栏数，应该是在填报或录入数据时将“124”人为的变为“1240”了；（2）四季度期末存栏数不等于三季度期末存栏加四季度期增加减期减少数量，即983+486-718151，应为751，可能是录入数据时错把“7”看成了“1”。这样的差错多是人为非故意行为，而且一般能在计算处理数据时发现，但客观上人为增加了工作难度，影响了调查效率。,2.3数据整理中应该注意的问题,2.4统计数据整理中误差及几点认识,误差的种类（1）度量性误差是指统计指标因计量或者从生产量到价值量换算所产生的误差；（2）知识性误差是指统计人员因统计知识不够，对统计指标的涵义不理解或错误理解所产生的误差；（3）态度性误差是指统计人员因对统计工作不负责而随意填报统计数据而产生的误差，包括乱报、漏填或不按规定的计量单位填报等；（4）干扰性误差是指统计对象或统计部门受某种利益驱动而虚报、漏报或者捏造统计数据所形成的误差。,2.4统计数据整理中误差及几点认识,关于误差的几点认识：（1）宏观统计的误差是客观存在的，不以人们意志为转移，统计部门的任务就是尽可能缩小统计误差。【例】计量误差：人的高度早晚不一致，不同调查单位因量器质量不同、标准不同也必定产生误差。【例】空间性误差：在实际统计过程由于社会经济现象的复杂性无法涵盖所有的调查单位所产生