第七章第七章数据的处理和分析数据的处理和分析本章学习目标本章学习目标了解数据处理和分析的基本原理了解数据处理和分析的基本原理掌握数据处理和分析的基本方法掌握数据处理和分析的基本方法能运用数据处理和分析的基本原理能运用数据处理和分析的基本原理和基本方法解决实际问题和基本方法解决实际问题本章学习重点和难点重点重点数据处理和分析的基本原理数据处理和分析的基本原理数据处理和分析的基本方法数据处理和分析的基本方法难点难点数据处理和分析原理和方法在数据处理和分析原理和方法在实际中的应用实际中的应用本章学习的内容第一节 数据处理和分析的基本 原理第二节 数据处理和分析的基本 方法第三节 数据处理和分析的基本 工具本章教学方法课堂讲授课堂讲授案例教学案例教学应用教学应用教学1、历史历史：关于所研究问题的历史演变过程、 来龙去脉2、理论与方法：理论与方法：关于所研究问题所固有的理 论与方法3、数据处理和分析的理论与方法：数据处理和分析的理论与方法：关于所研究问题所涉及到的数据的处理、分析，用数据说话，用模型总结规律，反过来以更好地 支持所研究问题的理论和方法一个较为优秀的研究人员应具有一个较为优秀的研究人员应具有的知识结构的知识结构第一节第一节数据处理和分析的基本原理数据处理和分析的基本原理一、数据处理和分析的基本功能一、数据处理和分析的基本功能二、数据处理和分析的基本内容二、数据处理和分析的基本内容一、数据处理和分析的一、数据处理和分析的基本功能基本功能四种功能：四种功能：1、概括、概括 概括是将原始数据转变成一些有概括是将原始数据转变成一些有意义的计算结果的过程意义的计算结果的过程2、概念化、概念化 是用准确的概念对所调研或计算是用准确的概念对所调研或计算的各种数据加以定义的各种数据加以定义3、解释、解释 用数据解释现象和解释理论、用数据解释现象和解释理论、 总结规律总结规律4、推论、推论 通过样本的数据模型或特征通过样本的数据模型或特征 来推论总体的情况来推论总体的情况二、数据处理和分析的二、数据处理和分析的基本内容基本内容在数据处理和分析中，应用什么数在数据处理和分析中，应用什么数据处理和分析方法是由其研究内容据处理和分析方法是由其研究内容决定的。不同的研究内容有不同的决定的。不同的研究内容有不同的分析方法。分析方法。从统计学的角度分析， 主要有以下 八八 方面的内容：1、特征分析：即所研究的对象具有、特征分析：即所研究的对象具有怎样的特征？怎样的特征？ 2、结构分析：即所研究的对象具有、结构分析：即所研究的对象具有怎样的结构？怎样的结构？ 3、动态分析：即所研究的对象在时、动态分析：即所研究的对象在时间上的变化是怎样的？间上的变化是怎样的？4、比较分析：即所研究的对象与、比较分析：即所研究的对象与某一特定对象相比，具有的优势某一特定对象相比，具有的优势是怎样的？又有哪些差距？存在是怎样的？又有哪些差距？存在的问题是什么？的问题是什么？5、因素分析：即影响研究对象的因素有哪些？其中，主要因素是什么？影响的方式是怎样的？6、规律分析：即研究对象的运动形、规律分析：即研究对象的运动形式是怎样的？所表现出的规律是什么式是怎样的？所表现出的规律是什么？7、趋势分析：即研究对象的未来表现如何？将会出现怎样的发展趋势？ 8、可靠性分析：即在研究中所总结出的某些规律、对研究对象的未来的预见等，其可靠性究竟怎样？是否与人们的判断相一致？等等三、调查数据处理的程序三、调查数据处理的程序问卷接收编辑和检查编码数据录入缺失值处理数据分析（一）问卷的接收（一）问卷的接收为了保证问卷的质量，对于不同地为了保证问卷的质量，对于不同地区、不同调查员交来的问卷，应当区、不同调查员交来的问卷，应当认真仔细地做好接收、登记与核对认真仔细地做好接收、登记与核对工作。工作。首先，要对问卷进行登记与编号；首先，要对问卷进行登记与编号；其次，要将无效问卷的进行剔除；其次，要将无效问卷的进行剔除；最后，还要确定补充调查。最后，还要确定补充调查。 一般事先需要专门设计登记表格，具体内容有： 一一二二三三四四调查地区调查地区及编号，及编号，调查员姓调查员姓名及编号；名及编号；调查实施调查实施的时间，的时间，问卷交付问卷交付的日期；的日期；问卷编号；问卷编号；实发问卷数、实发问卷数、上交问卷数、上交问卷数、未答或拒答未答或拒答问卷数、丢问卷数、丢失问卷数等。失问卷数等。（二）编辑和检查（二）编辑和检查为了增加准确性，对那些初步接收为了增加准确性，对那些初步接收的问卷还要进一步进行检查和校订。的问卷还要进一步进行检查和校订。主要检查是否清楚可认，是否完全，主要检查是否清楚可认，是否完全，是否一致以及是否明确不含糊等。是否一致以及是否明确不含糊等。一致性审核一致性审核一致性审核一致性审核及时性审核及时性审核及时性审核及时性审核准确性审核准确性审核准确性审核准确性审核完整性审核完整性审核完整性审核完整性审核 调查问卷的审核调查问卷的审核 对于检查出来的不满意问卷，常用对于检查出来的不满意问卷，常用以下方法进行处理：以下方法进行处理：1.退回去重新填写；退回去重新填写；2.按缺失数据处理；按缺失数据处理；3.丢弃。丢弃。（三）编（三）编 码码编码是指用代码来表示各组数据资编码是指用代码来表示各组数据资料使使其成为可进行计算机处理和料使使其成为可进行计算机处理和分析的信息。编码可以按照预先编分析的信息。编码可以按照预先编码或事后编码来进行。无论是哪种码或事后编码来进行。无论是哪种编码方式基本程序都包括以下几个编码方式基本程序都包括以下几个方面：方面：确定变量确定变量单选问题与多选问题的编码单选问题与多选问题的编码无结构式（开放式）问题的编无结构式（开放式）问题的编 码码编码说明书及数据输出格式说编码说明书及数据输出格式说明书明书 （四）数据录入（四）数据录入数据录入要求做到准确无误。控制数据录入要求做到准确无误。控制录入误差的方法有：重复录入、预录入误差的方法有：重复录入、预值控制、平衡检测。值控制、平衡检测。数据录入的主要方式：数据录入的主要方式： 直接录入直接录入 转录转录编码、录入编码、录入挑挑选选工作工作认认真、有真、有责责任心、技任心、技术术熟熟练练的的录录入入员员；加强对录入员的监督管理；加强对录入员的监督管理；定期检查录入员的工作定期检查录入员的工作质量和工作效率；质量和工作效率；对录入的资料进厅抽样复对录入的资料进厅抽样复查查一一二二三三四四五五二次录入二次录入（五）缺失数据处理（五）缺失数据处理缺失数据是指由于被调查者没有给缺失数据是指由于被调查者没有给出明确的答案或调查员没有记录下出明确的答案或调查员没有记录下他们的答案而造成未知变量值。他们的答案而造成未知变量值。缺失数据处理可以使用以下几种方缺失数据处理可以使用以下几种方法：法：1.用一个样本统计量去代替；用一个样本统计量去代替；2.用某些统计模型进行推算；用某些统计模型进行推算；3.问卷整体剔除；问卷整体剔除；4.部份排除。部份排除。 （六）调查资料的分析（六）调查资料的分析1.数据分析任务书数据分析任务书 数据分析任务书一般应明确列举数据分析任务书一般应明确列举以下内容：以下内容：编制变量标识和变量制标识。编制变量标识和变量制标识。 需要制作的统计表。需要制作的统计表。需要制作的统计图。需要制作的统计图。需要进行的统计分析。需要进行的统计分析。2.选择适当的数据处理软件选择适当的数据处理软件3.数据分析的基本方法数据分析的基本方法频数分布。编制频数分布首先要编制频数分布首先要对原始数据进行统计分组。在分组对原始数据进行统计分组。在分组的基础上，把所有数据或总体单位的基础上，把所有数据或总体单位按组归并、排列、形成所有数据或按组归并、排列、形成所有数据或总体各单位在各组间的分布，称为总体各单位在各组间的分布，称为频数分布。频数分布。集中趋势的度量。集中趋势，是指集中趋势，是指一组数据向某一中心值靠拢的倾向，一组数据向某一中心值靠拢的倾向，测度集中趋势也就是要寻找数据一测度集中趋势也就是要寻找数据一般水平的代表值或中心值。统计平般水平的代表值或中心值。统计平均数就是用来反映总体的一般水平均数就是用来反映总体的一般水平和集中趋势的指标。和集中趋势的指标。 离散趋势的度量。离中趋势是指离中趋势是指一组数据中各数据值以不同程度的一组数据中各数据值以不同程度的距离偏离其中心（平均数）的趋势，距离偏离其中心（平均数）的趋势，又称标志变动度。离中趋势指标，又称标志变动度。离中趋势指标，是用来综合反映数据的离中程度的是用来综合反映数据的离中程度的一类指标。常用的离中趋势指标有一类指标。常用的离中趋势指标有极差、分位差、平均差、方差、标极差、分位差、平均差、方差、标准差、离散系数等。准差、离散系数等。 变量间关系的分析。市场现象之市场现象之间的关系主要是相关关系。分析相间的关系主要是相关关系。分析相关关系主要有相关表、相关图、相关关系主要有相关表、相关图、相关系数等三种方法。关系数等三种方法。 第二节第二节数据分析和处理的基本方法数据分析和处理的基本方法一、由其研究内容决定，一、由其研究内容决定，统计学的分统计学的分析方法析方法主要有主要有 6 种：种：1、描述分析法、描述分析法2、比较分析法、比较分析法3、动态分析法、动态分析法4、因素分析法、因素分析法5、模型分析法、模型分析法6、预测分析法、预测分析法1、描述分析法、描述分析法主要是运用相关的总量指标、相主要是运用相关的总量指标、相对指标、平均指标、标志变异指对指标、平均指标、标志变异指标等进行总结性的说明和分析，标等进行总结性的说明和分析，以说明某种状况。以说明某种状况。所以，从功能上来说，描述分析所以，从功能上来说，描述分析法主要有三大功能：法主要有三大功能： 第一、叙述功能。即用数据叙述某种第一、叙述功能。即用数据叙述某种事实。事实。第二、论据功能。即用数据论证你的第二、论据功能。即用数据论证你的某种论点。某种论点。第三、支持功能。即用数据支持你的第三、支持功能。即用数据支持你的某种论点。某种论点。问题：问题：总量指标、相对指标、平均总量指标、相对指标、平均指标、标志变异指标是什么？它们指标、标志变异指标是什么？它们各包括哪些具体指标？各包括哪些具体指标？ 2、比较分析法、比较分析法 主要是运用相关的总量指标、主要是运用相关的总量指标、相对指标、平均指标来说明和反相对指标、平均指标来说明和反映研究对象与某一特定的研究对映研究对象与某一特定的研究对象相比，研究对象所具有的优势、象相比，研究对象所具有的优势、两者之间所存在的差距和不足。两者之间所存在的差距和不足。在各种条件相同的情形下，用总量指标在各种条件相同的情形下，用总量指标进行比较，以说明总量上的差距；进行比较，以说明总量上的差距；用相对指标和平均指标进行比较，以说用相对指标和平均指标进行比较，以说明两者之间相对的差异；明两者之间相对的差异；但如果某些条件并不相同，就不能运用但如果某些条件并不相同，就不能运用总量指标进行比较说明，而只能运用相总量指标进行比较说明，而只能运用相对指标和平均指标来进行比较对指标和平均指标来进行比较 说明。因说明。因为，总量指标不具有可比性。为，总量指标不具有可比性。3、动态分析法、动态分析法有两类：有两类：一类是简单总体的动态分析；一类是简单总体的动态分析；一类是复杂总体的动态分析。一类是复杂总体的动态分析。简单总体，是指某一单一总体或在数量上简单总体，是指某一单一总体或在数量上可以直接相加的总体。可以直接相加的总体。单一总体：只有一个变量的总体单一总体：只有一个变量的总体如甲产品的产量、价格如甲产品的产量、价格在数量上可以直接相加的总体：如甲企业在数量上可以直接相加的总体：如甲企业的产值和乙企业的产值的产值和乙企业的产值复杂总体：在数量上不能直接相加的总体复杂总体：在数量上不能直接相加的总体如：不同产品由于计量单位不同，其产量如：不同产品由于计量单位不同，其产量是不能直接相加的