书面调查和网络调查的区别-两种数据收集方法的比较.docx

第 卷 第 期统 计 与 信 息 论 坛 年 月，【统计调查与分析】书面调查和网络调查的区别两种数据收集方法的比较于洪彦，黄晓治（ 中 山 大 学 管 理 学 院 ，广 东 广 州 ；广 西 大 学 商 学 院 ，广 西 南 宁 ）摘要 ：随 着 网 络 调 查 的 兴 起 ，研 究 者 必 须 确 认 网 络 调 查 与 传 统 的 纸 笔 调 查 效 果 是 否 相 同 。 从 数 据 收 集 质量 和 测 量 效 果 两 个 方 面 对 纸 笔 调 查 与 网 络 调 查 进 行 了 比 较 。 研 究 发 现 ：纸 笔 调 查 与 网 络 调 查 的 测 量 模 型 和测 量 信 度 没 有 显 著 差 异 ，但 是 ，纸 笔 调 查 的 测 量 均 值 高 于 网 络 调 查 ，而 网 络 调 查 的 测 量 误 差 高 于 纸 笔 调 查 ，网络 调 查 的 缺 失 率 更 低 ，纸 笔 调 查 与 网 络 调 查 具 有 测 量 不 变 性 。关键词 ：纸 笔 调 查 ；网 络 调 查 ；测 量 不 变 性中图分类号 ： 文献标志码 ： 文章编号 ：（）一、引言随 着 网 络 技 术 的 发 展 ，许 多 研 究 者 开 始 运 用 网络 调 查 方 法 收 集 数 据 ，与 传 统 的 纸 笔 调 查（又 称 书 面调 查）技 术 相 比 ，网 络 调 查 更 加 节 省 时 间 成 本 和 金 钱质量和测量的效果角度来讨论纸笔调查与网络调查是否具有相同的结果 。在 网 络 调 查 早 期 ，和 就 已 经 将网 络 调 查 与 传 统 的 纸 笔 调 查 相 比 较 ，他 们 发 现 ，当 网络 调 查 的 回 答 率 得 到 有 组 织 的 管 理 时 ，运 用 网 络 调成 本 ，因 而 网 络 调 查 近 年 来 日 益 流 行 查比 纸 笔 调 查 更 加 节 省 时 间 。等 人 则 从 宏外的 一 个 网 络 调 查 网 站 “”可 以 向 使 用 者提 供 容 量 为 万 人 的 样 本 库 。 国 内 的 网 络 调 查 网站“问 卷 星”则 可 以 向 使 用 者 提 供 容 量 为 万 人 的样 本 库 ，已 经 有 多 万 人 、 多 所 高 校 和 多当研究者 使 用 网 络 调 查 时 通 常 都 会 问 这 样 一 个 问题 ，即 网 络 调 查 与 传 统 的 纸 笔 调 查 效 果 相 同 吗 ？ 一些学者已经开始比 较 纸 笔 调 查 与 网 络 调 查 的 效 果 ，然 而 ，这 些 研 究 大 多 集 中 于 比 较 纸 笔 调 查 与 网 络 调查 在 回 答 率 上 的 差 异 。 例 如 ， 和 对 年 间 发 表 的 篇 比 较 纸 笔 调 查 与 网 络 调 查 的文 章 进 行 了 元 分 析 ，发 现 从 总 体 上 看 ，纸 笔 调 查 比 网观和微观 两 个 层 面 对 纸 笔 调 查 与 电 子 调 查 进 行 对比 。然 而 ，与 已 有 研 究 的 时 间 相 比 较 ，当 今 计 算 机技 术 和 网 络 应 用 的 发 展 已 经 发 生 了 巨 大 的 变 化 ，对于 当 年 的 调 查 对 象 来 说 ，计 算 机 网 络 还 是 新 生 事 物 ，但 是 对 于 今 天 的 许 多 人 来 说 ，计 算 机 网 络 已 经 成 为了 生 活 当 中 不 可 或 缺 的 一 个 部 分 ，网 络 调 查 的 页 面设 计 与 友 好 程 度 得 到 充 分 改 善 ，因 此 ，需 要 对 网 络 调查和纸笔调查的异同进行更为细致的研究 。参 考 等 的 研 究 ，将 从 两 个 层 面 来 讨 论 纸笔 调 查 与 网 络 调 查 的 异 同 ，在 表 面 层 面 上 ，我 们 比 较纸 笔 调 查 与 网 络 调 查 在 数 据 汇 总 方 面 的 特 征 ，包 括缺 失 数 据 率 、量 表 均 值 和 测 量 信 度 上 是 否 相 同 ；在 更络调查的回答率更高 为 细 致 的 层 面 上 ，我 们 比 较 纸 笔 调 查 与 网 络 调 查 在收稿日期 ：基金项目 ：国 家 自 然 科 学 基 金 项 目 基 于 共 创 价 值 的 互 动 导 向 、顾 客 行 为 与 企 业 绩 效 的 实 证 研 究 （）；教 育 部 规 划课 题 双 维 度 市 场 导 向 ，创 新 与 企 业 绩 效 关 系 研 究 （）；国 家 自 然 科 学 基 金 项 目 基 于 新 营 销 定 义的 中 国 服 务 业 市 场 导 向 研 究 及 其 实 证 分 析 （）作者简介 ：于 洪 彦 ，男 ，吉 林 长 春 人 ，教 授 ，博 士 生 导 师 ，研 究 方 向 ：营 销 战 略 ；黄 晓 治 ，男 ，广 西 柳 州 人 ，管 理 学 博 士 ，研 究 方 向 ：营 销 战 略 。 数 据 来 源 于 网 站 ：和 问 卷 星 网 站 ：。 。 例 如 ，国家 企 业 正 在 使 用 “问 卷 星 ”网 络 调 查 平 台 。 然 而 ， 。 但很少有人从数据收集的 统计与信息论坛数 据 运 行 分 析 和 测 量 模 型 上 是 否 存 在 差 异 。二、文献回顾学术界和实务界对网络调查青睐的原因是网络调 查 具 有 节 省 调 查 工 作 费 用 的 潜 力 。 和比 较 了 电 子 调 查 和 邮 寄 调 查 ，指 出 电 子 调查 在 成 本 上 具 有 优 势 。 虽 然 成 本 问 题 非 常 重 要 ，但是 在 选 择 调 查 方 法 上 不 应 该 仅 仅 考 虑 成 本 问 题 ，在许 多 情 况 下 ，数 据 收 集 的 质 量 才 应 该 是 选 择 调 查 方盘 ，再 将 软 盘 作 为 电 子 问 卷 发 放 给 调 查 对 象 ，就 调 查方 法 来 说 ，他 们 所 考 查 的 电 子 调 查 与 我 们 所 要 考 查的网络调 查 是 有 区 别 的 。 我 们 所 要 考 查 的 网 络 调查 ，指 的 是 运 用 网 络 调 查 平 台 制 作 调 查 问 卷 ，并 通 过网 络 调 查 平 台 向 调 查 对 象 发 放 问 卷 ，调 查 对 象 自 主在网络调查平台上完成问卷的整个调查过程 。综 上 所 述 ，已 有 研 究 虽 然 对 纸 笔 调 查 与 网 络 调查 进 行 了 比 较 ，但 仍 然 存 在 两 点 不 足 ：第 一 ，已 有 研究主要讨 论 纸 笔 调 查 与 网 络 调 查 在 回 答 率 上 的 差法的主要驱动因素 异 ，缺 少 将 二 者 进 行 更 为 深 入 地 对 比 研 究 ；第 二 ，已在 世 纪 年 代 ， 等 人 提 出 在 互 联 网上 广 泛 地 运 用 网 络 调 查 ，可 以 提 高 回 答 率 ，增 加 自 我揭露 、主 动 贡 献 和 自 我 选 择 回 答 。 他 们 随 机 调 查 了 个 互 联 网 用 户 ，并 同 时 通 过 电 子 邮 件 和 发放 问 卷 ，结 果 发 现 ，选 择 在 上 接 受 调 查 的 对 象 ，对问卷回答的完成程度和回答的质量都要高于通过电子 邮 件 调 查 。 和 对 网 络 调 查 和纸 笔 调 查 进 行 了 直 接 的 比 较 ，他 们 发 现 纸 笔 调 查 的有 研 究 大 多 发 表 于 年 前 后 ，目 前 互 联 网 的 普 及与 应 用 与 年 前 有 了 巨 大 的 变 化 ， 年 前 ，国 内 还没 有 专 业 的 网 络 调 查 平 台 ，目 前 流 行 的 “问 卷 星 ”网络 调 查 平 台 于 年 才 开 始 投 入 运 行 ，因 此 ，已 有的 研 究 结 果 ，也 需 要 在 现 行 环 境 下 进 一 步 检 验 。三、研究假设本文的研究假设围绕网络调查和纸笔调查两种回答率高于 网 络 调 查 不 同 的 数 据 收 集 方 法 而 提 出 ，并 从 两 个 层 面 进 行 讨送 电 子 邮 件 进 行 网 络 调 查 ，通 常 会 让 调 查 对 象 认 为论 ，在 表 面 层 面 上 ，我 们 通 过 数 据 汇 总 的 指 标 比 较 纸调 查 问 卷 是 垃 圾 邮 件 ，从 而 拒 绝 接 受 访 问 笔调查与 网 络 调 查 在 数 据 收 集 质 量 上 是 否 存 在 差研 究 结 果 表 明 ，从 总 体 上 看 ，网 络 调 查 的 回 答 率 比 纸笔 调 查 要 低 ，运 用 网 络 调 查 方 法 的 研 究 者 必 须 想 办法解决垃圾邮件问题 。与 传 统 的 纸 笔 调 查 一 样 ，为 了 提 高 数 据 收 集 质量 而 进 行 努 力 ，从 而 引 起 特 定 调 查 对 象 的 兴 趣 而 对调 查 题 项 进 行 设 计 的 能 力 非 常 重 要 。 例 如 ，和 提 出 ，新 闻 组 是 选 择 那 些 对 调 查 主 题 有 兴趣 的 调 查 对 象 的 有 效 方 法 ，能 够 减 少 调 查 对 象 对 网异 ，包 括 缺 失 数 据 率 、量 表 均 值 和 测 量 信 度 。等 比 较 了 电 子 调 查 与 纸 笔 调 查 的 测 量 均值 与 测 量 信 度 ，发 现 电 子 调 查 与 纸 笔 调 查 的 测 量 均值 没 有 显 著 差 异 ，二 者 都 具 有 较 高 的 测 量 信 度 。 通 过 开 放 问 题 的 形 式 比 较 了 网 络 调 查 与 纸笔 调 查 的 缺 失 数 据 ，发 现 当 开 放 问 题 所 要 求 回 答 的答 案 较 短 时 ，网 络 调 查 与 纸 笔 调 查 的 空 白 率 相 同 ；当开 放 问 题 所 要 求 的 回 答 较 长 时 ，网 络 调 查 与 纸 笔 调络调 查 的 负 面 回 应 查 的 无 效 回 答 率 没 有 显 著 差 异 。对于调查 的 态 度 与 其 对 调 查 回 应 行 为 具 有 相 关 关系 ，这 个 发 现 暗 示 ，如 果 调 查 对 象 对 于 网 络 调 查 具 有正 面 的 态 度 ，那 么 ，这 些 调 查 对 象 将 更 加 适 应 网 络 调根 据 以 上 分 析 ，假 设 网 络 调 查 在 数 据 收 集 质 量上 与 传 统 的 纸 笔 调 查 没 有 显 著 的 差 异 ，具 体 假 设 为 ：纸 笔 调 查 与 网 络 调 查 对 构 念 测 量 的 均 值查 ，也 将 在 网 络 调 查 中 提 供 更 为 有 用 的 信 息 相同 ；等 人 从 宏 观 和 微 观 两 个 层 面 对 纸 笔 调 查与 电 子 调 查 进 行 了 比 较 。 他 们 的 研 究 发 现 ，在 宏 观层 面 上 ，电 子 调 查 与 纸 笔 调 查 的 测 量 均 值 和 测 量 信度 没 有 显 著 差 异 ，但 电 子 调 查 比 纸 笔 调 查 的 数 据 缺失 率 更 低 ，电 子 调 查 有 利 于 解 决 数 据 缺 失 问 题 ；在 微观 层 面 上 ，电 子 调 查 与 纸 笔 调 查 的 测 量 模 型 没 有 显：纸 笔 调 查 与 网 络 调 查 测 量 的 信 度 相 同 ；：纸 笔 调 查 与 网 络 调 查 的 数 据 缺 失 率 相 同 。在 细 致 的 层 面 上 ，我 们 对 两 种 数 据 收 集 方 法 进行更为深入的考查 。 我们从两个方面具体考查纸笔调 查 与 网 络 调 查 是 否 存 在 差 异 ，一 方 面 ，考 查 两 种 方法 的 测 量 模 型 是 否 存 在 差 异 。 另 一 方 面 ，考 查 两 种著 差 异 ，二 者 的 测 量 误 差 也 没 有 显 著 差 异 方法在每一个测量构念上数据的离散程度即测量误等 的 研 究 框 架 为 本 研 究 提 供 了 参 考 ，然而 ，等 人 比 较 的 是 传 统 的 纸 笔 调 查 与 电 子 调查 ，他 们 利 用 计 算 机 程 序 将 传 统 的 调 查 问 卷 录 入 软差是否存在差异 。等 对 电 子 调 查 与 纸 笔 调 查 进 行 了 验 证 性因子分析，通过定义电子调查测量模型与纸笔调查测。 其 他 研 究 也 发 现 ，通 过 发。 这些。 等 人 发 现 ，人 们。于 洪 彦 ，黄 晓 治 ：书 面 调 查 和 网 络 调 查 的 区 别量模型的系数和误差项相等进行分析，结果发现电子中 本 科 生 人 、研 究 生 人 。 参 加 网 络 调 查 的 共调查与纸笔 调 查 的 测 量 模 型 没 有 显 著 差 异 有 人 ，其 中 本 科 生 人 、研 究 生 人 ，所 有 人 都网络调查与纸笔调查测量误差的比较，将网络调查与纸笔调 查 对 构 念 测 量 的 标 准 差 进 行 了 对 比 分析，结果发现，网 络 调 查 与 纸 笔 调 查 的 测 量 误 差 没 有完 成 了 问 卷 ，有 效 问 卷 为 份 。（二）量表测 量 的 变 量 包 括 学 习 导 向 、学 习 创 造 性 、学 习 绩显著差异 效 、学 习 能 力 和 学 习 态 度 。 学 习 导 向 的 量 表 参 考 了电子调查与纸笔调查进行了比较，结果发现二者没有和 的 研 究 ，为 点 李 克 特 量 表 ，包 括显著差异 个 变 量 ，即 学 习 承 诺 （ 个 题 项 ）、共 同 愿 景 （ 个 题：纸 笔 调 查 与 网 络 调 查 的 测 量 模 型 相 同 ；：纸 笔 调 查 与 网 络 调 查 的 测 量 误 差 相 同 。四、研究方法我们以小组项目教学效果为例来比较纸笔调查与 网 络 调 查 的 异 同 。 小 组 项 目 是 在 教 学 过 程 中 ，将学 生 分 为 几 组 ，各 组 学 生 根 据 教 学 要 求 到 企 业 中 去识 别 具 体 的 管 理 问 题 ，确 认 所 要 研 究 的 内 容 ，查 找 相关 文 献 ，设 计 研 究 框 架 ，提 出 研 究 方 法 ，收 集 数 据 资项）和 开 放 思 想 （ 个 题 项 ）；学 习 创 造 性 的 量 表参 考 了 和 的 研 究 ，为 语 义 差 别 量表 ，包 括 个 变 量 ，即 意 义 创 造 性 （ 个 题 项 ）和 内 容创 造 性（ 个 题 项）；学 习 绩 效 的 量 表 参 考 了 五、结果（一）表面层面的数据分析结果对纸笔调查与网络调查测量的均值和信度进行料 ，最 终 提 出 研 究 报 告 的 一 个 完 整 的 过 程分析 。 表 展示了网络调查和纸笔调查的描述性统研 究 中 ，通 过 对 大 学 本 科 生 和 研 究 生 进 行 纸 笔 调 查和 网 络 调 查 ，考 查 小 组 项 目 教 学 中 学 习 导 向 、学 习 创造性以及学习绩效的测量在纸笔调查和网络调查中是否相同 。（一）调查对象和数据采集本 研 究 为 了 方 便 获 取 样 本 ，调 查 对 象 选 自 中 山大 学 和 广 东 外 语 外 贸 大 学 ，问 卷 采 取 匿 名 方 式 ，个 人信 息 仅 包 括 学 生 的 性 别 和 年 龄 。 对 于 网 络 调 查 ，我们 运 用 的 是“问 卷 星”网 络 问 卷 调 查 平 台 。 网 络 调 查问卷的内容与纸笔调查相同 。 我们将调查问卷的网址 告 诉 给 学 生 ，由 学 生 自 行 根 据 网 址 访 问 网 站 ，在 网站 上 填 写 问 卷 。 参 加 纸 笔 调 查 的 共 有 人 ，计 分 析 结 果 和 信 度 ，从 结 果 可 以 看 出 ，在 个 测 量 构念 中 ，有 个 构 念 的 网 络 调 查 测 量 的 均 值 与 纸 笔 调查 测 量 的 均 值 存 在 显 著 差 异 ，且 都 是 网 络 调 查 的 测量均 值 显 著 地 小 于 纸 笔 调 查 测 量 的 均 值 ，假 设 没有 得 到 支 持 。 从 测 量 的 信 度 上 看 ， 个 构 念 中 ，共同 愿 景 和 内 容 创 造 性 存 在 较 大 差 异 ，共 同 愿 景 和 内容 创 造 性 网 络 测 量 的 信 度 都 高 达 以 上 ，但 是 在纸 笔 调 查 中 ，共 同 愿 景 和 内 容 创 造 性 的 信 度 却 都 小于 。 意 义 创 造 性 的 网 络 调 查 和 纸 笔 调 查 的 信 度都 很 低 ，都 小 于 。 其 他 构 念 的 测 量 信 度 ，网 络 调查 和 纸 笔 调 查 都 大 于 ，表 现 出 了 较 高 的 测 量 信度 ，假 设 得 到 了 部 分 支 持 。人 中 ，有 人 没 有 完 成 问 卷 ，有 效 问 卷 为 份 ，其表 量表的描述性统计和信度表问卷内容题项数打印版均值网络版均值全部样本均值标准差全部 打印版网络版学习能力学习承诺共同愿景开放思想学习绩效意义创造性内容创造性学习态度 注 ： 表 示 ， 表 示 ， 表 示 。 表 、表 同 。 在对比了纸笔调查与网络调查测量均值和信度的 差 异 之 后 ，接 下 来 讨 论 纸 笔 调 查 与 网 络 调 查 在 缺失数据上的差异 。 我们运用卡方检验对纸笔调查与网 络 调 查 的 缺 失 数 据 进 行 了 比 较 ，结 果 显 示 ，在 纸 笔。 对于。等也是以测量的标准差为指标对。通过以上分析，提出以下假设： 、和 的 研 究（ 个 题 项） 。 。 在本统计与信息论坛调 查 的 个 回 答 中 ，有 个 缺 失 数 据 ，缺 失 数据 率 为 。 在 网 络 调 查 的 个 回 答 中 ，没 有缺 失 数 据 ，缺 失 数 据 率 为 ，纸 笔 调 查 与 网 络 调 查 的得到支持 。 表 展示了缺失数据结果 。表 缺失数据结果表件 ，运 用 结 构 方 程 模 型 的 多 群 组 同 时 分 析 来 比 较 纸笔调查与网络调查的测量模型是否一致 。表 展示 了 测 量 模 型 的 适 配 指 标 。 模 型 为未 限 制 参 数 的 模 型 ，即 基 准 模 型 ，模 型 为 参 数 限制 模 型 ，即 设 定 纸 笔 调 查 与 网 络 调 查 的 测 量 模 型 因子 负 荷 量（回 归 系 数）相 同 。 从 结 果 上 看 ，模 型 的调查类型纸笔调查网络调查回答频次缺失频次缺失率 卡 方 自 由 度 比 为 ，比 值 小 于 ； 值 为，大 于 ； 值 为 ，小 于 ；只有 值 偏 小 ，为 ，虽 然 小 于 ，但 是 根 据 （二）细致层面的数据分析结果测 量 模 型 的 比 较 分 析 。 我 们 运 用 的 是 群 组 不变 性 检 验 中 常 用 的 测 量 不 变 性 检 验 ，即 检 验 纸 笔 调查与网络调查相对应的潜在变量与指标变量之间的因 子 负 荷 量 是 否 相 等 ，虚 无 假 设 是 群 组 间 各 潜 在 变量 与 指 标 变 量 间 的 因 子 负 荷 量 相 等 ，如 果 虚 无 假 设没 有 被 拒 绝 （ ），则 可 以 认 为 测 量 模 型 的 恒等 性 是 可 以 接 受 的 。 数 据 处 理 使 用 软我 们 接 受 模 型 ，认 为 未 加 参 数 限 制 的 模 型 适 配度 可 以 接 受 ，说 明 纸 笔 调 查 与 网 络 调 查 具 有 相 同 的因子分析模型 。同 样 ，模 型 的 卡 方 自 由 度 比 为 ，比 值 小于 ； 值 为 ，大 于 ； 值 为，小 于 值 也 偏 小 ，为 。 我 们 同样 接 受 这 个 数 值 。 因 此 ，我 们 认 为 加 了 参 数 限 制 的模型 适配度可以接受 。表 模型适配指标表卡方值自由度卡方自由度比模 型 （未 限 制 参 数 ）模 型 （限 制 参 数 ）评价标准 以 上 结 果 说 明 ，无 论 是 否 对 参 数 进 行 限 制 ，纸 笔调查与网络调查的测量模型的适配度都是可以接受的 ，但 未 说 明 纸 笔 调 查 与 网 络 调 查 的 测 量 模 型 是 否具有测量不变性 。 接着讨论测量模型的不变性 。 我们 通 过 嵌 套 模 型 来 比 较 模 型 与 模 型 的 差 异 ，表 展示了当 以 未 加 参 数 限 制 的 模 型 为 基 准 模 型时 ，加 以 参 数 限 制 的 模 型 与 模 型 的 差 异 。 通 过比较两个模型卡方 的 差 异 来 判 断 模 型 是 否 有 差 异 ，从 结 果 可 以 看 出 ，模 型 与 模 型 的 卡 方 差 异 为，自 由 度 差 异 为 ，卡 方 差 异 刚 好 在 显 著 性水 平 上 。 此 时 ，我 们 难 以 判 断 是 否 接 受 模 型 与模型 的差异显著 。表 嵌套模型比较表 （以模型 为基准 ）模 型 由于测量 不 变 性 的 虚 无 假 设 是 模 型 潜 变 量 与指 标 变 量 的 因 子 负 荷 量 相 等 ，因 此 ，我 们 通 过 比 较 纸笔调查与网络调查测量模型中潜变量与指标变量的因子负荷量来进一步判断模型 与模型 的差异 。如果纸笔调查与网络调查测量模型中潜变量与指标变 量 的 因 子 负 荷 量 相 等 ，那 么 便 无 法 拒 绝 虚 无 假 设 ，即认为模型 与 模 型 的 差 异 不 显 著 。 我 们 对 纸笔调查与网络调查 的 未 标 准 化 估 计 值 进 行 了 比 较 ，结 果 显 示 ，纸 笔 调 查 与 网 络 调 查 测 量 模 型 中 潜 变 量与 指 标 变 量 的 因 子 负 荷 量 均 相 同 。 因 此 ，模 型 与模 型 的 差 异 不 显 著 ，说 明 纸 笔 调 查 与 网 络 调 查 具有测 量 不 变 性 ，假 设 得 到 支 持 。 图 展 示 了 纸 笔调查测量模型的因子负荷量 。 图 展示了网络调查测量模型的因子负荷量 。测 量 变 异 程 度 的 比 较 分 析 。 在 细 致 层 面 上 ，对纸笔调查与网络调查所收集数据的变异程度进行比 较 分 析 。 有 时 候 ，调 查 对 象 在 回 答 问 题 时 总 是 选择 回 答 相 类 似 的 分 数 ，例 如 ，在 点 李 克 特 量 表 中 ，调 查 对 象 可 能 集 中 于 回 答 高 分（ 或 者 ），也 可 能 集中 于 回 答 低 分（ 或 者 ），也 有 一 些 调 查 对 象 集 中 于缺 失 数 据 率 差 异 显 著 （ ，），假 设 没 有 等 的 文 章 ，这 个 数 值 仍 然 可 以 接 受 。 因 此 ， ； 于 洪 彦 ，黄 晓 治 ：书 面 调 查 和 网 络 调 查 的 区 别回 答 中 等 分 数（ 、 或 者 ）。 这 里 存 在 一 个 重 要 的问 题 ，即 任 何 测 量 构 念 都 存 在 一 个“真 值 效 应”和“误模 式 回 答 问 题 ，而 不 是 根 据 构 念 的 真 实 情 况 回 答 问题 ，则 通 常 会 造 成 误 差 效 应 。差 效 应”，如 果 回 答 者 在 回 答 问 题 的 过 程 中 按 照 某 种图 纸笔调查未标准化估计值图图 网络调查未标准化估计值图 在 具 体 的 考 查 过 程 中 ，我 们 以 每 个 测 量 题 项 的标准差来反映数据的变异程度 。 以 点李克特量表为 例 ，同 样 一 个 构 念（例 如 有 个 测 量 题 项），有 些 调查 对 象 回 答 的 结 果 可 能 是（ ， ， ， ，），而 有 些 调 查 统计与信息论坛对 象 回 答 的 结 果 可 能 是（ ， ， ， ，），两 种 结 果 的 均值 都 是 ，但 是 ，两 种 回 答 的 标 准 差 是 不 一 样 的 。 低的标准差可能表示回答者在回答问题时答案更为集中 ，误 差 更 小 ，也 可 能 是 回 答 者 受 到 了 回 答 模 式 的 影响 ，而 存 在 误 差 效 应 。 根 据 等 的 建 议 ，我 们 并期 望 的 影 响 ，有 研 究 表 明 ，相 对 于 自 我 管 理 的 调 查 环境 ，在 访 谈 调 查 中 ，回 答 者 更 容 易 受 到 社 会 期 望 效 应的 影 响 ，更 倾 向 于 回 答 研 究 者 所 期 望 的 答案 。 相 对 于 纸 笔 调 查 ，网 络 调 查 更 加 具 有 自我 管 理 的 特 性 ，因 此 网 络 调 查 受 到 社 会 期 望 效 用 的不是简单地以标准差的大小来定义测量误 差 影 响 会 小 于 纸 笔 调 查 ，我 们 发 现 纸 笔 调 查 对 构 念 的于我们已经对每一 个 测 量 构 念 进 行 了 信 度 的 检 验 ，对 于 那 些 通 过 了 信 度 检 验 的 构 念 ，我 们 认 为 无 论 是运 用 网 络 调 查 ，还 是 运 用 纸 笔 调 查 ，测 量 结 果 都 是 可信 的 ，在 这 种 情 况 下 ，如 果 数 据 的 变 异 越 小 ，也 就 是标 准 差 越 小 ，则 说 明 测 量 的 误 差 越 小 。在 具 体 的 分 析 过 程 中 ，首 先 计 算 出 每 一 个 调 查对 象 在 每 一 个 构 念 上 回 答 的 标 准 差 ，然 后 分 别 将 网络调查和纸笔调查的每一个调查对象在每一个构念上 回 答 的 标 准 差 计 算 平 均 数 ，获 得 每 一 个 测 量 构 念在 网 络 调 查 和 纸 笔 调 查 上 回 答 的 标 准 差 均 值 ，通 过比 较 这 个 均 值 ，我 们 对 比 纸 笔 调 查 与 网 络 调 查 的 测量 误 差 。 计 算 结 果 如 表 所 示 ，在 个 测 量 构 念 中 ，有 个构念的测量误差在纸笔调查与网络调查中差异 显 著 ，其 中 有 个 构 念 ，网 络 调 查 的 标 准 差 大 于 纸笔 调 查 的 标 准 差 ，只 有 两 个 构 念 ，网 络 调 查 的 标 准 差小 于 纸 笔 调 查 的 标 准 差 ，说 明 从 总 体 上 看 ，网 络 调 查的测 量 误 差 要 大 于 纸 笔 调 查 的 测 量 误 差 ，假 设 没有得到支持 。表 构念的测量误差表测 量 均 值 高 于 网 络 调 查 ，很 可 能 是 由 于 纸 笔 调 查 受到社会期 望 效 应 的 影 响 。 而 在 对 构 念 的 测 量 信 度上 ，纸 笔 调 查 与 网 络 调 查 都 表 现 出 了 较 高 的 测 量 信度 ，这 个 结 果 说 明 纸 笔 调 查 与 网 络 调 查 都 同 样 具 有测 量 可 信 度 。 在 数 据 缺 失 率 方 面 ，我 们 发 现 网 络 调查 的 数 据 缺 失 率 要 显 著 地 低 于 纸 笔 调 查 ，可 能 的 原因 是 在 进 行 网 络 调 查 的 时 候 ，可 以 设 置“必 答 题”，当问 题 设 置 为“必 答”时 ，回 答 者 必 须 回 答 这 个 问 题 ，否则 问 卷 无 法 完 成 ，这 个 发 现 对 于 那 些 受 到 数 据 缺 失问题困扰的研究者来说具有参考价值 。在 细 致 层 面 ，我 们 检 验 了 纸 笔 调 查 与 网 络 调 查的测量不变性和数据变异程度 。 从测量不变性检验的 结 果 来 看 ，纸 笔 调 查 与 网 络 调 查 对 于 相 同 的 测 量构 念 具 有 相 同 的 因 子 结 构 ，测 量 模 型 中 潜 在 变 量 与指 标 变 量 间 的 因 子 负 荷 量 相 同 ，表 明 纸 笔 调 查 与 网络 调 查 具 有 测 量 不 变 性 。 在 数 据 变 异 程 度 方 面 ，我们 发 现 ，对 于 每 一 个 调 查 对 象 在 每 一 个 测 量 构 念 上测 量 数 据 标 准 差 的 均 值 ，网 络 调 查 要 显 著 得 大 于 纸笔 调 查 ，在 测 量 信 度 和 测 量 模 型 都 可 以 接 受 的 情 况问卷内容学习能力学习承诺共同愿景开放思想学习绩效意义创造性内容创造性学习态度纸笔版标准差 网络版标准差 下 ，测 量 数 据 的 标 准 差 越 大 ，说 明 数 据 的 变 异 程 度 越大 ，则 测