JR T 0206-2021 证券期货业大数据平台性能测试指引.pdf

1、ICS 03.060CSS A 11 JR中 华 人 民 共 和 国 金 融 行 业 标 准JR/T 0206 2021证 券 期 货 业 大 数 据 平 台 性 能 测 试 指 引 Reference for big data platform performance test of securities and futures industry 2021-06- 15发 布 2021- 06 -15实 施中 国 证 券 监 督 管 理 委 员 会 发 布 JR/T 0206 2021 I 目 次前 言 .II1 范 围 .12 规 范 性 引 用 文 件 .13 术 语 和 定 义 .14

2、 缩 略 语 .15 测 试 目 标 .16 测 试 准 备 .16.1 测 试 环 境 准 备 .1 6.2 测 试 数 据 准 备 .37 测 试 内 容 和 方 法 .57.1 测 试 概 述 .57.2 基 准 测 试 .67.3 数 据 加 载 性 能 测 试 .67.4 数 据 查 询 性 能 测 试 .107.5 混 合 负 载 性 能 测 试 .167.6 数 据 操 作 性 能 测 试 .177.7 数 据 导 出 性 能 测 试 .198 扩 展 测 试 .218.1 扩 展 测 试 概 述 .218.2 索 引 测 试 .21 8.3 分 区 键 测 试 .228.4 分

3、 布 键 测 试 .228.5 列 存 储 测 试 .228.6 资 源 队 列 测 试 .22附 录 A （ 资 料 性 附 录 ） 平 台 、 术 语 、 工 具 名 称 解 释 及 TCP基 准 测 试 套 说 明 .24参 考 文 献 .26 JR/T 0206 2021 II 前 言本 文 件 按 照 GB/T 1.1 2020 标 准 化 工 作 导 则 第 1部 分 ： 标 准 化 文 件 的 结 构 和 起 草 规 范 的 规 定起 草 。请 注 意 本 文 件 的 某 些 内 容 可 能 涉 及 专 利 。 本 文 件 的 发 布 机 构 不 承 担 识 别 专 利 的 责

4、任 。本 文 件 由 全 国 金 融 标 准 化 技 术 委 员 会 证 券 分 技 术 委 员 会 （ SAC/TC 180/SC4） 提 出 。本 文 件 由 全 国 金 融 标 准 化 技 术 委 员 会 （ SAC/TC 180） 归 口 。本 文 件 起 草 单 位 ： 中 国 证 券 监 督 管 理 委 员 会 科 技 监 管 局 、 深 圳 证 券 交 易 所 、 上 海 证 券 交 易 所 、 中 证信 息 技 术 服 务 有 限 责 任 公 司 、 中 国 证 券 登 记 结 算 有 限 公 司 、 深 圳 证 券 通 信 有 限 公 司 。本 文 件 主 要 起 草 人 ：

5、 姚 前 、 蒋 东 兴 、 周 云 晖 、 喻 华 丽 、 万 春 波 、 陈 明 忠 、 顾 军 妹 、 谷 博 、 林 宇 、 沙明 、 韩 凤 宁 、 刘 大 海 、 何 飞 、 李 向 东 、 王 蕾 蕾 、 陈 亮 、 莫 锋 、 李 小 光 。 JR/T 0206 2021 1 证 券 期 货 业 大 数 据 平 台 性 能 测 试 指 引1 范 围本 文 件 给 出 了 证 券 期 货 业 大 数 据 平 台 提 供 性 能 测 试 指 引 ， 指 引 内 容 包 括 测 试 目 标 、 测 试 准 备 、 测 试内 容 和 方 法 、 扩 展 测 试 。本 文 件 适 用 于

6、 证 券 期 货 行 业 的 核 心 机 构 和 经 营 机 构 对 大 数 据 平 台 （ Hadoop平 台 和 MPP数 据 库 ） 在 选型 期 或 建 设 期 进 行 性 能 测 试 。注 ： 核 心 机 构 包 括 证 券 交 易 所 、 期 货 交 易 所 、 登 记 结 算 公 司 等 ， 经 营 机 构 包 括 证 券 公 司 、 期 货 公 司 、 基 金 管 理 公 司等 。2 规 范 性 引 用 文 件 本 文 件 没 有 规 范 性 引 用 文 件 。3 术 语 和 定 义本 文 件 没 有 需 要 界 定 的 术 语 和 定 义 。4 缩 略 语下 列 缩 略 语

7、适 用 于 本 文 件 。MPP： 大 规 模 并 行 处 理 （ Massively Parallel Processor）CPU： 中 央 处 理 器 （ Central Processing unit）ETL： 抽 取 转 换 加 载 （ Extract-Transform-Load） 5 测 试 目 标测 试 的 主 要 目 标 是 通 过 测 试 收 集 被 测 大 数 据 系 统 在 特 定 场 景 下 的 关 键 性 能 指 标 ， 根 据 指 标 结 果 评 估被 测 系 统 性 能 。 所 收 集 的 性 能 指 标 分 为 如 下 两 类 ：a) 时 间 相 关 指 标 ：

8、 包 括 吞 吐 、 速 率 、 时 延 和 响 应 时 间 等 ， 指 标 将 从 单 位 时 间 、 特 定 长 度 时 间 、 数据 从 源 端 到 目 标 端 流 转 时 间 和 数 据 请 求 发 起 到 服 务 完 成 时 间 等 不 同 角 度 反 映 被 测 系 统 处 理 数据 的 效 率 和 能 力 ；b) 系 统 资 源 相 关 指 标 ： 包 括 服 务 器 主 要 硬 件 资 源 （ CPU、 内 存 、 磁 盘 、 网 卡 等 ） 的 利 用 率 和 操 作系 统 软 件 资 源 （ 进 程 数 、 网 络 连 接 数 量 、 文 件 句 柄 占 用 数 量 等 ）

9、 的 使 用 情 况 。6 测 试 准 备6.1 测 试 环 境 准 备 JR/T 0206 2021 2 6.1.1 环 境 检 查大 数 据 平 台 中 ， 被 测 集 群 由 服 务 器 集 群 组 成 ， 不 同 的 测 试 环 境 对 测 试 结 果 会 产 生 不 同 的 影 响 ， 按 照平 台 的 设 计 目 标 选 择 性 能 测 试 使 用 的 测 试 环 境 配 置 ， 在 测 试 正 式 执 行 前 对 环 境 进 行 检 查 。6.1.2 服 务 器 准 备测 试 所 用 的 服 务 器 全 部 采 用 物 理 机 ， 相 同 功 能 域 的 节 点 采 用 相 同

10、的 硬 件 配 置 ， 任 意 一 个 管 理 节 点 与其 它 管 理 节 点 硬 件 配 置 相 同 ， 任 意 一 个 数 据 节 点 与 其 它 数 据 节 点 硬 件 配 置 相 同 。测 试 所 需 节 点 数 量 的 估 算 公 式 如 下 ：节 点 数 量 =（ 数 据 副 本 数 设 计 的 数 据 容 量 /单 个 数 据 节 点 容 量 )+管 理 节 点 数 量 +其 它 功 能 节 点 数 量注 ： 数 据 容 量 暂 不 考 虑 压 缩 比 。 管 理 节 点 数 量 一 般 采 用 被 测 系 统 默 认 配 置 ， 通 常 每 个 集 群 采 用 1+1主 备

11、方 式 。 其 它 功 能 节 点 则 按 需 配 置 ， 数 据 平 台 产 品 中 没 有 “ 管 理 节 点 ” 概 念 的 ， 可 根 据 实 际 情 况 进 行 配 置 。6.1.3 测 试 组 网根 据 被 测 系 统 的 产 品 特 点 、 集 群 规 模 、 业 务 应 用 程 序 与 被 测 系 统 的 交 互 方 式 等 确 定 组 网 方 式 。 宜 采用 万 兆 网 络 通 信 ， 每 个 节 点 配 备 双 万 兆 网 卡 进 行 绑 定 ， 将 被 测 系 统 部 署 在 测 试 专 用 网 段 ， 与 生 产 环 境 完全 隔 离 。6.1.4 环 境 验 证在

12、部 署 安 装 被 测 系 统 前 ， 对 所 有 服 务 器 硬 件 和 网 络 配 置 进 行 检 查 以 及 性 能 验 证 ， 确 认 各 服 务 器 硬 件和 网 络 性 能 处 于 稳 定 状 态 ， 避 免 出 现 因 个 别 节 点 性 能 异 常 导 致 整 个 集 群 性 能 受 影 响 的 情 况 。在 每 个 服 务 器 上 分 别 执 行 下 述 服 务 器 硬 件 验 证 项 ， 见 表 1， 验 证 通 过 后 即 可 安 装 被 测 系 统 。表 1 服 务 器 硬 件 验 证 序 号 类 别 验 证 项 预 期 结 果1 CPU 检 查 CPU核 数 、 频

13、率 。 CPU核 数 、 频 率 与 硬 件 实 际 配 置 一 致 。2 使 用 基 准 性 能 工 具 （ 例 如 Sysbench） 测试 CPU性 能 。 性 能 结 果 与 厂 商 提 供 的 硬 件 性 能 指 标 相 符 ， 相 同 硬 件 配 置的 服 务 器 之 间 性 能 结 果 差 异 在 10%以 内 。3 内 存 检 查 内 存 条 数 、 容 量 大 小 、 频 率 和 时 序 。 内 存 条 数 、 容 量 大 小 、 频 率 和 时 序 与 硬 件 实 际 配 置 一 致 。4 使 用 基 准 性 能 工 具 （ 例 如 Sysbench） 测试 内 存 性 能

14、 。 性 能 结 果 与 厂 商 提 供 的 硬 件 性 能 指 标 相 符 ， 相 同 硬 件 配 置的 服 务 器 之 间 性 能 结 果 差 异 在 10%以 内 。5 磁 盘 检 查 磁 盘 类 别 （ 机 械 盘 或 SSD） 、 转 速 （ 机械 盘 ） 、 容 量 大 小 和 数 量 。 磁 盘 类 别 （ 机 械 盘 或 SSD） 、 转 速 （ 机 械 盘 ） 、 容 量 大 小 和 数量 与 硬 件 实 际 配 置 一 致 。6 使 用 基 准 性 能 工 具 （ 例 如 Sysbench） 测 试 磁 盘 性 能 。 性 能 结 果 与 厂 商 提 供 的 硬 件 性 能

15、 指 标 相 符 ， 相 同 硬 件 配 置的 服 务 器 之 间 性 能 结 果 差 异 在 10%以 内 。7 网 卡 检 查 网 卡 个 数 、 带 宽 信 息 。 网 卡 个 数 、 带 宽 信 息 与 硬 件 实 际 配 置 一 致 。8 使 用 基 准 性 能 工 具 （ 例 如 Netperf） 测试 网 卡 性 能 。 性 能 结 果 与 厂 商 提 供 的 硬 件 性 能 指 标 相 符 ， 相 同 硬 件 配 置的 服 务 器 之 间 性 能 结 果 差 异 在 10%以 内 。被 测 系 统 安 装 完 毕 后 ， 对 软 件 版 本 进 行 检 查 ， 验 证 安 装

16、的 正 确 性 。 检 查 项 包 括 但 不 限 于 操 作 系 统 版本 、 内 核 版 本 、 JDK版 本 和 大 数 据 平 台 产 品 版 本 。6.1.5 系 统 资 源 监 控 JR/T 0206 2021 3 测 试 过 程 中 对 被 测 系 统 资 源 使 用 情 况 进 行 持 续 监 控 ， 在 被 测 系 统 的 每 个 节 点 上 部 署 系 统 资 源 监 控 工具 ， 例 如 Nmon、 Atop等 。 监 控 采 样 周 期 宜 控 制 在 3秒 以 内 ， 监 控 的 资 源 包 括 但 不 限 于 CPU、 内 存 、 网 络 、磁 盘 等 硬 件 资

17、源 和 进 程 、 文 件 句 柄 、 网 络 连 接 、 数 据 库 连 接 等 软 件 资 源 ， 见 表 2。表 2 系 统 资 源 监 控 项序 号 资 源 监 控 项 内 容 描 述1 CPU 包 括 系 统 整 体 CPU占 用 率 、 每 个 CPU（ 核 ） 占 用 率 、 用 户 空 间 CPU 占 用 率 、 内 核 空 间 CPU占 用 率 、 IOWait CPU占 用 率 等 。2 内 存 包 括 内 存 总 大 小 、 已 用 内 存 大 小 、 可 用 内 存 大 小 、 Cache大 小 、 共 享 内 存 大 小 等 。3 网 络 包 括 吞 吐 量 、 发

18、送 速 率 、 接 收 速 率 、 发 包 总 大 小 、 收 包 总 大 小 、 错 误 率 等 。4 磁 盘 I/O 包 括 IOPS、 写 速 率 、 读 速 率 、 带 宽 占 用 率 等 。 5 软 件 资 源 包 括 进 程 数 、 文 件 句 柄 占 用 数 、 网 络 连 接 数 和 数 据 库 连 接 数 等 。6.2 测 试 数 据 准 备6.2.1 基 础 测 试 数 据 准 备基 础 测 试 数 据 选 取 了 证 券 交 易 基 础 的 订 单 、 成 交 、 行 情 数 据 以 及 基 础 信 息 资 料 数 据 ， 为 后 续 的 数 据加 载 和 数 据 查 询

19、 提 供 数 据 支 持 。 数 据 准 备 主 要 从 测 试 数 据 规 模 与 测 试 数 据 特 征 两 方 面 考 虑 ：a) 测 试 数 据 规 模 ： 结 合 大 数 据 平 台 的 设 计 目 标 和 业 务 场 景 选 取 测 试 数 据 的 数 据 规 模 ；b) 测 试 数 据 特 征 ： 测 试 数 据 的 准 备 应 具 有 代 表 性 、 广 泛 性 ， 并 考 虑 数 据 分 布 的 密 集 程 度 ， 尽 量 贴近 生 产 数 据 。6.2.2 测 试 数 据 规 模测 试 数 据 规 模 应 结 合 数 据 平 台 的 设 计 目 标 设 定 ， 可 根 据

20、以 下 公 式 进 行 简 单 估 算 ： 测 试 数 据 规 模 =存 量 数 据 规 模 +增 量 数 据 规 模公 式 中 的 存 量 数 据 规 模 和 增 量 数 据 规 模 说 明 如 下 ：a) 存 量 数 据 规 模 是 一 个 固 定 值 ， 可 采 用 生 产 环 境 历 史 数 据 总 量 值 作 为 存 量 数 据 规 模 ， 亦 可 采 用 一个 设 计 值 或 规 划 值 作 为 存 量 规 模 ；b) 增 量 数 据 规 模 根 据 业 务 场 景 划 分 不 同 档 位 ， 以 日 增 量 数 据 为 例 ， 根 据 业 务 场 景 可 划 分 为 以 下 四档

21、 ：1) 一 般 ： 近 期 （ 最 近 3 个 月 半 年 ） 生 产 环 境 数 据 平 均 日 增 量 ；2) 平 峰 ： 最 近 半 年 或 一 年 的 生 产 环 境 数 据 日 增 量 峰 值 ；3) 高 峰 ： 历 史 上 生 产 环 境 数 据 日 增 量 峰 值 ；4) 极 限 ： 规 划 或 设 计 的 系 统 所 能 承 载 的 日 增 量 峰 值 。测 试 数 据 规 模 随 增 量 数 据 规 模 也 划 分 为 一 般 、 平 峰 、 高 峰 、 极 限 四 档 ， 采 用 不 同 档 位 的 测 试 数 据 进行 测 试 ， 观 察 当 前 业 务 模 型 下 数

22、 据 增 量 负 荷 对 被 测 系 统 性 能 的 影 响 ， 相 关 测 试 结 果 可 供 后 续 业 务 性 能 调优 和 集 群 规 模 设 计 参 考 。 6.2.3 测 试 数 据 特 征大 数 据 平 台 存 储 了 多 种 类 型 和 格 式 的 数 据 ， 测 试 数 据 保 留 真 实 业 务 特 征 ， 对 数 据 特 征 的 要 求 说 明 如下 ： a) 具 有 代 表 性 ： 包 括 典 型 场 景 的 合 理 取 值 的 测 试 数 据 以 及 少 量 的 常 见 的 异 常 数 据 （ 如 缺 省 空 值 、不 一 致 数 据 、 重 复 数 据 ） 等 ；

23、JR/T 0206 2021 4 b) 具 有 广 泛 性 ： 尽 可 能 多 的 包 含 可 取 的 数 值 ， 可 以 通 过 数 据 变 换 的 方 式 生 成 更 多 的 测 试 数 据 以 针对 不 同 的 内 容 进 行 测 试 ；c) 覆 盖 不 同 的 数 据 分 布 形 态 ： 包 括 数 据 均 匀 分 布 和 非 均 匀 分 布 （ 即 数 据 倾 斜 ） 。 分 布 式 系 统 出 现非 均 匀 分 布 （ 数 据 倾 斜 ） 时 对 性 能 影 响 较 为 明 显 ， 在 构 造 测 试 数 据 时 宜 重 点 关 注 。 数 据 倾 斜 与数 据 模 型 设 计 有

24、 关 ， 可 以 根 据 实 际 情 况 构 造 以 下 三 种 数 据 倾 斜 场 景 ：1) 无 倾 斜 ： 数 据 平 均 分 布 ， 无 明 显 倾 斜 ；2) 常 规 倾 斜 ： 生 产 真 实 业 务 数 据 通 常 情 况 下 的 倾 斜 程 度 ， 或 简 单 采 用 “ 二 八 原 则 ” ， 例 如 证券 市 场 80%的 交 易 订 单 集 中 在 20%的 证 券 的 场 景 ；3) 极 端 倾 斜 ： 市 场 热 点 极 端 集 中 情 况 下 业 务 数 据 的 倾 斜 程 度 ， 例 如 证 券 市 场 20%的 交 易 订 单集 中 在 1%的 证 券 的 场

25、景 。注 ： 采 用 不 同 倾 斜 程 度 的 数 据 进 行 测 试 ， 观 察 特 定 业 务 数 据 倾 斜 对 被 测 系 统 性 能 的 影 响 ， 相 关 测 试 结 果 可 应 用 于 后 续 数 据 模 型 设 计 和 存 储 策 略 制 定 。6.2.4 测 试 数 据 组 合综 合 测 试 数 据 规 模 分 析 和 测 试 数 据 特 征 分 析 进 行 考 虑 ， 可 得 到 以 下 十 二 种 测 试 数 据 组 合 场 景 ， 实 际业 务 场 景 性 能 测 试 时 根 据 需 要 选 取 不 同 的 测 试 数 据 组 合 进 行 测 试 ， 见 表 3。表

26、3 测 试 数 据 组 合 场 景序 号 场 景 名 称 组 合 场 景 说 明1 一 般 规 模 平 均 分 布 存 量 数 据 +一 般 规 模 增 量 数 据 （ 增 量 数 据 平 均 分 布 ）2 一 般 规 模 常 规 倾 斜 存 量 数 据 +一 般 规 模 增 量 数 据 （ 增 量 数 据 常 规 倾 斜 ）3 一 般 规 模 极 端 倾 斜 存 量 数 据 +一 般 规 模 增 量 数 据 （ 增 量 数 据 极 端 倾 斜 ） 4 平 峰 规 模 平 均 分 布 存 量 数 据 +平 峰 规 模 增 量 数 据 （ 增 量 数 据 平 均 分 布 ）5 平 峰 规 模 常

27、 规 倾 斜 存 量 数 据 +平 峰 规 模 增 量 数 据 （ 增 量 数 据 常 规 倾 斜 ）6 平 峰 规 模 极 端 倾 斜 存 量 数 据 +平 峰 规 模 增 量 数 据 （ 增 量 数 据 极 端 倾 斜 ）7 高 峰 规 模 平 均 分 布 存 量 数 据 +高 峰 规 模 增 量 数 据 （ 增 量 数 据 平 均 分 布 ）8 高 峰 规 模 常 规 倾 斜 存 量 数 据 +高 峰 规 模 增 量 数 据 （ 增 量 数 据 常 规 倾 斜 ）9 高 峰 规 模 极 端 倾 斜 存 量 数 据 +高 峰 规 模 增 量 数 据 （ 增 量 数 据 极 端 倾 斜 ）1

28、0 极 限 规 模 平 均 分 布 存 量 数 据 +极 限 规 模 增 量 数 据 （ 增 量 数 据 平 均 分 布 ）11 极 限 规 模 常 规 倾 斜 存 量 数 据 +极 限 规 模 增 量 数 据 （ 增 量 数 据 常 规 倾 斜 ）12 极 限 规 模 极 端 倾 斜 存 量 数 据 +极 限 规 模 增 量 数 据 （ 增 量 数 据 极 端 倾 斜 ）6.2.5 测 试 数 据 构 造大 数 据 平 台 的 数 据 规 模 大 ， 数 据 特 征 多 样 且 复 杂 ， 宜 使 用 脱 敏 的 生 产 数 据 作 为 种 子 数 据 ， 再 通 过 特 定 规 则 变 换

29、 进 行 批 量 构 造 。 选 取 真 实 生 产 数 据 （ 如 选 取 历 史 上 某 一 天 的 数 据 ） ， 进 行 脱 敏 后 作 为 种 子 数据 。 根 据 估 算 的 数 据 规 模 ， 对 种 子 数 据 进 行 翻 倍 和 转 换 以 获 得 所 需 的 存 量 测 试 数 据 与 增 量 测 试 数 据 。 种子 数 据 的 翻 倍 规 则 要 能 保 留 数 据 的 业 务 特 征 。测 试 数 据 构 造 示 例 ：以 证 券 交 易 所 数 仓 中 一 部 分 典 型 数 据 模 型 为 例 ， 选 取 生 产 环 境 历 史 数 据 中 的 一 天 数 据 ，

30、 经 过 数 据 脱 敏 和 数 据 倾 斜 改造 （ 按 “ 常 规 倾 斜 ” 程 度 改 造 ） 后 ， 得 到 如 下 种 子 数 据 ， 见 表 4。 JR/T 0206 2021 5 表 4 种 子 数 据序 号 数 据 表 数 据 量 （ 行 ） 文 件 大 小 说 明1 订 单 表 3000万 3.375G 数 据 量 随 交 易 日 动 态 增 长2 成 交 表 4500万 5.25G 数 据 量 随 交 易 日 动 态 增 长3 逐 笔 行 情 表 300万 825M 数 据 量 随 交 易 日 动 态 增 长4 股 份 持 有 表 3000万 1.8G 数 据 量 随 交

31、 易 日 动 态 增 长5 证 券 信 息 表 1万 3M 资 料 表 ， 数 据 量 固 定6 投 资 者 资 料 表 10亿 145G 资 料 表 ， 数 据 量 固 定7 营 业 部 资 料 表 10万 19M 资 料 表 ， 数 据 量 固 定8 会 员 资 料 表 1000个 0.5M 资 料 表 ， 数 据 量 固 定 9 交 易 单 元 资 料 表 10万 15M 资 料 表 ， 数 据 量 固 定假 设 以 一 年 历 史 数 据 作 为 存 量 数 据 ， 按 业 务 规 则 对 种 子 数 据 的 4个 动 态 表 进 行 数 据 翻 倍 （ 按 一 年 240个 交 易

32、日 计 算 ） ，得 到 存 量 数 据 ， 见 表 5。 表 5 翻 倍 后 的 数 据序 号 数 据 表 数 据 量 （ 行 ） 文 件 大 小1 订 单 表 72亿 810G2 成 交 表 108 亿 1260G3 逐 笔 行 情 表 7.2 亿 198G4 股 份 持 有 表 72亿 432G5 证 券 信 息 表 1 万 3M 6 投 资 者 资 料 表 10亿 145G7 营 业 部 资 料 表 10万 19M8 会 员 资 料 表 1000个 0.5M9 交 易 单 元 资 料 表 10万 15M增 量 数 据 同 样 是 在 种 子 数 据 基 础 上 按 业 务 规 则 对

33、动 态 表 进 行 数 据 量 翻 倍 以 及 数 据 倾 斜 改 造 。 以 订 单 表 为 例 ， 按 四 档数 据 规 模 划 分 ， 见 表 6。 表 6 数 据 规 模 划 分序 号 订 单 表 数 据 规 模 数 据 量 （ 行 ） 文 件 大 小1 一 般 3000万 3.375G2 平 峰 8000万 9G 3 高 峰 1.2 亿 13.5G4 极 限 4 亿 45G每 一 档 数 据 再 根 据 数 据 倾 斜 程 度 准 备 “ 无 倾 斜 ” 、 “ 一 般 倾 斜 ” 、 “ 极 端 倾 斜 ” 三 份 数 据 ， 则 订 单 表 总 计 需 要 准 备12份 数 据

34、待 用 。成 交 表 、 逐 笔 行 情 表 和 股 份 持 有 表 采 用 同 样 的 方 法 各 生 成 12份 数 据 待 用 ， 最 终 完 成 所 有 组 合 的 增 量 测 试 数 据 准 备 。7 测 试 内 容 和 方 法7.1 测 试 概 述大 数 据 平 台 性 能 测 试 主 要 包 括 平 台 基 准 测 试 和 基 于 业 务 场 景 的 性 能 测 试 ： JR/T 0206 2021 6 a) 平 台 的 基 准 测 试 ， 该 项 测 试 采 用 自 带 的 业 务 模 型 ， 对 大 数 据 平 台 进 行 指 标 定 量 、 可 对 比 的 性 能测 试 ；

35、b) 基 于 业 务 场 景 的 性 能 测 试 ， 采 用 已 准 备 的 代 表 不 同 数 据 规 模 和 数 据 特 征 的 测 试 数 据 组 合 开 展 基于 业 务 场 景 的 性 能 测 试 ， 包 括 以 下 测 试 内 容 ：1) 数 据 加 载 性 能 测 试 ： 数 据 加 载 分 为 全 量 加 载 、 增 量 加 载 和 库 内 加 载 。 全 量 加 载 模 拟 的 是 业务 存 量 数 据 迁 移 到 被 测 系 统 的 场 景 ， 属 于 一 次 性 加 载 场 景 ， 主 要 考 察 加 载 效 率 ； 增 量 加 载模 拟 的 是 外 部 业 务 数 据

36、每 日 增 量 加 载 到 被 测 系 统 的 场 景 ， 属 于 实 时 加 载 场 景 ， 主 要 考 察 吞吐 量 和 时 延 ； 库 内 加 载 模 拟 的 是 增 量 业 务 数 据 归 档 （ 从 当 前 表 存 入 历 史 表 ） 的 场 景 ， 同 样考 察 加 载 效 率 。 出 于 对 场 景 通 用 性 的 考 虑 ， 全 量 加 载 的 数 据 源 采 用 文 本 数 据 源 ， 增 量 加 载的 数 据 源 采 用 Kafka（ 名 称 解 释 参 见 附 录 A的 A.1） 数 据 源 ；2) 数 据 查 询 性 能 测 试 ： 数 据 查 询 性 能 测 试 模

37、拟 的 是 业 务 应 用 程 序 向 被 测 系 统 发 起 查 询 请 求 的场 景 ， 通 过 调 整 查 询 语 句 的 复 杂 程 度 和 查 询 的 并 发 量 ， 渐 进 式 的 评 估 被 测 系 统 处 理 查 询 任务 时 的 性 能 表 现 。 测 试 内 容 分 为 单 项 查 询 性 能 测 试 和 并 发 查 询 性 能 测 试 ； 3) 混 合 负 载 性 能 测 试 ： 混 合 负 载 性 能 测 试 是 数 据 增 量 加 载 性 能 测 试 与 并 发 查 询 性 能 测 试 的 一种 测 试 组 合 ， 模 拟 的 是 被 测 系 统 在 实 时 加 载 数 据 的 过 程 中 ， 同 时 处 理 业 务 查 询 请 求 的 场 景 。测 试 目 的 是 观 察 加 载 与 查 询 同 时 开 展 时 ， 相 比 于 加 载 与 查 询 独 立 开 展 时 性 能 指 标 发 生 了 多大 的 变 化 。4) 数 据 操 作 性 能 测 试 ： 数 据 操 作 指 增 加 、 更 新 和 删 除 数 据 的 操 作 。 因 数 据 加 载 实 际 上 已 覆 盖到 增 加 数 据 的 操 作 ，