搜索

[15066] 2020-02-27_微盟删库事故启示录

文档创建者：s7ckTeam
浏览次数：5
最后更新：2025-01-18
2020-02-27_微盟删库事故启示录 微 盟 删 库 事 故 启 示 录 s h i d o n g q i   F r e e B u f   2 0 2 0 - 0 2 - 2 7 近 期 热 议 的 微 盟 系 统 故 障 事 件 ， 想 必 大 部 分 人 都 已 经 有 所 关 注 。 截 止 近 期 热 议 的 微 盟 系 统 故 障 事 件 ， 想 必 大 部 分 人 都 已 经 有 所 关 注 。 截 止 2 月 月 2 6 日 中 午 ， 微 盟 官 网 仍 然 挂 着 公 告 ， 表 日 中 午 ， 微 盟 官 网 仍 然 挂 着 公 告 ， 表 示 数 据 还 在 修 复 过 程 中 。 示 数 据 还 在 修 复 过 程 中 。 从 2 月 2 3 日 晚 间 S a a S 业 务 生 产 环 境 和 数 据 遭 到 严 重 破 坏 ， 直 到 2 5 日 核 心 业 务 基 本 恢 复 ， 基 本 不 影 响 新 用 户 使 用 ， 但 由 于 部 分 数 据 还 在 修 复 过 程 中 ， 官 方 仍 然 建 议 老 用 户 重 新 注 册 账 户 使 用 ， 后 续 再 进 行 新 老 账 户 数 据 合 并 ， 预 计 到 2 8 日 晚 间 才 能 完 全 修 复 。 删 库 跑 路 ， 近 几 年 偶 有 发 生 ， 甚 至 经 常 成 为 技 术 圈 中 调 侃 的 话 题 。 而 作 为 国 内 最 大 的 微 信 生 态 服 务 商 ， 微 盟 在 香 港 上 市 已 近 七 年 ， 员 工 规 模 也 超 过 3 0 0 0 人 。 系 统 故 障 造 成 的 严 重 影 响 超 过 3 6 个 小 时 ， 数 万 商 家 业 务 无 法 进 行 ， 股 价 暴 跌 ， 很 难 想 象 这 是 一 家 上 市 公 司 所 经 历 的 窘 境 。 如 果 从 2 3 日 1 9 点 开 始 计 算 ， 到 官 方 宣 称 的 预 计 2 8 日 才 能 完 全 修 复 ， 此 次 故 障 造 成 的 影 响 竟 持 续 数 日 之 久 。 「 删 库 跑 路 」 造 成 如 此 深 远 影 响 的 ， 属 实 不 多 见 的 。 微 盟 官 方 对 于 事 件 发 生 经 过 ， 并 没 有 太 多 细 节 ： 犯 罪 嫌 疑 人 乃 微 盟 研 发 中 心 运 维 部 核 心 运 维 人 员 贺 某 ， 贺 某 于   2   月   2 3   日 晚   1 8   点   5 6   分 通 过 个 人   V P N   登 入 公 司 内 网 跳 板 机 ， 因 个 人 精 神 、 生 活 等 原 因 对 微 盟 线 上 生 产 环 境 进 行 了 恶 意 的 破 坏 。
在 察 觉 到 事 故 发 生 后 ， 微 盟 第 一 时 间 和 腾 讯 云 联 系 ， 共 同 制 定 修 复 方 案 ， 即 便 如 此 也 耗 时 几 天 的 时 间 。 在 后 续 的 回 应 中 ， 微 盟 集 团 对 外 表 示 ， 商 户 数 据 备 份 完 整 ， 系 统 服 务 恢 复 后 商 户 的 使 用 将 不 受 影 响 。 通 过 已 知 的 各 个 信 息 点 对 此 次 事 故 进 行 简 单 复 盘 ， 斗 象 科 技 技 术 负 责 人 徐 钟 豪 认 为 ， 微 盟 企 业 内 部 应 该 已 经 构 建 了 一 定 的 安 全 能 力 ： 1 . V P N ： 提 供 远 程 网 络 接 入 ， 提 供 基 础 的 身 份 认 证 和 网 络 访 问 授 权 。 2 . 跳 板 机 ： S a a S 服 务 器 只 允 许 来 自 跳 板 机 的 访 问 ， 提 供 了 基 础 的 网 络 和 数 据 库 网 络 准 入 控 制 。 3 . 数 据 库 主 备 ： 具 备 故 障 迁 移 时 的 可 用 性 ， 以 及 数 据 恢 复 能 力 。 4 . 生 产 环 境 对 运 维 权 限 放 的 较 宽 ， 对 研 发 权 限 一 般 是 收 紧 的 。 相 信 很 多 互 联 网 企 业 也 是 处 于 类 似 的 状 态 。 目 前 来 看 ， 在 本 次 事 故 中 应 该 是 主 备 数 据 均 被 删 除 。 万 幸 是 进 行 了 「 D e l e t e 」 操 作 ， 而 没 有 进 行 「 P u r g e 」 、 「 覆 写 」 、 「 加 密 毁 密 钥 」 等 操 作 ， 这 种 情 况 下 还 能 从 副 本 或 者 磁 盘 恢 复 ， 只 是 恢 复 效 率 慢 时 间 长 ， 因 此 就 存 在 微 盟 所 说 的 “ 商 户 数 据 备 份 完 整 ” 但 完 全 恢 复 还 需 要 较 长 时 间 的 情 况 。 业 务 风 险 管 理 措 施 建 议 业 务 风 险 管 理 措 施 建 议 事 到 如 今 ， 犯 罪 嫌 疑 人 贺 某 已 经 被 刑 事 拘 留 ， 微 盟 的 核 心 业 务 已 恢 复 ， 剩 余 部 分 数 据 也 已 经 在 逐 步 恢 复 。 「 微 盟 事 件 」 代 表 的 可 能 是 众 多 中 小 互 联 网 企 业 安 全 建 设 情 况 的 缩 影 ， 也 给 所 有 的 企 业 敲 响 了 警 钟 ， 内 部 人 员 作 案 仍 然 是 让 所 有 企 业 安 防 范 的 重 点 以 及 难 点 。 斗 象 科 技 技 术 负 责 人 徐 钟 豪 总 结 这 次 事 故 中 所 暴 露 出 来 的 问 题 ， 从 业 务 风 险 管 理 的 角 度 给 出 了 一 些 针 对 性 的 建 议 ： 1 . 数 据 库 权 限 管 理 数 据 库 权 限 管 理 1 ） 最 小 化 权 限 原 则 2 ） 分 库 分 表
2 . 数 据 库 主 从 及 备 份 数 据 库 主 从 及 备 份 1 ） 主 从 ： 当 出 现 故 障 时 能 够 进 行 故 障 迁 移 ， 满 足 高 可 用 2 ） 备 份 ： 实 时 备 份 ： 在 线 备 份 数 据 库 进 行 读 写 分 离 ， 用 于 数 据 恢 复 离 线 备 份 ： 日 常 异 地 离 线 备 份 ， 用 于 数 据 灾 难 恢 复 3 . 备 份 数 据 权 限 控 制 备 份 数 据 权 限 控 制 1 ） 设 置 备 份 数 据 的 操 作 权 限 策 略 ， 限 制 高 危 敏 感 操 作 ， 如 d r o p 、 r m 等 2 ） 设 置 备 份 数 据 的 访 问 控 制 策 略 ， 否 则 易 导 致 另 一 种 的 数 据 泄 露 问 题 4 . 指 令 控 制 和 审 计 指 令 控 制 和 审 计 1 ） 操 作 系 统 的 敏 感 / 关 键 指 令 的 限 制 和 监 控 ， 并 对 操 作 指 令 历 史 进 行 采 集 和 远 程 存 储 分 析 2 ） 数 据 库 审 计 ， 对 数 据 库 流 量 或 日 志 审 计 ， 设 定 告 警 通 知 机 制 5 . 管 理 流 程 优 化 改 进 管 理 流 程 优 化 改 进 1 ） 线 上 变 更 的 流 程 审 批 ， 申 请 变 更 时 段 和 操 作 细 节 ， 效 率 会 慢 一 点 ， 但 提 升 了 安 全 性 2 ） 系 统 性 的 风 险 评 估 ， 识 别 与 量 化 风 险 ， 进 行 风 险 处 置 ， 降 低 风 险 3 ） B C P ( 业 务 连 续 性 计 划 ) 和 D R P ( 灾 难 恢 复 计 划 ) 的 制 定 、 评 估 和 周 期 性 演 练 。 达 到 一 定 规 模 体 量 的 企 业 ， 是 有 必 要 认 真 考 虑 这 两 个 计 划 。 安 全 娱 乐 圈 ， 也 提 供 了 很 多 i d e a ， 如 删 库 跑 路 不 留 痕 迹 ， 也 不 乏 调 侃 之 人 ， 建 议 从 黑 市 上 买 一 份 被 脱 库 的 数 据 来 进 行 数 据 恢 复 等 。 在 这 次 疫 情 期 间 ， 对 企 业 带 来 了 极 大 的 挑 战 ， 需 要 上 下 齐 心 协 力 克 服 困 难 。 另 外 企 业 不 能 仅 关 注 业 务 ， 合 理 的 文 化 建 设 和 员 工 关 怀 也 是 必 要 的 。 * 本 文 作 者 ： 本 文 作 者 ： A l e x   X u   &   s h i d o n g q i ， 转 载 请 注 明 来 自 ， 转 载 请 注 明 来 自 F r e e B u f . C O M 精 彩 推 荐 精 彩 推 荐
阅 读 原 文
回复

举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

使用Markdown编辑器编辑 使用富文本编辑器编辑

Archiver| 手机版| 小黑屋|
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud. 商业源码建议获取授权，如侵犯您的权益，请联系客服处理