搜索

[25125] 2016-06-15_10个顶尖技术大会运维专题下演讲实录（附PPT下载）

文档创建者：s7ckTeam
浏览次数：38
最后更新：2025-01-18
2016-06-15_10个顶尖技术大会运维专题下演讲实录（附PPT下载） 1 2 1 0 个 顶 尖 技 术 大 会 运 维 专 题 下 演 讲 实 录 （ 附 P P T 下 载 ） I n f o Q   L i n u x 中 国   2 0 1 6 - 0 6 - 1 5 I n f o Q 是 一 个 关 注 中 高 端 技 术 人 的 社 区 媒 体 ， 一 线 互 联 网 圈 从 业 人 士 产 出 原 创 优 质 内 容 ， 行 业 内 最 专 业 的 编 辑 团 队 深 度 加 工 ， 每 天 早 晨 八 点 推 送 一 篇 互 联 网 干 货 ， 专 注 技 术 人 的 交 流 与 成 长 。 国 内 最 好 的 原 创 技 术 社 区 ， 技 术 大 神 力 荐 ： 「 做 技 术 的 不 会 没 听 过 Q C o n ， 不 会 不 知 道 I n f o Q 吧 ？ 」 — — F e n n g （ 小 道 消 息 ） 「 从 事 技 术 工 作 ， 或 有 兴 趣 了 解 I T 技 术 行 业 的 朋 友 ， 都 值 得 订 阅 。 」 — — 曹 政 打 造 打 造   O 2 O   业 务 的 数 据 库 支 撑 平 台 业 务 的 数 据 库 支 撑 平 台 — — 百 度 数 据 库 变 更 发 布 系 统 百 度 数 据 库 变 更 发 布 系 统   D T S 实 践 实 践 王 剑 英 王 剑 英 百 度 资 深 研 发 工 程 师 百 度 资 深 研 发 工 程 师 随 着 百 度 重 点 投 入   O 2 O   业 务 ， 百 度 糯 米 、 钱 包 面 对 的 流 量 日 益 增 长 。 如 何 打 造 一 个 高 效 的 数 据 库 系 统 架 构 来 应 对 交 易 支 付 类 型 的 负 载 ， 成 为 百 度   D B A   团 队 面 对 的 一 个 新 挑 战 。 本 次 分 享 将 向 大 家 介 绍 百 度   D B A   团 队 如 何 以   M y S Q L   为 中 心 ， 通 过 一 套 高 效 可 靠 的 数 据 库 变 更 发 布 系 统   D T S ， 融 和   C a c h e 平 台 ， 业 务 系 统 消 息 队 列 等 。 实 现 对 业 务 请 求 的 快 速 响 应 和 交 易 链 路 的 中 的 调 用 解 耦 。 本 次 分 享 将 包 括 以 下 几 个 内 容 ： 1 .   M y S Q L   变 更 消 息 发 布 系 统   D T S ； 2 .   基 于   D T S   实 现   M y S Q L   和   R e d i s   的 深 度 融 合 ， 提 升 业 务 响 应 速 度 ； 3 .   通 过   M y S Q L   消 息 通 知 机 制 实 现 糯 米 交 易 链 路 中 的 逻 辑 解 耦 。 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字     1 1     即 可 阅 读 原 文 。 即 可 阅 读 原 文 。 滴 滴 运 维 架 构 的 演 化 史 滴 滴 运 维 架 构 的 演 化 史 陆 沛 陆 沛 滴 滴 运 维 部 技 术 经 理 滴 滴 运 维 部 技 术 经 理 滴 滴 从   2 0 1 2   年 成 立 以 来 ， 3   年 半 的 时 间 ， 经 历 了 几 何 级 数 的 成 长 。 滴 滴 运 维 是 如 何 应 对 的 ， 运 维 架 构 是 如 何 演 进 的 ， 在 这 里 经 历 了 哪 些 挑 战 ， 可 以 和 大 家 一 起 分 享 一 下 。
3 4 5 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字     1 2     即 可 阅 读 原 文 。 即 可 阅 读 原 文 。 豆 瓣 百 万 级 指 标 监 控 实 践 豆 瓣 百 万 级 指 标 监 控 实 践 朱 兆 龙 朱 兆 龙 豆 瓣 高 级 系 统 工 程 师 豆 瓣 高 级 系 统 工 程 师 在 豆 瓣 我 们 使 用 了   K e n s h i n   +   G r a p h i t e   +   G r a f a n a   +   I c i n g a   2   的 组 合 来 支 撑 我 们 的 监 控 需 求 ， 其 中   K e n s h i n   是 我 们 自 己 开 发 的 用 于 代 替   W h i s p e r   的 存 储 组 件 。 在 本 次 分 享 中 我 们 将 介 绍   K e n s h i n   的 设 计 与 实 现 、 如 何 架 构 单 机 支 撑 百 万 指 标 收 集 的 指 标 系 统 、 以 及   G r a f a n a   和   I c i n g a   2   的 使 用 经 验 。 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字     1 3     即 可 阅 读 原 文 。 即 可 阅 读 原 文 。 支 付 宝 丝 般 顺 滑 的 春 晚 的 保 障 机 制 支 付 宝 丝 般 顺 滑 的 春 晚 的 保 障 机 制 于 新 林 （ 青 轩 ） 于 新 林 （ 青 轩 ） 蚂 蚁 金 服 支 付 事 业 群 首 席 架 构 师 蚂 蚁 金 服 支 付 事 业 群 首 席 架 构 师 2 0 1 6   年 春 晚 ， 对 支 付 宝 来 说 既 是 挑 战 也 是 机 遇 。 头 一 次 和 央 视 搞 这 么 大 规 模 的 活 动 ， 这 样 的 活 动 只 能 成 功 不 能 失 败 。 对 于 支 付 宝 来 说 ， 是 第 一 次 搞 这 么 大 规 模 的 活 动 ， 对 用 户 的 行 为 习 惯 是 没 法 预 测 的 。 如 何 保 障 活 动 顺 利 是 我 们 头 痛 的 问 题 。 得 知 消 息 后 ， 我 们 第 一 时 间 确 定 了 主 题 思 路 ， 确 定 了 总 体 目 标 。 接 下 来 通 过 以 下 这 套 方 法 来 保 障 活 动 的 顺 利 进 行 。 1 .   研 发 质 量 保 障 机 制 2 .   版 本 发 布 管 理 机 制 3 .   活 动 灰 度 机 制 4 .   全 联 路 压 测 体 系 保 障 容 量 符 合 预 期 5 .   弹 性 计 算 能 力 ， 快 速 按 照 预 期 容 量 模 型 部 署 应 用 和 存 储 模 型 6 .   内 部 演 练 机 制 保 障 整 体 活 动 按 照 预 期 进 展 7 .   春 晚 前 提 前 小 规 模 活 动 提 前 规 避 问 题 ， 根 据 用 户 行 为 调 整 容 量 模 型 8 .   应 急 响 应 体 系 ， 以 应 对 意 外 事 件 ， 保 障 春 晚 互 动 顺 利 进 行 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字     1 4     即 可 阅 读 原 文 。 即 可 阅 读 原 文 。 A p a c h e   E a g l e :   e B a y 构 建 开 源 分 布 式 实 时 预 警 引 擎 实 践 构 建 开 源 分 布 式 实 时 预 警 引 擎 实 践 陈 浩 陈 浩 e B a y   I n c   高 级 软 件 工 程 师 ， 高 级 软 件 工 程 师 ， E a g l e 项 目 技 术 负 责 人 项 目 技 术 负 责 人 在 与 云 计 算 和 大 数 据 时 代 背 景 下 ， 各 种 大 型 分 布 式 系 统 例 如   H a d o o p ， S p a r k 、 O p e n   S t a c k   等 层 出 不 穷 ， e B a y   作 为 世 界 顶 尖 的 电 商 巨 头 之 一 ， 这 些 系 统 在 驱 动   e B a y   业 务 增 长 的 同 时 ， 管 理 维 护 它 们 的 挑 战 也 愈 加 严 峻 ， 同 时 对 监 控 系 统 提 出 了 更 高 的 要 求 ， 例 如 更 强 的 伸 缩 能 力 、 更 实 时 的 预 警 能 力 、 支 持 更 复 杂 的 预 警 规 则 、 更 加 动 态 灵 活 的 关 联 预 警 等 ， 而 传 统 预 警 系 统 如   Z a b b i x 、 N a g i o s   、 G a n g l i a   等 逐 渐 疲 于 满 足 我 们 的 需 求 ， 于 是 ， 我 们 决 定 从 零 开 始 打 造 全 新 的 分 布 式 实 时 预 警 引 擎 — — A p a c h e   E a g l e 。 A p a c h e   E a g l e   ( h t t p : / / e a g l e . i n c u b a t o r . a p a c h e . o r g / )   是 由   e B a y   开 源 的 分 布 式 实 时 监 控 与 预 警 系 统 ， 专 注 于 解 决 大 规 模 分 布 式 集 群
6 7 8 （ 如   H a d o o p ） 运 维 场 景 中 的 服 务 监 控 、 性 能 分 析 、 异 常 预 警 以 及 数 据 安 全 等 问 题 ， 于 2 0 1 5 年 1 0 月 2 6 日 正 式 开 源 并 加 入 A p a c h e   软 件 基 金 会 。 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字     1 5     即 可 阅 读 原 文 。 即 可 阅 读 原 文 。 饿 了 么 技 术 运 营 实 践 饿 了 么 技 术 运 营 实 践 — — 急 速 发 展 之 体 悟 急 速 发 展 之 体 悟 徐 盎 徐 盎 饿 了 么 技 术 运 营 部 总 饿 了 么 技 术 运 营 部 总 监 监 在 业 务 量 持 续 陡 升 、 创 新 不 断 、 生 态 逐 渐 丰 满 的 节 奏 中 ， 扩 容 是 常 态 每 个 应 用 都 可 能 成 为 系 统 的 瓶 颈 。 如 何 减 少 发 现 、 定 位 时 间 ， 如 何 快 节 奏 里 完 善 技 术 运 营 体 系 ？ 让 我 们 来 反 思 。 1 .   创 业 团 队 各 种 平 台 工 具 各 显 神 通 的 困 局 突 破 2 .   自 动 化 与 业 务 高 交 付 压 力 的 矛 盾 3 .   立 体 化 监 控 实 践 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字     1 6     即 可 阅 读 原 文 。 即 可 阅 读 原 文 。 腾 讯 游 戏 运 维 实 践 之 路 腾 讯 游 戏 运 维 实 践 之 路 & 运 维 价 值 探 索 运 维 价 值 探 索 洪 楷 洪 楷 腾 讯 游 戏 自 研 运 维 中 心 总 监 腾 讯 游 戏 自 研 运 维 中 心 总 监 在 游 戏 业 务 运 维 中 ， 涉 及 M M O G R P G 、 M O B A 、 A C G 、 F P S 、 A C T 、 M U G 等 不 同 游 戏 类 型 ， 由 此 而 引 入 了 各 种 异 构 ， 运 维 行 业 中 涌 现 P u p p e t 、 Z i b b i x 、 N a g i o s 、 N g i n x 等 各 种 分 门 别 类 技 术 工 具 。 在 P a a S 、 I a a S 、 S a a S 帮 运 维 封 装 了 很 多 服 务 ， 帮 助 运 维 降 低 或 者 规 避 风 险 ， 除 了 从 工 具 和 云 化 的 平 台 服 务 方 面 帮 助 业 务 规 避 风 险 ， 还 有 那 些 应 该 在 运 维 团 队 中 做 到 ？ 特 别 在 游 戏 业 务 的 众 多 异 构 中 有 那 些 手 段 ？ 传 统 的 运 维 模 式 应 该 如 何 应 对 游 戏 业 务 转 变 ？ 运 维 如 何 借 助 业 务 进 行 自 成 长 ？ 本 次 演 讲 包 括 ： 1 .   运 维 规 范 作 为 基 石 必 要 性 ， 建 设 过 程 中 会 有 那 些 “ 坑 ” ； 2 .   基 石 — — 腾 讯 游 戏 运 维 白 皮 书 的 构 成 ； 3 .   日 常 运 维 中 规 避 “ 黑 天 鹅 ” 的 手 段 ， 重 点 介 绍 “ D r i l l ” 、 “ P L P ” 、 “ k e y   n o d e s ” 实 战 ； 4 .   从 运 维 中 寻 找 快 乐 ， 运 维 数 据 的 价 值 ， 贴 近 业 务 创 造 价 值 ， 以 案 例 介 绍 运 维 服 务 ； 5 .   腾 讯 游 戏 运 维 服 务 体 系 介 绍 ； 不 要 让 只 有 故 障 和 突 发 的 时 候 才 想 起 运 维 ， 其 实 运 维 也 是 一 个 意 识 形 态 ， 运 维 并 不 是 多 做 多 错 ， 需 要 利 用 技 术 借 助 数 据 说 明 问 题 ， 通 过 对 外 提 供 的 闭 环 服 务 “ 智 胜 ” ， 以 业 务 场 景 设 计 运 维 服 务 ， 并 最 终 以 “ 智 能 ” 引 领 未 来 ， 业 务 运 维 （ 规 划 ） 工 程 师 其 实 可 以 做 得 更 多 更 好 。 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字     1 7     即 可 阅 读 原 文 。 即 可 阅 读 原 文 。 S R E 是 什 么 鬼 是 什 么 鬼   /   来 自 来 自   G o o g l e   D e v O p s   经 验 的 落 地 实 践 经 验 的 落 地 实 践 孙 宇 聪 孙 宇 聪 C o d i n g . n e t   技 术 负 责 人 技 术 负 责 人 G o o g l e   S R E 负 责 生 产 运 维 ， 管 理 着 全 球 上 百 万 台 服 务 器 和 上 面 数 不 清 的 应 用 ， 他 们 的 一 举 一 动 都 会 影 响 全 球 千 百 万 用 户 。 本 次 演 讲 ， 曾 身 为 G o o g l e   S R E ( 0 7 - 1 4 ) 一 员 的 孙 宇 聪 将 带 给 大 家 以 下 几 点 ：
9 1 0 1 .   G o o g l e   S R E 是 怎 样 一 个 团 队 ， 有 哪 些 特 点 ， 和 传 统 运 维 团 队 的 定 义 有 哪 些 不 同 。 其 中 重 点 讲 S R E   如 何 在 早 期 ， 中 期 ， 以 及 长 期 为 项 目 提 供 持 续 性 支 持 。 2 .   在 采 用 D o c k e r 等 新 技 术 降 低 传 统 运 维 的 门 槛 的 同 时 ， 运 维 t e a m 在 软 件 生 命 周 期 中 如 何 自 我 定 位 ， 实 现 自 我 价 值 。 3 .   从 G o o g l e 带 来 的 运 维 团 队 建 设 B e s t   p r a c t i c e s : 建 立 有 效 的 监 控 和 O n c a l l 应 急 体 制 。 O D R   ( O p e r a t i o n a l   R e a d y n e s s   D r i l l )   如 何 锻 炼 团 队 应 对 紧 急 情 况 。 P o s t m o r t e m 文 档 ,   如 何 正 确 ， 认 真 的 面 对 、 跟 踪 生 产 环 境 中 出 现 的 问 题 ， 并 且 建 立 一 个 完 善 的 机 制 。 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字     1 8     即 可 阅 读 原 文 。 即 可 阅 读 原 文 。 云 时 代 运 维 转 型 ： 工 具 化 ， 产 品 化 ， 运 营 化 云 时 代 运 维 转 型 ： 工 具 化 ， 产 品 化 ， 运 营 化 钟 红 军 钟 红 军 大 众 点 评 网 运 维 和 数 据 库 总 监 大 众 点 评 网 运 维 和 数 据 库 总 监 作 为 一 家 超 过 1 0 年 的 互 联 网 公 司 ， 大 众 点 评 的 运 维 实 践 和 运 维 理 念 ， 经 历 了 很 多 变 化 和 挑 战 。 从 2 0 1 3 年 开 始 ， 点 评 运 维 从 以 前 的 传 统 运 维 方 式 中 ， 逐 步 开 始 探 索 自 己 的 道 路 。 我 们 总 结 是 ： 从 工 具 化 ， 发 展 到 产 品 化 ， 再 到 现 在 的 运 营 化 。 在 这 个 过 程 中 有 些 什 么 思 考 ？ 为 什 么 要 这 么 做 ？ 结 果 如 何 ？ 这 是 本 次 分 享 要 回 答 的 问 题 。 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字     1 9     即 可 阅 读 原 文 。 即 可 阅 读 原 文 。 刀 尖 上 的 舞 蹈 刀 尖 上 的 舞 蹈 — — D D o S 攻 防 对 抗 攻 防 对 抗 朱 家 睿 朱 家 睿 阿 里 巴 巴 阿 里 巴 巴 D D o S 攻 防 专 家 攻 防 专 家 D D o S 攻 击 是 互 联 网 服 务 的 噩 梦 ， D D o S 攻 防 是 看 不 到 硝 烟 的 战 场 。 阿 里 巴 巴 有 众 多 业 务 ： 淘 宝 、 天 猫 、 支 付 宝 、 云 计 算 、 C D N 等 。 阿 里 巴 巴 平 均 每 周 监 控 到 上 万 次 D D o S 攻 击 。 如 何 保 障 集 团 业 务 稳 定 不 被 D D o S 破 坏 ？ 云 业 务 又 如 何 防 御 频 繁 的 D D o S ？ 运 营 团 队 如 何 使 用 防 御 产 品 去 打 每 一 场 胜 仗 ？ 团 队 如 何 在 一 次 次 的 战 斗 中 形 成 快 速 的 配 合 ？ 针 对 不 断 变 化 的 攻 防 态 势 ， 未 来 又 将 如 何 应 对 ？ 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字 扫 描 二 维 码 关 注 公 众 号 后 ， 发 送 数 字     2 0     即 可 阅 读 原 文 。 即 可 阅 读 原 文 。 更 多 干 货 文 章 ， 请 扫 码 关 注 更 多 干 货 文 章 ， 请 扫 码 关 注 I n f o Q 公 众 号 公 众 号
阅 读 原 文
回复

举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver| 手机版| 小黑屋|
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud. 商业源码建议获取授权，如侵犯您的权益，请联系客服处理