搜索

[24306] 2015-09-19_面对20亿行代码，Google如何管理？

文档创建者：s7ckTeam
浏览次数：2
最后更新：2025-01-18
2015-09-19_面对20亿行代码，Google如何管理？ 面 对   2 0   亿 行 代 码 ， G o o g l e   如 何 管 理 ？ 思 睿   L i n u x 中 国   2 0 1 5 - 0 9 - 1 9 面 对 “ G o o g l e   这 家 公 司 有 多 大 ？ ” 这 种 问 题 ， 你 可 能 会 用 收 入 、 股 票 价 格 、 客 户 数 量 或 者 是 形 而 上 学 的 影 响 力 来 回 答 这 个 问 题 。 但 是 ， 这 还 不 是 全 部 。 G o o g l e   作 为 全 球 最 大 的 互 联 网 公 司 ， 我 们 当 然 可 以 用 “ 互 联 网 思 维 ” 来 思 考 这 个 问 题 ， 比 如 用 代 码 数 量 来 衡 量 它 。 来 自 于   G o o g l e   的   R a c h e l   P o t v i n ， 在 周 一 举 办 的 硅 谷 工 程 会 议 上 给 了 我 们 一 个 可 以 参 考 的 答 案 。 她 表 示 ， 运 行 所 有   G o o g l e   互 联 网 服 务 的 软 件 ， 包 括 了   G o o g l e   搜 索 、 G m a i l 、 G o o g l e 地 图 等 ， 大 约 有 2 0 亿 行 代 码 。 相 比 之 下 ， 从 2 0 世 纪 8 0 年 代 就 开 始 开 发 的   W i n d o w s   操 作 系 统 — — 有 史 以 来 为 单 一 计 算 机 所 开 发 的 最 复 杂 的 软 件 工 具 之 一 ， 只 有 5 0 0 0 万 行 代 码 。 所 以 简 单 一 刀 切 的 话 ， 建 立   G o o g l e   相 当 于 建 4 0 个   W i n d o w s   系 统 。 当 然 ， 5 0 0 0 万 行 代 码 驱 动 的 仅 仅 是   W i n d o w s   系 统 本 身 ， 而 2 0 亿 行 代 码 则 是   G o o g l e   的 全 部 。 G o o g l e   的 业 务 覆 盖 范 围 及 其 广 ， 包 含 了 搜 索 、 地 图 、 文 档 、 社 交 、 日 历 、 邮 件 、 视 频 ， 以 及 其 他 互 联 网 服 务 ， 所 有 2 0 亿 行 代 码 都 存 放 在 代 码 资 源 库 中 ， 提 供 给 全 部 2 . 5 万 名   G o o g l e   工 程 师 调 用 。 在 公 司 内 部 ， G o o g l e   对 待 它 的 代 码 就 像 对 待 一 个 巨 大 的 操 作 系 统 。 P o t v i n   表 示 ： “ 虽 然 不 能 证 明 这 一 点 ， 但 我 认 为 这 是 全 球 最 大 的 单 一 信 息 库 。 ” G o o g l e   是 一 个 极 端 例 子 ， 但 它 展 示 了 如 今 的 软 件 在 互 联 网 时 代 有 多 复 杂 ， 以 及 我 们 如 何 改 变 使 用 的 编 码 工 具 和 理 念 ， 以 适 应 这 种 复 杂 性 。 G o o g l e   的 巨 大 资 源 库 仅 适 用 于 内 部 程 序 员 ， 但 在 某 种 程 度 上 ， 它 已 经 类 似 于 G i t h u b — — 一 个 向 所 有 公 众 开 放 的 源 代 码 库 ， 工 程 师 可 以 通 过 互 联 网 共 享 代 码 。 我 们 正 在 走 向 一 个 需 要 经 常 大 规 模 合 作 代 码 的 世 界 ， 也 只 有 这 样 才 能 跟 上 现 代 互 联 网 服 务 的 发 展 。 G i t H u b   就 表 示 ： “ G o o g l e   拥 有 2 . 5 万 名 工 程 师 ， 他 们 可 以 与 内 部 拥 有 各 种 不 同 技 能 的 人 分 享 代 码 。 但 是 小 公 司 可 以 使 用   G i t H u b   和 开 源 ， 得 到 同 样 的 优 势 。 ” 另 一 方 面 ， 建 立 并 运 行 一 个 2 0 亿 行 代 码 的 庞 大 系 统 ， 并 不 简 单 。 L a m b e r t   表 示 ： “ 这 是 一 项 技 术 挑 战 ， 也 是 一 个 巨 大 壮 举 ， 数 字 相 当 惊 人 。 ”
来 源 ： 雷 锋 网 原 文 ： h t t p : / / w w w . w i r e d . c o m / 2 0 1 5 / 0 9 / g o o g l e - 2 - b i l l i o n - l i n e s - c o d e a n d - o n e - p l a c e / 译 文 ： h t t p : / / w w w . l e i p h o n e . c o m / n e w s / 2 0 1 5 0 9 / R 6 O 9 z N l b l 3 6 S t z F g . h t m l 译 者 ：   思 睿 G i t H u b   可 以 让 程 序 员 轻 松 共 享 代 码 和 协 作 ， 它 涵 盖 了 数 以 百 万 计 的 项 目 ， 但 没 有 直 接 容 纳 软 件 项 目 。 G o o g l e   则 更 进 了 一 步 ， 将 很 多 项 目 合 并 成 一 个 。 鉴 于 涉 及 许 多 工 程 师 以 及 同 时 应 付 如 此 多 代 码 的 难 度 ， 能 做 到 这 一 点 十 分 地 疯 狂 。 P i p e r G o o g l e   为 了 同 时 应 付 所 有 代 码 ， 已 经 建 立 了 自 己 的 “ 版 本 控 制 系 统 ” ： P i p e r 。 它 在 整 个 庞 大 的 网 络 基 础 设 施 上 运 行 ， 系 统 覆 盖 了 1 0 个 不 同 的 G o o g l e   数 据 中 心 。 这 一 系 统 不 仅 将 所 有 2 0 亿 行 代 码 都 存 放 在 单 一 的 系 统 内 ， 并 提 供 给 公 司 内 部 工 程 师 调 用 ， 更 给 工 程 师 提 供 了 更 多 自 由 ， 可 以 使 用 及 合 并 横 跨 无 数 项 目 的 代 码 。 P o t v i n   表 示 ： “ 当 你 开 始 一 个 新 项 目 ， G o o g l e   已 经 提 供 了 有 丰 富 资 源 的 图 书 馆 ， 几 乎 一 切 事 情 都 已 经 帮 你 完 成 。 更 重 要 的 是 ， 工 程 师 可 以 在 所 有   G o o g l e   服 务 中 进 行 代 码 变 更 和 立 即 部 署 。 更 新 一 件 事 ， 就 能 够 更 新 一 切 。 ” 当 然 使 用 这 个 系 统 也 有 限 制 。 P o t v i n   表 示 ， 某 些 高 度 机 密 的 代 码 ， 如 P a g e R a n k   搜 索 算 法 ， 被 存 储 在 一 个 单 独 的 资 源 库 中 ， 只 提 供 给 特 定 员 工 。 而 且 ， 由 于 A n d r o i d   和   C h r o m e 两 个 操 作 系 统 与 那 些 在 线 服 务 有 非 常 大 的 区 别 ， G o o g l e   会 将 它 们 的 代 码 存 储 在 单 独 的 版 本 控 制 系 统 中 。 但 在 大 多 数 情 况 下 ， G o o g l e   代 码 都 是 一 个 整 体 。 机 器 程 序 员 L a m b e r t   指 出 ， 构 建 和 运 行 这 样 的 一 个 系 统 ， 不 仅 需 要 知 道 如 何 做 到 这 种 事 ， 还 需 要 庞 大 的 计 算 能 力 。 P i p e r   每 天 需 要 处 理 大 约 8 5 T B 的 数 据 （ 即 8 5 0 0 0 G B ） ， G o o g l e   的   2 . 5 万 名 工 程 师 每 天 会 对 资 源 库 做 出 4 5 0 0 0 次 提 交 （ 修 改 ） 。 与 此 同 时 ， P i p e r   还 必 须 能 删 去 人 类 程 序 员 所 产 生 的 大 量 冗 余 。 它 必 须 确 保 代 码 准 确 无 误 ， 程 序 员 不 会 相 互 干 涉 ， 要 能 从 资 源 库 中 删 除 错 误 和 未 使 用 的 代 码 。 而 正 是 存 在 这 一 切 困 难 ， P i p e r 不 得 不 接 手 一 些 人 类 的 工 作 。 现 在 ， G o o g l e   已 经 从 之 前 的 一 个 版 本 控 制 系 统 P e r f o r c e ， 切 换 到 了   P i p e r ， 让 机 器 来 完 成 一 部 分 工 作 。 这 并 不 意 味 着   G o o g l e   要 让 机 器 人 编 写 代 码 ， 但 它 们 确 实 可 以 生 成 很 多 运 行 软 件 所 需 的 数 据 和 配 置 文 件 。 程 序 员 和 机 器 人 需 要 协 调 一 致 ， 维 护 代 码 健 康 。 现 在 已 经 不 只 有 人 类 在 维 护 代 码 了 。 让 所 有 人 受 惠 的   “ P i p e r ” 其 他 公 司 能 否 受 益 于 同 类 系 统 呢 ？ 当 然 能 ， 而 且 也 确 实 有 公 司 这 样 做 了 。 F a c e b o o k   的 主 应 用 有 2 0 0 0 万 行 以 上 代 码 ， 公 司 把 整 个 事 情 作 为 一 个 单 独 的 项 目 。 还 有 一 些 公 司 以 较 小 规 模 在 做 同 样 的 事 情 ， 而 当 这 些 公 司 不 断 接 近   G o o g l e   或   F a c e b o o k   的 规 模 ， 也 会 做 同 样 的 事 。 但 G o o g l e 和   F a c e b o o k   都 在 探 索 能 够 改 变 每 个 人 的 方 法 。 两 家 巨 头 正 在 开 发 一 个 开 源 的 版 本 控 制 系 统 ， 任 何 人 都 可 以 用 它 来 处 理 大 规 模 代 码 。 它 基 于 现 有 系 统 M e r c u r i a l ， G o o g l e 正 试 图 扩 展   M e r c u r i a l 资 源 库 ， 达 到 G o o g l e 的 规 模 。
阅 读 原 文
回复

举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

使用Markdown编辑器编辑 使用富文本编辑器编辑

Archiver| 手机版| 小黑屋|
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud. 商业源码建议获取授权，如侵犯您的权益，请联系客服处理