搜索

[22440] 2014-03-08_C语言之父的侄子重塑Twitter

文档创建者：s7ckTeam
浏览次数：4
最后更新：2025-01-18
2014-03-08_C语言之父的侄子重塑Twitter C 语 言 之 父 的 侄 子 重 塑 T w i t t e r L i n u x 中 国   2 0 1 4 - 0 3 - 0 8 　 　 山 姆 · 里 奇 （ S a m   R i t c h i e ） 最 早 并 非 一 名 程 序 员 ， 他 曾 是 美 国 短 程 皮 划 艇 代 表 队 中 的 队 员 之 一 ， 并 在 2 0 0 9 年 的 世 界 锦 标 赛 中 折 桂 而 归 。 　 　 里 奇 曾 就 读 于 普 林 斯 顿 大 学 ， 专 业 是 机 械 和 航 空 航 天 工 程 ； 但 直 到 他 叔 叔 在 2 0 1 1 年 底 过 世 以 后 ， 他 才 攀 上 了 作 为 一 名 程 序 员 的 巅 峰 。 那 时 里 奇 创 造 了 一 种 工 具 ， 而 这 种 工 具 对 于 T w i t t e r 这 个 正 在 繁 荣 发 展 中 的 网 络 “ 帝 国 ” 来 说 是 至 关 重 要 的 。 　 　 这 种 转 变 中 当 然 混 杂 着 某 种 很 诗 意 的 东 西 。 里 奇 的 叔 叔 丹 尼 斯 · 里 奇 （ D e n n i s   R i t c h i e ） 是 计 算 历 史 上 最 重 要 的 软 件 开 发 者 之 一 ， 他 在 距 离 普 林 斯 顿 大 学 不 远 的 贝 尔 实 验 室 中 创 造 了 C 编 程 语 言 ， 这 种 语 言 直 到 今 天 仍 旧 是 世 界 上 最 流 行 的 编 程 语 言 。 此 外 ， 丹 尼 斯 · 里 奇 还 跟 和 肯 · 汤 姆 森 （ K e n   T h o m p s o n ） 一 起 开 发 了 U N I X 操 作 系 统 ， 这 种 系 统 是 今 天 在 市 场 上 出 售 的 每 一 台 苹 果 台 式 机 、 平 板 电 脑 和 智 能 手 机 的 基 础 。 　 　 C 语 言 之 父 的 “ 鬼 魂 ” 　 　 “ 我 接 纳 了 丹 尼 斯 · 里 奇 的 鬼 魂 。 ” 山 姆 · 里 奇 以 其 特 有 的 玩 笑 口 吻 说 道 。 “ 我 曾 是 个 糟 糕 的 程 序 员 ， 然 后 他 就 去 世 了 。 ” 　 　 在 丹 尼 斯 · 里 奇 去 世 以 前 不 久 ， 山 姆 · 里 奇 加 入 了 T w i t t e r ， 并 在 这 家 公 司 中 与 一 位 名 叫 奥 斯 卡 · 博 伊 金 （ O s c a r   B o y k i n ） 的 前 量 子 物 理 学 教 授 联 手 ， 共 同 开 发 出 了 新 时 代 开 发 工 具 S u m m i n g b i r d 。 这 种 工 具 之 所 以 让 人 称 道 ， 是 因 为 哪 怕 是 初 出 茅 庐 的 程 序 员 也 能 用 它 来 迅 速 而 相 对 容
易 地 开 发 软 件 ， 从 而 对 海 量 的 在 线 数 据 进 行 分 析 。 　 　 在 T w i t t e r 网 站 上 ， 用 户 每 一 秒 钟 发 布 的 T w i t t e r 消 息 多 达 5 7 0 0 条 左 右 。 因 此 ， 能 对 数 量 如 此 庞 大 的 数 据 进 行 分 析 的 软 件 简 直 可 以 说 是 价 比 黄 金 。 对 所 有 这 些 数 据 进 行 分 析 是 了 解 T w i t t e r 服 务 如 何 运 作 并 对 其 进 行 改 善 的 一 种 方 式 ， 同 时 也 是 让 广 告 主 能 精 准 定 位 目 标 对 象 的 一 种 方 式 ， 而 这 正 是 T w i t t e r 业 务 的 核 心 所 在 。 　 　 又 一 个 里 程 碑 　 　 随 着 软 件 行 业 的 不 断 发 展 进 化 ， 一 种 新 类 型 的 软 件 已 经 浮 出 水 面 ， 这 种 软 件 能 很 好 地 利 用 每 一 秒 钟 都 会 涌 入 互 联 网 的 、 永 无 无 休 止 的 信 息 流 。 而 在 这 一 发 展 进 化 的 过 程 中 ， S u m m i n g b i r d 可 以 说 是 树 立 起 了 又 一 个 里 程 碑 。 这 种 新 类 型 的 软 件 主 要 是 由 互 联 网 行 业 中 的 各 个 巨 头 所 开 发 的 ， 涵 盖 了 从 分 布 式 系 统 基 础 架 构 H a d o o p 到 T w i t t e r 旗 下 实 时 数 据 处 理 平 台 S t o r m 等 各 种 软 件 和 工 具 。 　 　 而 S u m m i n g b i r d 所 提 供 的 正 是 一 种 能 让 开 发 者 同 时 利 用 H a d o o p 和 S t o r m 来 开 发 软 件 和 服 务 的 方 法 ， 从 而 令 这 些 软 件 和 服 务 兼 具 H a d o o p 大 规 模 “ 批 量 处 理 ” 和 S t r o m 实 时 分 析 的 两 家 之 长 。 　 　 “ S u m m i n g b i r d 能 描 述 一 种 逻 辑 ， 这 种 逻 辑 既 可 以 实 时 运 行 ， 也 能 在 H a d o o p 上 运 行 ， 或 者 是 在 你 笔 记 本 上 单 机 运 行 。 ” 博 伊 金 说 道 。 “ 你 可 以 在 所 有 这 些 不 同 的 地 方 运 行 这 种 逻 辑 ， 而 无 需 对 其 中 任 何 一 种 运 行 方 式 感 到 过 于 担 心 ； 而 且 ， 随 后 你 还 可 以 把 所 有 这 些 结 果 都 合 并 到 一 起 。 ” 这 是 一 种 前 所 未 有 的 创 举 ， 而 随 着 公 司 不 断 地 朝 着 实 时 分 析 的 方 向 进 发 ， 这 种 工 具 的 重 要 性 将 会 变 得 越 来 越 大 。 　 　 在 里 奇 和 博 伊 金 开 发 出 S u m m i n g b i r d 以 后 不 久 ， 一 位 名 叫 W e n - H a o   L u e 的 T w i t t e r 实 习 生 利 用 这 个 工 具 为 该 公 司 开 发 出 了 新 的 H e a d l i n e s 服 务 ， 这 种 新 服 务 能 迅 速 捕 获 与 某 一 条 T w i t t e r 消 息 有 关 的 新 闻 和 网 页 的 链 接 ， 然 后 将 其 嵌 入 到 这 条 T w i t t e r 消 息 中 去 。 H e a d l i n e s 服 务 需 要 有 能 力 获 取 庞 大 的 计 算 能 力 和 海 量 的 数 据 ， 而 L u e 利 用 S u m m i n g b i r d 工 具 毫 不 费 力 地 获 得 了 这 种 能 力 。 　 　 L u e 曾 说 过 ， 如 果 没 有 S u m m i n g b i r d 这 种 工 具 ， 那 么 在 他 短 短 四 个 月 的 实 习 期 里 ， 想 要 完 成 开 发 H e a d l i n e s 服 务 这 样 的 一 项 任 务 ， 那 是 绝 对 不 可 能 做 到 的 。 　 　 难 用 的 开 发 工 具 　 　 大 学 毕 业 以 后 ， 山 姆 · 里 奇 开 始 涉 猎 编 程 领 域 ， 为 苹 果 i P h o n e 开 发 过 软 件 ， 最 后 走 上 了 在 线 开 发 的 道 路 。 他 曾 到 一 家 名 为 B a c k T y p e 的 公 司 面 试 ， 后 来 这 家 公 司 被 T w i t t e r 收 购 ， 而 S t r o m 平 台 最 初 就 是 从 该 公 司 中 开 始 构 建 的 ， 当 时 由 一 位 名 叫 南 森 · 马 兹 （ N a t h a n   M a r z ） 的 开 发 者 负 责 开 发 。 在 收 购 交 易 完 成 以 后 ， 这 种 工 具 变 成 了 T w i t t e r 基 础 设 施 中 不 可 分 割 的 一 部 分 。 　 　 “ 你 不 妨 把 T w i t t e r 网 站 上 的 可 用 数 据 想 象 成 一 条 条 水 流 ， 到 处 都 有 花 园 浇 水 用 的 那 种 软 管 在 绕 来 绕 去 。 ” 里 奇 说 道 。 “ 而 S t o r m 就 像 是 一 个 淘 金 盘 ， 能 帮 助 你 淘 出 金 子 。 ” 　 　 跟 雅 虎 和 F a c e b o o k 等 其 他 互 联 网 巨 头 一 样 ， T w i t t e r 也 曾 使 用 H a d o o p 来 运 算 数 量 庞 大 的 数 据 ， 但 其 运 算 速 度 较 慢 。 而 且 ， 跟 S t o r m 一 样 ， H a d o o p 也 相 当 难 用 ， 即 使 是 对 经 验 老 道 的 程 序 员 来 说 也 并 不 例 外 。 就 这 两 种 工 具 而 言 ， 如 果 有 程 序 员 想 要 利 用 其 庞 大 的 力 量 ， 那 么 首 先 需 要 学 习 特 定 的 专 业 知 识 ； 而 且 ， 即 使 是 在 掌 握 了 这 些 知 识 以 后 ， 想 要 利 用 这 些 工 具 来 开 发 软 件 也 是 很 困 难 的 。 　 　 “ 不 搭 调 的 ” 二 人 组 　 　 幸 运 的 是 ， 里 奇 遇 到 了 博 伊 金 ， 后 者 曾 长 期 致 力 于 量 子 物 理 学 领 域 中 的 研 究 工 作 ， 随 后 才 加 入 了 T w i t t e r 。 而 后 来 的 事 实 证 明 ， 粒 子 物 理 学 家 相 当 适 合 开 发 那 种 运 行 现 代 网 络 服 务 的 复 杂 软 件 。 举 例 来 说 ， 流 媒 体 视 频 服 务 提 供 商 N e t f l i x 的 云 架 构 负 责 人 阿 德 里 安 · 科 克 罗 夫 特 （ A d r i a n   C o c k c r o f t ） 就 是 一 名 物 理 学 家 ， 大 数 据 公 司 C l o u d a n t 的 两 位 联 合 创 始 人 麦 克 · 米 勒 （ M i k e   M i l l e r ） 和 艾 伦 · 霍 夫 曼 （ A l a n   H o f f m a n ） 也 是 如 此 。 　 　 “ 那 是 十 分 常 见 的 事 情 。 一 般 来 说 ， 从 物 理 学 和 数 学 转 向 计 算 机 科 学 ， 可 以 说 是 一 种 ‘ 定 量 流 动 ’ 。 ” 博 伊 金 说 道 。 “ 物 理 学 家 们 经 常 都 会 被 他 们 很 可 能 将 可 解 决 某 种 问 题 的 想 法 所 吸 引 ， 或 是 被 灌 输 这 种 想 法 。 ”
　 　 从 表 面 上 来 看 ， 里 奇 和 博 伊 金 看 起 来 如 此 不 同 。 4 0 来 岁 蓄 有 胡 须 的 博 伊 金 无 疑 散 发 着 一 种 大 学 教 授 的 气 息 ， 在 表 达 想 法 时 会 十 分 认 真 地 选 择 措 辞 ； 而 2 0 来 岁 金 发 碧 眼 的 里 奇 则 是 那 种 潇 洒 放 纵 、 饶 舌 多 嘴 的 类 型 。 但 是 ， 两 人 之 间 却 达 成 了 一 种 默 契 的 合 作 关 系 ， 能 互 相 补 足 彼 此 想 法 中 的 不 足 之 处 。 甚 至 于 ， 两 人 还 会 互 相 嘲 笑 彼 此 之 间 的 不 同 之 处 。 　 　 比 如 说 ， 当 有 人 要 求 博 伊 金 描 述 自 己 的 背 景 时 ， 里 奇 会 抢 过 话 头 说 ： “ 你 有 很 多 东 西 能 说 啊 ， 兄 弟 。 ” 然 后 博 伊 金 会 说 道 ： “ 他 是 在 说 我 老 呢 。 ” 　 　 在 T w i t t e r 结 识 以 后 ， 两 人 很 快 就 认 识 到 他 们 想 要 开 发 同 一 样 东 西 ， 那 就 是 一 种 通 用 的 工 具 ， 可 以 同 时 利 用 H a d o o p 和 S t o r m 的 长 处 。 　 　 代 码 的 “ 图 书 馆 ” 　 　 里 奇 、 博 伊 金 和 其 他 一 些 开 发 者 花 了 几 个 月 的 时 间 ， 终 于 设 计 出 了 S u m m i n g b i r d 。 基 本 上 来 说 ， 这 种 工 具 就 像 是 一 个 代 码 “ 图 书 馆 ” ， 允 许 开 发 者 开 发 能 对 H a d o o p 上 的 海 量 数 据 进 行 运 算 、 随 后 可 通 过 S t r o m 平 台 对 其 进 行 实 时 分 析 的 单 一 软 件 。 　 　 “ H a d o o p 非 常 可 靠 ， 但 速 度 有 点 慢 。 而 且 ， 这 种 工 具 还 可 允 许 你 进 行 实 时 分 析 。 ” 博 伊 金 说 道 。 “ 对 于 这 两 套 系 统 以 及 它 们 合 并 的 复 杂 过 程 ， 你 丝 毫 都 不 必 感 到 担 心 。 ” 　 　 两 人 之 所 以 把 这 种 工 具 叫 做 “ S u m m i n g b i r d ” （ 直 译 为 “ 求 和 小 鸟 ” ） ， 是 因 为 T w i t t e r 内 部 的 大 多 数 软 件 工 具 都 会 以 该 公 司 著 名 的 “ 小 鸟 ” 主 题 为 名 。 而 同 样 符 合 T w i t t e r 传 统 的 是 ， 这 种 工 具 是 开 源 的 ， 公 司 外 部 的 任 何 人 都 可 免 费 使 用 。 现 在 ， 一 些 外 部 人 士 已 经 利 用 这 种 工 具 进 行 了 软 件 开 发 工 作 ， 例 如 H a d o o p 开 发 者 及 用 户 汤 姆 · 怀 特 （ T o m   W h i t e ） 等 。 　 　 怀 特 说 道 ， S u m m i n g b i r d 在 边 边 角 角 的 细 节 方 面 还 比 较 粗 糙 ， 但 他 认 为 ， 这 种 混 合 式 “ 大 数 据 ” 工 具 的 未 来 需 求 将 是 庞 大 的 。 “ 你 需 要 拥 有 一 个 整 体 的 系 统 ， 能 把 这 些 （ 大 数 据 ） 系 统 的 用 途 都 结 合 到 一 起 。 ” 他 说 道 。 　 　 加 州 大 学 伯 克 利 分 校 也 开 发 了 一 个 名 为 S p a r k 的 平 台 ， 能 同 时 进 行 H a d o o p 式 的 批 量 处 理 和 S t o r m 式 的 实 时 分 析 工 作 ， 但 这 个 平 台 与 S u m m i n g b i r d 不 同 ， 原 因 是 其 并 不 能 像 后 者 那 样 提 供 一 种 方 式 ， 以 便 合 并 来 自 于 这 两 个 “ 世 界 ” 的 处 理 结 果 。   本 文 地 址 ： h t t p : / / l i n u x . c n / a r t i c l e - 2 6 3 2 - 1 . h t m l   阅 读 原 文
回复

举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

使用Markdown编辑器编辑 使用富文本编辑器编辑

Archiver| 手机版| 小黑屋|
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud. 商业源码建议获取授权，如侵犯您的权益，请联系客服处理