搜索

[23632] 2015-02-25_Google开源CC++版MapReduce框架

文档创建者：s7ckTeam
浏览次数：0
最后更新：2025-01-18
2015-02-25_Google开源CC++版MapReduce框架 G o o g l e 开 源 C / C + + 版 M a p R e d u c e 框 架 L i n u x 中 国   2 0 1 5 - 0 2 - 2 5 据   G i g a O M 消 息 ， G o o g l e   上 周 宣 布 ， 将 自 己 用   C + +   开 发 的   M a p R e d u c e   框 架 M a p R e d u c e   f o r   C （ M R 4 C ） 开 源 ， 此 举 可 给   H a d o o p   社 区 带 来 福 音 ， 因 为 这 样 用 户 就 可 以 在 自 己 的   H a d o o p   环 境 中 运 行 原 生 的   C   及   C + +   代 码 了 。 H a d o o p   是 许 多 大 数 据 应 用 的 基 础 ， 它 是 由   A p a c h e   基 金 会 所 开 发 的 分 布 式 系 统 基 础 架 构 ， 主 要 由 分 布 式 文 件 系 统   H D F S   和 计 算 框 架 M a p R e d u c e   组 成 。 由 于 原 先 的   M a p R e d u c e   是 用   J a v a   编 写 的 ， 与   C + +   相 比 ， 在 性 能 上 要 略 逊 一 筹 ， 因 此 ， 许 多 处 理 大 规 模 数 据 集 的 软 件 公 司 都 开 发 了 自 己 的 专 有 系 统 来 在   M a p R e d u c e   框 架 之 内 执 行 其 原 生 代 码 。 F a c e b o o k   的   H i p H o p （ 将   P H P   转 换 为   C + + ） 以 及   M e m S Q L   执 行 前 将 S Q L   转 为   C + +   代 码 也 都 是 出 于 同 样 的 性 能 考 虑 。
原 文 ： h t t p : / / w w w . 3 6 k r . c o m / p / 2 1 9 9 6 0 . h t m l 作 者 ：   b o x i M R 4 C   原 先 由 卫 星 影 像 公 司   S k y b o x   I m a g i n g   开 发 ， 目 的 是 为 了 优 化 其 地 理 空 间 数 据 及 计 算 机 视 觉 代 码 库 。 M R 4 C   围 绕 着 几 个 简 单 概 念 开 发 而 成 ， 其 目 标 是 将   M a p R e d u c e   的 重 要 细 节 抽 象 化 ， 允 许 用 户 专 注 于 开 发 有 价 值 的 算 法 。 去 年   6   月 ， G o o g l e   收 购 了   S k y b o x 。 半 年 之 后 的 现 在 ， 又 将   M R 4 C   开 源 出 来 。 这 对 于 没 有 能 力 开 发 专 有 系 统 或 者 对   J a v a   不 感 冒 的 开 发 者 来 说 无 疑 是 一 个 福 音 。 当 然 ， M R 4 C   的 受 欢 迎 程 度 仍 有 待 观 察 。 因 为 在 数 据 处 理 方 面 ， A p a c h e   S p a r k   是 一 个 速 度 比   M a p r e d u c e   更 快 的 框 架 ， 它 支 持   S c a l a 、 P y t h o n 和   J a v a （ 但 不 支 持   C / C + + ） ， 已 经 引 起 了 开 发 社 区 极 大 的 兴 趣 。 阅 读 原 文
回复

举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

使用Markdown编辑器编辑 使用富文本编辑器编辑

Archiver| 手机版| 小黑屋|
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud. 商业源码建议获取授权，如侵犯您的权益，请联系客服处理