搜索

[24792] 2016-03-18_五大开源Web代理服务器横评：Squid、Privoxy、Varnish、Polipo、Tinyproxy

文档创建者：s7ckTeam
浏览次数：27
最后更新：2025-01-18
2016-03-18_五大开源Web代理服务器横评：Squid、Privoxy、Varnish、Polipo、Tinyproxy 五 大 开 源   W e b   代 理 服 务 器 横 评 ： S q u i d 、 P r i v o x y 、 V a r n i s h 、 P o l i p o 、 T i n y p r o x y 原 创   译 者 ： f w 8 8 9 9   L i n u x 中 国   2 0 1 6 - 0 3 - 1 8 W e b   代 理 软 件 转 发   H T T P   请 求 时 并 不 会 改 变 数 据 流 量 。 它 们 可 以 配 置 成 透 明 代 理 ， 而 无 需 客 户 端 配 置 。 它 们 还 可 以 作 为 反 向 代 理 放 在 网 站 的 前 端 ； 这 样 缓 存 服 务 器 可 以 为 一 台 或 多 台   w e b   服 务 器 提 供 无 限 量 的 用 户 服 务 。 网 站 代 理 功 能 多 样 ， 有 着 宽 泛 的 用 途 ： 从 缓 存 页 面 、 D N S   和 其 他 查 询 ， 到 加 速   w e b   服 务 器 响 应 、 降 低 带 宽 消 耗 。 代 理 软 件 广 泛 用 于 大 型 高 访 问 量 的 网 站 ， 比 如 纽 约 时 报 、 卫 报 ，   以 及 社 交 媒 体 网 站 如   T w i t t e r 、 F a c e b o o k   和   W i k i p e d i a 。 页 面 缓 存 已 经 成 为 优 化 单 位 时 间 内 所 能 吞 吐 的 数 据 量 的 至 关 重 要 的 机 制 。 好 的   W e b   缓 存 还 能 降 低 延 迟 ， 尽 可 能 快 地 响 应 页 面 ， 让 终 端 用 户 不 至 于 因 等 待 内 容 的 时 间 过 久 而 失 去 耐 心 。 它 们 还 能 将 频 繁 访 问 的 内 容 缓 存 起 来 以 节 省 带 宽 。 如 果 你 需 要 降 低 服 务 器 负 载 并 改 善 网 站 内 容 响 应 速 度 ， 那 缓 存 软 件 能 带 来 的 好 处 就 绝 对 值 得 探 索 一 番 。 为 深 入 探 查   L i n u x   下 可 用 的 相 关 软 件 的 质 量 ， 我 列 出 了 下 边 5 个 优 秀 的 开 源   w e b   代 理 工 具 。 它 们 中 有 些 功 能 完 备 强 大 ， 也 有 几 个 只 需 很 低 的 资 源 就 能 运 行 。 S q u i d S q u i d   是 一 个 高 性 能 、 开 源 的 代 理 缓 存 服 务 器 和   W e b   缓 存 进 程 ， 支 持   F T P 、 I n t e r n e t   G o p h e r 、 H T T P S   和   S S L   等 多 种 协 议 。 它 通 过 一 个 非 阻 塞 的 、 I / O   事 件 驱 动 的 单 一 进 程 处 理 所 有 的   I P V 4   或   I P V 6   协 议 请 求 。 S q u i d   由 一 个 主 服 务 程 序   s q u i d ， 和   D N S   查 询 程 序   d n s s e r v e r ， 另 外 还 有 一 些 可 选 的 请 求 重 写 、 执 行 认 证 程 序 组 件 ， 及 一 些 管 理 和 客 户 端 工 具 构 成 。 S q u i d   提 供 了 丰 富 的 访 问 控 制 、 认 证 和 日 志 环 境 ，   用 于 开 发   w e b   代 理 和 内 容 服 务 网 站 应 用 。 其 特 性 包 括 ： W e b   代 理 ： 通 过 缓 存 来 降 低 访 问 时 间 和 带 宽 使 用 将 元 数 据 和 访 问 特 别 频 繁 的 对 象 缓 存 到 内 存 中 缓 存   D N S   查 询 支 持 非 阻 塞 的   D N S   查 询 实 现 了 失 败 请 求 的 未 果 缓 存 S q u i d   缓 存 可 架 设 为 层 次 结 构 ， 或 网 状 结 构 以 节 省 额 外 的 带 宽 通 过 广 泛 的 访 问 控 制 来 执 行 网 站 访 问 策 略 隐 匿 请 求 ， 如 禁 用 或 修 改 客 户 端   H T T P   请 求 头 特 定 属 性
反 向 代 理 m e d i a - r a n g e 媒 体 范 围 限 制 支 持   S S L 支 持   I P v 6 错 误 页 面 的 本 地 化   -   S q u i d   可 以 根 据 访 问 者 的 语 言 选 项 对 每 个 请 求 展 示 本 地 化 的 错 误 页 面 C o n n e c t i o n   P i n n i n g 连 接 固 定 （ 用 于   N T L M   A u t h   P a s s t h r o u g h ）   -   一 种 允 许   W e b   服 务 器 通 过   W e b   代 理 使 用 M i c r o s o f t   N T L M   安 全 认 证 替 代   H T T P   标 准 认 证 的 方 案 支 持 Q o S ,   Q u a l i t y   o f   S e r v i c e 服 务 质 量 流 选 择 一 个   T O S / D i f f s e r v   值 来 标 记 本 地 命 中 选 择 一 个   T O S / D i f f s e r v   值 来 标 记 对 端 命 中 选 择 性 地 仅 标 记 同 级 或 上 级 请 求 允 许 任 意 发 往 客 户 端 的   H T T P   响 应 保 持 由 远 程 服 务 器 处 响 应 的   T O S   值 对 收 到 的 远 程 服 务 器 的   T O S   值 ， 在 复 制 之 前 对 指 定 位 进 行 掩 码 操 作 ， 再 发 送 到 客 户 端 S S L   B u m p   ( 用 于   H T T P S   过 滤 和 适 配 )   -   S q u i d - i n - t h e - m i d d l e ， 在   C O N N E C T   方 式 的   S S L   隧 道 中 ， 用 配 置 化 的 客 户 端 和 服 务 器 端 证 书 ， 对 流 量 进 行 解 密 和 加 密 支 持 适 配 模 块 I C A P   旁 路 和 重 试 增 强   -   通 过 完 全 的 旁 路 和 动 态 链 式 路 由 扩 展   I C A P ， 来 处 理 多 多 个 适 应 性 服 务 。 支 持   I C Y   流 式 协 议   -   俗 称   S H O U T c a s t   多 媒 体 流 动 态   S S L   证 书 生 成 支 持   I C A P   协 议   ( I n t e r n e t   C o n t e n t   A d a p t a t i o n   P r o t o c o l ) 完 整 的 请 求 日 志 记 录 匿 名 连 接 网 站 :   w w w . s q u i d - c a c h e . o r g [ 1 ] 开 发 :   美 国 国 家 应 用 网 络 研 究 实 验 室 ( N L A N R ) 和 网 络 志 愿 者 授 权 :   G N U   G P L   v 2 版 本 号 :   4 . 0 . 1 P r i v o x y P r i v o x y   ( P r i v a c y   E n h a n c i n g   P r o x y )   是 一 个 非 缓 存 类   W e b   代 理 软 件 ， 它 自 带 的 高 级 过 滤 功 能 可 以 用 来 增 强 隐 私 保 护 、 修 改 页 面 内 容 和   H T T P
头 部 信 息 、 访 问 控 制 ， 以 及 去 除 广 告 和 其 它 招 人 反 感 的 互 联 网 垃 圾 。 P r i v o x y   的 配 置 非 常 灵 活 ， 能 充 分 定 制 已 满 足 各 种 各 样 的 需 求 和 偏 好 。 它 支 持 单 机 和 多 用 户 网 络 两 种 模 式 。 P r i v o x y   使 用   a c t i o n   规 则 来 处 理 浏 览 器 和 远 程 站 点 间 的 数 据 流 。 其 特 性 包 括 ： 高 度 配 置 化 — — 可 以 完 全 定 制 你 的 配 置 广 告 拦 截 C o o k i e   管 理 支 持 “ C o n n e c t i o n :   k e e p - a l i v e ” 。 可 以 无 视 客 户 端 配 置 而 保 持 外 发 的 持 久 连 接 支 持   I P v 6 T a g g i n g 标 签 化 ， 允 许 按 照 客 户 端 和 服 务 器 的 请 求 头 进 行 处 理 作 为 i n t e r c e p t i n g 拦 截 代 理 器 运 行 巧 妙 的 a c t i o n 动 作 和 过 滤 机 制 用 来 处 理 服 务 器 和 客 户 端 的   H T T P   头 部 可 以 与 其 他 代 理 软 件 链 式 使 用 整 合 了 基 于 浏 览 器 的 配 置 和 控 制 工 具 ， 能 在 线 跟 踪 规 则 和 过 滤 效 果 ， 可 远 程 开 关 页 面 过 滤 （ 文 本 替 换 、 根 据 尺 寸 大 小 删 除 广 告 栏 ,   隐 藏 的 “ w e b - b u g s ” 元 素 和   H T M L   容 错 等 ） 模 块 化 的 配 置 使 得 标 准 配 置 和 用 户 配 置 可 以 存 放 于 不 同 文 件 中 ， 这 样 安 装 更 新 就 不 会 覆 盖 用 户 的 个 性 化 设 置 配 置 文 件 支 持   P e r l   兼 容 的 正 则 表 达 式 ， 以 及 更 为 精 妙 和 灵 活 的 配 置 语 法 G I F   去 动 画 旁 路 处 理 大 量 c l i c k - t r a c k i n g 点 击 跟 踪 脚 本 （ 避 免 脚 本 重 定 向 ） 大 多 数 代 理 生 成 的 页 面 （ 例 如   " 访 问 受 限 "   页 面 ） 可 由 用 户 自 定 义 H T M L 模 板 自 动 监 测 配 置 文 件 的 修 改 并 重 新 读 取 大 多 数 功 能 可 以 基 于 每 个 站 点 或 每 个   U R L   位 置 来 进 行 控 制   网 站 :   w w w . p r i v o x y . o r g [ 2 ] 开 发 :   F a b i a n   K e i l （ 开 发 领 导 者 ） ,   D a v i d   S c h m i d t ,   和 众 多 其 他 贡 献 者 授 权 :   G N U   G P L   v 2 版 本 号 :   3 . 4 . 2 V a r n i s h   C a c h e V a r n i s h   C a c h e   是 一 个 为 性 能 和 灵 活 性 而 生 的   w e b   加 速 器 。 它 新 颖 的 架 构 设 计 能 带 来 显 著 的 性 能 提 升 。 根 据 你 的 架 构 ， 通 常 情 况 下 它 能 加 速 响 应 速 度 3 0 0 - 1 0 0 0 倍 。 V a r n i s h   将 页 面 存 储 到 内 存 ， 这 样   w e b   服 务 器 就 无 需 重 复 地 创 建 相 同 的 页 面 ， 只 需 要 在 页 面 发 生 变 化 后 重 新 生 成 。 页 面 内 容 直 接 从 内 存 中 访 问 ， 当 然 比 其 他 方 式 更 快 。 此 外   V a r n i s h   能 大 大 提 升 响 应   w e b   页 面 的 速 度 ， 用 在 任 何 应 用 服 务 器 上 都 能 使 网 站 访 问 速 度 大 幅 度 地 提 升 。 按 经 验 ， V a r n i s h   C a c h e   比 较 经 济 的 配 置 是 1 - 1 6 G B 内 存 +   S S D   固 态 硬 盘 。 其 特 性 包 括 ：
新 颖 的 设 计 V C L   -   非 常 灵 活 的 配 置 语 言 。 V C L   配 置 会 转 换 成   C ， 然 后 编 译 、 加 载 、 运 行 ， 灵 活 且 高 效 能 使 用   r o u n d - r o b i n   轮 询 和 随 机 分 发 两 种 方 式 来 负 载 均 衡 ， 两 种 方 式 下 后 端 服 务 器 都 可 以 设 置 权 重 基 于   D N S 、 随 机 、 散 列 和 客 户 端   I P   的 D i r e c t o r 分 发 器 多 台 后 端 主 机 间 的 负 载 均 衡 支 持   E d g e   S i d e   I n c l u d e s ， 包 括 拼 装 压 缩 后 的   E S I   片 段 重 度 多 线 程 并 发 U R L   重 写 单   V a r n i s h   能 够 缓 存 多 个 虚 拟 主 机 日 志 数 据 存 储 在 共 享 内 存 中 基 本 的 后 端 服 务 器 健 康 检 查 优 雅 地 处 理 后 端 服 务 器 “ 挂 掉 ” 命 令 行 界 面 的 管 理 控 制 台 使 用 内 联   C   语 言 来 扩 展   V a r n i s h 可 以 与   A p a c h e   用 在 相 同 的 系 统 上 单 个 系 统 可 运 行 多 个   V a r n i s h 支 持   H A P r o x y   代 理 协 议 。 该 协 议 在 每 个 收 到 的   T C P   请 求 — — 例 如   S S L   终 止 过 程 中 — — 附 加 一 小 段   h t t p   头 信 息 ， 以 记 录 客 户 端 的 真 实 地 址 冷 热   V C L   状 态 可 以 用 名 为   V M O D   的   V a r n i s h   模 块 来 提 供 插 件 扩 展 通 过   V M O D   定 义 后 端 主 机 G z i p   压 缩 及 解 压 H T T P   流 的 通 过 和 获 取 神 圣 模 式 和 优 雅 模 式 。 用   V a r n i s h   作 为 负 载 均 衡 器 ， 神 圣 模 式 下 可 以 将 不 稳 定 的 后 端 服 务 器 在 一 段 时 间 内 打 入 黑 名 单 ， 阻 止 它 们 继 续 提 供 流 量 服 务 。 优 雅 模 式 允 许   V a r n i s h   在 获 取 不 到 后 端 服 务 器 状 态 良 好 的 响 应 时 ， 提 供 已 过 期 版 本 的 页 面 或 其 它 内 容 。 实 验 性 支 持 持 久 化 存 储 ， 无 需   L R U   缓 存 淘 汰 网 站 :   w w w . v a r n i s h - c a c h e . o r g [ 3 ] 开 发 :   V a r n i s h   S o f t w a r e 授 权 :   F r e e B S D 版 本 号 :   4 . 1 . 0 P o l i p o P o l i p o   是 一 个 开 源 的   H T T P   缓 存 代 理 ， 只 需 要 非 常 低 的 资 源 开 销 。 它 监 听 来 自 浏 览 器 的   w e b   页 面 请 求 ， 转 发 到   w e b   服 务 器 ， 然 后 将 服 务 器 的 响 应 转 发 到 浏 览 器 。 在 此 过 程 中 ， 它 能 优 化 和 整 形 网 络 流 量 。 从 本 质 来 讲   P o l i p o   与   W W W O F F L E   很 相 似 ， 但 其 实 现 技 术 更 接 近 于   S q u i d 。 P o l i p o   最 开 始 的 目 标 是 作 为 一 个 兼 容   H T T P / 1 . 1   的 代 理 ， 理 论 它 能 在 任 何 兼 容   H T T P / 1 . 1   或 更 早 的   H T T P / 1 . 0   的 站 点 上 运 行 。 其 特 性 包 括 ： H T T P   1 . 1 、 I P v 4   &   I P v 6 、 流 量 过 滤 和 隐 私 保 护 增 强 如 确 认 远 程 服 务 器 支 持 的 话 ， 则 无 论 收 到 的 请 求 是 管 道 处 理 过 的 还 是 在 多 个 连 接 上 同 时 收 到 的 ， 都 使 用   H T T P / 1 . 1   p i p e l i n i n g 管 道 下 载 被 中 断 时 缓 存 起 始 部 分 ， 当 需 要 续 传 时 用 R a n g e 区 间 请 求 来 完 成 下 载 将   H T T P / 1 . 0   的 客 户 端 请 求 升 级 为   H T T P / 1 . 1 ， 然 后 按 照 客 户 端 支 持 的 级 别 进 行 升 级 或 降 级 后 回 复
全 面 支 持   I P v 6   （ 作 用 域 （ 链 路 本 地 ） 地 址 除 外 ） 作 为   I P v 4   和   I P v 6   网 络 的 网 桥 内 容 过 滤 能 使 用 P o o r   M a n ' s   M u l t i p l e x i n g P o o r   M a n   多 路 复 用 技 术 降 低 延 迟 支 持   S O C K S   4   和   S O C K S   5   协 议 H T T P S   代 理 扮 演 透 明 代 理 的 角 色 可 以 与   P r i v o x y   或   t o r   一 起 运 行   网 站 :   w w w . p p s . u n i v - p a r i s - d i d e r o t . f r / ~ j c h / s o f t w a r e / p o l i p o / [ 4 ] 开 发 :   J u l i u s z   C h r o b o c z e k ,   C h r i s t o p h e r   D a v i s 授 权 :   M I T   L i c e n s e 版 本 号 :   1 . 1 . 1 T i n y p r o x y T i n y p r o x y   是 一 个 轻 量 级 的 开 源   w e b   代 理 守 护 进 程 ， 其 设 计 目 标 是 快 而 小 。 它 适 用 于 需 要 完 整   H T T P   代 理 特 性 ， 但 系 统 资 源 又 不 足 以 运 行 大 型 代 理 的 场 景 ， 比 如 嵌 入 式 部 署 。 T i n y p r o x y   对 小 规 模 网 络 非 常 有 用 ， 这 样 的 场 合 下 大 型 代 理 会 使 系 统 资 源 紧 张 ， 或 有 安 全 风 险 。 T i n y p r o x y   的 一 个 关 键 特 性 是 其 缓 冲 连 接 的 理 念 。 从 效 果 上 看 ，   T i n y p r o x y   对 服 务 器 的 响 应 进 行 了 高 速 缓 冲 ， 然 后 按 照 客 户 端 能 够 处 理 的 最 高 速 度 进 行 响 应 。 该 特 性 极 大 的 降 低 了 网 络 延 滞 带 来 的 问 题 。 特 性 ： 易 于 修 改 隐 匿 模 式   -   定 义 哪 些   H T T P   头 允 许 通 过 ， 哪 些 又 会 被 拦 截 支 持   H T T P S   -   T i n y p r o x y   允 许 通 过   C O N N E C T   方 法 转 发   H T T P S   连 接 ， 任 何 情 况 下 都 不 会 修 改 数 据 流 量 远 程 监 控   -   远 程 访 问 代 理 统 计 数 据 ， 让 你 能 清 楚 了 解 代 理 服 务 当 前 的 忙 碌 状 态 平 均 负 载 监 控   -   通 过 配 置 ， 当 服 务 器 的 负 载 接 近 一 定 值 后 拒 绝 新 连 接 访 问 控 制   -   通 过 配 置 ， 仅 允 许 指 定 子 网 或   I P   地 址 的 访 问 安 全   -   运 行 无 需 额 外 权 限 ， 减 小 了 系 统 受 到 威 胁 的 概 率 基 于   U R L   的 过 滤   -   允 许 基 于 域 和 U R L 的 黑 白 名 单 透 明 代 理   -   配 置 为 透 明 代 理 ， 这 样 客 户 端 就 无 需 任 何 配 置 代 理 链   -   在 流 量 出 口 处 采 用 上 游 代 理 服 务 器 ， 而 不 是 直 接 转 发 到 目 标 服 务 器 ， 创 建 我 们 所 说 的 代 理 链 隐 私 特 性   -   限 制 允 许 从 浏 览 器 收 到 的 来 自   H T T P   服 务 器 的 数 据 （ 例 如   c o o k i e s ） ， 同 时 限 制 允 许 通 过 的 从 浏 览 器 到   H T T P   服 务 器 的 数 据 （ 例 如 版 本 信 息 ） 低 开 销   -   使 用   g l i b c   内 存 开 销 只 有 2 M B ， C P U   负 载 按 并 发 连 接 数 线 性 增 长 （ 取 决 于 网 络 连 接 速 度 ） 。   T i n y p r o x y   可 以 运 行 在 老 旧 的 机 器 上 而 无 需 担 心 性 能 问 题 。   网 站 :   b a n u . c o m / t i n y p r o x y [ 5 ] 开 发 :   R o b e r t   J a m e s   K a e s 和 其 他 贡 献 者 授 权 :   G N U   G P L   v 2 版 本 号 :   1 . 8 . 3 v i a :   h t t p : / / w w w . l i n u x l i n k s . c o m / a r t i c l e / 2 0 1 5 1 1 0 1 0 2 0 3 0 9 6 9 0 / W e b D e l i v e r y . h t m l
译 者 ： f w 8 8 9 9 [ 6 ]   校 对 ： w x y [ 7 ] 本 文 由   L C T T [ 8 ]   原 创 编 译 ， L i n u x 中 国   荣 誉 推 出 [ 1 ] :   h t t p : / / w w w . s q u i d - c a c h e . o r g / [ 2 ] :   h t t p : / / w w w . p r i v o x y . o r g / [ 3 ] :   h t t p s : / / w w w . v a r n i s h - c a c h e . o r g / [ 4 ] :   h t t p : / / w w w . p p s . u n i v - p a r i s - d i d e r o t . f r / % 7 E j c h / s o f t w a r e / p o l i p o / [ 5 ] :   h t t p s : / / b a n u . c o m / t i n y p r o x y / [ 6 ] :   h t t p s : / / g i t h u b . c o m / f w 8 8 9 9 [ 7 ] :   h t t p s : / / g i t h u b . c o m / w x y [ 8 ] :   h t t p s : / / g i t h u b . c o m / L C T T / T r a n s l a t e P r o j e c t 推 荐 文 章 推 荐 文 章 I D 点 击 标 题 或 输 入 文 章   I D   直 达 该 文 章 3 0 2 0 0 2 年 ， 程 序 员 和   U n i x   大 神 们 的 桌 面 长 啥 样 ？ 8 6 8 编 程 走 火 入 魔 的 十 个 迹 象 ， 你 中 枪 了 吗 ？ 1 6 0 6 每 天 工 作 4 小 时 的 程 序 员 3 5 6 4 哪 个 文 件 系 统 最 适 合 你 的   L i n u x   系 统 ？ 将 文 章 分 享 给 朋 友 是 对 我 们 最 好 的 赞 赏 ！ 阅 读 原 文
回复

举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver| 手机版| 小黑屋|
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud. 商业源码建议获取授权，如侵犯您的权益，请联系客服处理