搜索

[11587] 2017-07-25_获取来源IP地址的正确姿势

文档创建者：s7ckTeam
浏览次数：7
最后更新：2025-01-18
2017-07-25_获取来源IP地址的正确姿势 获 取 来 源 I P 地 址 的 正 确 姿 势 原 创   戒 贤   F r e e B u f   2 0 1 7 - 0 7 - 2 5 * 本 文 原 创 作 者 ： 戒 贤 ， 本 文 属 F r e e B u f 原 创 奖 励 计 划 ， 未 经 许 可 禁 止 转 载 背 景 背 景 笔 者 从 去 年 6 月 份 开 始 研 究 I P 地 址 ， 陆 续 踩 了 很 多 很 多 坑 ， 也 结 识 了 一 大 批 同 行 业 的 前 辈 。 我 能 说 我 是 这 个 圈 子 里 年 龄 最 小 的 么 … . . 我 一 直 在 承 受 我 这 个 年 纪 不 该 有 的 智 慧 和 经 历 。 关 于 I P 地 址 的 研 究 ， 此 前 我 写 过 一 个 完 整 的 系 列 ， 先 后 被 未 央 网 、 雷 锋 网 和 先 知 社 区 转 载 。 如 果 你 想 看 的 话 ， 可 以 戳 这 里 ： 反 欺 诈 专 栏 我 们 首 次 建 模 完 成 之 后 ， 迫 不 及 待 地 让 同 事 帮 忙 把 数 据 提 取 出 来 ， 进 行 人 工 审 核 评 估 ， 却 发 现 结 果 中 有 很 多 很 我 们 首 次 建 模 完 成 之 后 ， 迫 不 及 待 地 让 同 事 帮 忙 把 数 据 提 取 出 来 ， 进 行 人 工 审 核 评 估 ， 却 发 现 结 果 中 有 很 多 很 多 保 留 多 保 留 I P ， 心 里 哇 凉 ， 心 里 哇 凉 哇 凉 的 。 每 次 和 客 户 对 接 ， 我 都 花 很 长 的 时 间 跟 对 方 的 技 术 人 员 解 释 如 何 正 确 地 获 取 来 源 哇 凉 的 。 每 次 和 客 户 对 接 ， 我 都 花 很 长 的 时 间 跟 对 方 的 技 术 人 员 解 释 如 何 正 确 地 获 取 来 源 I P 地 址 ， 但 是 每 家 公 司 的 情 况 都 有 所 差 别 ， 没 有 一 个 标 准 方 法 。 也 有 一 些 公 司 ， 由 于 相 关 的 代 码 已 经 存 在 了 很 地 址 ， 但 是 每 家 公 司 的 情 况 都 有 所 差 别 ， 没 有 一 个 标 准 方 法 。 也 有 一 些 公 司 ， 由 于 相 关 的 代 码 已 经 存 在 了 很 久 ， 没 有 人 维 护 ， 而 业 务 系 统 的 架 构 已 经 变 更 了 多 次 ， 原 有 的 代 码 ， 获 取 出 来 的 久 ， 没 有 人 维 护 ， 而 业 务 系 统 的 架 构 已 经 变 更 了 多 次 ， 原 有 的 代 码 ， 获 取 出 来 的 I P 都 是 错 的 。 都 是 错 的 。 想 象 一 下 ， 每 天 都 有 人 在 问 你 ： 1 2 7 . 0 . 0 . 1 这 个 I P 是 啥 ？ 这 个 I P 怎 么 发 了 那 么 多 请 求 ？ 这 是 不 是 个 基 站 ？ 还 是 服 务 器 I P ？ 难 不 成 是 代 理 ？ 还 是 我 们 被 攻 击 了 ？ 诶 你 说 话 啊 ？ 关 于 保 留 关 于 保 留 I P 下 面 是 从 维 基 百 科 上 摘 录 的 保 留 I P 地 址 段 ， 共 计 1 6 个 ( 最 后 两 个 段 一 般 会 合 并 ， 也 可 以 认 为 是 1 5 个 ) 。 保 留 地 址 段 保 留 地 址 段 地 址 起 始 地 址 起 始 I P 地 址 数 量 地 址 数 量 用 途 用 途 0 . 0 . 0 . 0 / 8 0 . 0 . 0 . 0   –   0 . 2 5 5 . 2 5 5 . 2 5 5 1 6 , 7 7 7 , 2 1 6 软 件 1 0 . 0 . 0 . 0 / 8 1 0 . 0 . 0 . 0   –   1 0 . 2 5 5 . 2 5 5 . 2 5 5 1 6 , 7 7 7 , 2 1 6 内 网 1 0 0 . 6 4 . 0 . 0 / 1 0 1 0 0 . 6 4 . 0 . 0   –   1 0 0 . 1 2 7 . 2 5 5 . 2 5 5 4 , 1 9 4 , 3 0 4 内 网 1 2 7 . 0 . 0 . 0 / 8 1 2 7 . 0 . 0 . 0   –   1 2 7 . 2 5 5 . 2 5 5 . 2 5 5 1 6 , 7 7 7 , 2 1 6 主 机 ( 本 机 ) 1 6 9 . 2 5 4 . 0 . 0 / 1 6 1 6 9 . 2 5 4 . 0 . 0   –   1 6 9 . 2 5 4 . 2 5 5 . 2 5 5 6 5 , 5 3 6 本 地 子 网 ( D H C P   F a i l e d ) 1 7 2 . 1 6 . 0 . 0 / 1 2 1 7 2 . 1 6 . 0 . 0   –   1 7 2 . 3 1 . 2 5 5 . 2 5 5 1 , 0 4 8 , 5 7 6 内 网 1 9 2 . 0 . 0 . 0 / 2 4 1 9 2 . 0 . 0 . 0   –   1 9 2 . 0 . 0 . 2 5 5 2 5 6 内 网 1 9 2 . 0 . 2 . 0 / 2 4 1 9 2 . 0 . 2 . 0   –   1 9 2 . 0 . 2 . 2 5 5 2 5 6 “ T E S T - N E T ” 1 9 2 . 8 8 . 9 9 . 0 / 2 4 1 9 2 . 8 8 . 9 9 . 0   –   1 9 2 . 8 8 . 9 9 . 2 5 5 2 5 6 6 t o 4   a n y c a s t 1 9 2 . 1 6 8 . 0 . 0 / 1 6 1 9 2 . 1 6 8 . 0 . 0   -   1 9 2 . 1 6 8 . 2 5 5 . 2 5 5 6 5 , 5 3 6 内 网 1 9 8 . 1 8 . 0 . 0 / 1 5 1 9 8 . 1 8 . 0 . 0   –   1 9 8 . 1 9 . 2 5 5 . 2 5 5 1 3 1 , 0 7 2 内 网 1 9 8 . 5 1 . 1 0 0 . 0 / 2 4 1 9 8 . 5 1 . 1 0 0 . 0   –   1 9 8 . 5 1 . 1 0 0 . 2 5 5 2 5 6 “ T E S T - N E T - 2 ” 2 0 3 . 0 . 1 1 3 . 0 / 2 4 2 0 3 . 0 . 1 1 3 . 0   –   2 0 3 . 0 . 1 1 3 . 2 5 5 2 5 6 “ T E S T - N E T - 3 ” 2 2 4 . 0 . 0 . 0 / 4 2 2 4 . 0 . 0 . 0   -   2 3 9 . 2 5 5 . 2 5 5 . 2 5 5 2 6 8 , 4 3 5 , 4 5 5 预 留 2 4 0 . 0 . 0 . 0 / 4 2 4 0 . 0 . 0 . 0   –   2 5 5 . 2 5 5 . 2 5 5 . 2 5 4 2 6 8 , 4 3 5 , 4 5 5 预 留 2 5 5 . 2 5 5 . 2 5 5 . 2 5 5 / 3 2 2 5 5 . 2 5 5 . 2 5 5 . 2 5 5 1 广 播 我 经 常 拿 这 个 问 题 去 刁 难 人 ， 能 说 出 三 个 段 的 人 ， 至 少 是 具 备 网 络 基 础 知 识 的 ， 说 出 5 个 以 上 的 ， 一 般 我 会 请 他 喝 酒 。 连 保 留 I P 是 啥 都 不 知 道 的 ， 我 就 得 尝 试 用 另 外 一 种 方 式 去 跟 他 解 释 这 个 问 题 了 。 保 留 I P 可 以 说 是 T C P / I P 协 议 的 约 定 吧 ， 每 一 个 段 都 有 相 应 的 使 用 说 明 ， 都 有 与 之 对 应 的 R F C 文 档 。
比 如 ， 中 国 境 内 ， 移 动 设 备 在   4 G   环 境 下 获 取 到 的 内 网 I P ， 一 般 是   1 0 . 0 . 0 . 0 / 8   或 者   1 0 0 . 6 4 . 0 . 0 / 1 0   的 。 非 物 理 隔 离 的 网 络 系 统 ， 一 般 会 是 用   1 9 2 . 1 6 8 . 0 . 0 / 1 6 ， 1 7 2 . 1 6 . 0 . 0 / 1 2 ， 1 0 . 0 . 0 . 0 / 8   内 划 分 内 网 地 址 ， 比 较 常 见 。 据 @ 高 春 辉 说 ， 除 了 这 些 之 外 ， 还 有 一 些 很 小 的 保 留   I P   段 ， 如 果 不 详 细 去 看 完 整 的   w h o i s   数 据 ， 可 能 都 不 会 发 现 。 聊 聊 聊 聊 X F F X - F o r w a r d e d - F o r （ X F F ） 是 用 来 识 别 通 过 H T T P 代 理 或 负 载 均 衡 方 式 连 接 到 W e b 服 务 器 的 客 户 端 最 原 始 的 I P 地 址 的 H T T P 请 求 头 字 段 。   S q u i d 缓 存 代 理 服 务 器 的 开 发 人 员 最 早 引 入 了 这 一 H T T P 头 字 段 ， 并 由 I E T F 在 H T T P 头 字 段 标 准 化 草 案 中 正 式 提 出 。 X F F 的 工 作 机 制 是 ， 每 经 过 一 层 代 理 ， 由 代 理 服 务 器 ， 把 t c p 报 文 中 的 S o u r c e   I P ， 添 加 到 X F F 的 末 尾 ， 多 个 I P 以 逗 号 分 隔 。 这 里 说 的 代 理 是 广 义 的 ， 包 括 负 载 均 衡 ( 比 如 阿 里 云 S L B ) ， 反 向 代 理 ( 比 如 N g i n x ) ， 缓 存 服 务 器 ( 比 如 S q u i d ) 。 一 方 面 ， X F F 提 供 了 向 后 端 业 务 系 统 传 递 用 户 I P 的 机 制 ， 后 端 业 务 系 统 ， 可 以 通 过 X F F 感 知 到 访 问 者 的 真 实 I P 。 另 一 方 面 ， X F F 非 常 易 于 伪 造 。 很 多 浏 览 器 插 件 ， 可 以 随 机 填 充 X F F 字 段 ， 如 果 没 有 一 套 正 确 的 机 制 来 处 理 X F F 字 段 ， 而 盲 目 地 提 取 X F F 中 第 一 个 I P 作 为 访 问 者 的 I P ， 就 一 定 会 出 问 题 。 前 面 提 到 了 ， 来 源 I P 是 保 留 I P 的 情 况 ， 其 实 大 多 数 是 由 于 业 务 系 统 直 接 以 T C P 报 文 中 的 r e m o t e   a d d r e s s 作 为 来 源 I P 使 用 了 。 而 这 个 I P ， 一 般 是 企 业 自 己 的 反 向 代 理 服 务 器 。 除 此 之 外 ， X F F 伪 造 的 过 程 中 ， I P 地 址 是 随 机 生 成 的 ， 可 能 会 出 线 保 留 I P ， 非 法 I P ， 有 少 数 情 况 可 能 会 出 现 “ 未 启 用 I P ” ， 也 就 是 说 这 个 I P 已 经 分 配 给 特 定 的 运 营 商 ， 但 是 运 营 商 还 没 有 添 加 这 个 I P 的 路 由 ， 这 个 I P 无 法 被 外 界 访 问 ， 也 不 会 访 问 任 何 人 。 这 些 I P 是 动 态 变 化 的 ， 据 老 高 说 ， 只 有 分 析 B G P 数 据 的 时 候 ， 才 能 看 到 哪 些 I P 是 没 有 被 启 用 的 。 业 务 系 统 获 取 来 源 业 务 系 统 获 取 来 源 I P 的 正 确 姿 势 的 正 确 姿 势 下 面 是 一 个 简 单 的 示 意 图 ， 简 单 地 把 整 个 访 问 链 路 划 分 成 可 信 区 域 和 不 可 信 区 域 。 可 信 区 域 ， 就 是 平 台 自 己 ， 或 者 友 商 建 立 的 系 统 ， 可 以 保 证 从 这 些 系 统 中 获 取 并 传 递 的 数 据 是 真 实 的 、 可 信 的 。 获 取 来 源 I P 的 正 确 方 式 ， 是 提 取 并 记 录 本 次 请 求 首 次 进 入 可 信 区 域 时 的 r e m o t e   a d d r e s s 。 不 论 这 个 I P 是 不 是 代 理 。 X F F 伪 造 的 情 况 其 实 非 常 普 遍 ， 也 陆 续 地 出 现 了 一 些 替 代 方 案 ， 我 司 目 前 使 用 的 ， 是 设 置 一 个 专 用 的 字 段 来 传 递 这 个 I P ， 不 会 和 X F F 相 覆 盖 。
此 外 ， 某 些 C D N 服 务 商 ， 会 有 自 己 定 制 化 的 H e a d e r 字 段 ， 情 况 比 较 多 ， 建 议 结 合 具 体 的 情 况 来 决 定 如 何 获 取 用 户 的 来 源 I P 。 比 如 ， 之 前 遇 到 一 个 客 户 ， 使 用 了 阿 里 云 的 S L B 负 载 均 衡 ， S L B 会 给 每 一 个 请 求 都 加 上 X - F o r w a r d e d - F o r 字 段 ， 他 们 自 己 的 反 向 代 理 又 加 一 次 。 那 么 其 实 只 要 获 取 X F F 中 倒 数 第 三 个 I P ， 作 为 来 源 I P 即 可 。 一 种 参 考 方 式 如 下 ： 在 反 向 代 理 ( N g i n x ) 上 配 置 ， 增 加 R e a l - I P 字 段 ： 业 务 系 统 中 ， 获 取 来 源 I P 的 代 码 如 下 ( J a v a 示 例 ) ： 这 个 问 题 实 在 是 简 单 到 爆 炸 ， 懂 技 术 的 同 学 看 到 ， 肯 定 会 喷 我 ， 居 然 写 这 种 没 水 平 的 文 章 。 但 是 呢 ， 作 为 一 个 数 据 分 析 师 ， 看 着 每 天 系 统 里 辣 么 多 保 留 I P ， 非 法 I P 传 进 来 ， 真 的 很 憋 屈 。 体 谅 下 咯 ~ 而 且 ， 每 每 看 别 人 说 攻 击 溯 源 … . 我 满 脑 子 想 的 都 是 ： 你 连 获 取 到 的 I P 是 不 是 真 的 你 都 不 知 道 ， 你 在 追 溯 个 啥 ？ B y   t h e   w a y ， 欢 迎 有 兴 趣 深 入 研 究 I P 地 址 的 童 鞋 一 起 交 流 ， 没 准 能 带 你 跟 老 高 一 块 儿 喝 羊 汤 。 * 本 文 原 创 作 者 ： 戒 贤 ， 本 文 属 F r e e B u f 原 创 奖 励 计 划 ， 未 经 许 可 禁 止 转 载
阅 读 原 文
回复

举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

使用Markdown编辑器编辑 使用富文本编辑器编辑

Archiver| 手机版| 小黑屋|
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud. 商业源码建议获取授权，如侵犯您的权益，请联系客服处理