搜索

[27428] 2019-10-17_请不要污名化爬虫！

文档创建者：s7ckTeam
浏览次数：0
最后更新：2025-01-19
2019-10-17_请不要污名化爬虫！ 请 不 要 污 名 化 爬 虫 ！ 原 创   L o c o   N i g h t T e a m   2 0 1 9 - 1 0 - 1 7 " N i g h t T e a m " 一 个 值 得 加 星 标 的 公 众 号 。 文 章 作 者 ： 「 夜 幕 团 队   N i g h t T e a m 」   -   L o c o 导 语 导 语 最 近 有 一 篇 名 为 《 只 因 写 了 一 段 爬 虫 ， 公 司 2 0 0 多 人 被 抓 ！ 》 的 文 章 非 常 火 ， 相 信 大 家 应 该 都 看 到 了 。 这 篇 文 章 火 起 来 之 后 ， 本 来 经 过 了 一 个 多 月 的 时 间 已 经 冷 静 下 来 了 的 爬 虫 圈 子 又 开 始 人 心 惶 惶 了 ， 各 种 说 法 层 出 不 穷 ， 大 家 都 害 怕 自 己 一 不 小 心 就 违 法 、 进 监 狱 过 年 ， 但 是 ， 事 情 真 的 是 那 样 吗 ？ 辟 谣 辟 谣 我 们 先 来 看 几 个 明 显 有 误 ， 且 传 播 很 广 的 说 法 吧 。 “ 最 近 很 多 做 爬 虫 的 被 抓 了 最 近 很 多 做 爬 虫 的 被 抓 了 ”
那 篇 文 章 的 故 事 中 提 到 的 ， 是 一 家 名 为 「 巧 达 数 据 」 的 公 司 ， 如 果 之 前 有 关 注 过 相 关 新 闻 的 朋 友 应 该 不 难 发 现 ， 这 个 公 司 实 际 上 在 3 月 份 的 时 候 就 已 经 被 查 封 了 ！ 而 文 章 后 面 提 到 的 天 翼 征 信 、 新 颜 科 技 、 魔 蝎 科 技 、 公 信 宝 、 同 盾 科 技 相 关 事 件 ， 实 际 上 也 都 是 9 月 初 的 事 情 了 ， 到 目 前 为 止 已 经 一 个 多 月 了 ， 并 不 是 最 近 才 发 生 的 。 “ 最 近 一 直 有 做 爬 虫 的 公 司 被 抓 最 近 一 直 有 做 爬 虫 的 公 司 被 抓 ” 很 多 人 跟 我 说 他 看 到 一 直 有 公 司 因 为 做 爬 虫 被 抓 ， 但 其 实 都 是 错 觉 ， 说 白 了 ， 这 只 是 因 为 你 关 注 的 信 息 来 源 （ 微 信 公 众 号 ） 或 者 是 你 朋 友 圈 内 的 人 关 注 的 信 息 来 源 都 很 集 中 、 搞 来 搞 去 都 是 同 一 个 圈 子 里 的 人 导 致 的 。 同 一 个 圈 子 里 的 公 众 号 关 注 得 多 了 之 后 ， 会 出 现 一 个 很 神 奇 的 现 象 ： 你 会 发 现 你 时 不 时 地 就 看 到 某 一 篇 文 章 在 换 了 个 标 题 之 后 ， 又 出 现 在 了 你 的 消 息 列 表 你 会 发 现 你 时 不 时 地 就 看 到 某 一 篇 文 章 在 换 了 个 标 题 之 后 ， 又 出 现 在 了 你 的 消 息 列 表 / 朋 友 圈 朋 友 圈 / 看 一 看 中 ， 而 这 篇 看 一 看 中 ， 而 这 篇 文 章 很 可 能 你 已 经 看 到 过 很 多 遍 了 。 文 章 很 可 能 你 已 经 看 到 过 很 多 遍 了 。 这 种 现 象 你 见 得 多 了 之 后 ， 很 可 能 就 会 不 再 点 开 文 章 查 看 ， 也 自 然 就 不 会 知 道 它 里 面 到 底 写 了 什 么 ， 你 只 是 感 觉 好 像 一 直 有 新 的 被 抓 的 公 司 ， 但 是 实 际 上 那 些 文 章 都 只 是 换 了 个 名 字 的 旧 文 章 。 “ 只 要 不 遵 守 只 要 不 遵 守 r o b o t s 协 议 就 会 被 抓 协 议 就 会 被 抓 ” 、 、 “ 伪 造 伪 造 U A （ （ U s e r - A g e n t ） 就 会 被 抓 ） 就 会 被 抓 ” 、 、 “ 只 要 绕 过 、 破 解 反 爬 虫 措 施 只 要 绕 过 、 破 解 反 爬 虫 措 施 就 会 被 抓 就 会 被 抓 ” 这 几 个 说 法 的 起 源 ， 是 「 某 离 职 的 头 条 员 工 做 了 一 个 头 条 的 竞 品 ， 还 爬 了 头 条 的 数 据 ， 结 果 被 告 了 」 的 那 个 案 件 的 相 关 新 闻 。 但 将 这 几 个 说 法 再 次 搬 出 来 并 且 还 传 播 开 了 的 ， 是 源 于 某 个 法 律 领 域 的 公 众 号 在 魔 蝎 科 技 等 公 司 被 抓 后 ， 写 的 一 篇 对 相 关 案 件 和 法 律 的 解 读 （ 当 时 是 爆 文 ， 朋 友 圈 都 在 刷 屏 ） 。 我 们 先 来 说 说 传 播 最 广 的 这 个 法 律 领 域 的 公 众 号 所 说 的 吧 。 律 师 毕 竟 不 是 做 技 术 的 ， 对 很 多 技 术 方 面 的 东 西 了 解 的 并 不 多 ， 所 以 有 些 内 容 在 做 技 术 的 人 看 来 其 实 是 挺 搞 笑 的 。 但 由 于 那 位 律 师 的 文 章 当 时 太 火 了 ， 很 多 人 直 接 复 制 粘 贴 了 他 对 相 关 法 律 的 解 读 ， 所 以 这 几 种 说 法 就 被 迅 速 流 传 了 开 来 。 那 么 这 几 个 说 法 的 问 题 在 哪 里 呢 ？ r o b o t s 协 议 协 议 r o b o t s 协 议 实 际 上 是 君 子 协 议 ， 并 不 是 法 律 明 文 规 定 的 限 制 ， 最 早 只 是 针 对 搜 索 引 擎 爬 虫 搜 索 引 擎 爬 虫 而 定 的 东 西 ， 但 现 在 做 搜 索 引 搜 索 引 擎 爬 虫 擎 爬 虫 的 并 不 多 ， 通 常 我 们 说 的 爬 虫 都 是 垂 直 爬 虫 垂 直 爬 虫 （ 意 思 是 针 对 某 一 个 或 多 个 网 站 / A P P 采 集 数 据 的 爬 虫 ） 。 而 这 个 “ 不 遵 守 r o b o t s 协 议 就 会 被 抓 ” 的 说 法 最 搞 笑 的 地 方 就 在 于 ， 现 在 几 乎 所 有 的 网 站 r o b o t s . t x t 文 件 里 都 会 像 这 样 写 ：
注 意 这 里 的 最 后 一 个 ， 这 个 星 号 的 意 思 是 其 他 所 有 的 爬 虫 其 他 所 有 的 爬 虫 ， 而 后 面 跟 着 的 斜 杠 ， 意 思 是 禁 止 访 问 所 有 页 面 禁 止 访 问 所 有 页 面 。 好 了 ， 如 果 遵 守 这 个 协 议 的 话 ， 除 了 搜 索 引 擎 的 爬 虫 以 外 ， 谁 都 别 玩 了 ， 要 知 道 现 在 国 内 的 大 环 境 就 是 大 家 都 不 愿 意 把 数 据 给 开 放 出 来 ， 生 怕 别 人 拿 了 之 后 直 接 做 一 个 竞 品 出 来 跟 自 己 抢 生 意 ， 所 以 根 本 没 有 国 外 网 站 上 很 常 见 的 开 放 平 台 开 放 平 台 。 注 ： 开 放 平 台 就 是 一 个 官 方 的 、 提 供 数 据 的 地 方 。 所 以 如 果 真 的 都 遵 守 这 个 协 议 的 话 ， 各 种 大 数 据 分 析 都 要 凉 凉 ， 连 数 据 都 拿 不 到 ， 分 析 啥 呢 ？ 注 ： 别 扯 自 家 生 产 数 据 ， 没 人 只 分 析 自 家 、 不 分 析 别 人 的 。 伪 造 伪 造 U A （ （ U s e r - A g e n t ） ） 这 个 比 说 r o b o t s 协 议 还 搞 笑 ， 因 为 . . . 现 在 根 本 没 人 直 接 根 据 U A 来 判 断 是 否 是 同 一 个 用 户 ， 改 不 改 U A 对 人 家 反 爬 虫 机 制 的 判 断 一 点 影 响 都 没 有 。 那 位 律 师 的 这 个 说 法 ， 多 半 因 为 看 了 一 些 比 较 水 的 爬 虫 文 章 里 说 多 半 因 为 看 了 一 些 比 较 水 的 爬 虫 文 章 里 说 “ 修 改 修 改 U A 可 以 绕 过 反 爬 可 以 绕 过 反 爬 ” 而 理 解 出 来 的 而 理 解 出 来 的 。 然 后 肯 定 有 人 要 说 了 ： “ 不 管 怎 么 样 你 都 把 U A 改 了 啊 ” （ 有 人 跟 我 这 么 说 过 类 似 的 话 ） ， 你 知 道 U A 是 干 啥 的 么 ？ U A 就 只 是 一 个 特 征 字 符 串 而 已 ， 它 和 r o b o t s 一 样 ， 同 样 算 是 一 个 君 子 协 议 （ 不 懂 的 朋 友 请 阅 读 R F C 中 H T T P 协 议 的 部 分 ） ， 说 白 了 这 玩 意 就 跟 软 件 的 名 字 一 样 ， 叫 啥 都 行 ！ 你 看 哪 个 明 星 很 有 名 ， 你 把 自 己 的 名 字 改 得 跟 他 一 样 ， 也 没 人 会 说 你 ， 因 为 这 本 来 就 没 有 任 何 问 题 ！ 绕 过 、 破 解 反 爬 虫 措 施 绕 过 、 破 解 反 爬 虫 措 施 说 个 最 常 见 、 最 初 级 的 解 决 反 爬 虫 措 施 的 办 法 ： 自 动 化 测 试 工 具 控 制 浏 览 器 进 行 请 求 。 请 问 浏 览 器 请 求 时 ， 如 果 没 有 触 发 反 爬 虫 措 施 ， 算 绕 过 、 破 解 了 吗 ？ U s e r - a g e n t :   B a i d u s p i d e r D i s a l l o w :   / b a l a b a l a U s e r - a g e n t :   各 种 搜 索 引 擎 爬 虫 的 U A D i s a l l o w :   / b a l a b a l a U s e r - A g e n t :   * D i s a l l o w :   / U s e r - A g e n t D i s a l l o w
如 果 你 觉 得 机 器 操 作 的 算 ， 那 请 问 我 找 一 群 人 手 动 打 开 浏 览 器 进 行 同 样 的 操 作 算 吗 ？ 然 后 肯 定 还 会 有 人 说 ： “ 这 根 本 不 算 破 解 反 爬 虫 措 施 ， 破 解 是 把 验 证 码 自 动 输 入 了 才 算 ” （ 同 样 有 人 这 么 跟 我 说 过 ） 。 那 么 请 问 ， 人 工 输 入 验 证 码 算 破 解 吗 ？ 找 一 群 人 人 工 输 入 验 证 码 呢 ？ 然 后 我 们 再 来 回 顾 一 下 那 个 头 条 的 案 件 吧 ， 那 个 案 件 一 开 始 是 各 种 新 闻 、 文 章 都 说 是 ”   使 用 伪 造 d e v i c e _ i d 绕 过 服 务 器 的 身 份 校 验 ， 使 用 伪 造 U A 及 I P 绕 过 服 务 器 的 访 问 频 率 限 制   ” 。 但 从 后 来 被 爆 出 来 的 消 息 来 看 ， 说 白 了 只 是 因 为 那 人 从 头 条 离 职 了 之 后 ， 不 仅 做 了 个 竞 品 还 爬 老 东 家 的 数 据 直 接 放 到 自 己 那 用 而 已 ， 他 的 “ t t _ s p i d e r ” 所 用 到 的 那 些 操 作 并 不 是 导 致 他 被 告 的 关 键 因 素 。 怎 么 避 免 违 法 怎 么 避 免 违 法 以 下 内 容 写 于 2 0 1 9 年 1 0 月 1 7 日 ， 是 根 据 本 人 对 目 前 见 到 的 知 名 案 例 的 理 解 而 写 的 ， 仅 供 参 考 ， 如 有 疑 问 建 议 联 系 律 师 协 助 你 对 具 体 情 况 进 行 分 析 。 个 人 隐 私 信 息 不 要 碰 个 人 隐 私 信 息 不 要 碰 很 明 显 ， 今 年 的 净 网 行 动 中 ， 被 一 窝 端 的 那 些 公 司 大 部 分 都 是 做 征 信 、 风 控 、 简 历 检 索 相 关 的 ， 它 们 有 个 共 同 的 特 点 ， 就 是 都 采 集 了 个 人 隐 私 信 息 并 对 外 售 卖 。 做 征 信 和 风 控 的 基 本 都 是 对 社 保 、 公 积 金 、 账 单 等 信 息 进 行 了 采 集 ， 它 们 的 做 法 也 都 很 类 似 ： 让 用 户 在 自 己 的 A P P 中 登 录 各 种 账 号 ， 从 而 获 取 到 登 录 C o o k i e ， 接 着 就 能 使 用 C o o k i e 随 心 所 欲 地 监 控 用 户 的 情 况 。 做 简 历 检 索 的 则 是 在 各 种 招 聘 平 台 上 注 册 了 大 量 虚 假 企 业 账 号 ， 并 通 过 招 聘 平 台 提 供 的 功 能 获 取 了 大 量 简 历 ， 有 些 做 这 方 面 的 甚 至 还 会 有 用 虚 假 招 聘 的 方 式 骗 简 历 的 操 作 ， 极 其 恶 劣 。 再 次 提 醒 ， 个 人 隐 私 信 息 千 万 不 要 碰 ！ 大 部 分 公 司 根 本 没 有 那 个 权 力 去 碰 这 些 数 据 ， 一 碰 既 死 ！ 别 人 的 东 西 不 要 拿 了 之 后 放 到 自 己 家 里 别 人 的 东 西 不 要 拿 了 之 后 放 到 自 己 家 里 在 早 些 时 候 ，   百 度 与 大 众 点 评 不 正 当 竞 争 纠 纷 案 （ 上 海 市 第 一 中 级 人 民 法 院 （ 2 0 1 6 ） 沪 7 3 民 终 2 4 2 号 ） 也 挺 火 的 ， 从 案 件 内 容 中 可 以 看 到 ， 百 度 采 集 了 大 众 点 评 等 A P P 上 的 店 铺 和 评 论 信 息 ， 并 直 接 在 百 度 地 图 上 进 行 展 示 。 这 个 案 件 大 家 应 该 都 能 理 解 得 了 吧 ？ 很 简 单 的 一 个 事 情 ， 我 没 有 允 许 你 拿 走 这 个 东 西 ， 但 你 直 接 拿 走 了 ， 还 放 在 了 自 己 家 里 炫 耀 ， 这 当 然 不 行 ！ 同 理 ， 所 有 不 通 过 官 方 渠 道 （ 开 放 平 台 等 ） 爬 了 其 他 网 站 的 数 据 之 后 直 接 放 到 自 己 网 站 上 的 ， 都 有 风 险 ， 包 括 但 不 限
于 ： • 爬 了 视 频 、 音 乐 网 站 后 把 视 频 、 音 乐 直 接 搬 到 自 己 网 站 上 ， 为 用 户 提 供 播 放 服 务 的 。 • 爬 了 小 说 网 站 后 把 小 说 文 本 直 接 搬 到 自 己 网 站 上 ， 为 用 户 提 供 盗 版 阅 读 服 务 的 。 • 爬 了 论 坛 网 站 后 把 所 有 贴 子 直 接 搬 到 自 己 网 站 上 ， 改 个 名 字 假 装 自 己 是 另 一 个 论 坛 的 。 不 过 ， 这 方 面 除 了 盗 版 问 题 以 外 ， 大 部 分 情 况 其 实 没 人 管 ， 只 要 你 不 过 分 、 不 出 名 ， 搞 个 小 破 站 出 来 其 实 人 家 也 懒 得 搞 你 ， 容 易 出 问 题 的 是 有 些 专 门 做 此 类 事 情 的 公 司 。 再 次 提 醒 ， 如 果 你 正 在 某 个 公 司 做 这 种 事 情 ， 建 议 尽 早 弃 坑 ！ 请 求 速 度 不 要 太 过 分 请 求 速 度 不 要 太 过 分 很 多 小 白 写 爬 虫 的 时 候 ， 并 发 毫 无 限 制 （ 可 参 考 携 程 反 爬 虫 部 门 某 位 老 哥 写 的 文 章 ） ， 这 种 做 法 实 际 上 是 会 对 对 方 服 务 器 造 成 一 定 影 响 的 ， 在 数 据 量 较 大 的 情 况 下 ， 如 果 对 方 的 带 宽 很 小 ， 很 有 可 能 就 会 被 你 的 高 并 发 请 求 直 接 弄 挂 ， 这 就 相 当 于 C C 攻 击 了 。 C C 攻 击 是 D o s 攻 击 的 一 种 ， 主 要 表 现 是 对 目 标 网 站 发 起 大 量 的 H T T P 请 求 ， 使 其 服 务 器 性 能 被 消 耗 殆 尽 ， 从 而 达 到 让 对 方 服 务 器 拒 绝 服 务 的 效 果 。 D o s 攻 击 就 是 让 对 方 服 务 器 拒 绝 服 务 的 攻 击 的 总 称 ， 而 我 们 常 听 说 的 D D o S 攻 击 其 实 是 分 布 式 拒 绝 服 务 攻 击 的 意 思 ， 只 是 在 D o s 的 基 础 上 加 了 个 分 布 式 而 已 。 所 以 ， 千 万 注 意 控 制 自 己 的 请 求 速 度 ， 控 制 在 一 个 合 理 的 范 围 内 ， 如 果 你 司 老 板 或 产 品 经 理 给 你 提 了 一 个 像 “ 一 天 采 集 一 天 采 集 一 遍 淘 宝 全 站 一 遍 淘 宝 全 站 ” 一 样 的 这 种 需 求 ， 建 议 你 直 接 怼 回 去 。 这 个 请 求 速 度 ， 一 方 面 你 们 这 边 的 成 本 会 非 常 高 ， 另 一 方 面 ， 你 们 的 法 律 风 险 极 大 ， 被 爬 的 那 一 方 完 全 可 以 以 你 们 的 爬 虫 对 他 们 服 务 器 的 资 源 消 耗 过 高 为 由 （ 可 参 考 某 数 据 管 理 办 法 意 见 稿 ） ， 直 接 将 你 们 告 上 法 庭 ， 至 于 最 后 怎 么 判 ， 完 全 看 你 们 爬 了 数 据 做 什 么 用 。 不 要 碰 黑 色 产 业 不 要 碰 黑 色 产 业 这 方 面 被 抓 的 个 人 很 多 ， 基 本 都 是 接 了 个 外 包 ， 然 后 对 方 是 做 黑 产 的 ， 接 外 包 的 这 位 也 不 知 道 或 者 根 本 没 去 了 解 对 方 要 他 做 的 这 个 工 具 是 用 来 干 啥 的 ， 稀 里 糊 涂 地 就 被 抓 了 。 举 两 个 例 子 吧 ： 1 . 有 人 找 你 说 做 一 个 直 播 平 台 的 登 录 、 进 直 播 间 、 刷 弹 幕 、 刷 免 费 礼 物 一 条 龙 服 务 的 程 序 ， 但 他 们 实 际 上 是 用 来 造 假 数 据 的 ， 这 个 情 况 下 ， 如 果 他 们 出 事 被 抓 了 （ 刷 量 属 于 黑 色 产 业 ， 大 概 率 出 事 ） ， 你 就 是 从 犯 。 2 . 之 前 知 乎 上 有 个 很 火 的 “ 接 外 包 接 进 监 狱 的 ” 回 答 ， 那 个 回 答 现 在 已 经 被 删 除 了 ， 但 从 内 容 上 来 看 ， 与 之 前 被 抓 的 知 名 打 码 平 台 站 长 — — 微 凉 的 情 况 很 像 ， 都 是 做 了 个 验 证 码 识 别 服 务 ， 都 是 给 别 人 使 用 了 ， 最 后 莫 名 其 妙 就 被 抓 了 。 按 回 答 中 所 说 的 ， 被 抓 的 那 个 公 司 多 半 是 做 了 上 面 那 个 例 子 中 的 事 情 ， 而 且 量 非 常 大 ， 而 他 提 供 了 打 码 服 务 ， 所 以 就 被 连 带 上 了 。
所 以 ， 如 果 感 觉 自 己 在 做 的 事 情 不 对 劲 ， 千 万 要 搞 清 楚 ， 如 果 有 问 题 ， 赶 紧 弃 坑 ！ 接 外 包 的 时 候 ， 建 议 在 可 以 保 留 聊 天 记 录 的 I M 上 与 对 方 详 细 了 解 一 下 对 方 会 用 这 个 程 序 做 什 么 ， 有 问 题 的 千 万 别 接 ！ 不 要 碰 黄 赌 毒 不 要 碰 黄 赌 毒 这 个 其 实 就 不 怎 么 跟 爬 虫 有 关 了 ， 因 为 目 前 我 看 到 的 案 例 都 是 说 接 外 包 做 了 个 菠 菜 网 站 ， 最 后 被 连 带 一 起 抓 了 的 ， 但 与 上 一 条 一 样 ， 建 议 搞 清 楚 自 己 做 的 东 西 会 被 用 来 干 什 么 ， 并 保 留 好 聊 天 记 录 ， 涉 及 黄 赌 毒 的 千 万 别 接 ！ 不 要 对 别 人 的 软 件 进 行 逆 向 工 程 后 还 到 处 得 瑟 不 要 对 别 人 的 软 件 进 行 逆 向 工 程 后 还 到 处 得 瑟 很 多 人 以 为 写 对 某 个 网 站 / A P P 的 逆 向 文 章 是 没 有 风 险 、 可 以 随 便 写 的 ， 但 实 际 情 况 只 是 人 家 懒 得 弄 你 而 已 ， 因 为 几 乎 所 有 的 网 站 、 A P P 的 用 户 协 议 中 ， 都 会 有 类 似 这 样 的 条 款 ： “ 在 使 用 过 程 中 ， 您 将 承 担 因 下 述 行 为 而 产 生 的 全 部 法 律 责 任 ： 未 经 本 公 司 授 权 ， 修 改 、 破 解 、 反 编 译 、 反 汇 未 经 本 公 司 授 权 ， 修 改 、 破 解 、 反 编 译 、 反 汇 编 、 逆 向 工 程 本 产 品 编 、 逆 向 工 程 本 产 品 ， 发 布 本 产 品 的 修 改 版 、 破 解 版 等 。 ” 有 些 游 戏 类 的 A P P 甚 至 还 会 有 这 样 的 条 款 ： “ 严 禁 修 改 、 破 译 或 进 行 任 何 影 响 游 戏 程 序 和 游 戏 网 络 数 据 传 输 封 包 网 络 数 据 传 输 封 包 的 行 为 。 ” 简 单 地 说 就 是 ， 只 要 你 对 他 们 的 网 站 、 A P P 进 行 了 逆 向 ， 甚 至 是 抓 包 ， 他 们 就 有 理 由 告 你 。 当 然 ， 这 就 跟 遵 守 r o b o t s 协 议 一 样 扯 淡 ， 现 在 做 垂 直 爬 虫 的 基 本 没 有 不 逆 向 、 不 抓 包 的 ， 而 目 前 见 到 的 案 例 也 就 只 是 对 方 要 求 删 文 而 已 ， 还 没 到 抓 人 的 程 度 。 但 是 ， 如 果 某 篇 文 章 的 传 播 面 过 广 ， 对 对 方 造 成 的 一 定 的 损 失 ， 而 且 对 方 想 要 搞 你 的 话 ， 那 你 就 凉 凉 了 。 说 到 这 里 ， 我 还 是 再 次 说 明 一 下 我 们 夜 幕 团 队 的 做 法 吧 ， 我 们 的 文 章 中 不 会 出 现 直 接 逆 向 、 破 解 某 个 第 三 方 网 站 、 A P P 的 内 容 。 我 们 只 会 自 己 造 一 个 案 例 ， 再 对 这 个 案 例 进 行 逆 向 ， 这 样 做 既 安 全 又 不 会 因 为 对 方 更 新 而 失 效 ， 真 正 做 到 授 人 以 渔 的 作 用 。 不 要 影 响 别 人 的 正 常 业 务 不 要 影 响 别 人 的 正 常 业 务 这 个 应 该 很 好 理 解 吧 ？ 抢 票 、 刷 单 、 薅 羊 毛 之 类 的 其 实 都 是 属 于 这 一 类 的 ， 只 要 你 的 操 作 量 大 了 ， 就 会 影 响 到 别 人 的 正 常 业 务 ， 而 且 还 很 有 可 能 会 涉 及 到 其 他 的 利 益 关 系 ， 你 说 这 情 况 不 抓 你 抓 谁 ？
非 公 开 数 据 不 要 乱 搞 非 公 开 数 据 不 要 乱 搞 这 个 也 很 简 单 ， 别 人 用 来 商 业 化 的 数 据 （ 如 天 眼 查 、 企 查 查 、 启 信 宝 等 工 商 信 息 查 询 网 站 ） ， 你 通 过 公 开 手 段 爬 了 之 后 拿 去 用 ， 人 家 当 然 要 告 你 。 并 非 指 上 面 说 的 三 家 ， 指 的 是 其 它 领 域 的 东 西 ， 工 商 数 据 这 一 块 目 前 还 没 看 到 相 关 案 例 。 总 结 总 结 好 了 ， 差 不 多 应 该 就 是 这 些 ， 这 篇 文 章 是 想 到 啥 就 说 啥 了 ， 对 于 一 些 细 节 方 面 的 问 题 建 议 自 行 判 断 ， 判 断 不 了 的 建 议 联 系 律 师 帮 你 分 析 ， 不 要 不 知 道 什 么 情 况 还 往 里 冲 ， 这 样 子 进 监 狱 是 迟 早 的 事 情 。 再 引 用 一 下 之 前 转 载 张 凯 强 的 《 又 一 家 数 据 公 司 被 查 ， 爬 虫 到 底 做 错 了 什 么 ？ 》 这 篇 文 章 时 ， 我 提 到 的 一 个 判 断 方 法 ： 有 个 很 简 单 的 方 法 能 判 断 出 一 件 事 情 是 否 有 违 法 风 险 ， 如 果 你 不 知 道 做 某 件 事 情 会 不 会 违 法 ， 但 你 觉 得 做 这 件 事 情 似 乎 不 太 好 ， 那 么 这 件 事 情 做 完 以 后 多 半 会 出 事 ！ 最 后 说 一 下 ， 技 术 无 罪 ， 但 人 的 做 法 有 罪 ， 最 核 心 的 点 是 你 做 的 事 情 合 不 合 理 、 合 不 合 法 ， 希 望 各 位 读 者 能 洁 身 自 好 ， 敬 畏 法 律 、 敬 畏 人 性 。 夜 幕 团 队 成 立 于   2 0 1 9   年 ， 团 队 包 括 崔 庆 才 、 周 子 淇 、 陈 祥 安 、 唐 轶 飞 、 冯 威 、 蔡 晋 、 戴 煌 金 、 张 冶 青 和 韦 世 东 。 涉 猎 的 编 程 语 言 包 括 但 不 限 于   P y t h o n 、 R u s t 、 C + + 、 G o ， 领 域 涵 盖 爬 虫 、 深 度 学 习 、 服 务 研 发 、 对 象 存 储 等 。 团 队 非 正 亦 非 邪 ， 只 做 认 为 对 的 事 情 ， 请 大 家 小 心 。

回复

举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

使用Markdown编辑器编辑 使用富文本编辑器编辑

Archiver| 手机版| 小黑屋|
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud. 商业源码建议获取授权，如侵犯您的权益，请联系客服处理