搜索

[27411] 2019-09-08_如果你和他们一样写代码，那你也迟早要凉！

文档创建者：s7ckTeam
浏览次数：118
最后更新：2025-01-19
2019-09-08_如果你和他们一样写代码，那你也迟早要凉！ 如 果 你 和 他 们 一 样 写 代 码 ， 那 你 也 迟 早 要 凉 ！ N i g h t T e a m   2 0 1 9 - 0 9 - 0 8 以 下 文 章 来 源 于 面 向 人 生 编 程   ， 作 者 张 凯 强 最 近 又 爆 出 来 了 一 个 利 用 爬 虫 收 集 用 户 隐 私 数 据 隐 私 数 据 导 致 公 司 被 连 锅 端 的 事 情 很 多 朋 友 都 很 想 知 道 爬 虫 的 边 界 到 底 在 哪 里 ？ 爬 虫 到 底 违 不 违 法 ？ 怎 样 避 免 人 在 公 司 坐 ， 手 铐 天 上 来 ？ 下 面 这 篇 张 凯 强 d a l a o 的 文 章 将 为 你 解 析 相 关 法 律 法 规 了 解 一 下 ？ 9   月   6   日 下 午 ， 多 位 业 内 人 士 称 ， 杭 州 知 名 大 数 据 服 务 公 司 杭 州 魔 蝎 数 据 科 技 有 限 公 司 ， 疑 似 被 相 关 执 法 人 员 控 制 ， 其 中 一 位 周 姓 核 心 高 管 人 员 被 警 方 带 走 。 以 上 是 昨 天 技 术 圈 传 播 的 一 则 新 闻 ， 又 一 家 数 据 公 司 被 调 查 ， 很 多 数 据 从 业 者 、 爬 虫 开 发 者 发 出 了 “ 感 叹 ”   — —   「 爬 虫 用 得 好 ， X X 进 得 早 ； 数 据 玩 得 溜 ， X X 吃 个 够 」 。 魔 蝎 科 技 作 为 一 家 数 据 服 务 公 司 ， 曾 在   2 0 1 7   年 一 篇 『 爬 虫 凶 猛 ： 爬 支 付 宝 、 爬 微 信 、 窃 取 现 金 贷 放 贷 数 据 』 的 文 章 中 ， 被 指 出 存 在 开 发 使 用 恶 意 爬 虫 的 行 为 。 当 然 关 于 魔 蝎 科 技 为 什 么 被 查 ， 这 个 等 待 执 法 部 门 的 调 查 结 果 即 可 ， 咱 们 不 在 这 里 无 端 猜 测 。 我 今 天 要 说 的 是 关 于 爬 虫 的 合 法 性 ， 我 希 望 通 过 一 些 案 例 来 探 讨 ： 怎 样 做 一 个 不 触 碰 红 线 的 爬 虫 开 发 者 。 面 向 人 生 编 程 面 向 人 生 编 程   . 关 注 后 可 获 取 编 程 入 门 资 料 ！
爬 虫 作 为 一 种 计 算 机 技 术 ， 具 有 技 术 中 立 性 ， 爬 虫 技 术 在 法 律 上 从 来 没 有 被 禁 止 。 爬 虫 的 发 展 历 史 可 以 追 溯 到   2 0   年 前 ， 搜 索 引 擎 、 聚 合 导 航 、 数 据 分 析 、 人 工 智 能 等 业 务 ， 都 需 要 基 于 爬 虫 技 术 。 但 是 爬 虫 作 为 获 取 数 据 的 技 术 手 段 之 一 ， 由 于 部 分 数 据 存 在 敏 感 性 ， 如 果 不 能 甄 别 哪 些 数 据 是 可 以 爬 取 ， 哪 些 会 触 及 红 线 ， 可 能 下 一 位 上 新 闻 的 主 角 就 是 你 。 如 何 界 定 爬 虫 的 合 法 性 ， 目 前 没 有 明 文 规 定 ， 但 我 通 过 翻 阅 大 量 文 章 、 事 件 、 分 享 、 司 法 案 例 ， 我 总 结 出 界 定 的 三 个 关 键 点 ： 采 集 途 径 采 集 途 径 、 采 集 行 为 采 集 行 为 、 使 用 目 的 使 用 目 的 。 数 据 的 采 集 途 径 数 据 的 采 集 途 径 通 过 什 么 途 径 爬 取 数 据 ， 这 个 是 最 需 要 重 视 的 一 点 。 总 体 来 说 ， 未 公 开 、 未 经 许 可 、 且 带 有 敏 感 信 息 未 公 开 、 未 经 许 可 、 且 带 有 敏 感 信 息 的 数 据 ， 不 管 是 通 过 什 么 渠 道 获 得 ， 都 是 一 种 不 合 法 的 行 为 。 所 以 在 采 集 这 类 比 较 敏 感 的 数 据 时 ， 最 好 先 查 询 下 相 关 法 律 法 规 ， 特 别 是 用 户 个 人 信 息 、 其 他 商 业 平 台 的 信 息   等 这 类 信 息 ， 寻 找 一 条 合 适 的 途 径 。 个 人 数 据 个 人 数 据 采 集 和 分 析 个 人 信 息 数 据 ， 应 该 是 当 下 所 有 互 联 网 都 会 做 的 一 件 事 ， 但 是 大 部 分 个 人 数 据 都 是 非 公 开 的 ， 想 获 得 必 须 通 过 合 法 途 径 ， 可 参 见 『 网 络 安 全 法 』 第 四 十 一 条 ： 网 络 运 营 者 收 集 、 使 用 个 人 信 息 ， 应 当 遵 循 合 法 、 正 当 、 必 要 的 原 则 ， 公 开 收 集 、 使 用 规 则 ， 明 示 收 集 、 使 用 信 息 的 目 的 、 方 式 和 范 围 ， 并 经 被 收 集 者 同 意 . . .
也 就 是 必 须 在 提 前 告 知 收 集 的 方 式 、 范 围 、 目 的 ， 并 经 过 用 户 授 权 或 同 意 后 提 前 告 知 收 集 的 方 式 、 范 围 、 目 的 ， 并 经 过 用 户 授 权 或 同 意 后 ， 才 能 采 集 使 用 ， 也 就 是 我 们 常 见 的 各 种 网 站 与   A p p   的 用 户 协 议 中 关 于 信 息 收 集 的 部 分 。 相 关 反 面 案 例 ： 8 月 2 0 日 ， 澎 湃 新 闻 从 绍 兴 市 越 城 区 公 安 分 局 获 悉 ， 该 局 日 前 侦 破 一 起 特 大 流 量 劫 持 案 ， 涉 案 的 新 三 板 挂 牌 公 司 北 京 瑞 智 华 胜 科 技 股 份 有 限 公 司 ， 涉 嫌 非 法 窃 取 用 户 个 人 信 息 3 0 亿 条 ， 涉 及 百 度 、 腾 讯 、 阿 里 、 京 东 等 全 国 9 6 家 互 联 网 公 司 产 品 ， 目 前 警 方 已 从 该 公 司 及 其 关 联 公 司 抓 获 6 名 犯 罪 嫌 疑 人 。 . . . . . . 北 京 瑞 智 华 胜 公 司 及 其 关 联 公 司 在 与 正 规 运 营 商 合 作 中 ， 会 加 入 一 些 非 法 软 件 用 于 清 洗 流 量 、 获 取 用 户 的   c o o k i e 。 节 选 自   澎 湃 新 闻 ： 『 新 三 板 挂 牌 公 司 涉 窃 取 3 0 亿 条 个 人 信 息 ， 非 法 牟 利 超 千 万 元 』 [ 1 ] 公 开 数 据 公 开 数 据 从 合 法 公 开 渠 道 ， 并 且 不 明 显 违 背 个 人 信 息 主 体 意 愿 ， 都 没 有 什 么 问 题 。 但 如 果 通 过 破 解 破 解 、 侵 入 侵 入 等 “ 黑 客 ” 手 段 来 获 取 数 据 ， 那 也 有 相 关 法 律 等 着 你 ： 刑 法 第 二 百 八 十 五 条 第 三 款 规 定 的 “ 专 门 用 于 侵 入 、 非 法 控 制 计 算 机 信 息 系 统 的 程 序 、 工 具 ” ： （ 一 ） 具 有 避 开 或 者 突 破 计 算 机 信 息 系 统 安 全 保 护 措 施 ， 未 经 授 权 或 者 超 越 授 权 获 取 计 算 机 信 息 系 统 数 据 的 功 能 的 ； . . . . . . 违 反 违 反   R o b o t s   协 议 协 议 虽 然   R o b o t s   协 议 没 有 法 规 强 制 遵 守 ， 但   R o b o t s   协 议 作 为 行 业 约 定 ， 在 遵 循 之 下 会 给 你 带 来 合 法 支 持 。 因 为   R o b o t s   协 议 具 有 指 导 意 义 ， 如 果 注 明   D i s a l l o w   就 说 明 是 平 台 明 显 要 保 护 的 页 面 数 据 ， 想 爬 取 之 前 应 该 仔 细 考 虑 一 下 。 数 据 的 采 集 行 为 数 据 的 采 集 行 为 使 用 技 术 手 段 应 该 懂 得 克 制 ， 一 些 容 易 对 服 务 器 和 业 务 造 成 干 扰 甚 至 破 坏 的 行 为 ， 应 当 充 分 衡 量 其 承 受 能 力 ， 毕 竟 不 是 每 家 都 是   B A T   级 。 高 并 发 压 力 高 并 发 压 力 做 技 术 经 常 专 注 于 优 化 ， 爬 虫 开 发 也 是 如 此 ， 想 尽 各 种 办 法 增 加 并 发 数 、 请 求 效 率 ， 但 高 并 发 带 来 的 近 乎   D D O S   的 请 求 ， 如 果 对 对 方 服 务 器 造 成 压 力 ， 影 响 了 对 方 正 常 业 务 ， 那 就 应 该 警 惕 了 。
如 果 一 旦 导 致 严 重 后 果 ， 后 果 参 见 ： 《 刑 法 》 第 二 百 八 十 六 条 还 规 定 ， 违 反 国 家 规 定 ， 对 计 算 机 信 息 系 统 功 能 进 行 删 除 、 修 改 、 增 加 、 干 扰 ， 造 成 计 算 机 信 息 系 统 不 能 正 常 运 行 ， 后 果 严 重 的 ， 构 成 犯 罪 所 以 请 爬 取 的 时 候 ， 即 使 没 有 反 爬 限 制 ， 也 不 要 肆 无 忌 惮 地 开 启 高 并 发 ， 掂 量 一 下 对 方 服 务 器 的 实 力 。 影 响 正 常 业 务 影 响 正 常 业 务 除 了 高 并 发 请 求 ， 还 有 一 些 影 响 业 务 的 情 况 ， 常 见 的 比 如 抢 单 ， 会 影 响 正 常 用 户 的 体 验 。 数 据 的 使 用 目 的 数 据 的 使 用 目 的 数 据 使 用 目 的 同 样 是 一 大 关 键 ， 就 算 你 通 过 合 法 途 径 采 集 的 数 据 ， 如 果 对 数 据 没 有 正 确 的 使 用 ， 同 样 会 存 在 不 合 法 的 行 为 。 超 出 约 定 的 使 用 超 出 约 定 的 使 用 一 种 情 况 是 公 开 收 集 的 数 据 ， 但 没 有 遵 循 之 前 告 知 的 使 用 目 的 ， 比 如 用 户 协 议 上 说 只 是 分 析 用 户 行 为 ， 帮 助 提 高 产 品 体 验 ， 结 果 变 成 了 出 售 用 户 画 像 数 据 。 还 有 一 种 情 况 ， 是 有 知 识 产 权 、 著 作 权 的 作 品 ， 可 能 会 允 许 你 下 载 或 引 用 ， 但 明 显 标 注 了 使 用 范 围 ， 比 如 不 能 转 载 、 不 能 用 于 商 业 行 为 等 ， 更 不 能 去 盗 用 ， 这 些 都 是 有 法 律 明 文 保 护 ， 所 以 要 注 意 使 用 。 其 他 情 况 就 不 列 举 了 。 出 售 个 人 信 息 出 售 个 人 信 息 关 于 出 售 个 人 信 息 ， 千 万 不 要 做 ， 是 法 律 特 别 指 出 禁 止 的 ， 参 见 ： 根 据 《 最 高 人 民 法 院   最 高 人 民 检 察 院 关 于 办 理 侵 犯 公 民 个 人 信 息 刑 事 案 件 适 用 法 律 若 干 问 题 的 解 释 》 第 五 条 规 定 ， 对 “ 情 节 严 重 ” 的 解 释 ： （ 1 ） 非 法 获 取 、 出 售 或 者 提 供 行 踪 轨 迹 信 息 、 通 信 内 容 、 征 信 信 息 、 财 产 信 息 五 十 条 以 上 的 ； （ 2 ） 非 法 获 取 、 出 售 或 者 提 供 住 宿 信 息 、 通 信 记 录 、 健 康 生 理 信 息 、 交 易 信 息 等 其 他 可 能 影 响 人 身 、 财 产 安 全 的 公 民 个 人 信 息 五 百 条 以 上 的 ； （ 3 ） 非 法 获 取 、 出 售 或 者 提 供 第 三 项 、 第 四 项 规 定 以 外 的 公 民 个 人 信 息 五 千 条 以 上 的 便 构 成 “ 侵 犯 公 民 个 人 信 息 罪 ” 所 要 求 的 “ 情 节 严 重 ” 。 此 外 ， 未 经 被 收 集 者 同 意 ， 即 使 是 将 合 法 收 集 的 公 民 个 人 信 息 向 他 人 提 供 的 ， 也 属 于 刑 法 第 二 百 五 十 三 条 之 一 规 定 的 “ 提 供 公 民 个 人 信 息 ” ， 可 能 构 成 犯 罪 。
不 正 当 商 业 行 为 不 正 当 商 业 行 为 如 果 将 竞 品 公 司 的 数 据 ， 作 为 自 己 公 司 的 商 业 目 的 ， 这 就 可 能 存 在 构 成 不 正 当 商 业 竞 争 ， 或 者 是 违 反 知 识 产 权 保 护 。 这 种 情 况 在 目 前 涉 及 爬 虫 的 商 业 诉 讼 案 中 比 较 常 见 ， 两 年 前 比 较 知 名 的 案 件 ， “ 车 来 了 ”   A p p   抓 取 其 竞 品   “ 酷 米 客 ”   的 公 交 车 数 据 ， 并 展 示 在 自 己 的 产 品 上 ： 虽 然 公 交 车 作 为 公 共 交 通 工 具 ， 其 实 时 运 行 路 线 、 运 行 时 间 等 信 息 仅 系 客 观 事 实 ， 但 当 此 类 信 息 经 过 人 工 收 集 、 分 析 、 编 辑 、 整 合 并 配 合 G P S 精 确 定 位 ， 作 为 公 交 信 息 查 询 软 件 的 后 台 数 据 后 ， 此 类 信 息 便 具 有 了 实 用 性 并 能 够 为 权 利 人 带 来 现 实 或 潜 在 、 当 下 或 将 来 的 经 济 利 益 ， 已 经 具 备 无 形 财 产 的 属 性 。 元 光 公 司 利 用 网 络 爬 虫 技 术 大 量 获 取 并 且 无 偿 使 用 谷 米 公 司 “ 酷 米 客 ” 软 件 的 实 时 公 交 信 息 数 据 的 行 为 ， 实 为 一 种 “ 不 劳 而 获 ” 、 “ 食 人 而 肥 ” 的 行 为 ， 构 成 不 正 当 竞 争 。 节 选 自 『 深 圳 市 中 级 人 民 法 院 （ 2 0 1 7 ） 粤 0 3 民 初 8 2 2 号 民 事 判 决 书 』 「 爬 虫 法 」 即 将 出 台 「 爬 虫 法 」 即 将 出 台 好 消 息 是 ， 相 关 办 法 已 经 在 路 上 了 。 5   月   2 8   日 零 点 ， 国 家 互 联 网 信 息 办 公 室 发 布 了 《 数 据 安 全 管 理 办 法 》 征 求 意 见 稿 。 我 也 查 阅 了 这 份 意 见 稿 ， 里 面 对 数 据 的 获 取 、 存 储 、 传 输 、 使 用 等 都 做 了 一 些 规 定 ， 包 括 关 于 爬 虫 行 为 的 若 干 规 定 （ 还 在 征 求 阶 段 ， 因 此 后 续 可 能 会 有 变 化 ） 。 比 如 ， 第 二 章 第 十 六 条 ： 网 络 运 营 者 采 取 自 动 化 手 段 访 问 收 集 网 站 数 据 ， 不 得 妨 碍 网 站 正 常 运 行 ； 此 类 行 为 严 重 影 响 网 站 运 行 ， 如 自 动 化 访 问 收 集 流 量 超 过 网 站 日 均 流 量 三 分 之 一 ， 网 站 要 求 停 止 自 动 化 访 问 收 集 时 ， 应 当 停 止 。 第 三 章 第 二 十 七 条 ： 网 络 运 营 者 向 他 人 提 供 个 人 信 息 前 ， 应 当 评 估 可 能 带 来 的 安 全 风 险 ， 并 征 得 个 人 信 息 主 体 同 意 。 下 列 情 况 除 外 ： （ 一 ） 从 合 法 公 开 渠 道 收 集 且 不 明 显 违 背 个 人 信 息 主 体 意 愿 ； （ 二 ） 个 人 信 息 主 体 主 动 公 开 ； （ 三 ） 经 过 匿 名 化 处 理 ； （ 四 ） 执 法 机 关 依 法 履 行 职 责 所 必 需 ； （ 五 ） 维 护 国 家 安 全 、 社 会 公 共 利 益 、 个 人 信 息 主 体 生 命 安 全 所 必 需 。
节 选 自 『 数 据 安 全 管 理 办 法 （ 征 求 意 见 稿 ） 』 [ 2 ] 看 完 了 是 不 是 觉 得 这 么 说 的 话 好 像 啥 都 不 能 做 了 啊 ？ 其 实 不 用 太 过 担 心 只 要 你 没 有 做 得 太 过 火 也 没 有 接 触 一 些 明 显 违 法 的 东 西 自 然 就 不 会 有 人 会 去 找 你 麻 烦 记 住 非 公 开 / 隐 私 数 据 、 黄 赌 毒 、 刷 单 刷 量 等 都 不 要 碰 ！ 都 不 要 碰 ！ 都 不 要 碰 ！ 都 不 要 碰 ！ 都 不 要 碰 ！ 都 不 要 碰 ！ 重 要 的 事 情 说 三 遍 ！ 重 要 的 事 情 说 三 遍 ！ 这 方 面 的 案 例 还 可 以 参 考 一 下 之 前 很 火 的 一 个 知 乎 回 答 那 个 回 答 如 果 属 实 的 话 很 可 能 回 答 者 就 是 前 知 名 打 码 平 台 站 长 — — 微 凉 平 台 本 身 只 提 供 了 打 码 服 务 但 由 于 有 做 黑 产 的 人 在 使 用 做 黑 产 的 被 抓 了 平 台 自 然 也 就 被 连 累 了 所 以 再 次 提 醒 各 位 不 要 去 接 触 一 些 明 显 违 法 的 东 西 不 管 是 求 职 也 好 还 是 做 外 包 也 好 写 代 码 前 务 必 了 解 清 楚 做 出 来 的 东 西 到 底 是 干 什 么 用 的 如 果 有 违 法 风 险 千 万 不 要 去 碰 （ 不 限 于 爬 虫 ， 所 有 领 域 都 一 样 ） 有 个 很 简 单 的 方 法 能 判 断 出 一 件 事 情 是 否 有 违 法 风 险 如 果 你 不 知 道 做 某 件 事 情 会 不 会 违 法 但 你 觉 得 做 这 件 事 情 似 乎 不 太 好 那 么 这 件 事 情 做 完 以 后 多 半 会 出 事 ！
回复

举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud. 商业源码建议获取授权，如侵犯您的权益，请联系客服处理