搜索

[12538] 2018-04-02_一种绕过限制下载论文的思路

文档创建者：s7ckTeam
浏览次数：6
最后更新：2025-01-18
2018-04-02_一种绕过限制下载论文的思路 一 种 绕 过 限 制 下 载 论 文 的 思 路 t a m m y p i   F r e e B u f   2 0 1 8 - 0 4 - 0 2 *   本 文 作 者 ： 本 文 作 者 ： t a m m y p i ， 本 文 属 ， 本 文 属 F r e e B u f 原 创 奖 励 计 划 ， 未 经 许 可 禁 止 转 载 原 创 奖 励 计 划 ， 未 经 许 可 禁 止 转 载 注 ： 本 文 下 面 的 内 容 仅 讨 论 绕 过 思 路 ， 作 为 技 术 交 流 之 用 。 大 家 下 载 论 文 还 是 应 该 通 过 正 规 渠 道 ， 付 费 下 载 ， 注 ： 本 文 下 面 的 内 容 仅 讨 论 绕 过 思 路 ， 作 为 技 术 交 流 之 用 。 大 家 下 载 论 文 还 是 应 该 通 过 正 规 渠 道 ， 付 费 下 载 ， 尊 重 各 位 站 长 的 劳 动 成 果 。 敏 感 图 片 和 代 码 中 涉 及 站 点 的 内 容 均 已 打 码 。 尊 重 各 位 站 长 的 劳 动 成 果 。 敏 感 图 片 和 代 码 中 涉 及 站 点 的 内 容 均 已 打 码 。 有 时 候 要 研 究 技 术 ， 我 们 也 需 要 下 载 一 些 论 文 来 看 看 的 。 一 些 论 文 站 点 ， 虽 然 提 供 预 览 功 能 ， 但 是 下 载 却 是 收 费 的 。 举 个 例 子 ， 如 下 站 点 ： 当 我 们 点 击 “ 同 意 并 开 始 全 文 预 览 ” 按 钮 时 ， 是 有 一 个 弹 出 窗 口 来 预 览 论 文 的 。 但 是 当 我 们 点 击 “ 下 载 ” 按 钮 时 ， 却 提 示 需 要 收 费 。
一 方 面 它 单 篇 论 文 的 收 费 实 在 是 挺 贵 的 ； 另 外 一 方 面 ， 我 们 可 能 更 倾 向 于 把 论 文 批 量 下 载 到 本 地 ， 等 到 有 时 间 时 慢 慢 读 完 。 这 该 怎 么 办 呢 ？ 我 们 F 1 2 看 看 预 览 页 面 的 内 容 ： 可 以 清 晰 的 看 到 ， i d = ” p d f ” 的 d i v 下 的 每 个 子 节 点 d i v 对 应 着 论 文 的 每 一 页 ， 而 每 一 个 子 d i v 中 包 含 的 i m g 标 签 对 应 的 图 片 则 是 每 一 页 的 内 容 。 我 们 将 i m g 标 签 的 s r c 中 的 链 接 复 制 出 来 ， 粘 贴 在 浏 览 器 的 新 页 签 中 ， 其 实 是 可 以 看 到 本 页 论 文 内 容 ， 而 右 键 “ 保 存 图 片 ” 是 可 以 将 此 页 论 文 保 存 到 本 地 的 。 以 上 就 是 手 动 绕 过 限 制 下 载 论 文 的 思 路 。 但 是 有 的 论 文 页 数 实 在 太 多 ， 手 动 逐 个 复 制 链 接 下 载 实 在 有 些 效 率 低 下 ， 所 以 我 们 可 以 写 个 脚 本 来 提 升 效 率 。

脚 本 主 要 步 骤 如 下 ： 1 . 根 据 传 入 的 关 键 字 ( k e y w o r d 字 段 ） ， 模 拟 搜 索 请 求 ； 得 到 与 该 关 键 字 相 关 的 论 文 的 标 题 以 及 u r l 2 . 打 开 论 文 对 应 的 u r l ， 此 时 的 页 面 还 不 是 真 实 的 论 文 全 文 页 面 ； 定 位 到 预 览 关 键 字 段 c i d （ 在 j a v a s c r i p t : v i e w L o g i n . v i e w D l ( ） 方 法 中 ） ， 发 送 请 求 ， 得 到 论 文 真 实 全 文 页 面 的 对 应 的 u r l 3 . 由 于 论 文 预 览 采 用 了 逐 步 加 载 的 模 式 ， 即 最 初 显 示 3 页 ， 然 后 随 着 滚 动 条 的 拖 动 再 逐 渐 加 载 后 续 内 容 ； 所 以 使 用 s e l e l i u m 模 拟 滚 动 页 面 内 容 ， 判 断 是 否 有 新 页 面 被 加 载 出 来 ， 直 至 页 面 内 容 不 再 发 生 变 化 为 止
4 . 此 时 基 于 第 三 部 加 载 出 的 全 部 页 面 内 容 ， 提 取 i m g 字 段 ， 逐 个 保 存 到 本 地 ； 即 对 应 着 论 文 的 每 一 页 脚 本 运 行 效 果 如 下 ： 得 到 的 论 文 ： 如 果 网 络 效 果 不 是 很 好 ， 可 以 适 当 将 s l e e p 时 间 延 长 。 跑 个 脚 本 吃 个 饭 回 来 ， 论 文 都 下 好 了 ， 还 是 很 爽 的 。 *   本 文 作 者 ： 本 文 作 者 ： t a m m y p i ， 本 文 属 ， 本 文 属 F r e e B u f 原 创 奖 励 计 划 ， 未 经 许 可 禁 止 转 载 原 创 奖 励 计 划 ， 未 经 许 可 禁 止 转 载
阅 读 原 文
回复

举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

使用Markdown编辑器编辑 使用富文本编辑器编辑

Archiver| 手机版| 小黑屋|
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud. 商业源码建议获取授权，如侵犯您的权益，请联系客服处理