搜索

[11334] 2017-05-11_学点算法搞安全之HMM（下篇）

文档创建者：s7ckTeam
浏览次数：5
最后更新：2025-01-18
2017-05-11_学点算法搞安全之HMM（下篇） 学 点 算 法 搞 安 全 之 H M M （ 下 篇 ） 原 创   兜 哥   F r e e B u f   2 0 1 7 - 0 5 - 1 1 * 原 创 作 者 ： 兜 哥 ， 本 文 属 F r e e b u f 原 创 奖 励 计 划 ， 未 经 许 可 禁 止 转 载           前 言 我 们 介 绍 了 H M M 的 基 本 原 理 以 及 常 见 的 基 于 参 数 的 异 常 检 测 实 现 ， 这 次 我 们 换 个 思 路 ， 把 机 器 当 一 个 刚 入 行 的 白 帽 子 ， 我 们 训 练 他 学 会 X S S 的 攻 击 语 法 ， 然 后 再 让 机 器 从 访 问 日 志 中 寻 找 符 合 攻 击 语 法 的 疑 似 攻 击 日 志 。 通 过 词 法 分 割 ， 可 以 把 攻 击 载 荷 序 列 化 成 观 察 序 列 ， 举 例 如 下 ： 词 集 / 词 袋 模 型 词 集 和 词 袋 模 型 是 机 器 学 习 中 非 常 常 用 的 一 个 数 据 处 理 模 型 ， 它 们 用 于 特 征 化 字 符 串 型 数 据 。 一 般 思 路 是 将 样 本 分 词 后 ， 统 计 每 个 词 的 频 率 ， 即 词 频 ， 根 据 需 要 选 择 全 部 或 者 部 分 词 作 为 哈 希 表 键 值 ， 并 依 次 对 该 哈 希 表 编 号 ， 这 样 就 可 以 使 用 该 哈 希 表 对 字 符 串 进
行 编 码 。 词 集 模 型 ： 单 词 构 成 的 集 合 ， 集 合 自 然 每 个 元 素 都 只 有 一 个 ， 也 即 词 集 中 的 每 个 单 词 都 只 有 一 个 词 袋 模 型 ： 如 果 一 个 单 词 在 文 档 中 出 现 不 止 一 次 ， 并 统 计 其 出 现 的 次 数 本 章 使 用 词 集 模 型 即 可 。 假 设 存 在 如 下 数 据 集 合 ： 首 先 生 成 词 汇 表 ： 根 据 词 汇 表 生 成 词 集 ： 简 化 后 的 词 集 模 型 的 核 心 代 码 如 下 ：
数 据 处 理 与 特 征 提 取 常 见 的 X S S 攻 击 载 荷 列 举 如 下 ： 需 要 支 持 的 词 法 切 分 原 则 为 ： 需 要 支 持 的 词 法 切 分 原 则 为 ： 单 双 引 号 包 含 的 内 容   ‘ X S S ’ h t t p / h t t p s 链 接   h t t p : / / x i . b a i d u . c o m / x s s . j s < > 标 签   < s c r i p t > < > 标 签 开 头   < B O D Y 属 性 标 签   O N L O A D = < > 标 签 结 尾   > 函 数 体   “ j a v a s c r i p t : a l e r t ( ‘ X S S ’ ) ; ” 字 符 数 字 标 量 字 符 数 字 标 量   代 码 实 现 举 例 如 下 ： 代 码 实 现 举 例 如 下 ： 另 外 ， 为 了 减 少 向 量 空 间 ， 需 要 把 数 字 和 字 符 以 及 超 链 接 范 化 ， 具 体 原 则 为 ： 另 外 ， 为 了 减 少 向 量 空 间 ， 需 要 把 数 字 和 字 符 以 及 超 链 接 范 化 ， 具 体 原 则 为 ：
结 合 词 集 模 型 ， 完 整 的 流 程 举 例 如 下 ： 结 合 词 集 模 型 ， 完 整 的 流 程 举 例 如 下 ： 训 练 模 型 将 范 化 后 的 向 量 X 以 及 对 应 的 长 度 矩 阵 X _ l e n s 输 入 即 可 ， 需 要 X _ l e n s 的 原 因 是 参 数 样 本 的 长 度 可 能 不 一 致 ， 所 以 需 要 单 独 输 入 。
验 证 模 型 整 个 系 统 运 行 过 程 如 下 ： 整 个 系 统 运 行 过 程 如 下 ： 验 证 阶 段 利 用 训 练 出 来 的 H M M 模 型 ， 输 入 观 察 序 列 获 取 概 率 ， 从 而 判 断 观 察 序 列 的 合 法 性 ， 训 练 样 本 是 1 0 0 0 条 典 型 的 X S S 攻 击 日 志 ， 通 过 分 词 、 计 算 词 集 ， 提 炼 出 2 0 0 个 特 征 ， 全 部 样 本 就 用 这 2 0 0 个 特 征 进 行 编 码 并 序 列 化 ， 使 用 2 0 0 0 0 条 正 常 日 志 和 2 0 0 0 0 条 X S S 攻 击 识 别 （ 类 似 J S F U C K 这 类 编 码 的 暂 时 不 支 持 ） ， 准 确 率 达 到 9 0 % 以 上 ， 其 中 验 证 环 节 的 核 心 代 码 如 下 ：
* 原 创 作 者 ： 兜 哥 ， 本 文 属 F r e e b u f 原 创 奖 励 计 划 ， 未 经 许 可 禁 止 转 载 阅 读 原 文
回复

举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

使用Markdown编辑器编辑 使用富文本编辑器编辑

Archiver| 手机版| 小黑屋|
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud. 商业源码建议获取授权，如侵犯您的权益，请联系客服处理