搜索

[15642] 2020-07-23_通过ZAT结合机器学习进行威胁检测

文档创建者：s7ckTeam
浏览次数：3
最后更新：2025-01-18
2020-07-23_通过ZAT结合机器学习进行威胁检测 通 过 Z A T 结 合 机 器 学 习 进 行 威 胁 检 测 原 创   m a d e   i n   I n t e r n e t   F r e e B u f   2 0 2 0 - 0 7 - 2 3 机 器 学 习 概 述 机 器 学 习 概 述 在 机 器 学 习 中 我 们 针 对 安 全 数 据 的 处 理 显 得 异 常 重 要 ， 针 对 不 同 的 攻 击 类 型 数 据 我 们 需 要 选 择 合 适 的 算 法 但 是 大 体 过 程 都 是 分 为 以 下 几 个 步 骤 ： 获 取 数 据 特 征 抽 取 特 征 预 处 理 特 征 降 维 模 型 训 练 模 型 评 估 通 过 通 过 z a t 处 理 处 理 z e e k 全 流 量 日 志 数 据 全 流 量 日 志 数 据 今 天 这 篇 文 章 主 要 是 介 绍 通 过 z a t 处 理 z e e k 的 全 流 量 数 据 的 分 析 方 法 。 z e e k 是 开 源 N I D S 入 侵 检 测 引 擎 ， 目 前 使 用 较 多 的 是 互 联 网 公 司 的 风 控 业 务 。 z e e k 中 提 供 了 一 种 供 z e e k 分 析 的 工 具 z a t 。 z a t 工 具 包 处 理 z e e k 输 出 具 备 了 多 种 的 方 法 其 中 如 下 ： 处 理 日 志 数 据 动 态 轮 询 Z e e k 记 录 到 P a n d a s 数 据 框 和 S c i k i t - L e a r n 动 态 监 视 f i l e s . l o g 并 进 行 V i r u s T o t a l 查 询 动 态 监 控 h t t p . l o g 并 显 示 “ 不 常 见 ” 的 用 户 代 理 在 提 取 的 文 件 上 运 行 Y a r a 签 名 检 查 x 5 0 9 证 书 异 常 检 测 处 理 z e e k 的 d h c p . l o g 日 志 数 据 输 出 带 有 时 间 戳 的 字 典
处 理 z e e k 的 d n s . l o g 日 志 数 据 ， 并 使 用   P a n d a s   将 d n s . l o g 文 件 输 出 接 下 来 我 们 用 s k l e a r n 进 行 数 据 集 划 分 , 这 里 展 示 部 分 代 码 输 出 结 果 ：
对 z e e k 的 f i l e . l o g 日 志 进 行 病 毒 文 件 查 询 ， 这 里 展 示 部 分 代 码   。 v t _ q u e r y 是 查 询 V i r u s T o t a l 的 相 关 库 针 对 V i r u s T o t a l 服 务 查 询 每 个 文 件 s h a 2 5 6   /   s h a 1   值 针 对 z e e k 的 h t t p . l o g 日 志 进 行 查 询 ， 这 里 主 要 是 针 对 U A 头 的 数 据 进 行
输 出 结 果 用 Y a r a   动 态 监 视   e x t r a c t _ f i l e s 目 录 ， 当 Z e e k 删 除 文 件 时 ， 代 码 将 对 该 文 件 运 行 一 组 Y a r a 规 则 输 出 结 果
对 域 名 进 行 检 测 ， 并 对 这 些 u r l 进 行 “ 病 毒 总 数 的 查 询 ” 当 你 的 机 器 访 问   u n i 1 0 . t k   时 输 出 效 果 如 下 针 对 x 5 0 9 . l o g 的 数 据 ， 因 为 有 些 钓 鱼 或 者 恶 意 网 站 流 量 是 加 密 的 。 这 个 我 们 可 以 通 过 证 书 来 进 行 判 断
运 行 后 输 出 如 下 效 果 针 对 异 常 检 测 我 们 可 以 使 用 孤 立 森 林 算 法 进 行 异 常 处 理 。 一 旦 发 现 异 常 ， 我 们 便 可 以 使 用 聚 类 算 法 将 异 常 分 组 为 有 组
织 的 部 分 ， 从 而 使 分 析 师 可 以 浏 览 输 出 组 ， 而 不 用 一 行 行 去 看 。 输 出 异 常 分 组 检 测 t o r 和 计 算 端 口 号 。 通 过 遍 历 z e e k 的 s s l . l o g 文 件 来 确 定 t o r 流 量 这 里 贴 出 部 分 代 码
输 出 结 果 如 下 ： 下 一 篇 文 章 将 会 单 独 以 z e e k 的 d n s . l o g 日 志 为 例 介 绍 将 d n s . l o g 数 据 进 行 s k l e a r n 特 征 工 程 并 使 用 n u m p y 进 行 矩 阵 运 算 和 p c a 降 维 等 等 。 精 彩 推 荐 精 彩 推 荐
阅 读 原 文
回复

举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

使用Markdown编辑器编辑 使用富文本编辑器编辑

Archiver| 手机版| 小黑屋|
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud. 商业源码建议获取授权，如侵犯您的权益，请联系客服处理