搜索

[14413] 2019-07-31_GitMAD：用于发现Github上的敏感信息和数据泄漏的工具

文档创建者：s7ckTeam
浏览次数：3
最后更新：2025-01-18
2019-07-31_GitMAD：用于发现Github上的敏感信息和数据泄漏的工具 G i t M A D ： 用 于 发 现 G i t h u b 上 的 敏 感 信 息 和 数 据 泄 漏 的 工 具 s e c i s t   F r e e B u f   2 0 1 9 - 0 7 - 3 1 G i t M A D 是 一 个 用 于 发 现 是 一 个 用 于 发 现 G i t h u b 上 的 敏 感 信 息 和 数 据 泄 漏 的 工 具 。 通 过 给 定 关 键 字 或 域 ， 上 的 敏 感 信 息 和 数 据 泄 漏 的 工 具 。 通 过 给 定 关 键 字 或 域 ， G i t M A D 便 会 搜 索 便 会 搜 索 G i t h u b 上 托 管 的 代 码 ， 以 查 找 是 否 存 在 匹 配 项 。 一 旦 找 到 了 匹 配 项 ， 上 托 管 的 代 码 ， 以 查 找 是 否 存 在 匹 配 项 。 一 旦 找 到 了 匹 配 项 ， G i t M A D 将 克 隆 存 储 库 并 在 文 件 中 搜 索 一 将 克 隆 存 储 库 并 在 文 件 中 搜 索 一 系 列 可 配 置 的 正 则 表 达 式 。 然 后 ， 系 列 可 配 置 的 正 则 表 达 式 。 然 后 ， G i t M A D 会 获 取 这 些 结 果 ， 并 将 它 们 插 入 到 数 据 库 中 供 后 续 的 查 看 使 用 。 这 会 获 取 这 些 结 果 ， 并 将 它 们 插 入 到 数 据 库 中 供 后 续 的 查 看 使 用 。 这 些 结 果 也 可 作 为 邮 件 警 报 发 送 。 另 外 ， 些 结 果 也 可 作 为 邮 件 警 报 发 送 。 另 外 ， G i t M A D 将 持 续 运 行 以 发 现 与 输 入 关 键 字 匹 配 的 新 存 储 库 。 将 持 续 运 行 以 发 现 与 输 入 关 键 字 匹 配 的 新 存 储 库 。 输 入 输 入 除 此 之 外 ， 用 户 还 可 以 配 置 每 次 搜 索 的 最 大 结 果 量 ， 搜 索 间 隔 时 间 以 及 要 克 隆 的 存 储 库 的 大 小 范 围 。 有 两 种 模 式 ， M o n i t o r 和 D i s c o v e r y 。 D i s c o v e r y 模 式 将 在 每 次 运 行 时 提 取 并 搜 索 新 结 果 。 M o n i t o r 模 式 则 会 首 先 下 载 给 定 关 键 字 / 域 的 所 有 匹 配 项 搜 索 它 们 ， 然 后 继 续 搜 索 新 结 果 。 处 理 处 理 G i t M A D 从 上 面 获 取 结 果 并 搜 索 存 储 库 的 G i t 历 史 记 录 。   搜 索 历 史 记 录 以 查 找 一 组 可 配 置 的 正 则 表 达 式 。 G i t M A D 还 可 以 对 历 史 文 件 的 每 一 行 进 行 分 解 ， 并 在 信 息 熵 （ S h a n n o n   e n t r o p y ） 中 搜 索 匹 配 项 。 配 置 文 件 配 置 文 件 r e g e x _ m a t c h e s . p y 这 是 将 关 键 字 和 正 则 表 达 式 放 在 存 储 库 内 容 中 进 行 搜 索 的 位 置 ， 只 需 在 下 面 的 列 表 中 添 加 字 典 即 可 ： e n t r o p y _ w h i t e l i s t . p y 这 是 移 除 E n t r o p y 功 能 匹 配 你 不 想 要 的 项 目 位 置 。 只 需 在 下 面 的 列 表 中 添 加 字 典 即 可 ： 输 出 G i t M A D 获 取 上 面 的 结 果 ， 并 将 它 们 插 入 到 一 个 数 据 库 中 ， 该 数 据 库 包 含 有 关 找 到 匹 配 项 的 文 件 以 及 存 储 库 的 信 息 。 它 还 插 入 了 匹 配 的 字 符 串 和 匹 配 的 行 。 这 些 结 果 可 通 过 邮 件 警 报 ， 数 据 库 和 W e b 应 用 获 得 。 当 前 状 态 当 前 状 态 该 项 目 正 在 积 极 开 发 中 。 安 装 安 装 t o _ m a t c h   =   [         { ' m a t c h _ r e g e x ' :   r ' p a s s w o r d ' ,   ' m a t c h _ t y p e ' :   ' P a s s w o r d   M a t c h ' } ,         { ' m a t c h _ r e g e x ' :   r ' d { 1 , 3 } . d { 1 , 3 } . d { 1 , 3 } . d { 1 , 3 } ' ,   ' m a t c h _ t y p e ' :   ' I P   M a t c h ' } ,         { ' m a t c h _ r e g e x ' :   r ' u s e r n a m e ' ,   ' m a t c h _ t y p e ' :   ' U s e r n a m e   M a t c h ' } ,         { ' m a t c h _ r e g e x ' :   r ' b [ w . ] * @ [ w ] * . [ w . ] * b ' ,   ' m a t c h _ t y p e ' :   ' E m a i l   M a t c h ' }         ] r _ w h i t e l i s t   =   [ { ' r e g e x ' : r ' b [ A - Z a - z ] [ a - z ] + ( [ A - Z ] [ a - z ] * ) + b ' } ]   #   C a m e l   C a s e
G i t M A D 最 初 是 在 W i n d o w s 上 用 P y t h o n 3 . 6 编 写 的 。 它 也 在 U b u n t u   1 8 . 0 4 上 进 行 了 测 试 。 环 境 要 求 环 境 要 求 P y t h o n   3 . 6 + P i p   f o r   P y t h o n 3 G i t M y S Q L   8 . 0 如 果 是 W i n d o w s 系 统 你 可 以 直 接 从 O r a c l e 网 站 下 载 M y S Q L 8 . 0 。 如 果 是 U b u n t u   1 8 . 0 4 ， 其 默 认 版 本 仍 为 5 . 7 ， 因 此 你 必 须 升 级 你 的 当 前 版 本 ： U b u n t u   1 8 . 0 4   安 装 步 骤 安 装 步 骤 1 ） 克 隆 存 储 库 并 进 入 到 目 录 ： 2 ） 安 装 依 赖 项 ： 3 ） 向 M y S Q L 添 加 脚 本 ： 4 ） 运 行 m a i n . p y 并 在 首 次 运 行 时 输 入 配 置 信 息 ： w g e t   - c   h t t p s : / / d e v . m y s q l . c o m / g e t / m y s q l - a p t - c o n f i g _ 0 . 8 . 1 2 - 1 _ a l l . d e b   s u d o   d p k g   - i   m y s q l - a p t - c o n f i g _ 0 . 8 . 1 2 - 1 _ a l l . d e b # s e l e c t   v e r s i o n   8 . 0 s u d o   a p t   u p d a t e   s u d o   a p t   i n s t a l l   m y s q l - s e r v e r s u d o   m y s q l _ s e c u r e _ i n s t a l l a t i o n g i t   c l o n e   h t t p s : / / g i t h u b . c o m / d e e p d i v e s e c / G i t M A D . g i t c d   G i t M A D p i p 3   i n s t a l l   - r   r e q u i r e m e n t s . t x t $ s u d o   m y s q l   - u   u s e r n a m e   - p m y s q l >   s o u r c e   / < p a t h - t o - g i t m a d > / G i t M A D / g i t h u b _ s e a r c h _ d b . s q l p y t h o n 3   / < p a t h - t o - g i t m a d > / G i t M A D / m a i n . p y   - q   < k e y w o r d - t o - s e a r c h >   [ s e e   o t h e r   o p t i o n s   b e l o w ]
5 ） 运 行 W e b 应 用 ： 6 ） （ 可 选 ） 下 载 并 安 装 M y S Q L   W o r k b e n c h 与 结 果 直 接 进 行 交 互 。 U b u n t u 安 装 动 图 请 在 此 处 查 看 ： h t t p s : / / g i t h u b . c o m / d e e p d i v e s e c / G i t M A D / t r e e / m a s t e r / G i t M A D - i n s t a l l 已 知 问 题 已 知 问 题 有 时 ， 无 论 存 储 库 的 大 小 如 何 ， G i t H u b   A P I 都 会 返 回 0 。 该 问 题 尚 未 处 理 ， 而 被 克 隆 的 存 储 库 大 于 - m x / - - m a x 的 大 小 这 个 问 题 ， 正 在 处 理 中 。 * 参 考 来 源 ： 参 考 来 源 ： G i t H u b ， ， F B 小 编 小 编 s e c i s t 编 译 ， 转 载 请 注 明 来 自 编 译 ， 转 载 请 注 明 来 自 F r e e B u f . C O M 精 彩 推 荐 精 彩 推 荐 p y t h o n 3   / < p a t h - t o - g i t m a d > / G i t M A D / w e b _ h o m e . p y
阅 读 原 文
回复

举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

使用Markdown编辑器编辑 使用富文本编辑器编辑

Archiver| 手机版| 小黑屋|
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud. 商业源码建议获取授权，如侵犯您的权益，请联系客服处理