搜索

[18328] 2021-04-10_干货23个非常实用的Shell拿来就用脚本实例

文档创建者：s7ckTeam
浏览次数：5
最后更新：2025-01-18
2021-04-10_干货23个非常实用的Shell拿来就用脚本实例 干 货 | 2 3   个 非 常 实 用 的   S h e l l   拿 来 就 用 脚 本 实 例 博 智 互 联   H A C K 之 道   2 0 2 1 - 0 4 - 1 0 收 录 于 话 题 # s h e l l   , 1 # 应 急 响 应   , 1 # 日 志 分 析   , 1 为 大 家 整 理 了 2 3 个 实 例 ， 通 过 2 3 个 实 战 经 典 脚 本 实 例 ， 展 示 了 s h e l l 脚 本 编 程 的 实 用 技 术 和 常 见 工 具 用 法 。 大 家 只 需 根 据 自 己 的 需 求 ， 将 文 中 这 些 常 见 任 务 和 可 移 植 自 动 化 脚 本 推 广 应 用 到 其 他 类 似 问 题 上 ， 能 解 决 那 些 三 天 两 头 碰 上 的 麻 烦 事 。 检 测 两 台 服 务 器 指 定 目 录 下 的 文 件 一 致 性 检 测 两 台 服 务 器 指 定 目 录 下 的 文 件 一 致 性
定 时 清 空 文 件 内 容 ， 定 时 记 录 文 件 大 小 定 时 清 空 文 件 内 容 ， 定 时 记 录 文 件 大 小 # ! / b i n / b a s h # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # 检 测 两 台 服 务 器 指 定 目 录 下 的 文 件 一 致 性 # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # 通 过 对 比 两 台 服 务 器 上 文 件 的 m d 5 值 ， 达 到 检 测 一 致 性 的 目 的 d i r = / d a t a / w e b b _ i p = 1 9 2 . 1 6 8 . 8 8 . 1 0 # 将 指 定 目 录 下 的 文 件 全 部 遍 历 出 来 并 作 为 m d 5 s u m 命 令 的 参 数 ， 进 而 得 到 所 有 文 件 的 m d 5 值 ， 并 写 入 到 指 定 文 件 中 f i n d   $ d i r   - t y p e   f | x a r g s   m d 5 s u m   >   / t m p / m d 5 _ a . t x t s s h   $ b _ i p   " f i n d   $ d i r   - t y p e   f | x a r g s   m d 5 s u m   >   / t m p / m d 5 _ b . t x t " s c p   $ b _ i p : / t m p / m d 5 _ b . t x t   / t m p # 将 文 件 名 作 为 遍 历 对 象 进 行 一 一 比 对 f o r   f   i n   ` a w k   ' { p r i n t   2 }   / t m p / m d 5 _ a . t x t ' ` d o # 以 a 机 器 为 标 准 ， 当 b 机 器 不 存 在 遍 历 对 象 中 的 文 件 时 直 接 输 出 不 存 在 的 结 果 i f   g r e p   - q w   " $ f "   / t m p / m d 5 _ b . t x t t h e n m d 5 _ a = ` g r e p   - w   " $ f "   / t m p / m d 5 _ a . t x t | a w k   ' { p r i n t   1 } ' ` m d 5 _ b = ` g r e p   - w   " $ f "   / t m p / m d 5 _ b . t x t | a w k   ' { p r i n t   1 } ' ` # 当 文 件 存 在 时 ， 如 果 m d 5 值 不 一 致 则 输 出 文 件 改 变 的 结 果 i f   [   $ m d 5 _ a   ! =   $ m d 5 _ b   ] t h e n e c h o   " $ f   c h a n g e d . " f i e l s e e c h o   " $ f   d e l e t e d . " f i d o n e
检 测 网 卡 流 量 ， 并 按 规 定 格 式 记 录 在 日 志 中 检 测 网 卡 流 量 ， 并 按 规 定 格 式 记 录 在 日 志 中 # ! / b i n / b a s h # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # 每 小 时 执 行 一 次 脚 本 （ 任 务 计 划 ） ， 当 时 间 为 0 点 或 1 2 点 时 ， 将 目 标 目 录 下 的 所 有 文 件 内 # 容 清 空 ， 但 不 删 除 文 件 ， 其 他 时 间 则 只 统 计 各 个 文 件 的 大 小 ， 一 个 文 件 一 行 ， 输 出 到 以 时 # 间 和 日 期 命 名 的 文 件 中 ， 需 要 考 虑 目 标 目 录 下 二 级 、 三 级 等 子 目 录 的 文 件 # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # l o g f i l e = / t m p / ` d a t e   + % H - % F ` . l o g n = ` d a t e   + % H ` i f   [   $ n   - e q   0 0   ]   | |   [   $ n   - e q   1 2   ] t h e n # 通 过 f o r 循 环 ， 以 f i n d 命 令 作 为 遍 历 条 件 ， 将 目 标 目 录 下 的 所 有 文 件 进 行 遍 历 并 做 相 应 操 作 f o r   i   i n   ` f i n d   / d a t a / l o g /   - t y p e   f ` d o t r u e   >   $ i d o n e e l s e f o r   i   i n   ` f i n d   / d a t a / l o g /   - t y p e   f ` d o d u   - s h   $ i   > >   $ l o g f i l e d o n e f i
计 算 文 档 每 行 出 现 的 数 字 个 数 ， 并 计 算 整 个 文 档 的 数 字 总 数 计 算 文 档 每 行 出 现 的 数 字 个 数 ， 并 计 算 整 个 文 档 的 数 字 总 数 # ! / b i n / b a s h # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # 检 测 网 卡 流 量 ， 并 按 规 定 格 式 记 录 在 日 志 中 # 规 定 一 分 钟 记 录 一 次 # 日 志 格 式 如 下 所 示 : # 2 0 1 9 - 0 8 - 1 2   2 0 : 4 0 # e n s 3 3   i n p u t :   1 2 3 4 b p s # e n s 3 3   o u t p u t :   1 2 3 5 b p s # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # 3 w h i l e   : d o # 设 置 语 言 为 英 文 ， 保 障 输 出 结 果 是 英 文 ， 否 则 会 出 现 b u g L A N G = e n l o g f i l e = / t m p / ` d a t e   + % d ` . l o g # 将 下 面 执 行 的 命 令 结 果 输 出 重 定 向 到 l o g f i l e 日 志 中 e x e c   > >   $ l o g f i l e d a t e   + " % F   % H : % M " # s a r 命 令 统 计 的 流 量 单 位 为 k b / s ， 日 志 格 式 为 b p s ， 因 此 要 * 1 0 0 0 * 8 s a r   - n   D E V   1   5 9 | g r e p   A v e r a g e | g r e p   e n s 3 3 | a w k   ' { p r i n t   $ 2 , " t " , " i n p u t : " , " t " , $ 5 * 1 0 0 0 * 8 , " b p s " , " n " , $ 2 , " t " , " o u t p u t : " , " t " , $ 6 * 1 0 0 0 * 8 , " b p s " } ' e c h o   " # # # # # # # # # # # # # # # # # # # # " # 因 为 执 行 s a r 命 令 需 要 5 9 秒 ， 因 此 不 需 要 s l e e p d o n e
杀 死 所 有 脚 本 杀 死 所 有 脚 本 从 从 F T P 服 务 器 下 载 文 件 服 务 器 下 载 文 件 # ! / b i n / b a s h # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # 计 算 文 档 每 行 出 现 的 数 字 个 数 ， 并 计 算 整 个 文 档 的 数 字 总 数 # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # 使 用 a w k 只 输 出 文 档 行 数 （ 截 取 第 一 段 ） n = ` w c   - l   a . t x t | a w k   ' { p r i n t   $ 1 } ' ` s u m = 0 # 文 档 中 每 一 行 可 能 存 在 空 格 ， 因 此 不 能 直 接 用 文 档 内 容 进 行 遍 历 f o r   i   i n   ` s e q   1   $ n ` d o # 输 出 的 行 用 变 量 表 示 时 ， 需 要 用 双 引 号 l i n e = ` s e d   - n   " $ i " p   a . t x t ` # w c   - L 选 项 ， 统 计 最 长 行 的 长 度 n _ n = ` e c h o   $ l i n e | s e d   s ' / [ ^ 0 - 9 ] / / ' g | w c   - L ` e c h o   $ n _ n s u m = $ [ $ s u m + $ n _ n ] d o n e e c h o   " s u m : $ s u m " # ! / b i n / b a s h # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # 有 一 些 脚 本 加 入 到 了 c r o n 之 中 ， 存 在 脚 本 尚 未 运 行 完 毕 又 有 新 任 务 需 要 执 行 的 情 况 ， # 导 致 系 统 负 载 升 高 ， 因 此 可 通 过 编 写 脚 本 ， 筛 选 出 影 响 负 载 的 进 程 一 次 性 全 部 杀 死 。 # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # p s   a u x | g r e p   指 定 进 程 名 | g r e p   - v   g r e p | a w k   ' { p r i n t   $ 2 } ' | x a r g s   k i l l   - 9
连 续 输 入 连 续 输 入 5 个 个 1 0 0 以 内 的 数 字 ， 统 计 和 、 最 小 和 最 大 以 内 的 数 字 ， 统 计 和 、 最 小 和 最 大 # ! / b i n / b a s h i f   [   $ #   - n e   1   ] ;   t h e n         e c h o   " U s a g e :   $ 0   f i l e n a m e " f i d i r = $ ( d i r n a m e   $ 1 ) f i l e = $ ( b a s e n a m e   $ 1 ) f t p   - n   - v   < <   E O F       #   - n   自 动 登 录 o p e n   1 9 2 . 1 6 8 . 1 . 1 0     #   f t p 服 务 器 u s e r   a d m i n   p a s s w o r d b i n a r y       #   设 置 f t p 传 输 模 式 为 二 进 制 ， 避 免 M D 5 值 不 同 或 . t a r . g z 压 缩 包 格 式 错 误 c d   $ d i r g e t   " $ f i l e " E O F # ! / b i n / b a s h C O U N T = 1 S U M = 0 M I N = 0 M A X = 1 0 0 w h i l e   [   $ C O U N T   - l e   5   ] ;   d o         r e a d   - p   " 请 输 入 1 - 1 0 个 整 数 ： "   I N T         i f   [ [   !   $ I N T   = ~   ^ [ 0 - 9 ] + $   ] ] ;   t h e n                 e c h o   " 输 入 必 须 是 整 数 ！ "                 e x i t   1         e l i f   [ [   $ I N T   - g t   1 0 0   ] ] ;   t h e n                 e c h o   " 输 入 必 须 是 1 0 0 以 内 ！ "                 e x i t   1         f i         S U M = $ ( ( $ S U M + $ I N T ) )         [   $ M I N   - l t   $ I N T   ]   & &   M I N = $ I N T         [   $ M A X   - g t   $ I N T   ]   & &   M A X = $ I N T         l e t   C O U N T + + d o n e e c h o   " S U M :   $ S U M " e c h o   " M I N :   $ M I N " e c h o   " M A X :   $ M A X "
用 户 猜 数 字 用 户 猜 数 字 监 测 监 测 N g i n x 访 问 日 志 访 问 日 志 5 0 2 情 况 ， 并 做 相 应 动 作 情 况 ， 并 做 相 应 动 作 假 设 服 务 器 环 境 为 l n m p ， 近 期 访 问 经 常 出 现 5 0 2 现 象 ， 且 5 0 2 错 误 在 重 启 p h p - f p m 服 务 后 消 失 ， 因 此 需 要 编 写 监 控 脚 本 ， 一 旦 出 现 5 0 2 ， 则 自 动 重 启 p h p - f p m 服 务 。 将 结 果 分 别 赋 值 给 变 量 将 结 果 分 别 赋 值 给 变 量 # ! / b i n / b a s h     #   脚 本 生 成 一 个   1 0 0   以 内 的 随 机 数 , 提 示 用 户 猜 数 字 , 根 据 用 户 的 输 入 , 提 示 用 户 猜 对 了 , #   猜 小 了 或 猜 大 了 , 直 至 用 户 猜 对 脚 本 结 束 。 #   R A N D O M   为 系 统 自 带 的 系 统 变 量 , 值 为   # 场 景 ： # 1 . 访 问 日 志 文 件 的 路 径 ： / d a t a / l o g / a c c e s s . l o g # 2 . 脚 本 死 循 环 ， 每 1 0 秒 检 测 一 次 ， 1 0 秒 的 日 志 条 数 为 3 0 0 条 ， 出 现 5 0 2 的 比 例 不 低 于 1 0 % （ 3 0 条 ） 则 需 要 重 启 p h p - f p m 服 务 # 3 . 重 启 命 令 为 ： / e t c / i n i t . d / p h p - f p m   r e s t a r t # ! / b i n / b a s h # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # 监 测 N g i n x 访 问 日 志 5 0 2 情 况 ， 并 做 相 应 动 作 # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # l o g = / d a t a / l o g / a c c e s s . l o g N = 3 0   # 设 定 阈 值 w h i l e   : d o   # 查 看 访 问 日 志 的 最 新 3 0 0 条 ， 并 统 计 5 0 2 的 次 数         e r r = ` t a i l   - n   3 0 0   $ l o g   | g r e p   - c   ' 5 0 2 "   ' `   i f   [   $ e r r   - g e   $ N   ]   t h e n   / e t c / i n i t . d / p h p - f p m   r e s t a r t   2 >   / d e v / n u l l   # 设 定 6 0 s 延 迟 防 止 脚 本 b u g 导 致 无 限 重 启 p h p - f p m 服 务           s l e e p   6 0   f i   s l e e p   1 0 d o n e
批 量 修 改 文 件 名 批 量 修 改 文 件 名 应 用 场 景 ： 希 望 将 执 行 结 果 或 者 位 置 参 数 赋 值 给 变 量 ， 以 便 后 续 使 用 。 方 法 1 ： f o r   i   i n   $ ( e c h o   " 4   5   6 " ) ;   d o       e v a l   a $ i = $ i d o n e e c h o   $ a 4   $ a 5   $ a 6 方 法 2 ： 将 位 置 参 数 1 9 2 . 1 6 8 . 1 . 1 { 1 , 2 } 拆 分 为 到 每 个 变 量 n u m = 0 f o r   i   i n   $ ( e v a l   e c h o   $ * ) ; d o       # e v a l 将 { 1 , 2 } 分 解 为 1   2       l e t   n u m + = 1       e v a l   n o d e $ { n u m } = " $ i " d o n e e c h o   $ n o d e 1   $ n o d e 2   $ n o d e 3 #   b a s h   a . s h   1 9 2 . 1 6 8 . 1 . 1 { 1 , 2 } 1 9 2 . 1 6 8 . 1 . 1 1   1 9 2 . 1 6 8 . 1 . 1 2 方 法 3 ： a r r = ( 4   5   6 ) I N D E X 1 = $ ( e c h o   $ { a r r [ 0 ] } ) I N D E X 2 = $ ( e c h o   $ { a r r [ 1 ] } ) I N D E X 3 = $ ( e c h o   $ { a r r [ 2 ] } )
把 一 个 文 档 前 五 行 中 包 含 字 母 的 行 删 掉 ， 同 时 删 除 把 一 个 文 档 前 五 行 中 包 含 字 母 的 行 删 掉 ， 同 时 删 除 6 到 到 1 0 行 包 含 的 所 有 字 母 行 包 含 的 所 有 字 母 1 ） 准 备 测 试 文 件 ， 文 件 名 为 2 . t x t 示 例 ： #   t o u c h   a r t i c l e _ { 1 . . 3 } . h t m l #   l s a r t i c l e _ 1 . h t m l     a r t i c l e _ 2 . h t m l     a r t i c l e _ 3 . h t m l 目 的 ： 把 a r t i c l e 改 为 b b s 方 法 1 ： f o r   f i l e   i n   $ ( l s   * h t m l ) ;   d o         m v   $ f i l e   b b s _ $ { f i l e # * _ }         #   m v   $ f i l e   $ ( e c h o   $ f i l e   | s e d   - r   ' s / . * ( _ . * ) / b b s 1 / ' )         #   m v   $ f i l e   $ ( e c h o   $ f i l e   | e c h o   b b s _ $ ( c u t   - d _   - f 2 ) d o n e 方 法 2 ： f o r   f i l e   i n   $ ( f i n d   .   - m a x d e p t h   1   - n a m e   " * h t m l " ) ;   d o           m v   $ f i l e   b b s _ $ { f i l e # * _ } d o n e 方 法 3 ： #   r e n a m e   a r t i c l e   b b s   * . h t m l
2 ） 脚 本 如 下 ： 统 计 当 前 目 录 中 以 统 计 当 前 目 录 中 以 . h t m l 结 尾 的 文 件 总 大 结 尾 的 文 件 总 大 第 1 行 1 2 3 4 5 6 7 不 包 含 字 母 第 2 行 5 6 7 8 9 B B B B B B 第 3 行 6 7 8 9 0 C C C C C C C C 第 4 行 7 8 a s d f D D D D D D D D D 第 5 行 1 2 3 4 5 6 E E E E E E E E 第 6 行 1 2 3 4 5 6 7 A S D F 第 7 行 5 6 7 8 9 A S D F 第 8 行 6 7 8 9 0 A S D F 第 9 行 7 8 a s d f A D S F 第 1 0 行 1 2 3 4 5 6 A A A A 第 1 1 行 6 7 8 9 0 A S D F 第 1 2 行 7 8 a s d f A D S F 第 1 3 行 1 2 3 4 5 6 A A A A # ! / b i n / b a s h # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # 把 一 个 文 档 前 五 行 中 包 含 字 母 的 行 删 掉 ， 同 时 删 除 6 到 1 0 行 包 含 的 所 有 字 母 # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # # s e d   - n   ' 1 , 5 ' p   2 . t x t   | s e d   ' / [ a - z A - Z ] / ' d s e d   - n   ' 6 , 1 0 ' p   2 . t x t   | s e d   s ' / [ a - z A - Z ] / / ' g s e d   - n   ' 1 1 , $ ' p   2 . t x t # 最 终 结 果 只 是 在 屏 幕 上 打 印 结 果 ， 如 果 想 直 接 更 改 文 件 ， 可 将 输 出 结 果 写 入 临 时 文 件 中 ， 再 替 换 2 . t x t 或 者 使 用 - i 选 项 方 法 1 ： #   f i n d   .   - n a m e   " * . h t m l "   - e x e c   d u   - k   { }   ;   | a w k   ' { s u m + = $ 1 } E N D { p r i n t   s u m } ' 方 法 2 ： f o r   s i z e   i n   $ ( l s   - l   * . h t m l   | a w k   ' { p r i n t   $ 5 } ' ) ;   d o         s u m = $ ( ( $ s u m + $ s i z e ) ) d o n e e c h o   $ s u m
回复

举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

使用Markdown编辑器编辑 使用富文本编辑器编辑

Archiver| 手机版| 小黑屋|
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud. 商业源码建议获取授权，如侵犯您的权益，请联系客服处理