搜索

[26428] 2021-05-07_Linux三剑客之awk实战详解教程

文档创建者：s7ckTeam
浏览次数：1
最后更新：2025-01-19
2021-05-07_Linux三剑客之awk实战详解教程 L i n u x   三 剑 客 之   a w k   实 战 详 解 教 程 L i n u x 学 习   2 0 2 1 - 0 5 - 0 7 以 下 文 章 来 源 于 编 程 修 养   ， 作 者 程 序 员 肖 邦 来 自 公 众 号 ： 来 自 公 众 号 ： 编 程 修 养 编 程 修 养 我 们 知 道   L i n u x   三 剑 客 ， 它 们 是   、 、 。 在 前 边 已 经 讲 过   g r e p   和   s e d ， 没 看 过 的 同 学 可 以 直 接 点 击 阅 读 ， 今 天 要 分 享 的 是 更 为 强 大 的 。 s e d   可 以 实 现 非 交 互 式 的 字 符 串 替 换 ， g r e p   能 够 实 现 有 效 的 过 滤 功 能 。 与 两 者 相 比 ， a w k   是 一 款 强 大 的 文 本 分 析 工 具 ， 在 对 数 据 分 析 并 生 成 报 告 时 ， 显 得 尤 为 强 悍 。 a w k   强 大 的 功 能 ， 是 一 般   L i n u x   命 令 无 法 比 拟 的 。 在 本 文 中 ， 我 不 会 告 诉 你   a w k   也 是 一 种 编 程 语 言 ， 免 得 会 吓 到 你 。 我 们 只 需 把 它 当 做   L i n u x   下 一 款 强 大 的 文 本 分 析 工 具 即 可 。 这 篇 文 章 ， 我 仍 然 秉 持 着   实 用 实 用 、 实 践 实 践   原 则 ， 提 供 大 量 的 示 例 ， 但 不 会 面 面 俱 到 。 通 过 本 文 可 以 帮 助 你 ， 快 速 将 a w k   运 用 起 来 ， 这 些 东 西 足 够 应 付 工 作 中 大 多 数 应 用 场 景 。 场 景 场 景 学 习 具 体 使 用 前 ， 先 来 看 下   a w k   能 干 些 什 么 事 情 ： 1 .   能 够 将 给 定 的 文 本 内 容 ， 按 照 我 们 期 望 的 格 式 输 出 显 示 ， 打 印 成 报 表 。 2 .   分 析 处 理 系 统 日 志 ， 快 速 地 分 析 挖 掘 我 们 关 心 的 数 据 ， 并 生 成 统 计 信 息 ； 3 .   方 便 地 用 来 统 计 数 据 ， 比 如 网 站 的 访 问 量 ， 访 问 的   I P   量 等 ； 4 .   通 过 各 种 工 具 的 组 合 ， 快 速 地 汇 总 分 析 系 统 的 运 行 信 息 ， 让 你 对 系 统 的 运 行 了 如 指 掌 ； 5 .   强 大 的 脚 本 语 言 表 达 能 力 ， 支 持 循 环 、 条 件 、 数 组 等 语 法 ， 助 你 分 析 更 加 复 杂 的 数 据 ； . . . . . . 编 程 修 养 编 程 修 养   . 作 者 从 事   L i n u x   系 统 开 发 多 年 ， 公 众 号 主 要 分 享   L i n u x   实 用 技 巧 、 网 络 、 算 法 、 高 质 量 编 程 、 高 性 能 编 程 等 方 面 的 文 章 ， 欢 迎 关 注 ！ g r e p s e d a w k a w k
当 然   a w k   不 仅 能 做 这 些 事 情 ， 当 你 将 它 的 用 法 融 汇 贯 通 时 ， 可 以 随 心 所 欲 的 按 照 你 的 意 愿 ， 来 进 行 高 效 的 数 据 分 析 和 统 计 。 不 过 我 们 需 要 知 道 ， a w k   不 是 万 能 的 ， 它 比 较 擅 长 处 理 格 式 化 格 式 化 的 文 本 ， 比 如   日 志 、 c s v   格 式 数 据 等 ； 原 理 原 理 我 们 先 来 简 单 了 解   a w k   基 本 工 作 原 理 ， 通 过 下 边 的 图 文 讲 述 ， 希 望 你 能 了 解   a w k   到 底 是 如 何 工 作 的 。 a w k   基 本 命 令 格 式 结 合 下 图 来 详 细 说 明   a w k   工 作 原 理 首 先 ， 执 行 关 键 字 标 识 的 中 的 命 令 ； 完 成 大 括 号 中 命 令 的 后 ， 开 始 执 行 B E G I N { } B E G I N b o d y
命 令 ； 逐 行 读 取 数 据 ， 默 认 读 到 分 割 的 内 容 为 一 条   记 录 记 录 ， 其 实 就 是 行 行 的 概 念 ； 将 记 录 记 录 按 照 指 定 的 分 隔 符 划 分 为   字 段 字 段 ， 其 实 就 是 列 列 的 概 念 ； 循 环 执 行 块 中 的 命 令 ， 每 读 取 一 行 ， 执 行 一 次 ， 最 终 完 成 执 行 ； 最 后 ， 执 行 命 令 ， 通 常 会 在 中 输 出 最 后 的 结 果 ； a w k   是 输 入 驱 动 的 ， 有 多 少 输 入 行 ， 就 会 执 行 多 少 次 命 令 。 我 们 在 下 边 的 示 例 学 习 中 ， 要 时 刻 记 着 ： 记 录 记 录   ( R e c o r d )   就 是 行 行 ， 字 段 字 段   ( F i e l d )   就 是 列 列 ， 是 预 处 理 阶 段 ， 是   a w k   真 正 工 作 的 阶 段 ， 是 最 后 处 理 阶 段 。 实 战 实 战   -   入 门 入 门 从 下 边 内 容 开 始 ， 我 们 直 接 进 入 到 实 战 。 为 了 方 便 举 例 ， 我 先 把 如 下 信 息 保 存 到   f i l e . t x t n b o d y b o d y b o d y E N D E N D b o d y B E G I N b o d y E N D
好 了 ， 我 们 先 来 一 个 最 简 单 最 常 用 的   a w k   示 例 ， 输 出 第   1 、 4 、 8   列 ： 大 括 号 里 边 的 就 是   a w k   语 句 ， 只 能 被 单 引 号 单 引 号 包 含 ， 其 中 ， 表 示 第 几 列 ， 表 示 整 个 行 内 容 再 来 看 下 比 较 实 用 的 功 能   格 式 化 输 出 格 式 化 输 出 。 和 $ 1 . . $ N $ 0 a w k C
语 言 的 格 式 输 出 是 一 毛 一 样 ， 我 个 人 特 别 喜 欢 这 种 格 式 化 方 式 ， 而 不 是 中 的 流 的 方 式 。 表 示 字 符 串 占 位 符 ， 表 示 列 宽 度 为 ， 且 左 对 齐 ， 我 们 还 可 以 根 据 需 要 ， 列 出 更 复 杂 的 格 式 来 ， 这 里 先 不 详 细 举 例 了 。 实 战 实 战   -   进 阶 进 阶 （ 一 ） 过 滤 记 录 （ 一 ） 过 滤 记 录 有 些 数 据 可 能 不 是 你 想 要 的 ， 可 以 根 据 需 要 进 行 过 滤 上 边 的 过 滤 条 件 为 ， 第   3   列 为   r o o t   且 第   6   列 为   1 0   的 行 ， 才 会 被 输 出 。 a w k   支 持 各 种 比 较 运 算 符 号 p r i n t f C + + % s - 4 4
、 、 、 、 ， 其 中 表 示 整 行 的 所 有 内 容 。 （ 二 ） 内 置 变 量 （ 二 ） 内 置 变 量 a w k   内 置 了 一 些 变 量 ， 更 方 便 我 们 对 数 据 的 处 理 过 滤 第   3   列 为   r o o t   用 户 ， 以 及 第   2   行 内 容 ， 且 打 印 时 输 出 行 号 。 表 示 当 前 第 几 行 ， 表 示 当 前 行 有 几 列 。 （ 三 ） 指 定 分 隔 符 （ 三 ） 指 定 分 隔 符 我 们 的 数 据 ， 不 总 是 以 空 格 为 分 隔 符 ， 我 们 可 以 通 过 变 量 指 定 分 隔 符 。 ! = > < > = < = $ 0 N R N F F S
我 们 指 定 分 隔 符 为 ， 这 样 就 将 行 内 容 分 割 为 了 两 部 分 ， 将 替 换 成 了 上 边 的 命 令 也 可 以 通 过 选 项 指 定 分 割 符 如 果 你 需 要 指 定 多 个 分 隔 符 ， 可 以 这 样 做 。 相 信 聪 明 的 你 ， 一 定 能 够 理 解 并 融 会 贯 通 的 。 同 样 ， a w k   可 以 指 定 输 出 时 的 分 隔 符 ， 通 过 变 量 来 设 置 2 0 1 9 2 0 1 9 * - F - F   ' [ ; : ] ' O F S
输 出 时 ， 各 字 段 用 指 定 的 符 号 进 行 了 分 隔 。 实 战 实 战   -   高 级 高 级 （ 一 ） 条 件 匹 配 （ 一 ） 条 件 匹 配 列 出   r o o t   用 户 的 所 有 文 件 ， 以 及 第 一 行 文 件 上 边 匹 配 第 三 列 中 包 含 的 行 ， 其 实 就 是 正 则 表 达 式 的 匹 配 。 同 样 ， a w k   可 以 像   g r e p   一 样 匹 配 某 一 行 ， 就 像 这 样 O F S r o o t ~
另 外 ， 可 以 这 样 匹 配 多 个 关 键 词 。 模 式 取 反 可 以 使 用 符 号 （ 二 ） 拆 分 文 件 （ 二 ） 拆 分 文 件 我 们 来 做 一 件 有 意 思 的 事 情 ， 可 以 将 文 本 信 息 拆 分 为 多 个 文 件 ， 下 边 命 令 按 照 月 份 （ 第 5 列 ） 将 文 件 信 息 拆 分 为 多 个 文 件 a w k   支 持 重 定 向 符 号 / A u g | D e c / ! >
， 直 接 将 每 行 内 容 重 定 向 到 月 份 命 名 的 文 件 了 ， 当 然 你 也 可 以 把 指 定 的 列 输 出 到 文 件 （ 三 ） （ 三 ） i f   语 句 语 句 复 杂 的 条 件 判 断 ， 可 以 使 用   a w k   的 语 句 ， a w k   的 强 大 正 因 为 它 是 个 脚 本 解 释 器 ， 拥 有 一 般 脚 本 语 言 的 编 程 能 力 ， 下 边 示 例 通 过 稍 微 复 杂 的 条 件 进 行 拆 分 文 件 要 注 意 ， 语 句 是 在 大 括 号 里 边 的 。 （ 四 ） 统 计 （ 四 ） 统 计 统 计 当 前 目 录 下 ， 所 有 、 文 件 所 占 用 空 间 大 小 总 和 第   5   列 表 示 文 件 大 小 ， 每 读 取 一 行 就 会 将 该 文 件 大 小 计 算 到 变 量 中 ， 在 最 后 阶 段 打 印 出 i f i f * . c * . h s u m E N D s u m
回复

举报

高级模式
B Color Image Link Quote Code Smilies
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

使用Markdown编辑器编辑 使用富文本编辑器编辑

Archiver| 手机版| 小黑屋|
Powered by Discuz! X3.4 Copyright © 2001-2020, Tencent Cloud. 商业源码建议获取授权，如侵犯您的权益，请联系客服处理