Linux基础|文本处理三剑客grep/sed/awk协同的威力
- 2026-01-13 17:30:41
Linux基础|文本处理三剑客grep/sed/awk协同的威力在前面的文章中，我们已经分别介绍过grep、sed、awk以及管道的用法。 不了解的可以可以看这里 Linux基础｜grep: 文本查找的第一利器 Linux入门必学：sed 命令其实没你想的那么难 Awk：Linux文本处理的瑞士军刀 Linux基础｜管道：把命令真正“连”起来 先看一个典型场景： 单靠一个命令，很难优雅完成，但如果拆解任务，就会发现非常清晰： 这正是 Linux 命令行的核心思想：一个命令只做一件事，通过管道组合完成复杂任务。 假设有一份日志 app.log，格式如下： 我们的目标是：统计每天 ERROR 出现的次数 先把 ERROR 行筛选出来： 输出结果只保留了关键信息，后续命令处理压力大大降低。 如果日志中包含多余信息，比如多余空格，我们可以先处理： sed 不关心结构，只做“文本层面的修改”，非常适合放在中间。 现在用 awk 提取日期并统计次数： 输出示例： awk 在三剑客中，负责逻辑和计算。 场景：统计当前系统中 nginx 进程数量 分解来看： 这类写法，在脚本和运维排查中极其常见。 可以简单记住一条经验法则： 当你遇到文本处理需求时，先想清楚三件事： 然后按顺序组合命令。 ✅ 1. 先拆需求，再写命令 不要一上来就憋“长命令”，先拆成几步。 ✅ 2. 多用管道，少用临时文件 管道让数据流转更自然，也更高效。 ✅ 3. 可读性比“炫技”更重要 命令是写给人看的，不只是给机器执行的。 grep、sed、awk 各自并不复杂，但组合起来，威力极大。当你开始习惯用“三剑客”处理日志、分析数据、写脚本时，说明你已经真正理解了 Linux 文本处理的精髓: 如果你愿意多练几次，你会发现：很多问题，其实一行命令就能解决。 关注我，更多linux使用技巧和你一起探讨！
很多读者也都会用：grep 查内容、sed 改文本、awk 拆字段。但真正拉开水平差距的，并不是“会不会某一个命令”，而是：你能不能把它们组合起来解决真实问题。grep、sed、awk 被称为 Linux 文本处理“三剑客”，不是因为它们各自有多强，而是因为它们天生就该配合使用。
一、为什么要组合使用三剑客？
从日志中找出error级别的记录，去掉无关字段，统计每天的错误次数。
grep：筛选目标行 sed：清洗或替换内容 awk：提取字段、统计结果
二、示例日志准备
2024-06-01 INFO user login success2024-06-01 ERROR db connect failed2024-06-02 ERROR timeout2024-06-02 INFO task finished......
三、第一步：grep 负责“筛选目标”
grep "ERROR" app.log四、第二步：sed 负责“清洗和修饰”
grep "ERROR" app.log | sed 's/ERROR//'五、第三步：awk 负责“分析和统计”
grep "ERROR" app.log | awk '{count[$1]++} END {for (d in count) print d, count[d]}'2024-06-01 12024-06-02 1
六、一个更贴近运维的实战案例
ps -ef | grep nginx | grep -v grep | awk '{print $2}' | wc -lps -ef # 获取进程列表grep nginx # 筛选目标进程grep -v grep # 排除自身awk '{print $2}' # 提取 PIDwc -l # 统计数量
七、三剑客的“分工协作模型”
grep：找谁
sed：怎么改
awk：怎么算
要不要过滤？
要不要修改？
要不要统计？
八、使用三剑客的几个实用建议
九、写在最后
工具不在多，在于用得顺；
命令不在长，在于思路清。
本文来自网友投稿或网络内容，如有侵犯您的权益请联系我们删除，联系邮箱：wyl860211@qq.com 。
随机文章
-
10个月宝宝每天需要喝多少奶粉？
- UG编程-汽车脚踏板压铸模侧冲电极设计方式
- 不懂代码的我,做了一个5万元的网站
- 我愿称这个编程游戏网站为本年度最佳发现
- 想学PLC编程?先弄清5种PLC专用语言!
- 研支团“我的心动时刻”|代码深处,星光闪亮
- 腾讯Hunyuan团队放大招:用代码“印钞机”和“负分”奖励,让LLM推理能力飙升!
- 传统编程教育正在过时,看看11岁孩子用AI做了什么
- Cursor推出「动态上下文发现」:让代码Agent学会“自己找信息”
- 孩子编程入门难?这本《48课搞定信息学奥赛》让C++学习越学越上瘾
- FireMonkey编程入门(18):使用 Image List 编辑器番外(3)ImageList图像列表更新实现机制
