shell awk
一、awk 是什么awk 是一款专门处理文本的小型编程语言日常运维三大文本工具分工清晰grep 只负责筛选匹配行sed 擅长对文本做替换、增删awk 主打字段拆分、格式化打印、数值统计、逻辑判断。awk 执行逻辑逐行读取文件内容按分隔符切割成多列匹配设定的条件后执行自定义操作。二、基础语法awk[可选参数]匹配条件{执行操作}目标文件高频内置变量$0 代表读取到的完整一整行内容$1、$2、$3 依次代表第一列、第二列、第三列字段NF 是当前行的总字段列数NR 全局行号读取多个文件时持续累加计数FNR 单文件行号读取新文件后重新从1开始计数FS 输入分隔符默认以空格、制表符作为分割依据OFS 输出分隔符打印多列时默认用空格隔开。三、常用参数用法-F 自定义输入分隔符# 以冒号分割passwd文件只输出第一列用户名awk-F:{print $1}/etc/passwd-v 向awk传递外部shell变量# 定义变量num10每行第一列数字加10后打印awk-vnum10{print $1num}test.txt四、示例1. 打印整行、指定列数据# 输出文件全部内容等价catawk{print $0}test.txt# 同时打印第二列、第四列awk{print $2,$4}test.txt# 修改输出分隔符为---拼接两列awk-vOFS---{print $1,$3}test.txt2. 自定义多分隔符切割文本# 处理csv文件逗号作为分割符awk-F,{print $2}log.csv# 同时识别空格、逗号、分号三种分隔符awk-F[ ,;]{print $1}test.txt3. 行号、取末尾列# 每行前面输出全局行号awk{print NR,$0}test.txt# 打印每行最后一列awk{print $NF}test.txt# 打印每行倒数第二列awk{print $(NF-1)}test.txt4. 正则条件过滤行# 匹配包含error关键字的日志行并打印awk/error/ {print $0}app.log# 匹配以root开头的行输出第一列awk/^root/ {print $1}/etc/passwd# 匹配以/bin/bash结尾的行awk/\/bin\/bash$//etc/passwd5. 数值条件判断# 第一列数值大于100才打印该行awk$1 100num.txt# 第二列等于50输出1、3列awk$2 50 {print $1,$3}num.txt五、BEGIN 与 END 特殊模块BEGIN读取文件前执行适合打印表头、初始化变量END文件全部读取完毕后执行适合汇总统计# 统计文件总行数awkBEGIN{print 总行数统计} END{print NR}test.txt# 求和第一列所有数字awkBEGIN{sum0} {sum$1} END{print 总和,sum}num.txt六、简单运维实战案例统计服务器登录用户数量awk-F:/\/bin\/bash/ {print $1}/etc/passwd|wc-l查看日志中500报错接口提取请求地址awk/500/ {print $7}nginx.log计算磁盘总占用大小df-h|awkNR1 {gsub(/%/,);if($580) print $1,$5}七、小结awk 核心优势是按列处理文本日志分析、配置解析首选分隔符优先用 -F 指定多分隔符用 [] 包裹NR/FNR 区分全局和单文件行号NF快速获取末尾列BEGIN 前置初始化END 后置汇总统计搭配实现复杂统计逻辑。

相关新闻

在IDE里把金融合规“焊死”:FinSec Inspector 插件体验

在IDE里把金融合规“焊死”:FinSec Inspector 插件体验

做金融业务开发的同学,应该对“等保三级”和“JR/T 0092”这些词不陌生。每次项目上线前的安全审计,或者等保测评前的自查,都是一场“硬仗”。最让人头疼的往往不是业务逻辑,而是那些散落在代码里的“地雷”:硬编码的数…

2026/10/17 5:14:09 阅读更多 →
PUBG罗技鼠标宏压枪工具终极指南:3分钟快速配置零文件修改方案

PUBG罗技鼠标宏压枪工具终极指南:3分钟快速配置零文件修改方案

PUBG罗技鼠标宏压枪工具终极指南:3分钟快速配置零文件修改方案 【免费下载链接】PUBG-Logitech PUBG罗技鼠标宏自动识别压枪 项目地址: https://gitcode.com/gh_mirrors/pu/PUBG-Logitech PUBG-Logitech是一款基于罗技鼠标宏和智能图像识别技术的绝地求生压枪…

2026/10/17 5:14:59 阅读更多 →
2026年全国青少年信息素养大赛算法应用主题赛C++赛项【决赛】模拟卷(汇总)

2026年全国青少年信息素养大赛算法应用主题赛C++赛项【决赛】模拟卷(汇总)

2026年全国青少年信息素养大赛算法应用主题赛C赛项【决赛】模拟卷(汇总) 2026年全国青少年信息素养大赛算法应用主题赛C赛项【决赛】模拟卷1:文末附答案 https://noicsp.blog.csdn.net/article/details/163322689?spm1011.2415.3001.5331 …

2026/10/16 19:33:00 阅读更多 →

最新新闻

基于YOLO的口罩佩戴检测系统毕设实战指南

基于YOLO的口罩佩戴检测系统毕设实战指南

毕设选题这件事,每年都有一批人卡在同一个地方:想做个“有技术含量、工作量足、还能拿得出手”的题目,又担心难度太大自己搞不定。如果你刚好是计算机视觉方向,我强烈建议你看一眼“深度学习口罩佩戴检测系统”这类题目。它不只是…

2026/10/18 16:50:46 阅读更多 →
Eclipse中创建Maven工程:从环境配置到项目运行的完整指南

Eclipse中创建Maven工程:从环境配置到项目运行的完整指南

1. 为什么在IDE里手动搭Maven工程比命令行更值得花时间很多人第一次接触Maven,习惯直接在终端敲mvn archetype:generate,一路回车把骨架拉起来,然后才用IDE打开。这个流程本身没毛病,但如果你后续要长期维护这个工程,我…

2026/10/18 16:50:45 阅读更多 →
自动驾驶入门硬件选型与实车调试实战指南

自动驾驶入门硬件选型与实车调试实战指南

1. 这不是教科书,而是一份“能上手、不踩坑、真能跑通”的自动驾驶入门实录“自动驾驶入门指南”这六个字,最近在技术社区、高校实验室甚至职业培训平台高频出现。但你点开十篇所谓“入门指南”,八篇在讲L0-L5分级、三篇贴出ROS安装命令、两篇…

2026/10/18 16:50:45 阅读更多 →
CMake静态库与动态库生成链接实战指南

CMake静态库与动态库生成链接实战指南

1. 从一个真实困境说起:为什么你的CMake项目总是链接失败如果你写过C,大概率经历过这样的场景:代码明明编译通过了,一到链接阶段就报一堆undefined reference to ...,或者运行时提示error while loading shared librar…

2026/10/18 16:50:45 阅读更多 →
Claude Code 知识工作插件与 slash commands 实战指南

Claude Code 知识工作插件与 slash commands 实战指南

1. 从零认识 knowledge-work-plugins:它到底解决什么问题第一次看到knowledge-work-plugins这个仓库名,很多人会以为是某个知识管理软件的插件合集,或者像 Obsidian、Logseq 那种笔记工具的扩展包。实际上它的定位要更“底层”一些——这是一…

2026/10/18 16:50:45 阅读更多 →
零基础也能创建AI智能体:三步搭建个人助手实战指南

零基础也能创建AI智能体:三步搭建个人助手实战指南

身边很多朋友一听到“AI智能体”这个词,第一反应都是:这玩意儿是不是得先学三个月Python,再搞懂什么API调用、微调模型,才配碰一碰?其实真不是。我刚开始接触的时候也抱着同样的刻板印象,直到我自己用纯聊天…

2026/10/18 16:49:44 阅读更多 →

日新闻

基于GMM的语音识别系统原理与MATLAB实现详解

基于GMM的语音识别系统原理与MATLAB实现详解

说到基于高斯混合模型(GMM)的语音识别系统,很多人第一反应就是一堆数学公式,觉得门槛很高。但如果你真的在MATLAB里把它落地跑通,会发现核心其实就是三件事:把声音变成特征向量,用GMM给每个类别…

2026/10/18 0:00:55 阅读更多 →
数字图像处理入门:反白、灰度化、调色板修改与导出txt实践

数字图像处理入门:反白、灰度化、调色板修改与导出txt实践

数字图像处理这四个字听起来挺唬人,但落到具体操作上,无非就是让计算机按你的想法“摆弄”像素。我在一个模拟项目X里用了一套特别经典的基础处理流程:对图像做反白、改调色板、彩色转灰度,最后把像素数据导出成txt文件。单看每一…

2026/10/18 0:00:55 阅读更多 →
机器人大脑技术盘点:具身智能的感知、决策与数据闭环

机器人大脑技术盘点:具身智能的感知、决策与数据闭环

如果你的信息流最近也天天刷到“机器人大脑”这个词,你会发现一个很有意思的现象:每个人说的“大脑”根本不是同一个东西。有人指的是大语言模型,有人指的是运动控制系统,还有人指的是能理解物理世界的端到端模型。在2026年这个时…

2026/10/18 0:00:55 阅读更多 →

周新闻

基于GMM的语音识别系统原理与MATLAB实现详解

基于GMM的语音识别系统原理与MATLAB实现详解

说到基于高斯混合模型(GMM)的语音识别系统,很多人第一反应就是一堆数学公式,觉得门槛很高。但如果你真的在MATLAB里把它落地跑通,会发现核心其实就是三件事:把声音变成特征向量,用GMM给每个类别…

2026/10/18 0:00:55 阅读更多 →
数字图像处理入门:反白、灰度化、调色板修改与导出txt实践

数字图像处理入门:反白、灰度化、调色板修改与导出txt实践

数字图像处理这四个字听起来挺唬人,但落到具体操作上,无非就是让计算机按你的想法“摆弄”像素。我在一个模拟项目X里用了一套特别经典的基础处理流程:对图像做反白、改调色板、彩色转灰度,最后把像素数据导出成txt文件。单看每一…

2026/10/18 0:00:55 阅读更多 →
机器人大脑技术盘点:具身智能的感知、决策与数据闭环

机器人大脑技术盘点:具身智能的感知、决策与数据闭环

如果你的信息流最近也天天刷到“机器人大脑”这个词,你会发现一个很有意思的现象:每个人说的“大脑”根本不是同一个东西。有人指的是大语言模型,有人指的是运动控制系统,还有人指的是能理解物理世界的端到端模型。在2026年这个时…

2026/10/18 0:00:55 阅读更多 →

月新闻

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

我发现了一个新思路:用 Remotion + Claude Code 像写代码一样自动化生成短视频

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/18 0:55:02 阅读更多 →
Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

Windows下 Codex 中 Chrome 和 Computer Use 插件不可用问题排查及解决参考方式:TaoToken 统一 Key 配置与验证

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/17 17:22:31 阅读更多 →
黑夜航拍船只数据集训练YOLOV5模型全流程解析

黑夜航拍船只数据集训练YOLOV5模型全流程解析

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/10/18 12:16:16 阅读更多 →