主题对照

awk与sed命令行文本处理

归纳 awk 与 sed 的行筛选、字段处理、地址定位、正则替换及与 shell 交互的边界。

8 张卡片 · 1 本书

本层 8 张卡片 · 含下级覆盖 8 张卡片

本主题的卡片

架构师之路 · 一分钟学awk够用(产品经理都懂了)

awk按条件筛选文本行

awk '条件{动作}' 文件逐行检查文本,只对条件命中的行执行动作;省略动作时默认打印整行。

例如 awk '/hello/' file 打印含 hello 的行,awk 'NR==3,NR==5{print}' file 选第 3 至 5 行。正则条件与行号条件可替换组合。

原文“长度大于100”的示例实际写的是 80,应以命令中的数值为准。

查看卡片与原书出处

架构师之路 · 一分钟学awk够用(产品经理都懂了)

awk字段变量定位列

处理按列分隔的文本时:

  • $0 是整行,$1 是第一列,$NF 是最后一列。
  • NR 是当前输入行号,NF 是本行字段数;FS 控制输入分隔符。

awk '{print NR,$1,$NF}' file 可输出行号及首末列。默认按空白分字段;字段数不足时,末列引用需按实际数据解释。

查看卡片与原书出处

架构师之路 · 一分钟学awk够用(产品经理都懂了)

awk内置函数处理文本

awk 提供轻量文本处理函数:

  • length($0) 量当前行长度,index(s,t) 找子串位置,substr(s,p) 从指定位置截取。
  • split(s,a,fs) 按分隔符拆字段,gsub(r,s) 替换当前行匹配内容,match(s,r) 可用于正则匹配。

它们适合在筛选条件或动作中使用;复杂转义和多字节字符需按实际 awk 实现测试。

查看卡片与原书出处

架构师之路 · 一分钟学awk够用(产品经理都懂了)

awk用BEGIN与END汇总

awk 汇总文本时依次执行:

  1. BEGIN{} 在读输入前初始化。
  2. 普通动作块逐行执行。
  3. END{} 在输入结束后输出汇总。

例如 awk 'BEGIN{n=0}{n+=length($0)}END{print n}' file 统计行文本长度之和。条件与动作里也可使用算术、比较、if 和循环。

原文把大于等于写成 =>,实际应写 >=。

查看卡片与原书出处

架构师之路 · 一分钟学awk够用(产品经理都懂了)

awk与shell交互需分清边界

awk 程序与 shell 是两个解释环境。传入 shell 变量可用 awk -v word="$STR" 'BEGIN{print word}';这是比原书拼接引号更稳妥的替代示例,不会把变量值当 awk 源码。system("date") 执行外部命令,getline line < "input.txt" 从文件读取一行,两者用途不同。

原书还展示管道调用外部命令。执行命令可能产生副作用,读取文件则要处理路径与结束条件;这些示例不能直接当作通用安全模板。

查看卡片与原书出处

架构师之路 · 一分钟sed入门(一分钟系列)

sed按行号或正则定位

sed -n '2,$p' file 只打印第 2 行到末行,sed -n '/100/p' file 打印匹配正则的行。命令可直接写在命令行,也可用 sed -f script.sed file 从脚本文件读取,便于复用多条规则。

地址可用行号、范围或 /正则/,p 显式打印,-n 关闭每轮结束时的自动打印。

原文称自动打印发生在“处理前”,时序不准确;未加 -n 再用 p 可能重复输出。

查看卡片与原书出处

架构师之路 · 一分钟sed入门(一分钟系列)

sed按地址增删改整行

sed 的“地址”先选中行,可以是行号或 /正则/。例如 sed '/^100$/d' file 从输出中删除内容恰为 100 的整行;这是按原书的地址与 d 命令组合的教学示例。

在地址后,还可使用以下命令:

  • a\ 追加新行,i\ 在匹配行前插入。
  • c\ 用新行替换匹配行,d 删除匹配行。

它们改变输出流中的行结构,适合按地址批量整理文本;不带原地修改选项时,原文件保持不变。

各系统对插入文本的换行与转义要求不同,应先在样本输入上核对命令。

查看卡片与原书出处

架构师之路 · 一分钟sed入门(一分钟系列)

sed替换默认只改首处

sed 's/100/hello/g' file 将每行所有匹配的 100 换成 hello;省略 g 时每行只改首处。

sed -n 's/^10/yes/p' file 只打印发生替换的行,但 ^10 匹配行首的 10,也会改动以 100 开头的行。

若要整行精确匹配,应使用行尾锚点 $;p 与 -n 配合避免未替换行输出。

查看卡片与原书出处
辅助阅读:卢曼编号

按卢曼编号阅读

点击箭头逐层展开,点击卡片标题查看详情。路径上下文仅用于连接层级,不计入主题卡片数。

  • 展开或收起下级: 3963 awk按条件筛选文本行 主题成员 架构师之路 · 一分钟学awk够用(产品经理都懂了) 理解等级:中级
    • 3963.a awk字段变量定位列 主题成员 架构师之路 · 一分钟学awk够用(产品经理都懂了) 理解等级:中级
    • 3963.b awk内置函数处理文本 主题成员 架构师之路 · 一分钟学awk够用(产品经理都懂了) 理解等级:中级
    • 3963.c awk用BEGIN与END汇总 主题成员 架构师之路 · 一分钟学awk够用(产品经理都懂了) 理解等级:中级
    • 3963.d awk与shell交互需分清边界 主题成员 架构师之路 · 一分钟学awk够用(产品经理都懂了) 理解等级:高级
  • 3971 sed按行号或正则定位 主题成员 架构师之路 · 一分钟sed入门(一分钟系列) 理解等级:中级
  • 3972 sed按地址增删改整行 主题成员 架构师之路 · 一分钟sed入门(一分钟系列) 理解等级:中级
  • 3973 sed替换默认只改首处 主题成员 架构师之路 · 一分钟sed入门(一分钟系列) 理解等级:中级

来源书籍

来源书籍

架构师之路

系统架构类

Skill 版本:v15

书籍类型:未标注

类别清单尚未核对

317 张卡片