Linux 文本去重的命令
哪些公司问过
答案要点
- sort file | uniq 或 sort -u file 去重
- uniq 只去除相邻重复行,需先排序
- uniq -c 统计次数,常配合 sort -nr 做 TopN
- uniq -d 只显示重复行,uniq -u 只显示不重复的行
- awk '!seen[$0]++' 可保留原始顺序去重
易错点
- 不排序直接 uniq,以为能去掉所有重复行
- 用 sort 去重后又期望保留原始行顺序
面试官常见追问
- 如何统计日志中访问量前 10 的 IP?
- 按某一列去重怎么做?
完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。