linux中的uniq

uniq命令的使用:
uniq 命令用于检查及删除文本文件中重复出现的行列,一般与 sort 命令结合使用。
uniq 可检查文本文件中重复出现的行列。

参数:
-c 或 --count 在每列旁边显示该行重复出现的次数。
-d 或 --repeated 仅显示重复出现的行列。
-u 或 --unique 仅显示出现一次的行列

#排序后删除重复行
cat test.txt |sort |uniq 
#排序之后删除重复行,同时在行首位置输出重复行的次数
cat test.txt |sort |uniq -c
#仅显示存在重复的行,并在行首显示该行重复的次数
cat test.txt |sort |uniq -dc
#仅显示不重复的行
cat test.txt |sort|uniq -u

例如:

nginx日志分析----统计某个时间段的IP

grep "23/Apr/2020:2[0-3]" nowcoder.txt | awk '{print $1}' | sort | uniq |  wc -l


本文来自互联网用户投稿,文章观点仅代表作者本人,不代表本站立场,不承担相关法律责任。如若转载,请注明出处。 如若内容造成侵权/违法违规/事实不符,请点击【内容举报】进行投诉反馈!

相关文章

立即
投稿

微信公众账号

微信扫一扫加关注

返回
顶部