AI写作智能体 自主规划任务,支持联网查询和网页读取,多模态高效创作各类分析报告、商业计划、营销方案、教学内容等。 广告
## **uniq** 从输入文件或者标准输入中筛选相邻的匹配行并写入到输出文件或标准输出。 不附加任何选项时匹配行将在首次出现处被合并 >[info] uniq \[选项\]... \[文件\] > > \-c, --count           在每行前加上表示相应行目出现次数的前缀编号 > > \-d, --repeated        只输出重复的行 > > \-u, --unique          只显示唯一的行 > > // > > \-D, --all-repeated\[=delimit-method    显示所有重复的行 > >                         delimit-method={none(default),prepend,separate} > >                         以空行为界限 > > \-f, --skip-fields=N   比较时跳过前N 列 > > \-i, --ignore-case     在比较的时候不区分大小写 > > \-s, --skip-chars=N    比较时跳过前N 个字符 > > \-z, --zero-terminated 使用'\\0'作为行结束符,而不是新换行 > > \-w, --check-chars=N   对每行第N 个字符以后的内容不作对照 ~~~ cat uniqtest #测试文件 this is a test this is a test this is a test i am tank i love tank i love tank this is a test whom have a try WhoM have a try you have a try i want to abroad those are good men we are good men uniq -c file.txt || uniq的一个特性,检查重复行的时候,只会检查相邻的行。重复数据,肯定有很多不是相邻在一起的 sort file.txt | uniq -c || 这样就可以解决上个例子中提到的问题 uniq -d -c file.txt || uniq -d 只显示重复的行 uniq -D file.txt || uniq -D 只显示重复的行,并且把重复几行都显示出来。他不能和-c一起使用 uniq -f 1 -c file.txt || 在这里those只有一行,显示的却是重复了,这是因为,-f 1 忽略了第一列,检查重复从第二字段开始的。 uniq -i -c file.txt || 检查的时候,不区分大小写 uniq -s 4 -c file.txt || 检查的时候,不考虑前4个字符,这样whom have a try 就和 you have a try 就一样了。 uniq -u file.txt || 去重复的项,然后全部显示出来 uniq -w 2 -c file.txt || 对每行第2个字符以后的内容不作检查,所以i am tank 根 i love tank就一样了 ~~~ >[danger] 若域中为先空字符(通常包括空格以及制表符),然后非空字符,域中字符前的空字符将被跳过。 > 提示:uniq 不会检查重复的行,除非它们是相邻的行。 > 如果您想先对输入排序,使用没有uniq 的"sort -u"。 > 同时,比较服从"LC\_COLLATE" 变量所指定的规则。