跳动探索网

✨linux命令(12)uniq去重💡

导读 在日常的数据处理中,重复数据总是让人头疼。这时,`uniq`命令就像一位高效的小助手,能快速帮你解决重复烦恼!📚首先,让我们了解它的基本...

在日常的数据处理中,重复数据总是让人头疼。这时,`uniq`命令就像一位高效的小助手,能快速帮你解决重复烦恼!📚

首先,让我们了解它的基本用法:

`uniq [选项] 文件名` 🖥️

`uniq` 命令的作用是过滤连续的重复行。但请注意,它只对已排序的文件有效哦!因此,在使用前通常需要配合 `sort` 命令。🌈

例如:

```bash

cat data.txt | sort | uniq

```

这会读取 `data.txt` 文件内容,先排序,再去除连续的重复行。🎯

此外,`uniq` 还有很多实用选项:

- `-c`:显示每行重复次数;

- `-d`:仅显示重复行;

- `-u`:仅显示唯一行。

💡小提示:如果想彻底去重,记得先排序!否则可能会遗漏某些重复数据哦~

掌握这个命令,你的工作效率将大幅提升!💪🔥