리눅스 uniq 명령어
리눅스 uniq 명령어는 “unique”의 약자이며, 텍스트 파일에서 중복된 행을 제거하고 하나의 행만 출력하는데 사용됩니다. 중복된 텍스트 데이터를 제거하고 몇 번의 반복이 있었는지 등을 확인할 때 매우 유용하게 사용할 수 있습니다.
✅ 리눅스 uniq 명령어 기본 사용법
uniq -[OPTION] [파일(INPUT)] [파일(OUTPUT)]
INPUT 파일은 대상 파일로써 표준 입력에서 읽은 후 기본 출력을 진행합니다. OUTPUT 파일은 리디렉션 파일을 의미합니다.
~]# cat document.txt
abc
cde
cde
nnnaaa
aaa
aaa
aaa
dddd
Money
~]# uniq -c document.txt
1 abc
2 cde
1 nnnaaa
3 aaa
1 dddd
1 Money
✅ uniq 옵션
✅ uniq 명령어 활용
document.txt의 텍스트 내용입니다.
cat document.txt
abc
cde
cde
nnnaaa
AAA
aaa
aaa
dddd
Money
~]# uniq -ci document.txt
1 abc
2 cde
1 nnnaaa
3 AAA
1 dddd
1 Money
~]# uniq -cd document.txt
2 cde
2 aaa
✅ sort 명령어와 같이 활용하기
sort 명령어로 기본 오름차순 정렬을 하면서 몇 번 반복되는지[-c] 숫자로 표시합니다.
~]# sort document.txt | uniq -c
1 AAA
1 Money
2 aaa
1 abc
2 cde
1 dddd
1 nnnaaa