중복파일 삭제하는 정보에 대한 상호공유

일단 저부터 올릴게요

다른분들도 중복파일 관리 노하우좀 댓글로 부탁드려요.

저는 보통 rss를 통해 자동 다운로드 세팅을 하고 잘 건드리지 않는데요.

이러다보면 다수의 동일 파일이 받아지곤 합니다.

파일명이 달라도 사실 시드가 다를 뿐 동일 파일인 경우도 많이 있죠.

특정 볼륨에는 중복파일이 5~10개씩 받아지기도 해요.

그래서 중복파일을 선택적 삭제 가능한 툴이 있으면 좋겠다고 생각했고

최근 사용중인 방법은 이러합니다.

패키지센터 서드파티로 synocommunity.com/ 추가하고

SynoCli File Tools 패키지를 설치합니다.

이후 jdupes 나 fdupes 를 이용하여 파일 중복을 삭제합니다.

예를들면 이런거죠.

root@NAS:/# jdupes -rd volume3/
Scanning: 5892 files, 2636 items (in 1 specified)
[1] volume3/video/2.2022.KOREAN.1080p.WEBRip.x265-VXT/RARBG_DO_NOT_MIRROR.exe
[2] volume3/video/A.2004.DC.KOREAN.1080p.BluRay.H264.AAC-VXT/RARBG_DO_NOT_MIRROR.exe
[3] volume3/video/A.2022.KOREAN.1080p.WEBRip.x265-VXT/RARBG_DO_NOT_MIRROR.exe
[4] volume3/video/A.2019.1080p.WEB.X264-MEGABOX[rarbg]/RARBG_DO_NOT_MIRROR.exe
[5] volume3/video/B.1986.JAPANESE.720p.BluRay.H264.AAC-VXT/RARBG_DO_NOT_MIRROR.exe
[6] volume3/video/BaJAPANESE.1080p.BluRay.H264.AAC-VXT/RARBG_DO_NOT_MIRROR.exe
[7] volume3/video/B.2020.KOREAN.1080p.BluRay.H264.AAC-VXT/RARBG_DO_NOT_MIRROR.exe
[8] volume3/video/F.1080p.WEBRip.x265-RARBG/RARBG_DO_NOT_MIRROR.exe
[9] volume3/video/O.2017.1080p.WEBRip.x264-RARBG/RARBG_DO_NOT_MIRROR.exe
[10] volume3/video/P2020.1080p.BluRay.x265-RARBG/RARBG_DO_NOT_MIRROR.exe
[11] volume3/video/S.KOREAN.1080p.BluRay.H264.AAC-VXT/RARBG_DO_NOT_MIRROR.exe
[12] volume3/video/Sa.KOREAN.1080p.WEBRip.x264-RARBG/RARBG_DO_NOT_MIRROR.exe
[13] volume3/video/S.2019.1080p.BluRay.x265-RARBG/RARBG_DO_NOT_MIRROR.exe
[14] volume3/video/T.KOREAN.1080p.WEBRip.x264-VXT/RARBG_DO_NOT_MIRROR.exe
[15] volume3/video/T.KOREAN.PROPER.1080p.WEBRip.x265-VXT/RARBG_DO_NOT_MIRROR.exe
[16] volume3/video/T.KOREAN.1080p.BluRay.H264.AAC-VXT/RARBG_DO_NOT_MIRROR.exe
[17] volume3/video/T.KOREAN.1080p.BluRay.H264.AAC-VXT/RARBG_DO_NOT_MIRROR.exe
[18] volume3/video/T.2018.1080p.WEBRip.x265-RARBG/RARBG_DO_NOT_MIRROR.exe
[19] volume3/video/T.2021.KOREAN.1080p.WEBRip.x264-VXT/RARBG_DO_NOT_MIRROR.exe
[20] volume3/video/U.CHINESE.1080p.BluRay.H264.AAC-VXT/RARBG_DO_NOT_MIRROR.exe

이런 중복을 찾아줍니다. 이 때 선택을 할 수 있는데요

모두삭제(D), 모두남김(A), 심볼릭링크로 대체(S), 선택한 파일만 남기고 모두삭제(1-20)

위 파일은 필요 없는 파일이기 때문에 D를 누르면 됩니다.

그러나 중복으로 받아진 같은 내용의 다른 파일명을 가진 자료들은 하나하나 선택을 해주던가

장르별로 분류를 해둔것의 경우 심볼릭 링크로 대체하기도 합니다.

... 제가 말주변이 없어서 jdupes 사용법은 chatGPT가 대신 설명 드리도록 하겠습니다.

jdupes는 Linux와 유닉스 시스템에서 중복 파일을 찾는 데 사용되는 명령 줄 도구입니다. jdupes를 사용하여 중복 파일을 찾고 삭제하는 방법을 설명하겠습니다.

jdupes 설치하기
jdupes는 대부분의 Linux 배포판에서 기본적으로 설치되어 있습니다. 하지만 설치되어 있지 않은 경우, 패키지 관리자를 사용하여 설치할 수 있습니다. 예를 들어, Ubuntu나 Debian 계열의 배포판에서는 다음과 같은 명령어로 설치할 수 있습니다:

csharp
Copy code
sudo apt-get install jdupes

(시놀로지의 경우 상술한대로 서드파티 패키지센터를 추가하시고 패키지센터 커뮤니티에서 SynoCli File Tools를 설치합니다)

중복 파일 찾기
jdupes를 사용하여 중복 파일을 찾으려면, 명령줄에서 다음과 같이 입력합니다:

bash

(시놀로지의 경우 ssh이죠)
jdupes -r /path/to/directory

(시놀로지의 경우 수도권한이 필요하니 sudo -i 하시고 cd /로 이동하세요)

이 명령어는 /path/to/directory 경로의 모든 하위 디렉토리에서 중복 파일을 찾습니다.

(전 볼륨별로 카테고리가 달라서 영상이 있는 볼륨3만 대상으로 진행했습니다 jdupes -rd volume3/ )

중복 파일 삭제
중복 파일을 삭제하려면, 다음과 같은 명령어를 사용합니다:

bash (시놀로지에서는 ssh의 sudo -i 상태에서...)
jdupes -rd /path/to/directory
이 명령어는 /path/to/directory 경로의 모든 하위 디렉토리에서 중복 파일을 찾아서, 사용자에게 확인을 받은 후 중복 파일을 삭제합니다.

중복 파일을 자동으로 삭제하려면, -d 대신 -D 옵션을 사용할 수 있습니다:

bash (ssh 에서 sudo -i에서...)
jdupes -rD /path/to/directory (전 이거 비추합니다. 중복파일을 일괄삭제하고 하나만 남기는건 ㅠㅠ)
이 명령어는 /path/to/directory 경로의 모든 하위 디렉토리에서 중복 파일을 찾아서, 자동으로 중복 파일을 삭제합니다. 주의할 점은, 이 명령어를 실행하기 전에 중복 파일을 복사하여 백업하는 것이 좋습니다.

위와 같이 jdupes를 사용하여 중복 파일을 찾고 삭제할 수 있습니다.