중복 이미지 찾기, 크기만 다른 사본과 다시 저장한 사본까지

똑같은 파일만 찾는 프로그램은 크기를 줄이거나 WebP로 바꾸거나 다시 저장한 사본을 놓칩니다. 그림으로 비교하는 중복 찾기가 어떻게 되는지, 어디까지 되는지, 어떤 도구가 어떤 일에 맞는지 정리했습니다.

중복 찾기 프로그램이 사본을 대부분 놓치는 이유

가장 단순한 중복 찾기는 파일 내용을 한 글자씩 비교하거나, 파일의 체크섬을 비교합니다. 완전히 같은 파일이어야만 중복으로 잡힙니다.

실제 모음은 그렇지 않습니다. 같은 그림이 작가가 올린 원본 PNG로 한 번, 퍼 간 곳에서 작은 JPEG로 한 번, 브라우저에서 저장한 WebP로 한 번, 메신저를 거쳐 다시 압축된 사본으로 한 번 들어옵니다. 파일 비교로는 전부 다른 파일입니다.

그림으로 비교하는 방법

그림 기준 중복 찾기는 파일이 어떻게 저장됐는지가 아니라 그림이 어떻게 생겼는지를 비교합니다. 흔한 방법이 지각 해시(perceptual hash)입니다.

1. 그림을 아주 작은 흑백으로 줄입니다. 크기와 색 깊이가 상관없어집니다.
2. 전체 구조를 짧은 지문으로 바꿉니다.
3. 지문끼리 비교해서 몇 칸만 다르면 같은 그림으로 봅니다.

이렇게 하면 크기만 다른 사본, 형식 변환(PNG, JPEG, WebP), 재압축, 구석의 워터마크 같은 작은 수정까지 잡힙니다.

많이 잘라 낸 그림, 좌우를 뒤집은 그림, 크게 고친 그림은 확실히 잡지 못합니다. 그 정도로 달라진 그림은 정직한 도구라면 다른 그림으로 봐야 맞습니다.

중복과 비슷한 그림은 다릅니다

AI 생성에는 세 번째 경우가 있습니다. 같은 프롬프트에서 손 모양이나 표정만 조금 다른 변형입니다. 사본이 아니기 때문에 자동으로 지우면 작업한 것을 버리게 됩니다.

좋은 방법은 둘을 나눠 두는 것입니다. 진짜 사본은 확인용 폴더로 보내고, 변형은 모음 안에 서로 붙여 두었다가 눈으로 마음에 드는 것을 고릅니다.

어떤 일에 어떤 도구

중복만 한 번 지우면 되는 거라면 무료 도구로 충분합니다. Art Sorter는 중복이 "정리 안 된 폴더"의 한 증상일 때 쓸 만합니다.

Art Sorter가 중복을 다루는 방식

• 그림이 어떻게 생겼는지로 찾기 때문에 크기를 줄였거나 형식을 바꿨거나 다시 저장한 사본이 잡힙니다.
• 두 사본의 크기가 다르면 큰 쪽이 정리된 줄에 남고, 작은 쪽이 중복 칸으로 갑니다.
• 아무것도 지우지 않습니다. 짝을 나란히 비교하고, 비우는 건 직접 합니다.
• 거의 한 가지 색뿐인 그림은 그림 비교에서 뺍니다. 그런 그림은 서로 다 비슷해 보이기 때문입니다.

원본 180장과 그 미리보기 사본이 섞인 실제 시험 폴더 360장에서, 예전의 파일 비교 방식은 0쌍을 찾았고 그림 비교는 181쌍을 찾았습니다.

안전하게 치우는 순서

• 먼저 사본으로 작업하거나, 확인용 폴더로 옮기기만 하는 도구를 씁니다.
• 해상도가 가장 큰 쪽을 남깁니다.
• 지우기 전에 짝을 나란히 봅니다.
• 거의 같은 변형은 마음에 드는 걸 고를 때까지 둡니다.
• 확인용 폴더는 며칠 평소처럼 써 본 뒤에 비웁니다.