重複画像を探す：サイズ違い・保存し直したコピーまで

まったく同じファイルしか探せないツールは、縮小したりWebPに変換したり保存し直したりしたコピーを見逃します。見た目で比べる重複検出の仕組み、どこまでできるか、どのツールがどの用途に向くかをまとめました。

重複検索ツールがコピーの大半を見逃す理由

いちばん単純な重複検索は、ファイルの中身を1バイトずつ比べるか、ファイルのチェックサムを比べます。まったく同じファイルでなければ重複と判定されません。

実際のコレクションはそうはなりません。同じ絵が、作者が上げた元のPNG、転載先の小さなJPEG、ブラウザで保存したWebP、チャットアプリで再圧縮されたコピーとして入ってきます。ファイルの比較では、全部別のファイルです。

見た目で比べる仕組み

見た目で比べる重複検出は、ファイルがどう保存されているかではなく、画像がどう見えるかを比べます。よく使われる方法が知覚ハッシュ（perceptual hash）です。

1. 画像をごく小さな白黒に縮めます。サイズや色の深さが関係なくなります。
2. 全体の構造を短い指紋に変えます。
3. 指紋同士を比べ、数か所しか違わなければ同じ画像とみなします。

これでサイズ違いのコピー、形式の変換（PNG・JPEG・WebP）、再圧縮、隅の透かしのような小さな編集まで見つかります。

大きく切り抜いた画像、左右反転した画像、大きく手を加えた画像は確実には見つかりません。そこまで変わった画像は、誠実なツールなら別の画像として扱うべきです。

重複と「よく似た画像」は別物

AI生成には三つ目のケースがあります。同じプロンプトで、手の形や表情だけ少し違うバリエーションです。コピーではないので、自動で消すと作業したものを捨てることになります。

よいやり方は、この二つを分けておくことです。本当のコピーは確認用フォルダへ。バリエーションはコレクションの中で隣同士に置いておき、目で見てお気に入りを選びます。

用途ごとのツール

重複を一度消せば済むなら、無料ツールで十分です。Art Sorterが向いているのは、重複が「整理されていないフォルダ」の症状のひとつである場合です。

Art Sorterの重複の扱い方

• 見た目で探すので、縮小・形式変換・保存し直したコピーが見つかります。
• 二つのコピーのサイズが違うときは、大きいほうが整理済みの列に残り、小さいほうが重複フォルダに移ります。
• 何も削除しません。ペアを並べて比べ、フォルダを空にするのはご自身です。
• ほぼ一色だけの画像は見た目の比較から外します。そうした画像はどれも似て見えるためです。

元画像180枚とそのプレビュー用コピーが混ざった実際のテストフォルダ360枚で、以前のファイル比較は0組、見た目の比較は181組を見つけました。

安全に片付ける手順

• まずコピーで作業するか、確認用フォルダへ移すだけのツールを使います。
• 解像度がいちばん大きいものを残します。
• 消す前にペアを並べて見ます。
• ほぼ同じバリエーションは、お気に入りを選ぶまで残しておきます。
• 確認用フォルダは、数日ふだんどおり使ってから空にします。