Duplikate finden

Moin Zusammen

Ich suche aktuell eine Software (Win) mit der sich Duplikate (JPEG/RAW) aufspüren lassen. Idealerweise wird der Inhalt mitgeprüft/verglichen.

Da ich aktuell nicht gross zum Fotografieren komme, besteht keine gültige Adobe Lightroom Lizenz. Von einem kleinen Kaufpreis bin ich aber nicht abgeschreckt, muss nicht zwingend Freeware sein.

Es handelt sich um RAW's folgender Kameras:

- Nikon (D80, D90, D600, D750, D800, D810)
- Canon (5DS)
- Sony (A7R, A7II, A7RII, A7Riv)
- Leica Q(1)
- Leaf (Aptus II, Credo 60)
- Phase One (P45+, IQ180)
- Hasselblad (H4D40, X1D)
- Sigma FP l

Die kursiven-Kameras wären toll, jedoch kein Muss.

Die gefundenen Threads hier sind doch etwas älter, vielleicht habt ihr eine aktuelle Lösung zu empfehlen.

Danke vorab!

Digikam (-> Similarity)

- Alldup -> http://www.alldup.de/download_alldup.php bzw. https://www.heise.de/download/product/alldup-11402 oder
- TreeSize (s. https://www.jam-software.de/treesize/duplikat_suche.shtml)

Damit finden sich jeweils doppelt vorhandene Dateien, unabhängig von einer Kamera.

Oder meintest Du ein Tool, was das zum RAW gehörende JPEG findet?

Digikam werde ich mir heute Abend gleich mal anschauen; OS und der Changelog geht bis hin zu 2001 - das gefällt!

Treesize habe ich mal in der Free Version genutzt, wusste nicht das da ein DupFinder drin ist.

@wind_change: Nein, schon klassische Duplikate von Dateien

Danke euch!

fbphotography schrieb:

Treesize habe ich mal in der Free Version genutzt, wusste nicht das da ein DupFinder drin ist.

Zum Vergrößern anklicken....

Die Duplikatsuche ist nur in der Pro-Version vorhanden. Ich kann die Investition aber durchaus empfehlen, da der Hersteller seine Software auch gut pflegt (habe ebenfalls Ultrasearch aus dem gleichen Hause). Allerdings gefällt mir nicht so gut, dass die Dateisuche sich in einem eigenen Fenster öffnet.

Visipics ist eine Freeware für diesen Zweck. Für JPGs kann ich sie empfehlen, bei RAWs habe ich keine Erfahrungen.

Ich hatte vor einigen Tagen einen ähnlichen Anwendungsfall, ich hatte über die Zeit einige Ordner von iCloud Sicherungen angehäuft.

Meine Lösung war vielleicht etwas aufwändiger, hat aber funktioniert:

Ich habe zunächst ein Verzeichnis erstellt, die Dateien aus dem ersten Verzeichnis rein kopiert und umbenannt usw. So hatte ich hinterher alle Dateien in einem Ordner. Hab dann mit ExactFile die Prüfsummen berechnen lassen. Dann wird es kreativ... Habe mir die Prüfsummen nach Excel geholt und habe nach Prüfsummen sortiert. Dann habe ich mir über Verketten einen Textvorlage gebaut, um die individuellen Dateien zu kopieren. Wenn die Prüfsumme der aktuellen Zeile der vorherigen entspricht, nichts machen, sonst kopieren. Das ganze dann hinterher klassisch in eine Batch Datei kopiert und ausgeführt. Ruck zuck wurden dann alle einmaligen Prüfsummen in einen Ordner kopiert.
Auffällig war, dass ich hinterher immer noch einige (augenscheinliche) Duplikate hatte, da waren aber die Prüfsummen unterschiedlich.

Prinzipiell ist der Weg über die Prüfsumme gefährlich. Es gibt unendlich viele denkbare Dateien mit der selben Prüfsumme. (Sonst könnte man viel Speicherplatz sparen)

Hab ein total mächtiges Tool zum Dupletten finden. Muß nur nachschauen wie ed heißt.

Georgius schrieb:

Prinzipiell ist der Weg über die Prüfsumme gefährlich. Es gibt unendlich viele denkbare Dateien mit der selben Prüfsumme. (Sonst könnte man viel Speicherplatz sparen)

Zum Vergrößern anklicken....

In der Theorie schon - in der Praxis bei einem lokalen Bildarchiv mit ein paar hundertausend Bildern ist eine Kollision allerdings schon recht unwahrscheinlich.
Man kann zusätzlich zur Prüfsumme auch noch die Dateigröße mit abgleichen. Dann ist für diesen Zweck die Wahrscheinlichkeit, dass durch zwei gleiche Prüfsummen ein false-positive gelöscht wird endgültig derartig gering, dass zumindest ich persönlich das Risiko für absolut vertretbar halte.

unnötiges Vollzitat entfernt, scorpio

Das lässt sich im Alldup wunderbar kombinieren - z. B. Dateiinhalt und Byte für Byte... siehe http://www.alldup.de/alldup_hilfe/search_file_content.php bzw. http://www.alldup.de/alldup/alldup_screenshots.php (und ja, damit dauert es dann halt entsprechend länger).

Zudem erstellt es einen auch eine Liste, die man sich dann ja hier und da ansehen kann - bevor man wild Dateien löschen lässt.
Insofern hat man hierüber in meinen Augen eine mächtige Möglichkeit Duplikate zu finden und sie dann bei Bedarf zu bereinigen.

Auch die Glary Utilities free (für PC-Hygiene ) lassen sich auf Duplikate Duplikate hetzen

Eddy

Georgius schrieb:

Prinzipiell ist der Weg über die Prüfsumme gefährlich. Es gibt unendlich viele denkbare Dateien mit der selben Prüfsumme. (Sonst könnte man viel Speicherplatz sparen)

Zum Vergrößern anklicken....

Sinnvoll ist eine Verbindung von Dateigrösse und Prüfsumme. Da eine gute Bildverwaltung eigentlich beides speichern sollte, liessen sich über eine SQL-Abfrage Dateien herausfiltern, bei denen beides identisch ist.

rodinal schrieb:

Sinnvoll ist eine Verbindung von Dateigrösse und Prüfsumme.

Zum Vergrößern anklicken....

Eben - wobei selbst ein einfacher Hash mit MD5 bei dem Szenario schon so gut wie keine Kollisionen erwarten lässt. Kombiniert mit der Dateigröße ist man eigentlich restlos save.

Alldump war was ich grmeint hatte