Ubuntu: Trenger et RASKT program som kan finne duplicate filer

[Melkekartong]

Finnes det et program som finner duplikate filer på en rask måte uten å MD5/CRC/hashe hver eneste fil?

Jeg har prøvd å bruke FSLint men dette var jo utrolig tregt. Jeg kunne se for meg et program som først sjekker filstørrelser og deretter sammenligner hash (evt kjører en byte by byte comparison) av de matchende filene?

 

 

Noen som vet om et slikt program til Linux?

[kyrsjo]

www.python.org

 

 

Tips: Bruk os.path.walk() til å løpe igjennom filtreet. Ellernoesånt.

Endret 27. april 2008 av kyrsjo

[Melkekartong]

heh, akkurat, ja.. os.path.walk(). Jeg har resten av programmet klart og dèt var den manglende brikken i puslespillet!

[kyrsjo]

Post det her davel!

[Melkekartong]

Når det er ferdig.

 

Foreløpig har jeg kommet til hello world.

[kyrsjo]

Du bør definitivt vurdere å kjøpe boka "Python scripting for Computational Science" / Hans Petter Langtangen (nei, jeg har ikke INF3300 ellerhvadetnåheter...). Skikkelig gullgruve av en bok!

[Sokkalf™]

#!/bin/bash

FILELIST=(`find $1 -type f -exec md5sum '{}' \; | sort --key=1,32 | uniq -w 32 -d | awk '{print $2}'`)
for fil in ${FILELIST[@]}
do
	echo Fant duplikatfil $fil
done

 

Scriptet tar en parameter, som er pathen det begynner å lete i. F.eks parameteren /home leter gjennom /home, og / leter gjennom alt.

 

Kan sikkert gjøres mye mer effektivt enn dette.. men tror det skal funke sånn halvveis ihvertfall..!

Endret 29. april 2008 av Sokkalf^