Я использую komparator - sudo apt-get install komparator (Ubuntu 10.04+) - как GUI-инструмент для поиска дубликатов в ручном режиме.