Для не известных совпадающих включений через Фурье тоже можно сравнивать, но вероятность "угадывания" поменьше.
А вот "в лоб" перебирать без супер-компьютера никакого терпения не хватит, у меня вот не хватило на сравнение двух файлов 1 и 0.5 Мб, пришлось останавливать а вот 10 и 5 кб сравнил за 0.39 сек
ПоискСовпадений_10кбх5кб.jpg
ПоискСовпадений_1мбх0,5мб.jpg