Пакетная проверка уникальности текста

[beyond]

Есть список урлов, допустим в тхт-файле.
Задача пакетно проверить уникальность текста. У кого-какие мысли?

[Владимир75]

В программе еткст, есть возможность проверить пакетно уникальность до 200 страниц одновременно, а вот с разных сайтов, не знаю такой бесплатной возможности.