Незаслуженно забракованные ссылки располагаются подряд в выводе? Или хаотично? Как бы не было такого, что все ссылки с определенного момента бракуются - тогда повторные проходы вряд ли помогут...
А в консоль поочередно выводятся результаты работы каждого воркера.