XseoN.ru

Различие в параметре within

Это что за параметр?
Какое значение оптимально у него выставлять?

Какое значение оптимально у него выставлять?

По-умолчанию программа формирует шаблон для Яндекс с within=777, соответственно значение 777

Все-таки хочется, что бы отсеивание дублей доменов происходило "на лету", во время парсинга.

И искорените уже проблему зависающих потоков! Хоть как-нибудь.

Все-таки хочется, что бы отсеивание дублей доменов происходило "на лету", во время парсинга.

Сделать удаление дублей "на лету" - это производить после 50-100 урлов проверку на наличие дублей доменов и строк - парсинг 1кк будет длиться вечность.
По поводу потоков уже озвучивал много раз.