Frantishek
Advanced Member | Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Цитата: И чтоб количество одновременных загрузок было не постоянным, а тоже задавалось диапазоном | Еще неплохо что-то вроде генератора случайных чисел, на указанные переменные, чтобы выбор значения в диапазоне допустимого производился спонтанно (туда же и подмену юзерагент). Как минимум, что нужно здесь, это возможность определить сколько потоков направить на один проект, наверняка несложно реализовать. Просто жалко качать в один поток, обходя баны, когда следом на очереди еще такие же проекты стоят, а вот если каждому назначить по одному потоку, и далее общее кол-во на всех, вот так можно было это дело оптимизировать. Надеюсь, Олег обратит внимание на эту фишку. Насчет перебора проксей через подключаемые списки - тоже нормальная тема, также предложил бы в туду на будущее (чтобы можно было указать через какое число загруженных страниц производить автозамену прокси). Цитата: М-м-м, вот если бы картинки становились в очередь сразу за скачанной страницей и скачивались без задержек, как при реальном открытии страницы... | Да, тоже, думаю, не сложно, как опцию. Короче, со стороны, все не сложно |