Budget: 5000 RUB Deadline: 3 days
Добрый день, Александр, я на постоянной основе занимаюсь парсингом, в том числе сайтов с защитой.
Насчет того чтобы собрать 40к ссылок и не занимать компьютер подолгу - тут есть пару вариантов:
1. Можно сделать онлайн версию парсера и посадить ее на хостинг. Она сама будет парсить сайт раз в сутки (или раз в двое суток) и выдавать готовый результат - вам даже не понадобится свой компьютер включать.
2. Программа для парсинга на вашем компьютере в многопотоке. Тут все зависит чисто от мощности вашего компьютера и скорости интернета, но я рекомендую первый вариант.
Насчет защиты от парсинга и капчи - я с защитой и капчей дело уже имел не раз. Минут 10 смотрел как работает сайт - никакой защиты там не нашел.
По вопросам пишите в лс.
