Изменение парсера Python3
500 UAH
Здравствуйте.
Есть парсер на Python3. Работает в докере под Убунту 20.04
Парсит в БД MySQL.
Нужно в него добавить следующие функции:
1. Поддержка прокси с авторизацией.
2. Считать кол-во запросов на 1 прокcи в сутки.
К примеру, у меня есть список из 300 прокси. Я выставляют лимит запросов = 100/сутки. Как только 100 запросов с текущего прокси будет сделано, он должен брать следующий прокси. И так, пока все прокси не будут использованы либо сутки не пройдут. Если прокси закончились раньше чем прошли сутки - парсер должен стоять на паузе, пока сутки не пройдут хотя-бы для одного прокси, затем возобновлять работу.
Лимит должен быть задаваемым до старта.
Отзыв заказчика о сотрудничестве с фрилансером
Изменение парсера Python3Все выполнено отлично. Профессионально. Рекомендую!
Отзыв фрилансера о сотрудничестве с Олександром Л.
Изменение парсера Python3Всё отлично, вышла небольшая задержка.
Но заказчик всё понял, подождал.
Рекомендую, к сотрудничеству
-
1 день600 UAH
1641 23 0 1 день600 UAH
Здравствуйте, Олександр. Опыт разработки на python +1 год. Задача ясная, готов взяться сегодня
-
на чем написан парсер? Это реквест + суп, скрапи или селениум?
Откуда нужно будет брать прокси? -
Сергей, Вы видимо не внимательно прочли описание проекта.
Парсер писать не нужно - он уже написан.
Нужно в существующий парсер добавить функционал.
Прокси я покупаю сохраняю в файл.
-
Я прочитал внимательно, меня интересует на чем он реализован, так как работа с прокси разная бывает.
Насчет файла, я правильно понимаю, что его нужно будет пробрасывать в докер при каждой смене, что бы не останавливать парсинг?
-
написан на реквест + суп
на лету прокси меняться не будут, т.е. смена прокси происходит, когда парсер остановлен.
вообще, идея менять на лету мне нравиться, но по крайней мере пока эта опция не нужна
-
Актуальные фриланс-проекты в категории Python
Разработка программного обеспечения с ИИ
Необходимо разработать программное обеспечение для автоматического обнаружения, захвата и сопровождения объекта с помощью видеокамеры и поворотного механизма.Исходные данные: Видеокамера с оптикой. Поворотное устройство по двум осям (азимут/угол места). Сервоприводы с… AI и машинное обучение, Python ∙ 5 часов 53 минуты назад ∙ 9 ставок |
ТЗ НА ДОПРАЦЮВАНИЕ AI-БОТА ГЕНЕРАЦИИ ЛИЧНЫХ ПЕСЕНТЗ НА ДОПРАЦЮВАННЯ AI-БОТА ГЕНЕРАЦІЇ ПЕРСОНАЛЬНИХ ПІСЕНЬГОЛОВНА ЦІЛЬ Створити стабільний преміальний продукт, який: генерує максимально якісні персональні пісні; не вигадує факти про клієнта; працює стабільно під навантаженням; легко масштабується; дозволяє аналізувати та… Python, Разработка ботов ∙ 6 часов 58 минут назад ∙ 22 ставки |
Специалист по Excel / автоматизации процессов (Excel + желательно программирование)Ищем специалиста с ПРОДВИНУТЫМИ знаниями Excel для оптимизации существующего файла и автоматизации процессов. Будет большим преимуществом, если вы также имеете навыки программирования / VBA / Power Query / Power Automate или опыт создания сложной логики в Excel. Задачи проекта… Python, Базы данных и SQL ∙ 9 часов 57 минут назад ∙ 28 ставок |
Автоматизация процессоів через API и PhytonНиже описал текущий процесс и то, к какому результату хотелось бы прийти. Также прикладіваю файлы реалтного процесса чтобы лучше понять как он выглядит в ревльности Текущий процесс Сейчас весь процесс выполняется вручную: загрузка/выгрузка файлов, перенос данных между… AI и машинное обучение, Python ∙ 10 часов 58 минут назад ∙ 36 ставок |
Необходимо создать бота в ТГ для оплаты подписки.
2000 UAH
Необходимо создать бота в телеграме, где пользователь сможет оформить подписку на доступ к веб-камерам, которые находятся во дворе. Организовать в боте оплату двух видов подписок (на месяц и на один день). Бот должен автоматически проверять оплату и после выдавать ссылку-доступа. Python, Разработка ботов ∙ 23 часа 44 минуты назад ∙ 73 ставки |
Харьков