Обход 429 ошибок (рейтлимит)
Есть сайт, к которому летит огромное количество запросов ( запросы асинхронные ) летят они для того, чтобы собирать информацию и вернуть к клиенту. Один запрос возвращает информацию за 30 мсс+-, после 100 запросов сайт вешит 429 ошибок, то есть рейтлимит.
Питание несанкционированное (без API).
Сейчас используется определенное количество прокси, но мы ищем другой вариант.
Необходимо . Если не обойти, то увеличить количество запросов, отправляемых на пункт, при этом не теряя в скорости.
Прокси, сессии, хости, TLS и все, что вы можете предложить для решения.
-
33 Доброго дня ,
В частном сообщении могу отправить способы решения этой проблемы.
Готовы с вами связаться
-
Добрий день! А підскажете, що за ресурс? Цікаво з предметною областю ознайомитись)
-
429 помилка - це 98% реакція на ip адресу, тож збільшення кількості проксі є найлогічнішим з варіантів. Ну ще, звичайно, треба на вашу конкретну реалізацію дивитись, може ви десь недодивились.
-
Ну, поперше, вам не власться зберегти швидкість. Вам треба згенерувати помилку, зробити перевірку, якщо код 429, то прописати retry-after: секунди, або виконати зміну проксі, перед тим почистивши сессію. А взагалі так, треба бачити ресурс та реалізацію
-
Доброго дня, маю 12 пунктів як позбутися цієї проблеми.
Якщо цікаво пишіть в ПП. Чекаю вашої відповіді.
-
Актуальные фриланс-проекты в категории Python
Настройка двусторонней интеграции WhatsApp с Odoo CRMЗдравствуйте! Ищем специалиста для реализации технического задания по настройке двусторонней интеграции мессенджера WhatsApp с CRM-системой Odoo. ⚠️ Важное техническое уточнение: Официальный WhatsApp Business API (WABA) не рассматривается. Необходимо внедрить стабильное «серое»… Python, Веб-программирование ∙ 4 часа 58 минут назад ∙ 18 ставок |
Парсинг данных через мобильное APIИщу человека с опытом парсинга данных через мобильное API, для парсинга e-commerce, rozetka и аналоги Задачи: 1. Перехват трафика мобильного приложения (Android) настройка прокси, анализ запросов 2. Определение нужных API endpoints куда идут запросы, какие headers… Python, Парсинг данных ∙ 2 дня 1 час назад ∙ 30 ставок |
Найти товарный фид (Google Merchant XML) для сайта на OpenCart
700 UAH
Необходимо найти прямую ссылку на действующий товарный фид (XML) конкурента для Google Merchant Center Платформа (CMS): OpenCart / ocStore Найти оригинальный фидТребования к результату: Рабочая ссылка на XML-файл Python, Парсинг данных ∙ 7 дней 10 часов назад ∙ 29 ставок |
Розработка Тик-Ток фермы (контент-завод)Необзодимо разработать систему для централизованного управления несколькими TikTok-аккаунтами с автоматической публикацией контента, использованием индивидуальных прокси и имитацией естественной активности аккаунтов. Функциональные требования1. Управление аккаунтами Добавление… Python, Разработка ботов ∙ 7 дней 22 часа назад ∙ 22 ставки |
Улучшить работу Claude Code и работа с написанием софтаСейчас разрабатываю СРМ и Аналитику, софт. Делаю через Клод Код, но понимаю что результаты не лучшие в плане изменений. Есть 2 задачи - Нужно помочь сделать пресет по навыкам, мд и так далее чтобы улучшить качество. Взять проверенные с которыми работали, а не с интернета… AI и машинное обучение, Python ∙ 8 дней 4 часа назад ∙ 28 ставок |