Здравствуйте,
Мы ищем высококвалифицированного специалиста по извлечению данных с подтвержденным опытом работы с системами, защищенными Imperva WAF.
Ваша задача:
Получить идентификаторы записей из нашего API
Запросить защищенную электронную систему доступа к данным, используя эти идентификаторы
Получить детальные представления записей через онлайн-интерфейс или конечные точки бэкенда
Извлечь пять структурированных секций данных на каждую запись (Секции 1–5)
Сохранить полный HTML-ответ для каждой секции
Отправить собранные HTML-данные на наш API-эндпоинт для дальнейшей обработки
Требования к производительности:
Минимальная пропускная способность: 40 000 записей в день на один VPS
Непрерывная, стабильная работа
Эффективная обработка сессий, ограничений по скорости и механизмов защиты от злоупотреблений
Технические требования:
Способность обойти или работать вокруг защит Imperva WAF (403, вызовы, поведенческое обнаружение)
Решение должно работать на нашем VPS
Технологический стек, методология и стратегия выполнения полностью на усмотрение подрядчика
Надежная обработка ошибок и логика повторных попыток
Мы предоставляем:
Доступ к резидентным IP
Доступ к API для ввода (идентификаторы записей) и вывода (HTML-данные)
Критерии приемки:
Достижение как минимум 40k обработанных записей в течение 24 часов
Стабильная работа в течение 4 последовательных дней
Отсутствие постоянной блокировки или деградации (например, постоянные ответы 403)
Пожалуйста, подавайте заявку только если у вас есть реальный опыт работы с:
Средами, защищенными Imperva
Системами извлечения данных высокого масштаба, уровня производства
Мы ждем ваши заявки.
