Автоматизация браузера / Веб-скрейпинг для интерфейса Ahrefs

Ищем специалиста по автоматизации браузера и веб-скрапингу с практическим опытом работы с Ahrefs UI или подобными SaaS-платформами, защищенными Cloudflare и современными anti-bot системами.

📌 Описание задачи

Необходимо реализовать стабильное автоматизированное извлечение данных из Ahrefs UI без использования Ahrefs API, через управление реальным браузером.

Необходимо получать SEO-данные, доступные в интерфейсе Ahrefs после авторизации, в частности:

• анкоры (anchors)
• беклинки (backlinks)
• referring pages
• и другие связанные линковые данные

Решение должно стабильно работать при высоких нагрузках (до ~10 000 доменов в день) и поддерживать параллельную обработку (concurrency) без блокировок и банов.

🛠 Общие требования

• Автоматизация реального браузера (headless или headful)
• Устойчивое функционирование с Cloudflare / anti-bot защитой
• Работа с авторизованными сессиями
• Возможность автоматизации логина и 2FA (email или TOTP)
• Запуск в Docker-контейнере
• Поддержка concurrency и контролируемого throughput
• Чистый, поддерживаемый код (Python или Node.js)

🎯 Критерии отбора

Предпочтение отдается кандидатам, которые уже имеют рабочие решения или подтвержденный опыт работы с Ahrefs UI или подобными защищенными сервисами.

Наличие PoC, демо или продакшн-опыта будет большим плюсом. После подтверждения релевантного опыта готовы предоставить полное ТЗ и рассмотреть долгосрочное сотрудничество.

📩 От вас в отзыве желательно указать:

• Опыт работы с Ahrefs UI или аналогичными платформами
• Использованные инструменты и подходы (Playwright, Puppeteer, CDP, stealth и т.д.)
• Наличие демо, PoC или примеров кода
• Опыт работы с высокими нагрузками и concurrency
• Опыт автоматизации логина и 2FA