Це завдання з налаштування обходу антибану: проксі, заголовки, можливі антибот-захисти. За потреби можна використовувати headless-браузер (наприклад, undetected_chromedriver), але поки не обов’язково.

2. Що буде у рішенні:
– Один .py файл, який:

завантажує сторінку OLX через вказаний проксі

підставляє робочі User-Agent, куки (якщо потрібно)

… логуватиме статус (наприклад, успішний обхід або 403)

3. Доступ до сервера не потрібен — все реалізуємо локально.

згодом можна інтегрувати цей обхід у Ваш основний парсер

Показати оригінал

Перекласти

Добрий день! Зацікавив проект з парсером для olx. Маю досвід у сфері парсингу даних та автоматизації з використанням різних бібліотек. Зможу адаптувати ваш поточний Python скрипт для обходу блокування, внести необхідні корективи для ефективної роботи без використання Selenium. У мене є ідеї щодо оптимізації запитів і зміни параметрів доступу, щоб мінімізувати ризик бана.

Мій рейт 16$ за годину. Запропоную рішення, яке можна буде запустити на вашому сервері для тестування ефективності нового підходу.

Показати оригінал

Перекласти

Доброго дня

Можу запропонувати тезнічне рішення з 2 складових:
* проксі сервіс під Лінукс (поясню детальніше)
* налаштування скрапера (робоча логіка не потрібна окрім пари момент які запропоную перевірити)

Доброго дня!
Ваш кейс добре зрозумілий — блокування OLX навіть із проксі останнім часом значно почастішали, особливо при інтенсивному парсингу.

🔧 Можу розробити .py файл, який:

працює через aiohttp + aiohttp_socks

автоматично ротує проксі з вашого proxie.json

… підмінює User-Agent, заголовки та інші сліди (включно з cookie, headers, referer)

максимально імітує запити звичайного браузера (аналог браузерного fingerprint)

перевіряє доступ до потрібного посилання

❗ Врахую, що Selenium не використовується, і запитів багато. Налаштую адаптивну затримку + поведінкову псевдовипадковість, щоб знизити ризик блокувань.
💬 Якщо є лог прикладу відповіді від OLX (403/429 чи ін.), буде корисно для більш точного налаштування.

Готовий надати .py для тестування — лише після того, як упевнюсь у його працездатності. Якщо працює — закриваємо проєкт.

Пишіть у ЛС — обговоримо деталі і підберемо оптимальне рішення для вашого парсера.

Так техзавдання де? Це ж розробка з нуля якщо враховувати що Ви сказали що код не дасте.

Привіт! Ми - SolidWay компанія, і ми готові допомогти з твоїм проектом парсинга OLX. У нас є досвід роботи з Python, включаючи бібліотеки, які ти згадував, так що ми можемо знайти рішення для обходу блокувань, з якими ти стикаєшся.

Ми розуміємо, що проблема з блокуванням може вимагати креативних підходів до роботи з проксі та user-agent, тому ми готові випробувати різні методи, аби забезпечити необхідну функціональність парсера. Наша команда уже реалізувала подібні проекти, тому ми знаємо, що робити.

Деталі, пов'язані з термінами та бюджетом, ми обговоримо після того, як уточнимо всі нюанси твого запиту. Тож, давай обговоримо, як ми можемо допомогти у вирішенні твоєї задачі!