Парсер української панелі оголошень OLX.ua
Розроблена програма (в формі консольної програми), що здійснює збирання всієї основної інформації про оголошення сайту OLX (включаючи, номери телефонів користувачів).Спочатку написана на мові Python для платформи Windows, хоча портування під Linux особливих труднощів не повинно скласти.Для роботи програми необхідно надати список облікових записів OLX, з яких буде здійснюватися аутентифікація для доступу до захищених даних через API.Додаткові прокси не потрібні, оскільки, якщо можливо, використовуються ресурси мережі TOR.Отримані дані зберігаються у форматах JSON, CSV та XLSX.Є можливість зберігати також зображення з оголошень.Відеодемонстрація роботи: https://youtu.be/hUFKrMFm7wc
Ця програма є проектом з відкритим кодом (open source) і розповсюджується за вільною ліцензією.Джерельний код доступний в репозиторії GitHub: https://github.com/nik-panekin/olx_scraper
Ключові слова: #python, #requests, #beautifulsoup4, #selenium, #web-scraping, #parsing, #olx
Ця програма є проектом з відкритим кодом (open source) і розповсюджується за вільною ліцензією.Джерельний код доступний в репозиторії GitHub: https://github.com/nik-panekin/olx_scraper
Ключові слова: #python, #requests, #beautifulsoup4, #selenium, #web-scraping, #parsing, #olx