Разработка скрипта на Python для автоматизации сбора данных из коммерческого реестра Министерства юстиции Словацкой Республики.
Скрипт использует:
requests для получения веб-страниц,
BeautifulSoup для парсинга HTML,
ThreadPoolExecutor для многопоточности и ускорения обработки,
xlsxwriter и openpyxl для сохранения данных в Excel.
Основные задачи:
Обойти ограничение ресурса на количество записей, возвращаемых за один запрос.
Реализовать итеративный и оптимизированный процесс парсинга данных.
Результаты:
Успешно собрано и обработано более 300 000 записей.
Решение продемонстрировало высокую масштабируемость и надежность.
Данные подготовлены в формате, удобном для анализа.
Скрипт использует:
requests для получения веб-страниц,
BeautifulSoup для парсинга HTML,
ThreadPoolExecutor для многопоточности и ускорения обработки,
xlsxwriter и openpyxl для сохранения данных в Excel.
Основные задачи:
Обойти ограничение ресурса на количество записей, возвращаемых за один запрос.
Реализовать итеративный и оптимизированный процесс парсинга данных.
Результаты:
Успешно собрано и обработано более 300 000 записей.
Решение продемонстрировало высокую масштабируемость и надежность.
Данные подготовлены в формате, удобном для анализа.