Python dev, scraping expert
Здравствуйте, Ищем человека кто решит следующие задачи:
Рефакторинг системы парсеров (10 источников)
Есть система из 10 парсеров разных источников.
Нужно провести рефакторинг:
- Унифицировать архитектуру всех парсеров
- Вынести общую логику в отдельные модули
- Подготовить к интеграции с AirFlow
- Настроить еженедельное выполнение
Требуется анализ текущего кода и предложения по улучшению структуры.
Код: https://drive.google.com/file/d/1RMZsWYDLTYV3c4zkHrrUT0-tdTo7Cua4/view?usp=sharing
Доступ у БД можно так же будет пошарить, но если поднимите у себя локально будет супер . Это не разовая задача , можно считать как оплачиваемое тестовое, в результате ищем человека на part time
Требования:
Ознакомиться с кодом
Предложить и аргументировать правки к коду.
Внести правки
Поднять это все не сервере и запускать по шедуллеру
Пишите пожалуйста сразу ваш почасовой рейт и естимейт на эту задачу !
-
1825 52 0 Здравствуйте. Специализируюсь на автоматизации и парсинге информации. Заинтересован в постоянном сотрудничестве. Код посмотрел - все предельно ясно, только сейчас неправильно прописаны импорты. По базе - потребуются только данные из таблицы "urls_sitemap" - чтобы проверить работают ли парсеры.
С AirFlow еще не работал - но готов быстро разобратся
По итогу этого задания - требуется чтобы уже минимально интегрировать с AirFlow или только подготовить и запустить старый код на сервере?
Рейт: 25$ / день
Update: Уже разобрался с AirFlow - но теперь исходники уже не доступные
-
69 Здравствуйте!
Я - профессиональный Python-разработчик с большим опытом в автоматизации, парсинге, создании ботов и web-инструментов.
На моем счету более 500 проектов — от простых парсеров цен конкурентов до сложных систем, которые собирают миллионы товаров с Amazon, обходят Cloudflare, капчи, IP-блокировки и авторизации.
Я работал с такими сайтами как:
- Amazon
- Instagram
… - Facebook
- Google
- Twitter
- LinkedIn
- Walmart
и многими другими.
Технологии, с которыми я работаю:
- Python
- Requests
- BeautifulSoup
- Selenium
- Playwright
- Scrapy
- Undetected Chromedriver
- ротация IP
- Django + PostgreSQL.
Для крупных проектов создаю админ-панели и базы данных для удобной работы с собранными данными.
Также у меня есть собственная база лидов с email, телефонами и соцсетями, которая поможет ускорить ваш маркетинг или продажи.
Готов показать тестовый пример перед началом работы, чтобы вы могли оценить качество. Напишите мне, расскажите о задаче — и мы найдем лучшее решение для вашего бизнеса.
-
414 1 0 Добрый день, готов рассмотреть, парсерами занимаюсь часто на разных ЯП. И напишите лс там все обсудим детальнее
-
320 Добрый день!
У меня есть опыт разработки на Python.
Я просмотрел код и могу предложить изменить (доработать) архитектуру на Clean Architecture, а также исправить ошибки с импортами. Базу могу развернуть локально самостоятельно, но для корректной работы парсеров очень нужны именно данные из таблицы urls_sitemap.
С Airflow пока не работал, но быстро обучаюсь и уверен, что смогу подготовить систему к интеграции с Airflow. Также у меня есть опыт настройки шедулера для автоматического запуска задач.
Рейт — 7$/час.
Пишите, буду рад сотрудничеству!
-
1412 14 3 1 Здравствуйте, я просмотрела ваше задание, хотела бы взяться за реализацию. Могу работать даже по 16 часов в день, почасовая ставка 10$. Буду рада сотрудничеству.
-
512 3 1 Привет, заинтересована в работе на парт-тайме, указываю рейты и сроки выполнения (при работе 4 часа в день)
Актуальные фриланс-проекты в категории Python
Необходимо создать бота в ТГ для оплаты подписки.
2000 UAH
Необходимо создать бота в телеграме, где пользователь сможет оформить подписку на доступ к веб-камерам, которые находятся во дворе. Организовать в боте оплату двух видов подписок (на месяц и на один день). Бот должен автоматически проверять оплату и после выдавать ссылку-доступа. Python, Разработка ботов ∙ 12 часов 5 минут назад ∙ 62 ставки |
Парсинг и классификация большого массива изображенийНеобходимо реализовать проект по сбору и структурированию большого массива архитектурных изображений из открытых веб-источников.Задача включает: автоматизированный сбор изображений; загрузка файлов в максимально доступном качестве; классификацию изображений по категориям:… Python, Парсинг данных ∙ 19 часов 5 минут назад ∙ 30 ставок |
Бизнес-логикa платформы: подтверждение занятий, контроль посещаемости-и история уроков (DjangoДоработка бизнес-логики образовательной платформы: подтверждение занятий, контроль посещаемости и история уроков (Django + React) Необходимо реализовать полноценную систему подтверждения уроков, контроля посещаемости и хранения истории подтверждений. Важно Перед началом… Python ∙ 3 дня назад ∙ 29 ставок |
Доработка административной панели образовательной платформы (Django + React)Доработка административной панели образовательной платформы (Django + React) Описание проекта: Есть действующая образовательная платформа (marketplace, аналог Preply), разработанная на Django + React. Требуется доработать существующую административную панель и реализовать… Python, Веб-программирование ∙ 4 дня 21 час назад ∙ 58 ставок |
Скрипт сбора данных (выполнение JS)Добрый день, есть список ссылок на объявления 0lx, нужно написать скрипт, который будет собирать телефон. Он появляется при нажатии на кнопку "показать телефон". Желательно выполнить на python, но другие варианты тоже ок. Сколько примерно по стоимости и времени? Python, Парсинг данных ∙ 5 дней 12 часов назад ∙ 47 ставок |