Разработчик парсера
Компания Group Working занимается надежным трудоустройством в Европейском Союзе. Мы сотрудничаем с многими партнерами в таких странах, как Германия, Бельгия, Австрия, Франция и Нидерланды. Для расширения нашей деятельности и оптимизации процесса поиска потенциальных партнеров и работников необходимо разработать парсер, который автоматически собирать контактную информацию с различных европейских сайтов по трудоустройству.
На сегодняшний день мы находимся в поиске разработчика-парсера
Объем работ
Разработка парсера, который будет:
○ Собирать контактную информацию с определенных сайтов.
○ Фильтровать вакансии по странам и профессиям.
○ Сохранять собранные данные в структурированном формате.
Настройка системы для непрерывного сбора данных в реальном времени.
Тестирование и внедрение парсера в рабочую среду.
Целевые сайты для парсинга
● OLX
● Flagma
● Jooble
(Возможность добавления других сайтов по согласованию)
Целевые страны
● Германия
● Бельгия
● Австрия
● Франция
● Нидерланды
Функциональные требования
● Реальное время сбора данных: парсер должен работать онлайн и собирать свежие вакансии без задержек.
● Фильтрация по критериям: обеспечить сбор данных только с определенных стран и по заданным профессиям.
● Масштабируемость: возможность добавления новых сайтов и профессий для парсинга.
● Сохранение данных: результаты парсинга должны сохраняться в базе данных или экспортироваться в форматах CSV/Excel.
Технологические требования
● Язык программирования: Python, Node.js или другая соответствующая технология, которая обеспечит необходимую функциональность и производительность.
● База данных: MySQL, PostgreSQL или NoSQL решение для хранения собранных данных, также рассматривается вариант сохранения данных в JSON, после чего преобразования их в читаемый формат (Текстовый файл) или же подключить парсер к телеграм боту для ежедневного уведомления.
● Фреймворки и библиотеки: использование современных инструментов для парсинга веб-сайтов (например, Scrapy, BeautifulSoup).
Требования к исполнителю
● Опыт разработки парсеров и работы с веб-скрейпингом.
● Умение работать с базами данных и веб-технологиями.
● Готовность к сотрудничеству и обсуждению деталей проекта.
Заработную плату обсуждаем во время собеседования.
Если Вам интересна наша предложение, с удовольствием с вами пообщаюсь по поводу сотрудничества.
-
Здравствуйте, имею большой опыт в data/web scraping, также, работаю с различными базами данных: mysql, postgres, redis (обычно для динамических данных), s3. Может обсудить все детали сотрудничества в личных сообщениях. Буду рада сотрудничеству.
-
8867 60 0 1 Добрый день. Готов выполнить ваш проект. Имею большой опыт работы с парсерами, а именно парсинг с OLX, Jooble и других платформ.
Пишу на Python, занимаю 3-е место на платформе.
Ознакомьтесь с портфолио:Freelancehunt
Пишите, договоримся и я начну работать
Актуальные фриланс-проекты в категории Базы данных и SQL
Система учета, планирования и продажи для грибной фермы
27 000 UAH
Это полный, финальный текст Технического задания (ТЗ). Он объединяет все ваши требования: 16 камер, 20 контрагентов, расписание по дням, учет тары, расчет рентабельности и обязательное деление на три сорта грибов. Вы можете полностью скопировать этот текст и отправлять… Базы данных и SQL, Управление клиентами и CRM ∙ 1 день 5 часов назад ∙ 51 ставка |
Внешний отчет 1С 8.3 — прогноз остатков товаров
1000 UAH
Нужен внешний отчет (.erf) для 1С:Предприятие 8.3 (конфигурация уточняется). Что должно делать: Извлекать остатки товаров из базы Анализировать историю продаж за последние 30 дней Считать средний темп продаж по каждому товару Определять через сколько дней товар закончится… Базы данных и SQL, Управление клиентами и CRM ∙ 1 день 6 часов назад ∙ 11 ставок |
Аудит безопасности веб-приложения и базы данных для пользовательской CRM — специалист по BaaS / Database-as-API (пентест)Обзор проекта Мы управляем индивидуально разработанной платформой управления взаимоотношениями с клиентами (CRM), которая обслуживает два сервисных бизнеса на одной системе. Это современное веб-приложение на JavaScript, поддерживаемое базой данных как сервис (BaaS) и развернутое… Базы данных и SQL, Тестирование и QA ∙ 1 день 18 часов назад ∙ 9 ставок |
Синхронизация баз данныхСинхронизация программ Microsoft Access и CRM SalesDrive. Передача данных из CRM в Microsoft Access на первом этапе (изменение статуса воронки). Передача данных из Microsoft Access в CRM на втором этапе (изменение статуса в программе). Базы данных и SQL ∙ 2 дня назад ∙ 11 ставок |
Настройка системы резервного копирования и оптимизация серверной инфраструктурыЦель работы: Обеспечить надежное сохранение данных CRM-системы и приложения путем внедрения автоматизированной системы резервного копирования (Backups), а также провести ряд серверных доработок для повышения стабильности, безопасности и производительности инфраструктуры. DevOps, Базы данных и SQL ∙ 2 дня 23 часа назад ∙ 24 ставки |