Разработать парсер объявлений с сайта https://gancxadebebi.ge/ru/
5000 UAHТехническое задание (ТЗ) на разработку парсера объявлений с сайта https://gancxadebebi.ge/ru/
Цель:
Создать парсер объявлений с сайта https://gancxadebebi.ge/ru/, который будет собирать определенные данные и передавать их по API.
Требования:
Сайт для парсинга:
Собираемые данные:
- Город
- Регион
- Категория
- Подкатегория
- Номер телефона (или несколько номеров, если указаны)
- Дата добавления обьявления
Формат передачи данных:
- Все собранные данные должны передаваться по API.
- Формат данных: JSON.
- Пример структуры JSON:
jsonКопировать код{
"city": "Тбилиси",
"region": "Картли",
"category": "Недвижимость",
"subcategory": "Аренда квартир",
"phone_numbers": ["+995123456789", "+995987654321"]
}
API для передачи данных:
- Указать URL API для передачи данных (будет предоставлен позже).
- Метод передачи данных: POST.
Алгоритм работы парсера:
- Парсер должен собирать все объявления с сайта, разбивая их на меньшие категории в случае ограничения на количество страниц (например, если отображается максимум 100 страниц по 15 объявлений на каждой, необходимо дробить на подкатегории).
- После полного сбора данных, парсер должен запускаться раз в сутки для сбора новых объявлений.
Технические требования:
- Поддержка многопоточности для ускорения процесса парсинга.
- Возможность работы через прокси для обхода блокировок (обьявлений не много, возможно не потребуется)
- Обработка ошибок и логирование (механизмы для повторной попытки в случае неудачной передачи данных или недоступности сайта).
Частота обновления данных:
- Парсер должен запускаться каждые 24 часа для сбора новых данных.
- Возможность ручного запуска для экстренного обновления данных.
Дополнительные требования:
- Должна быть возможность расширения функционала парсера в будущем (добавление новых полей, изменение логики сбора данных).
- Документация по установке и запуску парсера.
- Комментарии в коде для лучшего понимания логики работы.
- Парсер должен работать на сервере под управлением операционной системы Linux.
Этапы разработки:
- Разработка и тестирование парсера.
- Интеграция с API для передачи данных.
- Тестирование полного цикла работы парсера.
- Передача документации и исходного кода.
Сроки выполнения:
- Разработка и тестирование парсера: [10 дней]
- Интеграция с API и тестирование: [10 дней]
-
1 день5000 UAH
1783 28 2 2 1 день5000 UAH
Добрый день.
Есть большой опыт в создании ботов.
Цена и сроки зависят от деталей проекта.
Буду рад сотрудничеству.
Хорошего дня.
-
1 день20 000 UAH
8193 63 1 1 день20 000 UAH
Добрый день!
Я готов помочь вам с реализацией парсера для сбора данных с сайта https://gancxadebebi.ge/ru/ и передачи их по API. С нетерпением жду возможности обсудить все детали и приступить к работе!
-
10 дней10 000 UAH
3356 70 1 10 дней10 000 UAH
Здравствуйте.
Занимаюсь написание парсеров с нуля.
При создании софта использую JavaScript.
С проектом, сайтом ознакомился, готов обговорить более предметно в личных
-
10 дней10 000 UAH
1963 47 7 2 10 дней10 000 UAH
Здравствуйте!
У меня есть значительный опыт в разработке парсеров и автоматизации процессов. Я готов создать парсер объявлений с сайта minda.city, который будет собирать и передавать данные по API согласно вашему техническому заданию.
Мои навыки включают:
• Парсинг данных с использованием библиотек, таких как BeautifulSoup и Requests, для эффективного сбора данных.
• Реализацию многопоточности для ускорения процесса парсинга.
• Настройку работы через прокси для обхода блокировок.
… • Обработку ошибок и логирование для обеспечения надежности и устойчивости парсера.
• Форматирование данных в JSON и их передачу по API методом POST.
Готов обсудить детали проекта, сроки и стоимость в личных сообщениях.
С уважением, Павел
-
10 дней5000 UAH
85 10 дней5000 UAH
Работаю с парсерами на C# .NET пишу по windows если вам это и требуется давайте свяжемся и приступим к выполнению.
-
3 дня5100 UAH
726 9 1 3 дня5100 UAH
Добрый день! Ваш проект выглядит очень перспективным. Готов начать работу и выполнить его на высшем уровне.
-
10 дней10 000 UAH
683 3 0 10 дней10 000 UAH
Готов взять в работу, у меня уже готовые парсеры фильмов https://github.com/merelyigor/HDrezka-Parser с сайтов с фильмами, где парсятся все фильмы и видео потоки, описание и вся информация, также разработал парсер компаний Европы, где также миллионы данных о различных бизнес-компаниях, адреса, телефоны и т. д., разрабатываю парсеры на php + bash для легкости и простоты использования на серверах без виртуализации браузеров Selenium и т. д., также делал интеграцию с БД и сайтом на WordPress, где сразу во время парсинга данные сохранялись в созданные посты, нюансы можно обсудить.
Готов обсудить бюджеты, но с изменением дедлайнов, также заметил, что у вас несколько задач на парсеры, я мог бы сделать все сразу в одном настраиваемом парсере
Мое резюме https://djinni.co/q/351767df01/
Также LinkedIn https://www.linkedin.com/in/merely-igor/
Актуальные фриланс-проекты в категории Парсинг данных
Создать дашборд в https://airtable.com/ по результативности рекламных креативов из facebook adsПолноценное ТЗ https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Базы данных и SQL, Парсинг данных ∙ 5 часов 16 минут назад ∙ 7 ставок |
Создание файла Exel для загрузки товаров на сайты других партнеров.Меня интересует, чтобы сделать таблицу Excel со всеми параметрами. Вот сайт - https://heiztechnik.com.ua/ И позиции, которые интересуют, чтобы были перенесены : Ручные котлы : 1) TIS UNI 15-95 кВт (10) шт 2)TIS HARD 150-500 кВт (7) шт Пеллетные котлы: 1)TIS PELLET 15-95 кВт… Парсинг данных ∙ 9 часов 24 минуты назад ∙ 24 ставки |
Требуется разработчик для парсинга каталога и автоматизации импорта данныхПодробное ТЗ в прикрепленном документе прошу в отклике указать ориентировочную стоимость и сроки реализации есть ли опыт работы с парсингом крупных каталогов какие возможные сложности или ограничения вы видите в данной задаче Базы данных и SQL, Парсинг данных ∙ 12 часов 17 минут назад ∙ 29 ставок |
Найти товарный фид (Google Merchant XML) для сайта на OpenCart
700 UAH
Необходимо найти прямую ссылку на действующий товарный фид (XML) конкурента для Google Merchant Center Платформа (CMS): OpenCart / ocStore Найти оригинальный фидТребования к результату: Рабочая ссылка на XML-файл Python, Парсинг данных ∙ 17 часов 34 минуты назад ∙ 19 ставок |
Парсинг товаров с супермаркетовНужен специалист (парсинг + Google Sheets + автоматизация). Цель: Создать систему автоматического получения и обновления цен на продукты питания из супермаркетов Сильпо и NOVUS с выводом данных в Google Sheets. Что необходимо реализовать: Создать основную Google Sheets таблицу с… Парсинг данных, Поиск и сбор информации ∙ 1 день 1 час назад ∙ 41 ставка |
Запорожье