Парсер вакансий с нескольких сайтов
509 UAHЗадача: парсить вакансии с различных сайтов и выводить их списком в админке одного сайта в отдельном разделе.
(сайтов примерно 10 +/- , список будет предоставлен исполнителю)
Вопрос программисту: как будет проще, парсить вакансии в реальном времени или через определенное время? Допустим каждые 2 часа.
Необходимо:
- не парсить одну и ту же вакансию дважды (с одного и того же сайта). Т.е. когда идет повторный парсинг в другое время, надо чтоб парсер продолжал там где остановился в предыдущий раз.
- Фильтр по сайтам
- Как то прописать в фильтр исключение вакансий от кадровых агентств (возможно по номеру или названию агентств ? Возможно сделать отдельную вкладку куда можно будет прописать Номера телефонов, и парсер будет игнорировать обьявления с номерами указанными в этом списке)
- есть ли будет срабатывать защита сайта, как то обходить ее
- если сломается парсер одного из сайтов чтоб это не останавливало работу остальных, а было сообщение (уведомление) о том где что сломалось
P.S.
- Возможно ли парсить с соц сетей? Instagram (Например поиск по определенному хештегу в определенной группе). И по результату выдавать ссылку на определенное объявление.
Отзыв заказчика о сотрудничестве с Михайло С.
Парсер вакансий с нескольких сайтовХорошая контактность, ответственный.
Отзыв фрилансера о сотрудничестве с Виктором В.
Парсер вакансий с нескольких сайтовЗадача описана правильно и четко, оплата по договоренности успешная, заказчик понимает ламанный язык
10 / 10
-
372 2 1 Добрый день
У меня есть опыт писания парсеров.
Сделать на Python с использованием Селениума
Срок +-неделю, но может и быстрее (в зависимости от занятости)
По ценам договариваемся
По моему мнению, лучше раз в пару минут проверить количество вакансий и при их изменении их парсити.
-
1077 65 1 1 Добрый день. Пишите, обсудим все детали. Опыт c# более 8 лет. Имеется огромный опыт в написании парсеров. Парсер будет в виде десктопного приложения на c#. Выгрузка в любой формат файла.
Для точной оценки, нужно увидеть список сайтов с которых парсить и в какую админку грузить результат. Есть ли там API? Или сразу в базу писать?
-
А яка у вас адмінка?
-
Актуальные фриланс-проекты в категории Парсинг данных
Консультация по парсингу подписчиков Instagram-аккаунтовЗдравствуйте. Необходимо провести предварительную оценку возможности выполнения следующей задачи. У меня есть список Instagram-аккаунтов. Цель — получить контактные данные (в первую очередь email-адреса) пользователей, которые подписаны на эти аккаунты. Ранее мне встречались… Парсинг данных ∙ 2 дня 20 часов назад ∙ 12 ставок |
Нужен специалист для поиска контактов ЛПР по УкраинеНеобходимо собрать базу (или готовую базу) контактов лиц, принимающих решения (ЛПР), в компаниях Украины. Поиск и сбор информации, Парсинг данных ∙ 3 дня назад ∙ 17 ставок |
Необходимо спарсить данные из LinkedinНеобходимо спарсить данные с Linkedin по нашему списку. Для каждой записи нужно найти и собрать доступные данные, если такие есть на Linkedin профиле, включая фотографию профиля в соцсети Linkedin, email-адрес, ссылки на социальные сети, вебсайт компании, номер телефона. Все… Парсинг данных ∙ 3 дня 6 часов назад ∙ 27 ставок |
Парсинг и классификация данныхИщем разработчика для реализации системы сбора и структурирования данных из открытых источников. У нас есть база владельцев малого бизнеса в США, которая содержит имя человека, название компании, адрес и штат. Необходимо построить процесс обогащения этих записей дополнительной… Веб-программирование, Парсинг данных ∙ 3 дня 7 часов назад ∙ 41 ставка |
Свитлагата
750 UAH
Необходимо импортировать 1819 товаров из XML/YML-фида Prom.ua в OpenCart 3. Есть готовый XML-файл, который содержит названия товаров, описания, цены, фотографии, характеристики, производителей и категории. Необходимо: импортировать все товары в OpenCart 3; создать и… CMS, Парсинг данных ∙ 4 дня 10 часов назад ∙ 34 ставки |