Создать парсер kidstaff
444 PLNСоздание самого парсера со следующими требованиями:
1. Парсинг запускаетсья ежедневно (в полночь по Киеву), проходится по всем категориям, что нас интересуют, по всем страницам пагинации и получает объявления, которые ранее не парсились.
2. Парсить объявления, по файлами сведения записывает их в XML-файл с текущей датой.
3. Парсер запускается в docker-compose, одним из контейнеров является база данных (на выбор) с возможностью доступа извне контейнера.
4. Парсер ежедневно записывает XML-файл в смонтированную директорию на завтрашний день, но не перезаписывая старые, и позволяет на следующий день забрать по HTTP актуальной файл, начиная с 00:00 по Киеву.
5. Поля cena и currency не обозначены обязательными (звездочка у тегу) на сайте, но таковы во всех категориях.
6. Пример XML-файла: https://drive.google.com/file/
7. Поля таблицы в БД: URL, ID (с сайта, а не собственный), категория (всегда будет "detskiy-mir-X-kidstaff.xml"), дата и время создания, дата и время удаления (во время заливки null).
8. Ежедневно также необходимо парсить файл на удаление. Нужно проходиться по тем объявлениях, которые еще не обозначены в БД как удаленные и, если оно уже деактивировано или удалено на сайте, записывать текущую дату как дату удаления. Пример файла удаления (принцип сохранения и выдачи по URL) точно такой же, как и у файла с объявлениями: https://drive.google.com/file/
9. Если объявление не устраивает условии заполнения любого из тегов (не свелось город / цена / нет имени автора / нет номера телефона / прочее), то оно пропускается.
10. Вопрос о необходимости прокси на их предоставление решается лично.
11. Парсинг должен быть многопоточным (хотя бы 100-200 потоков).
-
862 9 0 Сделаю на Ruby ( Sinatra + Nokogiri / Mechanize / Watir , Sneakers , Whenever ) + Docker
Контакты:
Skype: unionups
Telegram: @unionups
или в личку))
-
621 19 0 могу реализовать nodejs либо php
Skype : sergey.gm79
telegram: @mardoc
-
1005 30 3 1 Сделаю быстро и качественно, есть большой опыт в написании парсеров. Точный срок после обсуждения
-
бюджет занижен раз так в 6-7
-
только написал про низкий бюджет, как заказчик увеличил прайс в 2 раза.
Смешно =) -
Aktualne zlecenia dla freelancerów w kategorii Programowanie stron internetowych
Konfiguracja analityki GTM dla GetCourse z powiązaniem danych reklamowych z zamówieniemPotrzebne jest skonfigurowanie analityki GTM dla platformy edukacyjnej na GetCourse. Zadanie: za pomocą Google Tag Manager zbierać dane reklamowe użytkownika z URL i cookie oraz przypisywać je do konkretnego użytkownika/zamówienia w GetCourse. Trzeba zbierać i przechowywać takie… Programowanie stron internetowych ∙ 4 godziny 22 minuty temu ∙ 9 ofert |
Przygotować stronę do uruchomienia wp+woo
106 PLN
Witam. Szukam specjalisty od wp+woocommerce. Trzeba przygotować stronę do uruchomienia. Sprawdzić działanie systemu płatności, rejestrację, kategorie, poprawić zdjęcia produktów i opisy, poprawne SEO. Na stronie jest mniej niż 30 produktów, ale trzeba będzie stworzyć nowe… Programowanie stron internetowych ∙ 7 godzin 6 minut temu ∙ 34 oferty |
Google Tag Manager (po stronie serwera) przez Stape
82 PLN
Potrzebny specjalista z doświadczeniem w konfiguracji Google Tag Manager (server-side) przez Stape. Celem jest sprawdzenie obecnej konfiguracji i błędów w łańcuchu Stape-Shopify, menedżerów tagów. Należy zobaczyć, w czym tkwi błąd i go naprawić. Musi być śledzenie zakupów,… Programowanie stron internetowych, Reklama kontekstowa ∙ 9 godzin 38 minut temu ∙ 10 ofert |
Potrzebuję pilnie uzyskać zapytania POST / GET / PUT z aplikacji mobilnej TikTokW zasadzie. Należy wydobyć zapytania POST / GET / PUT z aplikacji mobilnej TikTok Nawet nie trzeba do końca niczego odwracać, ponieważ podpisy są w internecie itd. Ale byłoby też super Cała autoryzacja (Wysyłanie danych/potwierdzenie przez e-mail i wprowadzenie kodu, jeśli to… Programowanie stron internetowych, Aplikacje desktopowe ∙ 15 godzin 44 minuty temu ∙ 18 ofert |
Funkcja wyszukiwania produktów na podstawie obrazuNależy opracować i zintegrować na stronie funkcję wyszukiwania produktów na podstawie obrazu.Co należy zrealizowaćPrzycisk „Wyszukiwanie po zdjęciu” na stronie.Ładowanie obrazu przez użytkownika: JPG.Wyszukiwanie wizualnie podobnych produktów w katalogu.Wyświetlanie wyników w… PHP, Programowanie stron internetowych ∙ 16 godzin 21 minut temu ∙ 39 ofert |