Парсинг цен с https://allegro.pl/ в csv
ТЗ: нужно наладить процесс автоматического парсинга цен с https://allegro.pl/ в таблицу (базово csv файл).
Нужные разделы:
Категория
Подкатегория
Название товара
Состояние (новый-б/у)
Фото (ссылками на allegro)
Цена
Локация
Доставка
-
Лучше делать программу на PHP
-
Мне интересно напишет ли кто нормальный парсер под это. Ибо тут 98% горе-специалистов, которые больше интернет-магазина на 10 тысяч позиций не парсили. После которых приходилось доделывать и переделывать всю работу.
Потому что в итоге там больше 100 миллионов товаров. Как минимум язык должен быть нормально многопоточным, поддерживать работу в несколько десятков потоков, нужно огромное количество каких-нибудь rotating proxy + в csv это складывать, учитывая что есть лимит строк в csv, которые потом может прочитать тот-же Excel. Разбивать на десятки-сотни csv придется и найти там данные займет столько же времени, сколько воспользоваться сайтом и найти там тоже самое. Как-то скучно бы написали ТЗ на столь масштабную задачу, какая ваша конечная цель? -
Мониторинг цен конкурентов
-
Актуальні фриланс-проєкти в категорії Парсинг даних
OpenCart — каталог оренди спецтехніки
6000 UAH
OpenCart — каталог оренди спецтехніки Потрібно запустити каталог оренди спецтехніки на OpenCart. Тематика: екскаватори; автовишки; навантажувачі; генератори; крани; риштування; інша будівельна техніка. Бажано, щоб у вас вже був готовий шаблон або напрацювання під… Веб-програмування, Парсинг даних ∙ 15 годин 35 секунд тому ∙ 42 ставки |
Перенести програму - слетів сервер, де була програма (офіційний дозволений парсинг державних даних)
2066 UAH
Добрий! У мене у клієнта стався даний кейс, описаний нижче. Потрібно допомогти перенести на новий сервер і протестувати програму. Краще програміст, який розбирається в парсингу. Налаштування ПЗ та серверів, Парсинг даних ∙ 18 годин 53 хвилини тому ∙ 23 ставки |
Парсинг та класифікація великого масиву зображеньПотрібно реалізувати проєкт зі збору та структурування великого масиву архітектурних зображень із відкритих вебджерел.Задача включає: автоматизований збір зображень; завантаження файлів у максимально доступній якості; класифікацію зображень за категоріями: Exterior; Interior;… Python, Парсинг даних ∙ 19 годин 21 хвилина тому ∙ 30 ставок |
Парсинг Резюме Work.ua та Rabota.uaПотрібно завантажити у форматі Excel базу актуальних резюме з Work.ua та Работа.ua. Бажано, щоб файл Excel містив такі стовпці: Ім’я Номер телефону (у форматі +380...) Електронна пошта Посада (професія) Посади, які розглядає Категорія сфери діяльності (рубрика) Галузь, у якій… Збір інформації, Парсинг даних ∙ 1 день 18 годин тому ∙ 18 ставок |
Парсинг сайтуПотрібна реалізація 4 парсерів (сайти каталоги) Є ТЗ, є приклад коду як референс. В завдання входить: Написати парсер Прикрутити проксі Логіка дедублікації (перенести логіку з прикладу) Логіка хешування по 3 полям Парсер має працювати як пайплайн з логікою, що описана… Парсинг даних ∙ 2 дні 11 годин тому ∙ 42 ставки |
Київ