Розробка програми для парсингу
12 189 UAH
1. Допомогти вибрати польський хостинг встановити програму на хостинг, щоб можна було увійти на сервер і запустити програму з будь-якого ПК, використовуючи який-небудь віддалений доступ або щось подібне.
2. Розділити парсинг на два окремих сайти, щоб не отримувати потенційних проблем з різними назвами міст і т.п.
Створити дві таблиці в БД на хостингу, в якій буде список міст для парсингу alab і diag. Я зможу їх модифікувати простими запитами SQL за необхідності.
Додати можливість запускати парсинг окремо для alab і diag.
3. Зберігати результати парсингу в базі даних. Базу потрібно створити на купленому хостингу, і записувати туди дані в такому самому вигляді, як зберігаємо в excel файлі зараз.
4. Логи парсингу також зберігати в окремій таблиці в базі даних. Змінити форму запису логів на запропоновану в файлі нижче.
5. Зберігати результати поетапно, одне місто спарсили – поклали в БД, щоб не чекати кінця парсингу всіх міст.
6. Реалізувати контроль виконання парсингу. Потрібно бути впевненим, що система не дозволить збій і виконає повний парсинг (планується запуск парсингу на 40-50 міст для кожного сайту).
7. Якщо система буде запитувати щось у користувача або виводити якусь інформацію - робити це англійською мовою, в першій версії програми кнопки роботи з програмою були на російському.
Якщо є додаткові питання, задавайте, щоб не було багато правок. По готовності роботи планую перевіряти парсинг на 50 міст, тому перевірка займе трохи часу.
Додатки 1
Актуальні фриланс-проєкти в категорії Парсинг даних
Парсинг даних через мобільне APIШукаю людину з досвідом парсингу даних через мобільне API, для парсингу e-commerce, rozetka та аналоги Завдання: 1. Перехоплення трафіку мобільного додатку (Android) налаштування проксі, аналіз запитів 2. Визначення потрібних API endpoints, куди йдуть запити, які headers… Python, Парсинг даних ∙ 20 годин 7 хвилин тому ∙ 22 ставки |
Шукаю програміста або вайб-кодера для автоматизації збору даних 2https://drive.google.com/file/d/14tP5XWJB9acV4gn_cJrFwMpihUj3EbQz/view?usp=sharing я випадково на ту ссылку послав Веб-програмування, Парсинг даних ∙ 22 години 28 хвилин тому ∙ 30 ставок |
Створити дашборд у https://airtable.com/ по результативності рекламних креативів з facebook adsПовноцінне ТЗ https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Бази даних та SQL, Парсинг даних ∙ 5 днів 17 годин тому ∙ 19 ставок |
Створення файлу Exel для завантаження товарів на сайти інших партнерів.Мене цікавить щоб зробити табличку Exel з повністю всіма параметрами. Ось сайт -https://heiztechnik.com.ua/ І позиціії які цікавлять щоб були перенесенні : Ручні котли : 1) TIS UNI 15-95 кВт(10) шт 2)TIS HARD 150-500 кВт(7) шт Пелетні котли: 1)TIS PELLET 15-95 кВт(10) шт 2)TIS… Парсинг даних ∙ 5 днів 21 година тому ∙ 37 ставок |
Потрібен розробник для парсингу каталогу та автоматизації імпорту данихПодробне ТЗ в прикріпленому документі прошу в відповіді вказати орієнтовну вартість і терміни реалізації чи є досвід роботи з парсингом великих каталогів які можливі складнощі або обмеження ви бачите в даному завданні Бази даних та SQL, Парсинг даних ∙ 6 днів тому ∙ 42 ставки |
Warszawa