Доработка программы для парсинга
12 106 UAHНеобходимо доработать уже готовую программу для парсинга цен, сделаную в рамках проэкта https://freelancehunt.com/project/parsing-tsin-iz-dvoh-saytiv/1356870.html
1. Помочь выбрать польский хостинг установить программу на хостинг, чтобы можно было войти на сервер и запустить программу с любого ПК, используя какой-нибудь удаленный доступ или что-то вроде этого.
2. Разделить парсинг на два отдельных сайта, чтобы не получать потенциальных проблем з разными названиями городов и т.п.
Создать две таблицы в БД на хостинге, в котором будет список городов для парсинга alab и diag. Я смогу их модифицировать простыми запросами SQL при необходимости.
Добавить возможность запускать парсинг отдельно для alab и diag.
3. Хранить результаты парсинга в базе даных. Базу нужно создать на купленом хостинге, и записывать туда данные в таком самом виде, как сладируем в excel файл сейчас.
4. Логи парсинга также хранить в отдельной таблице в базе даных. Изменить форму записи логов на предложенную в файле ниже.
5. Складировать результаты поэтапно, один город спарсили – положили в БД, чтобы не ожидать конца парсинга всех городов.
6. Реализовать контроль выполенния парсига. Нужно быть уверенным что система не даст сбой и выполнит полный парсинг (планируется запускать парсинг на 40-50 городов для каждого сайта).
7. Если система будет запрашивать что-то у пользователя или выводить какую-то информацию - делать это на английском языке, в первой версии программы кнопки работы с программой были на русском.
Если есть доп вопросы задавайте, чтобы не было много правок. По готовности работы планирую проверять парсинг на 50 городов, поэтому проверка займет немного времени.
Приложения 1
Актуальные фриланс-проекты в категории Парсинг данных
База сайтов на woocommerceНеобходимо собрать базу украинских сайтов интернет-магазинов на woocommerce с контактами, которые указаны на сайтах. Только работающие сайты (индикатор: обновление каталога/контента, рабочий домен) Формат таблицы - адрес сайта, номер телефона, e-mail. Парсинг данных ∙ 15 часов 4 минуты назад ∙ 18 ставок |
Создать дашборд в https://airtable.com/ по результативности рекламных креативов из facebook adsПолноценное ТЗ https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Базы данных и SQL, Парсинг данных ∙ 2 дня 5 часов назад ∙ 17 ставок |
Создание файла Exel для загрузки товаров на сайты других партнеров.Меня интересует, чтобы сделать таблицу Excel со всеми параметрами. Вот сайт - https://heiztechnik.com.ua/ И позиции, которые интересуют, чтобы были перенесены : Ручные котлы : 1) TIS UNI 15-95 кВт (10) шт 2)TIS HARD 150-500 кВт (7) шт Пеллетные котлы: 1)TIS PELLET 15-95 кВт… Парсинг данных ∙ 2 дня 9 часов назад ∙ 34 ставки |
Требуется разработчик для парсинга каталога и автоматизации импорта данныхПодробное ТЗ в прикрепленном документе прошу в отклике указать ориентировочную стоимость и сроки реализации есть ли опыт работы с парсингом крупных каталогов какие возможные сложности или ограничения вы видите в данной задаче Базы данных и SQL, Парсинг данных ∙ 2 дня 12 часов назад ∙ 39 ставок |
Найти товарный фид (Google Merchant XML) для сайта на OpenCart
700 UAH
Необходимо найти прямую ссылку на действующий товарный фид (XML) конкурента для Google Merchant Center Платформа (CMS): OpenCart / ocStore Найти оригинальный фидТребования к результату: Рабочая ссылка на XML-файл Python, Парсинг данных ∙ 2 дня 17 часов назад ∙ 22 ставки |