Необходимо написать простой многопоточный парсер JSON на Python
Необходимо написать многопоточный парсер - 10 потоков
Парсер должен хранить всю инфу, чтобы в случае сбой его можно было перезапустить и работать дальше.
на входе есть папка seed в которой есть текстовые файлы, в которых в каждом отдельном рядке содержится seed
необходимо взять случайный файл и получить данные с первого строка и сделать запрос, строк удалить, первый строк удалить
q=SEED - данные основывать вместо SEED, могут содержать пробилы
http://storescraperapi.com/amazon/complete.php?apikey=H4sIAAAAAAAAAKtWSs5MUbJSSsytyjPUS0xOziNK9HLBwrqORp7mviGmnkZ4S7Ohsq6SjlIqnMTS1KzkgEKcWiLhtZYQFISUhYgIu3p3eEgYtrkFItAP3jaJd1AAAA&mkt=1&q=SEED&qs=&alias=aps
Ответ от сервера должен быть только 200ОК, ответ не пустый, json
Если ошибка, или ответ не 200ОК, то сделать паузу 1 секунда
Если ответ имеет 10 результатов, то добавьте в конец файла дополнительные сееды
дополнительные сеед = сеед + все символы (листы английского алфавита, цифры и пробил)если больше 10к сеед в файле, то создать новый файл и добавить туда
Результат записывается в папке res в соответствующем папке в соответствующий CSV файл (база данных), если больше 10к строк в файле, то создайте новый файл
bookshelf;113963
-
Готовы сегодня написать вам скрипт.
Большой опыт аналогичных проектов.
Я делаю все качественно.
Обратитесь вверх!
Будем рады нашему сотрудничеству.
С уважением Виталий!
П. С Я еще раз прочитал ТЗ и имею предложение, как все сделать более оптимально.
… Готов описать свое предложение Вам в личных сообщениях
-
226 6 0 1 Здравствуйте, имею большой опыт работы с парсерами, в том числе и на json, готов выполнить вашу работу сразу после уточнения деталей.
-
1189 16 0 Доброго дня ,
У меня есть опыт в программировании в Python.
Буду рад сотрудничеству.
-
4154 123 0 Напишу вам многопоточный парсер на питоне.
есть несколько вопросов по тз
Актуальные фриланс-проекты в категории Python
AI Commenting Platform для TikTok и Instagram.Цель проекта Разработать систему, которая позволяет управлять большим количеством аккаунтов TikTok и Instagram и автоматически публиковать релевантные комментарии под выбранными видео с использованием ИИ. Основной функционал1. Управление аккаунтами Необходимо реализовать… AI и машинное обучение, Python ∙ 8 часов 12 минут назад ∙ 11 ставок |
Построить модель классификации клиентов1. Есть данные клиентов в Mongo/SQL (примерно 20 000 записей с сырыми данными). 2. Необходимо на их основе построить фичи и модель классификации клиентов на поведенческие группы. 3. Проект выполнить на Python. AI и машинное обучение, Python ∙ 2 дня 2 часа назад ∙ 33 ставки |
ИТ Автоматизация ведения VAT-отчетности
10 000 UAH
Необходимо разработать систему для автоматизации переноса данных о продажах из CRM в бухгалтерскую систему Wafeq. Система должна импортировать банковские и платежные отчеты, автоматически сверять платежи с инвойсами, формировать инвойсы для VAT-отчетности и минимизировать ручную… AI и машинное обучение, Python ∙ 2 дня 7 часов назад ∙ 43 ставки |
Инструмент сверки счетов с банком, картами и бухгалтеромТехническое задание: инструмент сверки счетов с банком, картами и бухгалтеромОбщая цель Нужен локальный инструмент (скрипт/небольшое приложение на Python), который запускается вручную раз в 1-2 месяца на моём компьютере и делает сверку между: Счетами, которые я выставил клиентам… Python, Десктопные приложения ∙ 2 дня 20 часов назад ∙ 42 ставки |
Автоматическая публикация видео в социальные сети по расписаниюТехническое задание (ТЗ) Автоматическая публикация видео в социальные сети по расписаниюОписание проекта Нужен скрипт/бот (Python предпочтительно, либо любое другое решение на ваш выбор — главное стабильность и простота поддержки), который автоматически публикует видео из папки… Python, Разработка ботов ∙ 3 дня 8 часов назад ∙ 59 ставок |