Старший инженер данных в Amazon с опытом (Проект)
Ищем Senior Data Engineer для построения автоматизированной системы по сбору данных.
Основные задачи:
Автоматизировать процесс получения отчетов Amazon и других ресурсов.
Разработать и поддерживать решения для браузерной автоматизации с использованием Selenium, Playwright и Puppeteer.
Управление прокси-серверами и методами отпечатков браузеров для обеспечения эффективного сбора данных.
Работа с облачными средами для масштабируемой обработки данных.
Использование API для параллельной загрузки данных.
Хранение и управление полученными данными в SQL-базах данных.
Использование Requests и BeautifulSoup для эффективного веб-скрапинга.
Требования:
Опыт автоматизации получения отчетов Amazon.
Высокая компетентность в Python для написания скриптов и автоматизации.
Практический опыт работы с браузерной автоматизацией (Selenium, Playwright, Puppeteer).
Глубокое понимание управления прокси-серверами и технологий отпечатков браузеров.
Опыт настройки расписания задач и работы с облачными средами.
Экспертные знания API-интеграций для параллельного получения данных.
Хорошее знание SQL для управления базами данных.
Знание Requests и BeautifulSoup для веб-скрапинга.
-
33 дня3333 UAH
1069 10 0 33 дня3333 UAH
Имею огромный опыт скрепинга и массу заверешнных проектов с использованием запросов(requests, aiohttp) и автоматизации с помощью браузера(playwright, pyppeteer, selenium), обход разных видов защиты(akamai, cloudflare, perimeter x) и капч(reCAPTCHA, image captcha, geetest icon captcha, geetest v3/v4 slide captcha, hCAPTCHA, tiktok captcha, funcaptcha, worldfirstcaptcha, cloudflare captcha), выполнение логина и сбор данных под авторизацией(используя куки, токены и сессии)
-
Дот нет не підійде?
-
Актуальные фриланс-проекты в категории Python
Разработка программного обеспечения с ИИ
Необходимо разработать программное обеспечение для автоматического обнаружения, захвата и сопровождения объекта с помощью видеокамеры и поворотного механизма.Исходные данные: Видеокамера с оптикой. Поворотное устройство по двум осям (азимут/угол места). Сервоприводы с… AI и машинное обучение, Python ∙ 20 часов 44 минуты назад ∙ 13 ставок |
ТЗ НА ДОПРАЦЮВАНИЕ AI-БОТА ГЕНЕРАЦИИ ЛИЧНЫХ ПЕСЕНТЗ НА ДОПРАЦЮВАННЯ AI-БОТА ГЕНЕРАЦІЇ ПЕРСОНАЛЬНИХ ПІСЕНЬГОЛОВНА ЦІЛЬ Створити стабільний преміальний продукт, який: генерує максимально якісні персональні пісні; не вигадує факти про клієнта; працює стабільно під навантаженням; легко масштабується; дозволяє аналізувати та… Python, Разработка ботов ∙ 21 час 49 минут назад ∙ 30 ставок |
Автоматизация процессоів через API и PhytonНиже описал текущий процесс и то, к какому результату хотелось бы прийти. Также прикладіваю файлы реалтного процесса чтобы лучше понять как он выглядит в ревльности Текущий процесс Сейчас весь процесс выполняется вручную: загрузка/выгрузка файлов, перенос данных между… AI и машинное обучение, Python ∙ 1 день 1 час назад ∙ 42 ставки |
Необходимо создать бота в ТГ для оплаты подписки.
2000 UAH
Необходимо создать бота в телеграме, где пользователь сможет оформить подписку на доступ к веб-камерам, которые находятся во дворе. Организовать в боте оплату двух видов подписок (на месяц и на один день). Бот должен автоматически проверять оплату и после выдавать ссылку-доступа. Python, Разработка ботов ∙ 1 день 14 часов назад ∙ 78 ставок |
Бизнес-логикa платформы: подтверждение занятий, контроль посещаемости-и история уроков (DjangoДоработка бизнес-логики образовательной платформы: подтверждение занятий, контроль посещаемости и история уроков (Django + React) Необходимо реализовать полноценную систему подтверждения уроков, контроля посещаемости и хранения истории подтверждений. Важно Перед началом… Python ∙ 4 дня 2 часа назад ∙ 30 ставок |
Киев