Senior Data Engineer з Amazon досвідом (Проект)
Шукаємо Senior Data Engineer для побудови автоматизованої системи по сбору даних.
Основні задачі:
Автоматизувати процес отримання звітів Amazon та інших ресурсів.
Розробити та підтримувати рішення для браузерної автоматизації з використанням Selenium, Playwright і Puppeteer.
Керування проксі-серверами та методами відбитків браузерів для забезпечення ефективного збору даних.
Робота з хмарними середовищами для масштабованої обробки даних.
Використання API для паралельного завантаження даних.
Зберігання та управління отриманими даними у SQL-базах даних.
Використання Requests і BeautifulSoup для ефективного веб-скрапінгу.
Вимоги:
Досвід автоматизації отримання звітів Amazon.
Висока компетентність у Python для написання скриптів та автоматизації.
Практичний досвід роботи з браузерною автоматизацією (Selenium, Playwright, Puppeteer).
Глибоке розуміння управління проксі-серверами та технологій відбитків браузерів.
Досвід налаштування розкладу завдань та роботи з хмарними середовищами.
Експертні знання API-інтеграцій для паралельного отримання даних.
Добре знання SQL для управління базами даних.
Знання Requests і BeautifulSoup для веб-скрапінгу.
-
33 дні3333 UAH
1045 10 0 33 дні3333 UAH
Маю величезний досвід скрепінгу та масу завершених проектів з використанням запитів (requests, aiohttp) та автоматизації за допомогою браузера (playwright, pyppeteer, selenium), обхід різних видів захисту (akamai, cloudflare, perimeter x) та капч (reCAPTCHA, image captcha, geetest icon captcha, geetest v3/v4 slide captcha, hCAPTCHA, tiktok captcha, funcaptcha, worldfirstcaptcha, cloudflare captcha), виконання логіна та збір даних під авторизацією (використовуючи куки, токени та сесії)
-
Дот нет не підійде?
-
Актуальні фриланс-проєкти в категорії Python
Розробка програмного забезпечення для керування iPhone через USB-кабель з ПК
10 000 UAH
Потрібно розробити програму для Windows, яка дозволяє підключати iPhone з jailbreak через USB-кабель і керувати ним з комп’ютера. Основний функціонал: Підключення iPhone через USB. Програма повинна швидко розпізнавати підключений iPhone і працювати через кабель, щоб… C та C++, Python ∙ 8 годин 53 хвилини тому ∙ 12 ставок |
BuzzPost автоматизація Facebook під ІзраїльПроект вже є і він працює - задача вирішити питання по обмеженню фб, при кількості постів на годину більше 3-4 (з 7 ранку до 12 ночі) акаунти клієнтів обмежуються фб. сайт - https://buzzpost.co.il/ Також пошукати дірки в логіці і в самому проекті і виправити їх, знову ж логіка… Python, Робота з клієнтами ∙ 1 день 5 годин тому ∙ 12 ставок |
Створення Тік-ток ферми з генерацією доходу
27 000 UAH
в пошуках людини, яка може написати софт для ферми Тік Ток, щоб ми змогли генерувати трафік, отримувати дохід. Шукаємо готове рішення з повним циклом. Python, Розробка ботів ∙ 4 дні тому ∙ 16 ставок |
AI Коментуюча Платформа для TikTok та Instagram.Мета проекту Розробити систему, яка дозволяє керувати великою кількістю акаунтів TikTok та Instagram і автоматично публікувати релевантні коментарі під вибраними відео з використанням ШІ. Основний функціонал1. Управління акаунтами Необхідно реалізувати можливість підключення… AI та машинне навчання, Python ∙ 5 днів 7 годин тому ∙ 23 ставки |
Побудувути модель калсифікації клієнтів1. Є дані клієнтів в Mongo/SQL (приблизно 20 000 заисів із сирими даними). 2. Необхідно на їх основі побудувати фічі та модель класифікації клієнтв на поведінкові групи. 3. Проект виконати на Python. AI та машинне навчання, Python ∙ 7 днів 1 година тому ∙ 46 ставок |
Київ