Розробити парсер для Chrome Web Store
5000 UAHВсім привіт, шукаю виконавця для написання парсеру.
Далі цей скрипт буде доповнюватися, можливо іншими магазинами екстеншинів, можливо додатковим функціоналом, тому розраховую на періодичну співпарцю.
Якщо робили подібні парсери, або є в портфоліо схожі проєкти, вказуйте, це буде великим плюсом.
Бюджет орієнтовний, тому вказуйте ваші орієнтовні прогнози.
Дякую!
Ось попереднє ТЗ, фінальне вже після детального обговорення з виконавцем.
===============
Розробити парсер для Chrome Web Store, який має парсити всі можливі дані з магазину, як наприклад:
Детальна інформація по екстеншину/теми
Назва
Опис
Категорія
Відгуки
…і багато іншого
Скачати архів екстеншену та отримати додаткову інформацію з нього (я надам інструмент який дає таку можливість, або допоможу налаштувати)
Зберегти файл
Розмір файлу
Переклади екстеншена
Дані з маніфесту
Категорії та індекс по категоріям
Колекції та індекс по колекціям
Індекс видачі по ключовим в пошуковому дропдауні (ключові слова будуть попередньо передані скрипту)
Індекс видачі по ключовим в результаті пошуку (ключові слова будуть попередньо передані скрипту)
Технічні вимоги:
Скрипт має запускатись з консолі
Підтримка багатопотоковості (так як екстеншинів та даних багато, потрібно оптимізувати парсинг)
Налаштувати збереження даних в Postgresql та CSV
Парсер має вміти вирішувати різні блокування, такі як каптча чи блокування по IP, за допомогою проксі чи інших інструментів
Впровадити систему логування для відстеження стану парсеру під час виконання
Надавати звіти після виконання скрипту (кількість оброблених екстеншинів, категорій, ключових слів, тощо)
Буде плюсом:
Гарне знання баз даних, та оптимізації їх, щоб зменшити кількість дублів даних при повторному парсингу
Парсинг не по розмітці, а по запитам до бекенду (так як саме для цього партера це буде важливо)
Досвід в написанні подібних парсерів
-
786 27 2 2 Вітаю! Маю великий досвід в написанні парсерів та ботів. Добре знайомий з можливостями обходу капч, підміни IP та User-Agent, застосування проксі та завантаження файлів з сайтів. Хорошим варіантом буде реалізувати це на Селеніумі, можна спробувати через запити, але цей варіант програє в контексті обходу блокування. Ви плануєте задіювати гугл аккаунти чи парсити без них? Можемо детально обговорити проєкт у особистих повідомленнях.
-
8193 63 1 Всім привіт! Готовий взятися за написання парсера для Chrome Web Store. Чекаю на можливість обговорити деталі проекту та розпочати роботу. Дякую!
-
2912 44 0 Добрий день.
Можу реалізувати на nodejs
----------------------------------
-
8867 60 0 1 Доброго дня!
Готові створити парсер для Chrome Web Store.
Є досвід розробки подібних ботів.
Пишемо на Python.Займаємо 9 місце на платформі по цій мові.
Будемо раді співпрацювати!
-
5000 грн за розв'язок капчі? 😂 😅
-
Актуальні фриланс-проєкти в категорії Бази даних та SQL
Система обліку, планування та продажу для грибної ферми
27 000 UAH
Ось повний, фінальний текст Технічного завдання (ТЗ). Він об'єднує всі ваші вимоги: 16 камер, 20 контрагентів, розклад по днях, облік тари, розрахунок рентабельності та обов'язковий поділ на три сорти грибів. Ви можете повністю скопіювати цей текст і надсилати розробникам або… Бази даних та SQL, Управління клієнтами та CRM ∙ 10 годин 9 хвилин тому ∙ 43 ставки |
Зовнішній звіт 1С 8.3 — прогноз залишків товарів
1000 UAH
Потрібен зовнішній звіт (.erf) для 1С:Підприємство 8.3 (конфігурація уточнюється). Що має робити: Витягувати залишки товарів з бази Аналізувати історію продажів за останні 30 днів Рахувати середній темп продажів по кожному товару Визначати через скільки днів товар закінчиться… Бази даних та SQL, Управління клієнтами та CRM ∙ 10 годин 45 хвилин тому ∙ 10 ставок |
Аудит безпеки веб-додатків та бази даних для кастомного CRM — спеціаліст з BaaS / бази даних як API (пенетраціяОгляд проекту Ми експлуатуємо спеціально розроблену платформу управління взаємовідносинами з клієнтами (CRM), яка обслуговує два сервісні бізнеси на єдиній системі. Це сучасний веб-додаток на JavaScript, підтримуваний базою даних як послугою (BaaS) і розгорнутий на безсерверній… Бази даних та SQL, Тестування та QA ∙ 23 години 9 хвилин тому ∙ 9 ставок |
Синхронізація баз данихСинхронізація програм Microsoft Access та CRM SalesDrive. Передача даних з CRM в Microsoft Access на першому етапі (зміна статусу воронки). Передача даних з Microsoft Access в CRM на другому етапі (зміна статусу в програмі). Бази даних та SQL ∙ 1 день 5 годин тому ∙ 10 ставок |
Налаштування системи резервного копіювання та оптимізація серверної інфраструктуриМета робіт:Забезпечити надійне збереження даних CRM-системи та додатку шляхом впровадження автоматизованої системи резервного копіювання (Backups), а також провести ряд серверних доробок для підвищення стабільності, безпеки та продуктивності інфраструктури. DevOps, Бази даних та SQL ∙ 2 дні 3 години тому ∙ 23 ставки |