Написать парсер для сайта.
Будет список доменов в базе
вот пример tvpager.ru
Парсер заходит на
https://www.similarweb.com/website/tvpager.ru
Берет
Global Rank
Country Rank
Category Rank
Total Visits
Avg. Visit Duration
Pages per Visit
Bounce Rate
ИЗ Traffic Sources
пишет тоже в базу эти проценты
Direct
Referrals
Search
и тд
между запросами нужны задержки
Так же писать в базу где мало трафика
https://www.similarweb.com/website/wmos.ru
пример
"Traffic Overview
We’re sorry but...
We currently lack sufficient data to show complete estimations for this website. Rest assured, we are working tirelessly to provide the world with the most reliable data about every website and every app. If you are the owner of wmos.ru, you can connect your site’s Google Analytics, to present your data on SimilarWeb."
Это надо как то в базе помечать, что статитстики на сайте мало.
Так же нужно учесть, если парсить обычными средствами php сайт банет через 5-10 запросов.
Самому с компьютера через браузер, без лимит запросов.
-
160 13 1 Доброго времени суток. Готов выполнить ваш заказ. Сделаю все быстро и качественно. Писать буду на Python (библиотека requests для запросов и BeautifulSoup для парсинга).
-
111 Здравствуйте!
Могу реализовать на Python. На счёт банов можете не беспокоиться. Вывод в любой удобный для вас формат. Срок обсудим конкретно договариваясь об выполнении.
Примеры последних парсеров:
1) Парсинг электронных адресов и имён в несколько процессов с выводом в формат .csv:
https://github.com/RomanKhudobei/Journal-Parser
2) Парсинг транзакций криптовалюты с выводом в базу данных MySQL:
https://github.com/RomanKhudobei/CryptoProject
…
Надеюсь на сотрудничество
С уважением, Роман.
-
700 19 0 Сам парсер на NodeJS. Вызов откуда удобно, даже из PHP. База - MySQL или другая, детали можно обговаривать.
С обходом блокировок проблем не будет. Количество одновременных запросов будет зависеть от железа, на котором парсер будет запущен.
Скайп wfoojjaec, прочие контакты и реквизиты:
https://wfoojjaec.eu.org/ru/contacts.html
-
1309 32 0 Добрый день, сделаю используя Python + Selenium если нужно то + прокси.
Есть масса аналогичных проектов
Спасибо
-
273 15 0 1 Добрый день. Готов реализовать на python. Срок указан с запасом.
-
143 Готов взяться за выполнение.
Пишите, обсудим детали
в личку или сюда:
[email protected]
-
322 22 0 1 Пишите обсудим подробнее в Skype: casper6132
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
Актуальные фриланс-проекты в категории Python
Olx
1789 UAH
Мне нужен бот OLX, который извлекает номер телефона из объявления до его публикации! Он ДОЛЖЕН быть неактивным — конкретно в статусе "ожидание". У меня есть записи ожидающих предложений; мне просто нужно извлечь номер из них. Парсинг данных, Python ∙ 15 минут назад ∙ 5 ставок |
Разработка программного обеспечения для управления iPhone через USB-кабель с ПК
10 000 UAH
Необходимо разработать программу для Windows, которая позволяет подключать iPhone с jailbreak через USB-кабель и управлять им с компьютера. Основной функционал: Подключение iPhone через USB. Программа должна быстро распознавать подключенный iPhone и работать через кабель,… C и C++, Python ∙ 1 день 2 часа назад ∙ 16 ставок |
BuzzPost автоматизация Facebook под ИзраильПроект уже есть и он работает - задача решить вопрос по ограничению фб, при количестве постов в час более 3-4 (с 7 утра до 12 ночи) аккаунты клиентов ограничиваются фб. сайт - https://buzzpost.co.il/ Также поискать дыры в логике и в самом проекте и поправить их, опять же логика… Python, Работа с клиентами ∙ 1 день 23 часа назад ∙ 14 ставок |
AI Commenting Platform для TikTok и Instagram.Цель проекта Разработать систему, которая позволяет управлять большим количеством аккаунтов TikTok и Instagram и автоматически публиковать релевантные комментарии под выбранными видео с использованием ИИ. Основной функционал1. Управление аккаунтами Необходимо реализовать… AI и машинное обучение, Python ∙ 6 дней 1 час назад ∙ 23 ставки |
Построить модель классификации клиентов1. Есть данные клиентов в Mongo/SQL (примерно 20 000 записей с сырыми данными). 2. Необходимо на их основе построить фичи и модель классификации клиентов на поведенческие группы. 3. Проект выполнить на Python. AI и машинное обучение, Python ∙ 7 дней 19 часов назад ∙ 46 ставок |