Написать парсер для сайта.
Будет список доменов в базе
вот пример tvpager.ru
Парсер заходит на
https://www.similarweb.com/website/tvpager.ru
Берет
Global Rank
Country Rank
Category Rank
Total Visits
Avg. Visit Duration
Pages per Visit
Bounce Rate
ИЗ Traffic Sources
пишет тоже в базу эти проценты
Direct
Referrals
Search
и тд
между запросами нужны задержки
Так же писать в базу где мало трафика
https://www.similarweb.com/website/wmos.ru
пример
"Traffic Overview
We’re sorry but...
We currently lack sufficient data to show complete estimations for this website. Rest assured, we are working tirelessly to provide the world with the most reliable data about every website and every app. If you are the owner of wmos.ru, you can connect your site’s Google Analytics, to present your data on SimilarWeb."
Это надо как то в базе помечать, что статитстики на сайте мало.
Так же нужно учесть, если парсить обычными средствами php сайт банет через 5-10 запросов.
Самому с компьютера через браузер, без лимит запросов.
-
72 13 1 Доброго времени суток. Готов выполнить ваш заказ. Сделаю все быстро и качественно. Писать буду на Python (библиотека requests для запросов и BeautifulSoup для парсинга).
-
111 Здравствуйте!
Могу реализовать на Python. На счёт банов можете не беспокоиться. Вывод в любой удобный для вас формат. Срок обсудим конкретно договариваясь об выполнении.
Примеры последних парсеров:
1) Парсинг электронных адресов и имён в несколько процессов с выводом в формат .csv:
https://github.com/RomanKhudobei/Journal-Parser
2) Парсинг транзакций криптовалюты с выводом в базу данных MySQL:
https://github.com/RomanKhudobei/CryptoProject
…
Надеюсь на сотрудничество
С уважением, Роман.
-
700 19 0 Сам парсер на NodeJS. Вызов откуда удобно, даже из PHP. База - MySQL или другая, детали можно обговаривать.
С обходом блокировок проблем не будет. Количество одновременных запросов будет зависеть от железа, на котором парсер будет запущен.
Скайп wfoojjaec, прочие контакты и реквизиты:
https://wfoojjaec.eu.org/ru/contacts.html
-
1333 32 0 Добрый день, сделаю используя Python + Selenium если нужно то + прокси.
Есть масса аналогичных проектов
Спасибо
-
273 15 0 1 Добрый день. Готов реализовать на python. Срок указан с запасом.
-
143 Готов взяться за выполнение.
Пишите, обсудим детали
в личку или сюда:
[email protected]
-
322 22 0 1 Пишите обсудим подробнее в Skype: casper6132
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~
Current freelance projects in the category Data Parsing
Database of websites on WooCommerceIt is necessary to compile a database of Ukrainian online store websites on WooCommerce with the contact information provided on the sites. Only active websites (indicator: updated catalog/content, working domain) Table format - website address, phone number, e-mail. Data Parsing ∙ 1 day 16 hours back ∙ 20 proposals |
Create a dashboard in https://airtable.com/ for the performance of advertising creatives from Facebook ads.Full specification https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Databases & SQL, Data Parsing ∙ 3 days 6 hours back ∙ 17 proposals |
Creation of an Excel file for uploading products to the websites of other partners.I am interested in creating an Excel table with all parameters. Here is the website - https://heiztechnik.com.ua/ And the positions I am interested in to be transferred: Manual boilers: 1) TIS UNI 15-95 kW (10) pcs 2)TIS HARD 150-500 kW (7) pcs Pellet boilers: 1)TIS PELLET… Data Parsing ∙ 3 days 10 hours back ∙ 35 proposals |
A developer is required for parsing the catalog and automating data import.Detailed technical specifications in the attached document Please indicate the estimated cost and timeline in your response Do you have experience working with parsing large catalogs What possible difficulties or limitations do you see in this task Databases & SQL, Data Parsing ∙ 3 days 13 hours back ∙ 40 proposals |
Find a product feed (Google Merchant XML) for a website on OpenCart
16 USD
It is necessary to find a direct link to the active product feed (XML) of a competitor for Google Merchant Center Platform (CMS): OpenCart / ocStore Find the original feedRequirements for the result: Working link to the XML file Python, Data Parsing ∙ 3 days 18 hours back ∙ 25 proposals |