Парсер + веб интерфейс
Нужно написать простой парсер с веб интерфейсом.
1. Парсим по расписанию список всех каналов (сейчас их 277 тыс.): zen(.)yandex.ru/media/zen/channels
2. Собираем данные с каждого канала: аудитория/подписчики
Названия последних постов и ссылки на них.
В интерфейсе:
1. Раздел настроек с частотой парсинга. Отдельно для сбора списка всех url и для данных с url каналов
2. Список всех каналов с фильтрами по кол-ву аудитории/подписчиков/датой добавления в базу + Поиск по названию канала.
при нажатии на url канала - переход на стр канала со списком ссылок на посты
-
Добрый день, пишите сделаю без проблем, буду рад помочь вам в данном вопросе
-
1131 25 0 Добрый день. Есть большой опыт разработки таких парсеров с веб-интерфейсом и админкой. Примеры показать не смогу - это закрытые корпоративные решения. Спарсить можно: название канала, урл канала, аудиторию (только количество), подписчики (только количество), посты (только последние). Каналов много, и чтобы парсить такое хотя бы 1 раз в сутки, понадобятся очень хорошие прокси (так называемые "в одни руки"), поэтому на прокси будет уходить несколько долларов в сутки (смогу посоветовать сервис с удобным API).
-
2595 27 0 Добрый день!
У нас 6 лет опыта разработки, в том числе и парсеров.
Разрабатываем на Python/Django, входим в ТОП20 разработчиков мира на этой технологии.
Специализируемся именно на сложных решениях, а парсинг сайтов Яндекса, простым не будет.
Наше портфолио https://webcase.com.ua/works/
Жду обратную связь!
Current freelance projects in the category Data Parsing
Python / Network Engineer: Network optimization of the bot (WAF, Connection Pooling, Asyncio)Simplified version! Please respond only if you understand and are knowledgeable. About the project: An automated bot for sniping. The basic business logic (parsing, authorization, assembling JSON/XML packages) is already ready and works on Python. The target environment is Linux… Python, Data Parsing ∙ 10 hours 43 minutes back ∙ 14 proposals |
OpenCart — rental catalog of special equipment
135 USD
OpenCart — Equipment Rental Catalog Need to launch an equipment rental catalog on OpenCart. Theme: excavators cherry pickers forklifts generators cranes scaffolding other construction equipment. It is preferable that you already have a ready-made template or developments… Web Programming, Data Parsing ∙ 10 hours 53 minutes back ∙ 42 proposals |
Transfer the program - the server where the program was located has crashed (officially permitted parsing of government data)
47 USD
Hello! My client has encountered the case described below. We need help transferring to a new server and testing the program. It would be better to have a programmer who understands parsing. Software & Server Configuration, Data Parsing ∙ 14 hours 46 minutes back ∙ 22 proposals |
Parsing and classification of a large array of imagesIt is necessary to implement a project for collecting and structuring a large array of architectural images from open web sources.The task includes: automated collection of images; uploading files in the highest available quality; classification of images by categories:… Python, Data Parsing ∙ 15 hours 14 minutes back ∙ 30 proposals |
Parsing Resumes from Work.ua and Rabota.uaIt is necessary to download a database of current resumes from Work.ua and Rabota.ua in Excel format. It is preferable that the Excel file contains the following columns: Name Phone number (in the format +380...) Email Position (profession) Positions considered Category of… Information Gathering, Data Parsing ∙ 1 day 14 hours back ∙ 18 proposals |