Парсер + веб интерфейс
Нужно написать простой парсер с веб интерфейсом.
1. Парсим по расписанию список всех каналов (сейчас их 277 тыс.): zen(.)yandex.ru/media/zen/channels
2. Собираем данные с каждого канала: аудитория/подписчики
Названия последних постов и ссылки на них.
В интерфейсе:
1. Раздел настроек с частотой парсинга. Отдельно для сбора списка всех url и для данных с url каналов
2. Список всех каналов с фильтрами по кол-ву аудитории/подписчиков/датой добавления в базу + Поиск по названию канала.
при нажатии на url канала - переход на стр канала со списком ссылок на посты
-
Добрый день, пишите сделаю без проблем, буду рад помочь вам в данном вопросе
-
1131 25 0 Добрый день. Есть большой опыт разработки таких парсеров с веб-интерфейсом и админкой. Примеры показать не смогу - это закрытые корпоративные решения. Спарсить можно: название канала, урл канала, аудиторию (только количество), подписчики (только количество), посты (только последние). Каналов много, и чтобы парсить такое хотя бы 1 раз в сутки, понадобятся очень хорошие прокси (так называемые "в одни руки"), поэтому на прокси будет уходить несколько долларов в сутки (смогу посоветовать сервис с удобным API).
-
2595 27 0 Добрый день!
У нас 6 лет опыта разработки, в том числе и парсеров.
Разрабатываем на Python/Django, входим в ТОП20 разработчиков мира на этой технологии.
Специализируемся именно на сложных решениях, а парсинг сайтов Яндекса, простым не будет.
Наше портфолио https://webcase.com.ua/works/
Жду обратную связь!
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Python / Inżynier Sieciowy: Optymalizacja sieci bota (WAF, Pooling połączeń, Asyncio)Uproszczona wersja! Proszę o odpowiedź tylko tych, którzy rozumieją i znają się na rzeczy. O projekcie: Zautomatyzowany bot do snajpingu. Podstawowa logika biznesowa (parsowanie, autoryzacja, budowanie pakietów JSON/XML) jest już gotowa i działa w Pythonie. Docelowe środowisko… Python, Parsowanie danych ∙ 11 godzin 39 minut temu ∙ 14 ofert |
OpenCart — katalog wynajmu sprzętu specjalistycznego
492 PLN
OpenCart — katalog wynajmu sprzętu specjalistycznegoPotrzebne jest uruchomienie katalogu wynajmu sprzętu specjalistycznego na OpenCart.Tematyka:koparkipodnośnikiładowarkigeneratorydźwigirusztowaniainny sprzęt budowlany.Preferowane, abyście mieli już gotowy szablon lub… Programowanie stron internetowych, Parsowanie danych ∙ 11 godzin 48 minut temu ∙ 42 oferty |
Przenieść program - serwer, na którym był program, padł (oficjalne dozwolone parsowanie danych publicznych)
169 PLN
Witaj! Mój klient ma przypadek opisany poniżej. Potrzebna pomoc w przeniesieniu na nowy serwer i przetestowaniu programu. Lepiej, aby to był programista, który zna się na parsowaniu. Konfigurowanie oprogramowania i serwerów, Parsowanie danych ∙ 15 godzin 41 minut temu ∙ 22 oferty |
Parsowanie i klasyfikacja dużej liczby obrazówNależy zrealizować projekt zbierania i strukturyzacji dużej ilości architektonicznych obrazów z otwartych źródeł internetowych.Zadanie obejmuje: automatyczne zbieranie obrazów; ładowanie plików w maksymalnie dostępnej jakości; klasyfikację obrazów według kategorii: Exterior;… Python, Parsowanie danych ∙ 16 godzin 9 minut temu ∙ 30 ofert |
Parsowanie CV z Work.ua i Rabota.uaNależy pobrać w formacie Excel bazę aktualnych CV z Work.ua i Работа.ua. Preferowane, aby plik Excel zawierał następujące kolumny:ImięNumer telefonu (w formacie +380...)Adres e-mailStanowisko (zawód)Stanowiska, które rozważaKategoria branży (rubryka)Branża, w której… Wyszukiwanie i zbieranie informacji, Parsowanie danych ∙ 1 dzień 15 godzin temu ∙ 18 ofert |