Парсер с админкой и отправкой статистики
Здравствуйте.
Нужен парсер сайтов с "админкой".
Страница админки оформлена в виде таблицы: строки со ссылками на сайт, ключевые слова, которые нужно найти, дата проверки сайта, статус, возможность скачать файл. Во вложении - приблизительный интерфейс админки.
Также, ежедневно, после прохода по всем сайта, должно приходить письмо с информацией о результатах работы.
Ещё одно письмо, с общей статисткой, нужно отправлять 1 раз в неделю.
Через "админку" хотелось бы:
- добавлять/удалять сайты, зная html (понимаем необходимость привязки к коду)
- вкл/выкл сайт в таблице
- добавлять/удалять фразы для каждого сайта
- просматривать краткую статистику результатов обработки сайтов (в строке)
- скачивать файл (excel) с результатами обработки
- управлять отправкой сообщений о результатах работы парсера (установка даты/времени отправки, вкл/выкл отправку, добавить/удалить e-mail для получения сообщений).
Несколько сайтов, которые нужно обрабатывать:
http://www.iom.org.ua/ua/tenders/current-tenders
https://hromadskeradio.org/ru/news
https://hromadske.ua/tenders
https://upogau.org/ru/category/inform/ournews
http://epl.org.ua/anonsy-ta-podiyi/
https://centreua.org/tendery/
Слова для поиска:
Аудит, аудит грантів, аудит фінансової звітності, аудиторська перевірка, закупівлі, аудит пожертвувань, фінансова звітність, проведення аудиту, пошук аудиторської компанії.
Оцените, пожалуйста, задачу.
Приложения 1
-
1060 45 0 Здравствуйте, Сергей
Имею большой опыт работы с парсингом данных при помощи языков JavaScript и PHP. Готов взяться за ваше задание уже сегодня.
Хотелось бы узнать немного больше о самом процессе парсинга. По приложенному скриншоту не совсем понятно, какие именно данные с сайтов вы хотите вытягивать. Будьте добры, уточните этот момент.
В качестве примера моей работы могу предложить мой последний проект - http://workalytic.us.openode.io/
Это парсер вакансий с крупнейших сайтов для поиска работы в Украине. Парсер поддерживает выгрузку результатов в форматах JSON и XML.
… Буду рад обсудить детали этого проекта и ответить на все интересующие вас вопросы в ЛС,
-
967 57 0 Могу помоць начну прям щас напишите мне в скайп обсудим нюанси
-
Добрый день, Роман.
Донор, в смысле, откуда парсить?
-
Актуальные фриланс-проекты в категории Парсинг данных
Парсинг данных через мобильное APIИщу человека с опытом парсинга данных через мобильное API, для парсинга e-commerce, rozetka и аналоги Задачи: 1. Перехват трафика мобильного приложения (Android) настройка прокси, анализ запросов 2. Определение нужных API endpoints куда идут запросы, какие headers… Python, Парсинг данных ∙ 1 день 4 часа назад ∙ 24 ставки |
Ищу программиста или вайб кодинг Автоматизация scraping данных 2https://drive.google.com/file/d/14tP5XWJB9acV4gn_cJrFwMpihUj3EbQz/view?usp=sharing я нечаянно на ту ссылку послал Веб-программирование, Парсинг данных ∙ 1 день 6 часов назад ∙ 33 ставки |
Создать дашборд в https://airtable.com/ по результативности рекламных креативов из facebook adsПолноценное ТЗ https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Базы данных и SQL, Парсинг данных ∙ 6 дней 1 час назад ∙ 19 ставок |
Создание файла Exel для загрузки товаров на сайты других партнеров.Меня интересует, чтобы сделать таблицу Excel со всеми параметрами. Вот сайт - https://heiztechnik.com.ua/ И позиции, которые интересуют, чтобы были перенесены : Ручные котлы : 1) TIS UNI 15-95 кВт (10) шт 2)TIS HARD 150-500 кВт (7) шт Пеллетные котлы: 1)TIS PELLET 15-95 кВт… Парсинг данных ∙ 6 дней 5 часов назад ∙ 38 ставок |
Требуется разработчик для парсинга каталога и автоматизации импорта данныхПодробное ТЗ в прикрепленном документе прошу в отклике указать ориентировочную стоимость и сроки реализации есть ли опыт работы с парсингом крупных каталогов какие возможные сложности или ограничения вы видите в данной задаче Базы данных и SQL, Парсинг данных ∙ 6 дней 8 часов назад ∙ 42 ставки |