Парсер с админкой и отправкой статистики
Здравствуйте.
Нужен парсер сайтов с "админкой".
Страница админки оформлена в виде таблицы: строки со ссылками на сайт, ключевые слова, которые нужно найти, дата проверки сайта, статус, возможность скачать файл. Во вложении - приблизительный интерфейс админки.
Также, ежедневно, после прохода по всем сайта, должно приходить письмо с информацией о результатах работы.
Ещё одно письмо, с общей статисткой, нужно отправлять 1 раз в неделю.
Через "админку" хотелось бы:
- добавлять/удалять сайты, зная html (понимаем необходимость привязки к коду)
- вкл/выкл сайт в таблице
- добавлять/удалять фразы для каждого сайта
- просматривать краткую статистику результатов обработки сайтов (в строке)
- скачивать файл (excel) с результатами обработки
- управлять отправкой сообщений о результатах работы парсера (установка даты/времени отправки, вкл/выкл отправку, добавить/удалить e-mail для получения сообщений).
Несколько сайтов, которые нужно обрабатывать:
http://www.iom.org.ua/ua/tenders/current-tenders
https://hromadskeradio.org/ru/news
https://hromadske.ua/tenders
https://upogau.org/ru/category/inform/ournews
http://epl.org.ua/anonsy-ta-podiyi/
https://centreua.org/tendery/
Слова для поиска:
Аудит, аудит грантів, аудит фінансової звітності, аудиторська перевірка, закупівлі, аудит пожертвувань, фінансова звітність, проведення аудиту, пошук аудиторської компанії.
Оцените, пожалуйста, задачу.
Applications 1
-
1060 45 0 Здравствуйте, Сергей
Имею большой опыт работы с парсингом данных при помощи языков JavaScript и PHP. Готов взяться за ваше задание уже сегодня.
Хотелось бы узнать немного больше о самом процессе парсинга. По приложенному скриншоту не совсем понятно, какие именно данные с сайтов вы хотите вытягивать. Будьте добры, уточните этот момент.
В качестве примера моей работы могу предложить мой последний проект - http://workalytic.us.openode.io/
Это парсер вакансий с крупнейших сайтов для поиска работы в Украине. Парсер поддерживает выгрузку результатов в форматах JSON и XML.
… Буду рад обсудить детали этого проекта и ответить на все интересующие вас вопросы в ЛС,
-
967 57 0 Могу помоць начну прям щас напишите мне в скайп обсудим нюанси
-
Добрый день, Роман.
Донор, в смысле, откуда парсить?
-
Current freelance projects in the category Data Parsing
Data parsing
22 USD
Good afternoon. I need to scrape data from two small categories of a well-known classifieds board. The total number of ads is approximately 12k. I need the following columns: subcategory - city - phone - ad title. The result in .xlsx. Data Parsing ∙ 16 minutes back ∙ 11 proposals |
Consultation on parsing Instagram account subscribersHello. It is necessary to conduct a preliminary assessment of the feasibility of the following task. I have a list of Instagram accounts. The goal is to obtain contact information (primarily email addresses) of users who follow these accounts. Previously, I encountered companies… Data Parsing ∙ 1 day 12 hours back ∙ 12 proposals |
A specialist is needed to find contacts of decision-makers in Ukraine.It is necessary to gather a database (or ready database) of contacts of decision-makers (DMs) in companies in Ukraine. Information Gathering, Data Parsing ∙ 1 day 16 hours back ∙ 16 proposals |
Need to scrape data from LinkedInWe need to scrape data from LinkedIn based on our list. For each entry, we need to find and collect available data if it exists on the LinkedIn profile, including the profile picture on the LinkedIn social network, email address, links to social media, company website, and… Data Parsing ∙ 1 day 22 hours back ∙ 27 proposals |
Parsing and classification of dataWe are looking for a developer to implement a system for collecting and structuring data from open sources. We have a database of small business owners in the USA, which contains the person's name, company name, address, and state. It is necessary to build a process for… Web Programming, Data Parsing ∙ 1 day 23 hours back ∙ 40 proposals |