Парсер с админкой и отправкой статистики
Здравствуйте.
Нужен парсер сайтов с "админкой".
Страница админки оформлена в виде таблицы: строки со ссылками на сайт, ключевые слова, которые нужно найти, дата проверки сайта, статус, возможность скачать файл. Во вложении - приблизительный интерфейс админки.
Также, ежедневно, после прохода по всем сайта, должно приходить письмо с информацией о результатах работы.
Ещё одно письмо, с общей статисткой, нужно отправлять 1 раз в неделю.
Через "админку" хотелось бы:
- добавлять/удалять сайты, зная html (понимаем необходимость привязки к коду)
- вкл/выкл сайт в таблице
- добавлять/удалять фразы для каждого сайта
- просматривать краткую статистику результатов обработки сайтов (в строке)
- скачивать файл (excel) с результатами обработки
- управлять отправкой сообщений о результатах работы парсера (установка даты/времени отправки, вкл/выкл отправку, добавить/удалить e-mail для получения сообщений).
Несколько сайтов, которые нужно обрабатывать:
http://www.iom.org.ua/ua/tenders/current-tenders
https://hromadskeradio.org/ru/news
https://hromadske.ua/tenders
https://upogau.org/ru/category/inform/ournews
http://epl.org.ua/anonsy-ta-podiyi/
https://centreua.org/tendery/
Слова для поиска:
Аудит, аудит грантів, аудит фінансової звітності, аудиторська перевірка, закупівлі, аудит пожертвувань, фінансова звітність, проведення аудиту, пошук аудиторської компанії.
Оцените, пожалуйста, задачу.
Додатки 1
-
1060 45 0 Здравствуйте, Сергей
Имею большой опыт работы с парсингом данных при помощи языков JavaScript и PHP. Готов взяться за ваше задание уже сегодня.
Хотелось бы узнать немного больше о самом процессе парсинга. По приложенному скриншоту не совсем понятно, какие именно данные с сайтов вы хотите вытягивать. Будьте добры, уточните этот момент.
В качестве примера моей работы могу предложить мой последний проект - http://workalytic.us.openode.io/
Это парсер вакансий с крупнейших сайтов для поиска работы в Украине. Парсер поддерживает выгрузку результатов в форматах JSON и XML.
… Буду рад обсудить детали этого проекта и ответить на все интересующие вас вопросы в ЛС,
-
967 57 0 Могу помоць начну прям щас напишите мне в скайп обсудим нюанси
-
Добрый день, Роман.
Донор, в смысле, откуда парсить?
-
Актуальні фриланс-проєкти в категорії Парсинг даних
Консультація по парсингу підписників Instagram-акаунтівДоброго дня. Необхідно провести попередню оцінку можливості виконання наступного завдання. У мене є список Instagram-акаунтів. Мета — отримати контактні дані (в першу чергу email-адреси) користувачів, які підписані на ці акаунти. Раніше мені зустрічалися компанії та сервіси, які… Парсинг даних ∙ 1 день 18 годин тому ∙ 12 ставок |
Потрібен спеціаліст для пошуку контактів ЛПР по УкраїніНеобхідно зібрати базу (чи готова база) контактів осіб, які приймають рішення (ЛПР), у компаніях України. Збір інформації, Парсинг даних ∙ 1 день 23 години тому ∙ 16 ставок |
Потрібно спартити дані з LinkedinПотрібно спартити дані з Linkedin по нашому списку. Для кожного запису потрібно знайти та зібрати доступні дані якщо такі є на Linkedin профілі включаючи фотографію профілю на соц мережі Lihnkedin, email-адресу, посилання на соціальні мережі, вебсайт компанії, номер телефону.… Парсинг даних ∙ 2 дні 5 годин тому ∙ 27 ставок |
Парсинг та класифікація данихШукаємо розробника для реалізації системи збору та структурування даних з відкритих джерел. Маємо базу власників малого бізнесу в США, яка містить ім’я людини, назву компанії, адресу та штат. Необхідно побудувати процес збагачення цих записів додатковою інформацією з публічно… Веб-програмування, Парсинг даних ∙ 2 дні 6 годин тому ∙ 41 ставка |
Svitlahata
750 UAH
Потрібно імпортувати 1819 товарів із XML/YML-фіду Prom.ua до OpenCart 3. Є готовий XML-файл, який містить назви товарів, описи, ціни, фотографії, характеристики, виробників та категорії. Необхідно: імпортувати всі товари до OpenCart 3; створити та прив’язати категорії;… CMS, Парсинг даних ∙ 3 дні 9 годин тому ∙ 34 ставки |