Написать парсер электронных деклараций.
1700 UAHНеобходим парсер, который будет взаимодействую с API сайта деклараций НАЗК, будет проводить поиск по запросу, собирать необходимую информацию и формировать ее в БД Access. (Можем обсудить другой удобный способ конечного вывода).
Необходимо проводить поиск по заданому ФИО, или по заданой должности (или органу).
парсер должен отбирать в БД только те результаты поиска которые соответствуют зопросу, так как при расширенном поиске в результат начинают попадать все подряд. То есть, он должен сравнивать запрос с результатом поиска и принимать решение о добавлении информации с полученной декларации, что бы не забивать БД лишним шлаком. (Способы решение этого вопроса на вообще видинье
Также необходимо иметь возможность применять фильтры поиска. Не более чем те что уже находиться на сайте НАЗК.
Более детальное перечисление полей вывода которые интересуют и фильтров возможность примять которые будет необходимо добавить я расписал в ТЗ.
Бюджет до 2000.
Отвечу на любые вопросы о неясностях в задании, в случае если какой-то этап работы по вашему мнению сложнее чем я его себе вижу... открыт к дискусу о виденье финального проекта.
Пишите если готовы выполнить. Обсудим необходимые сроки и бюджет, плюс вышлю более детальное ТЗ.
также добавлю, что на GitHub уже есть нароботки по парсерам деклараций. Их можно использовать как макеты, или просто отправную точку.
Приложения 2
Отзыв заказчика о сотрудничестве с Вадимом Koc
Написать парсер электронных деклараций.Вадим выполнял работу не смотря на все трудности, искусственно не растягивая выполнение задач, докапывался до решения поставленной проблемы и решал её. Легко шёл на контакт.
Следует обратить внимание на чёткое обсуждение ТЗ на начальном этапе, так как склад ума всё же программный, то есть- Вадим видит способы решения задачи программно-прямолинейные, это не в коем случае не минус, но это стоит учитывать для более раннего этапа сотрудничества.
По результатам у меня остался полностью рабочий парсер елекронных деклараций, который может с экономить многие часы потенциальной работы. Большое спасибо за работу, так держать!
Отзыв фрилансера о сотрудничестве с Валентином А.
Написать парсер электронных деклараций.Интересное задание, интересный заказ. Но пришлось сделать больше, чем в ТЗ. По времени - лояльное отношение. Контактность - не часто и не редко, что очень хорошо.
-
Победившая ставка7 дней1700 UAH
195 18 1 Победившая ставка7 дней1700 UAH
Парсил разные сайты. Для парсинга использую php. Наиболее удобная для использования и по скорости - MySQL БД/СУБД. Могу сделать выгрузку в CSV или XML. Но я могу написать парсер и на C# + загрузка в AСсeSS, я так тоже делал, просто так может быть немного дольше, особенно если учесть, что у них сайт лагающий.
-
2 дня5000 UAH
1767 40 0 2 дня5000 UAH
Здравствуйте! Обращайтесь) Опыт в выполнении подобных задач есть. Готов приступить прямо сейчас.
-
Приветствую!
Действительно запросы выдают много хлама. Тестировал но так и не добился четкого ответа. Подскажите, что будет в запросе, т.к. вы заявили о фильтрации.
Сразу скажу с Access не работаю......
-
Мне по сути не обязателен именно access, после отбора мной данные будет вноситься все равно в ibm ibase, поэтому не принципиально, главное что бы хорошо структурировано было на выходе.
Фильтрация нужна что бы по большей мере получать только актуальную и нужную информацию. Указать год подачи декларации, указать категорию державной посади. В общем только те что уже продуманы в самой системе сайта.
Мне кстати удавалась добиться хорошего результата проводя поиск не через сам сайт, а через запрос в гугле используя “site:”
Лишних результатов совсем не было, только года все подряд.
-
Добрый день! Да так и есть, я брал ФИО из выдачи гугла, и пытался найти по айпи и фамилии анкеты, из выдачи в 500 результатов
у меня не было 100% совпадения по ФИО. Что ставит под сомнение использование айпи по поиску информации с входными данными ФИО. В документах
по айпи, говорится об указании индификатора персоны, и в дальнейшем можно производить сортировку.
Похоже что решение - это получение индификатора. из выдачи гугла, и дальнейшей обработки данных.
Другого решения по получению валидных данных, я пока не вижу. -
Хм, а на сколько результат портиться лишними данными?
Из 10 результатов если 2 неверных то это довольно терпимо, главное тогда что бы от них можно было без труда избавиться.
хотя элегантным решением это не назовёшь.
а если проиндексировать сайт НАЗК с помощью какого-то из инструментов, например YACY (с другими не знаком)?И использовать данные для получений id людей.
Я думаю это куда проще чем тянуть информацию из гугла и не требует сильной ручной настройки(хотя не совсем понимаю как индексировать НАЗК, там же нет каталога лиц по которому может пройтись паук.
Как вы вообще, смогли бы взяться за это задание, или теперь оно выглядит неподъёмным? -
Там ничего не нужно индексировать, каталог там есть ..... Но я предполагаю что вам надо графический интерфейс и по другому никак,
я же работаю в консоле. -
Актуальные фриланс-проекты в категории Парсинг данных
Парсинг данных через мобильное APIИщу человека с опытом парсинга данных через мобильное API, для парсинга e-commerce, rozetka и аналоги Задачи: 1. Перехват трафика мобильного приложения (Android) настройка прокси, анализ запросов 2. Определение нужных API endpoints куда идут запросы, какие headers… Python, Парсинг данных ∙ 1 день 5 часов назад ∙ 25 ставок |
Ищу программиста или вайб кодинг Автоматизация scraping данных 2https://drive.google.com/file/d/14tP5XWJB9acV4gn_cJrFwMpihUj3EbQz/view?usp=sharing я нечаянно на ту ссылку послал Веб-программирование, Парсинг данных ∙ 1 день 7 часов назад ∙ 33 ставки |
Создать дашборд в https://airtable.com/ по результативности рекламных креативов из facebook adsПолноценное ТЗ https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing Базы данных и SQL, Парсинг данных ∙ 6 дней 2 часа назад ∙ 19 ставок |
Создание файла Exel для загрузки товаров на сайты других партнеров.Меня интересует, чтобы сделать таблицу Excel со всеми параметрами. Вот сайт - https://heiztechnik.com.ua/ И позиции, которые интересуют, чтобы были перенесены : Ручные котлы : 1) TIS UNI 15-95 кВт (10) шт 2)TIS HARD 150-500 кВт (7) шт Пеллетные котлы: 1)TIS PELLET 15-95 кВт… Парсинг данных ∙ 6 дней 6 часов назад ∙ 38 ставок |
Требуется разработчик для парсинга каталога и автоматизации импорта данныхПодробное ТЗ в прикрепленном документе прошу в отклике указать ориентировочную стоимость и сроки реализации есть ли опыт работы с парсингом крупных каталогов какие возможные сложности или ограничения вы видите в данной задаче Базы данных и SQL, Парсинг данных ∙ 6 дней 9 часов назад ∙ 42 ставки |
Днепр