Специалист по сбору данных
Мы готовимся к предстоящим международным конференциям (например, Web Summit, VivaTech и т.д.) и нам нужен специалист по сбору данных, чтобы помочь нам собрать, структурировать и проверить данные участников.
Основная цель - автоматизировать сбор данных насколько это возможно, чтобы нам не пришлось делать это вручную.
Обязанности
Собирать данные с веб-сайтов конференций, списков экспонентов/участников и связанных платформ.
Собирать и структурировать данные (имя, компания, должность, электронная почта/LinkedIn, если доступно).
Реализовать шаги проверки (например, проверка электронной почты, удаление дубликатов).
Предоставлять чистые наборы данных в структурированных форматах (CSV, Excel или база данных).
Предложить или настроить инструменты для полупрограммного/автоматизированного сбора данных (например, Apify, ParseHub, Octoparse, Puppeteer, Selenium, скрипты на Python).
Обеспечить соответствие процесса сбора данных правилам платформы и стабильность для повторного использования.
Требования
Подтвержденный опыт работы с веб-скрейпингом (пожалуйста, поделитесь примерами).
Сильные навыки в Python или JavaScript для создания пользовательских скриптов для сбора данных.
Знание инструментов и фреймворков для сбора данных (например, Selenium, Puppeteer, Playwright, Apify, ParseHub).
Навыки очистки и проверки данных (удаление дубликатов, проверка электронной почты).
(Опционально, но будет плюсом): интеграция с n8n или другими платформами автоматизации.
Форма сотрудничества
Фриланс, почасовая оплата.
Первоначальный объем: сбор данных с конференций.
Удаленная работа.
-
5 дней3864 UAH
117 5 дней3864 UAHДобрый день!
Имею опыт разработки Python-скриптов для автоматизированного сбора и обработки данных с разных сайтов, включая страницы мероприятий, списки участников и каталоги экспонентов. Могу настроить сбор данных по вашим конференциям (Web Summit, VivaTech и т. д.), структурировать в таблицы (CSV/Excel) и очистить от дубликатов, а также реализовать проверку e-mail. Использую Selenium/Playwright для парсинга, при необходимости настрою интеграцию с Apify или n8n.
Для оценки объема работы хотелось бы уточнить: какие конференции и приблизительное количество участников?
Предварительный срок выполнения — 5 дней.
Стоимость указал ориентировочно, готов обсудить детали.55
-
1 день1288 UAH
426 10 0 1 день1288 UAHПривет, Анастасия,
Я буду рад помочь с вашим предстоящим проектом. Ваша необходимость в автоматизированном сборе данных участников, их валидации и структурированном выводе идеально соответствует моему опыту — я провел последние три года, создавая надежные системы сбора данных для коммерческих платформ с сотнями тысяч пользователей в месяц.
Вот почему я считаю, что подхожу для вашего проекта:
1) Доказанный опыт веб-скрапинга – Я руководил разработкой десятков скриптов и валидаторов для крупных проектов, таких как Animalia.bio и Creazilla.com, обрабатывая сложные сайты, обходя защиту от ботов и поддерживая надежность потоков со временем.
2) Экспертиза в техническом стеке – Я ежедневно работаю с Python (Requests, Selenium, Playwright, BS4, lxml, httpx) и мне комфортно использовать Puppeteer, если это необходимо. Я также могу интегрировать этапы валидации, такие как проверка электронной почты, дедупликация и очистка данных перед доставкой.
…
3) Масштабируемые и повторяемые решения – Я не просто собираю данные один раз — я разрабатываю скрипты, которые можно повторно использовать и легко поддерживать, чтобы вы могли запускать их снова перед будущими конференциями без ручной переработки.
4) Чистый, структурированный вывод – Я могу предоставить результаты в формате CSV, Excel или напрямую в базу данных, что упрощает работу вашей команды.
5) Внимание к соблюдению норм – Я следую условиям обслуживания платформ, избегаю перегрузки серверов и поддерживаю стабильные стратегии сбора данных.
Я также буду рад поделиться примерами ранее собранных наборов данных и обсудить свой коммерческий опыт в области сбора данных более подробно через личные сообщения.
С нетерпением жду вашего ответа и готов помочь сделать этот процесс сбора данных полностью автоматизированным и безстрессовым для вашей команды.
-
30 дней1288 UAH
3356 70 1 30 дней1288 UAHУ меня есть обширный опыт в веб-скрейпинге и автоматизации данных, соответствующий требованиям, изложенным в вашем объявлении. Я специализируюсь на создании пользовательских скриптов для скрейпинга с нуля, используя JavaScript, адаптированных к конкретным задачам и веб-сайтам. Я также занимаюсь очисткой данных, удалением дубликатов и проверкой электронной почты, чтобы предоставить структурированные, надежные наборы данных.
Я уверен, что смогу помочь эффективно автоматизировать сбор данных о ваших участниках для предстоящих конференций.
-
1 день1288 UAH
400 1 0 1 день1288 UAHМеня зовут Сергей, я специализируюсь на веб-скрапинге и автоматизации сбора данных. Имею практический опыт работы с Python, Scrapy, Selenium, BeautifulSoup, а также с интеграциями баз данных (SQL, MongoDB) и обработкой данных в Pandas. Имею большой опыт работы с разнообразными выставочными сайтами.
Могу помочь вашей команде с автоматизированным сбором и структурированием данных участников конференций, включая проверку электронных адресов, устранение дубликатов и подготовку чистых структурированных наборов в CSV/Excel или базе данных. Также могу настроить инструменты для полуавтоматизированного сбора (Selenium, Apify, Puppeteer) и обеспечить стабильность процесса для повторного использования.
Буду рад присоединиться к вашему проекту в формате удаленного сотрудничества на почасовой основе.
-
1 день1288 UAH
1984 25 1 1 день1288 UAHПривет, Анастасия, меня зовут Егор. Я инженер по сбору данных с опытом работы более 2 лет. Ваш проект привлек мое внимание, и я хотел бы помочь вам в выполнении вашей задачи. В дополнение к сбору данных, у меня есть команда специалистов, которые могут помочь создать и развернуть данные, которые мы собираем, в формате, удобном для вас. Они могут визуализировать их или интегрировать в ваши существующие системы.
Я с нетерпением жду начала вашего проекта, чтобы мы могли обсудить детали более подробно. Напишите мне, когда будете готовы.
-
1 день2576 UAH
3411 32 0 1 день2576 UAHЗдравствуйте!
Я могу выполнить тестовое задание, парсинг, например, отсюда https://vivatechnology.com/partners. Я могу собрать определенную часть данных, всего 3036 участников, я могу взять первых 100 и последних 100 и отправить вам полученную таблицу для анализа и обзора. Это поможет вам быстрее принять решение о нашем возможном будущем сотрудничестве по этой задаче.
Пожалуйста, отправьте нам личное сообщение, чтобы уточнить детали задания и стоимость работы, которую вы требуете.
-
1 день5719 UAH
2923 26 0 1 день5719 UAHДобрый день, меня интересует ваш проект. У меня есть опыт работы с Python‐scraping. Готов обсудить детали.
Актуальные фриланс-проекты в категории Парсинг данных
Нужен парсер интернет-магазина https://www.lcsc.com/нужно регулярно (1 раз в месяц, или по запуску скрипта) получать актуальную информацию о товарах в наличии магазина https://www.lcsc.com/ из каталога всех разделов… Парсинг данных ∙ 19 часов 27 минут назад ∙ 39 ставок |
OpenCart — каталог аренды спецтехники
6000 UAH
OpenCart — каталог аренды спецтехникиНеобходимо запустить каталог аренды спецтехники на OpenCart.Тематика:экскаваторыавтовышкипогрузчикигенераторыкраныстроительные лесадругая строительная техника.Желательно, чтобы у вас уже был готовый шаблон или наработки под спецтехнику,… Веб-программирование, Парсинг данных ∙ 1 день 11 часов назад ∙ 54 ставки |
Перенести программу - слетел сервер, где была программа (официальный разрешенный парсинг гос данных)
2061 UAH
Добрый! У меня у клиента произошел данный кейс описанный ниже. Нужно помочь перенести на новый сервер и оттестировать программу. Лучше программист, который разбирается в парсинге. Настройка ПО и серверов, Парсинг данных ∙ 1 день 15 часов назад ∙ 29 ставок |
Парсинг сайтаТребуется реализация 4 парсеров (сайты каталоги) Есть тз, есть пример кода как референс . В задачи входит: Написать парсер Прикрутить прокси Логика дедубликации (перенести логику из примера) Логика хешированя по 3 полям Парсер должен работать как пайплайн с логикой что… Парсинг данных ∙ 3 дня 8 часов назад ∙ 44 ставки |
Сбор(парсинг) базы товаров с сайтов поставщиков (Excel / CSV)
10 000 UAH
Сбор базы товаров с сайтов поставщиков (Excel / CSV) Добрый день. Требуется специалист для сбора и структурирования данных с нескольких сайтов поставщиков, доступ к которым будет предоставлен.Задача: Необходимо сформировать единую базу товаров в формате Excel (XLSX) или CSV.Для… Веб-программирование, Парсинг данных ∙ 4 дня 15 часов назад ∙ 108 ставок |