Парсер данных Instagram
Необходимо написать парсер, который будет собирать информацию о подписчиках заданного инстаграм аккаунта. Парсер должен уметь обрабатывать большое количество запросов одновременно.
Необходимо собирать такую информацию о каждом подписчике:
1. Юзернейм
2. Пол
3. Кол-во подписчиков
4. Кол-во подписок
5. Город
6. Страна
По времени такая проверка не должна занимать больше 1-2 часов (кол-во проверяемых подписчиков будем регулировать чтобы попадать в заданные рамки)
Как это должно работать
У нас уже есть основное приложение (веб), которое собирает аналитику об Instagram аккаунтах через официальное API. Задача создать дополнительное приложение, которое будет собирать информацию через неофициальное апи.
Взаимодействовать приложения должны так - в основном приложении инициируется проверка аналитики Instagram аккаунта, основное приложение обращается к парсеру, парсер собирает данные и отдает их обратно. Такие запросы из основного приложения могут приходить в большом количестве (несколько десятков или сотен).
Технические требования
Необходимый эндпоинт
Авторизация с помощью Bearer Token в заголовке Authorization.
GET /followers?username={{username}} - возвращает список подписчиков.
Пример ответа:
{
followers: [
{
username: 'sample_user',
gender: 0, // 0 – male, 1 — female
followersCount: 450,
followingsCount: 390,
postsCount: 9,
city: 'Kyiv',
country: 'Ukraine'
},
...
]
}Парсер должен уметь обходить блокировки со стороны Instagram.
В предложении пожалуйста указывайте что дополнительно понадобится для реализации (например: сервер, прокси и т.п.), чтобы у меня была возможность адекватно оценить необходимый на реализацию бюджет, помимо самой работы.
-
1061 46 0 1 Добрый день!
Напишу на python + requests ,писал много парсеров для инсты.
Пишите в лс , буду рад сотрудничеству!
-
1641 23 0 Здравствуйте. Есть опыт в интеграции приватного апи инстаграма. В моём портфолио можете найти сайт, где я его использовал.
Готов обсудить все детали проекта и ответить на ваши вопросы
Актуальные фриланс-проекты в категории Парсинг данных
Нужен парсер интернет-магазина https://www.lcsc.com/нужно регулярно (1 раз в месяц, или по запуску скрипта) получать актуальную информацию о товарах в наличии магазина https://www.lcsc.com/ из каталога всех разделов… Парсинг данных ∙ 15 часов 15 минут назад ∙ 39 ставок |
OpenCart — каталог аренды спецтехники
6000 UAH
OpenCart — каталог аренды спецтехникиНеобходимо запустить каталог аренды спецтехники на OpenCart.Тематика:экскаваторыавтовышкипогрузчикигенераторыкраныстроительные лесадругая строительная техника.Желательно, чтобы у вас уже был готовый шаблон или наработки под спецтехнику,… Веб-программирование, Парсинг данных ∙ 1 день 7 часов назад ∙ 53 ставки |
Перенести программу - слетел сервер, где была программа (официальный разрешенный парсинг гос данных)
2061 UAH
Добрый! У меня у клиента произошел данный кейс описанный ниже. Нужно помочь перенести на новый сервер и оттестировать программу. Лучше программист, который разбирается в парсинге. Настройка ПО и серверов, Парсинг данных ∙ 1 день 11 часов назад ∙ 29 ставок |
Парсинг сайтаТребуется реализация 4 парсеров (сайты каталоги) Есть тз, есть пример кода как референс . В задачи входит: Написать парсер Прикрутить прокси Логика дедубликации (перенести логику из примера) Логика хешированя по 3 полям Парсер должен работать как пайплайн с логикой что… Парсинг данных ∙ 3 дня 4 часа назад ∙ 44 ставки |
Сбор(парсинг) базы товаров с сайтов поставщиков (Excel / CSV)
10 000 UAH
Сбор базы товаров с сайтов поставщиков (Excel / CSV) Добрый день. Требуется специалист для сбора и структурирования данных с нескольких сайтов поставщиков, доступ к которым будет предоставлен.Задача: Необходимо сформировать единую базу товаров в формате Excel (XLSX) или CSV.Для… Веб-программирование, Парсинг данных ∙ 4 дня 11 часов назад ∙ 107 ставок |