DexScreener scrap

Python, Парсинг данных — неверно указаны категории?

Цель:

Разработать автоматический парсер, который будет извлекать адреса монет с (https://dexscreener.com/new-pairs?dexIds=raydium&maxAge=24&minLiq=1000&order=desc&profile=1&rankBy=activeBoosts) Dexscreener и сохранять их в удобном формате для дальнейшего использования.

Требования к функционалу:

1. Автоматический сбор данных:

• Парсер должен автоматически обращаться к указанной странице и извлекать адреса монет из списка новых пар токенов, соответствующих заданным параметрам (dexIds=raydium, maxAge=24, minLiq=1000, order=desc, profile=1, rankBy=activeBoosts).

2. Периодичность обновления:

• Парсер должен обновлять данные с заданной периодичностью (например, каждые 15 минут или час), чтобы обеспечивать актуальность информации.

3. Хранение данных:

• Сохранение в уже созданный нами апи, или на прямую конект к бд. Код конекта и функций чтобы не возникало тубликов уже есть

4. Обработка ошибок:

• Реализация механизмов обработки ошибок и повторных попыток в случае неудачного запроса к сайту.

• Логирование ошибок и уведомление ответственных лиц о возникших проблемах.

Требования к технологии:

• Язык программирования: Python, Node.js или другой, подходящий для веб-скрейпинга.

• Использование библиотек для веб-скрейпинга (например, BeautifulSoup, Scrapy для Python)

Пример - https://dexscreener-ai-data-scraper-crypto-dex-analytics.en.softonic.com/chrome/extension

Ставки 8 Отклоненные 2 Обсуждения 1

Ярослав Стьопін

7 0

Проекты 7
Оценка 4.5
Рейтинг 1 266

Бюджет: 330 EUR Срок: 10 дней

Добрый день.
Готов взять Ваш проект.
Смогу разработать для Вас парсер на Node.js с библиотекой Puppeteer и соединить его с no-code инструментами для хранения данных.
Пишите в личные сообщения, обсудим все детали Вашего ТЗ и подберем для Вас лучшее решение.

Сергій Хижняк

28 0

Проекты 28
Оценка 5.0
Рейтинг 3 266

Бюджет: 130 EUR Срок: 5 дней

Привет, интересный проект, буду рад поработать с вами. Сделаю все быстро и качественно.

Danu Darii

10 1

Проекты 10
Оценка -
Рейтинг 827

Бюджет: 340 EUR Срок: 6 дней

Привет! Меня заинтересовал ваш проект, и я хотел бы предложить свои услуги для его реализации. Я увлечен созданием адаптивных и интерактивных сайтов от корпоративных порталов и интернет-магазинов до сложных веб-приложений. Работаю с современными технологиями вроде JavaScript/TypeScript, Laravel, WordPress, Node.js, React, Nest, Next - это позволяет мне строить быстрые и масштабируемые решения, которые легко подстроить под ваши задачи. Могу интегрировать внешние сервисы и API, чтобы ваш проект стал еще функциональнее. Давайте обсудим, как я могу помочь вам, готов ответить на вопросы и предложить решение.