Switch to English?
Yes
Переключитись на українську?
Так
Переключиться на русскую?
Да
Przełączyć się na polską?
Tak
Post your project for free and start receiving proposals from freelancers within minutes after publication!

Парсинг информации

334 USD

  1. 11142
     160  0

    10 days334 USD

    Добрый день, решение уже есть готовое
    Готов обсудить помочь с реализацией

  2. 10038    117  0
    5 days334 USD

    Здравствуйте.

    Разрабатываю ботов и парсеры на NodeJS. Готов взяться. Пишите, обсудим.

  1. 528    40  3   2
    7 days1113 USD

    Добрый день,
    Располагаю сборщиком прокси (до 500 уникальных прокси в час), дополнительно можем закупаться рандомными прокси (знаю пару сервисов). Через библиотеку курл настрою проксируемые запросы к указанному вами урлу без кеширования, разумеется. Скрипт будет написан на PHP и работать через крон согласно заданному промежутку. Токен можно хранить в redux либо подобных инструментов для быстрой записи. Более детально предлагаю обсудить в ЛС
    С уважением,
    Илья

  • Profile deleted
    24 December 2021, 16:20 |

    Здравствуйте, уточните подробнее пожалуйста, что именно надо делать

  • Bogdan P.
    24 December 2021, 16:35 |

    Добрый день, необходимо получать так называемый "тикер" (название которое состоит из заглавных английских букв, от 2 до 5 символов. Например: BTC .

  • Bogdan P.
    24 December 2021, 16:39 |

    Тикеры находятся в скобках (BTC)

  • Profile deleted
    24 December 2021, 16:56 |

    Так отдает вроде нормально, стабильно.  Далее где используется?

  • Bogdan P.
    24 December 2021, 17:25 |

    Необходимо лишь найти способ быстро получать актуальную информацию, дальше уже сами)

  • Profile deleted
    24 December 2021, 17:31 |

    image

    по вашей ссылке открывается json файл, в каком ключе содержится необходимый вам тикер? 

  • Bogdan P.
    24 December 2021, 17:32 |

    image

  • Profile deleted
    24 December 2021, 17:44 |

    Я правильно понимаю, что мы обращаемся к этой ссылке каждые 1-2мс  и каждый раз или через n количество обращений она одает нам другой тикер. Суть в том, что бы деля сотни запросов не получить бан от фаерволла. Верно? 

  • Profile deleted
    24 December 2021, 17:48 |

    или мы должны заставить их сервер отдавать нам эту информацию за 1-2мс?

  • Bogdan P.
    24 December 2021, 17:52 |

    К сожалению мы этого не в силе сделать 😅

  • Bogdan P.
    24 December 2021, 17:51 |

    Когда будет новый тикер, никто не знает, но когда он появится нужно быстрее всех его отловить) Там две ошибки не позволяют это сделать 429 и 403. Как вариант для скорости, можно использовать мультиплексирование, но самое главное чтобы стабильно.

  • Oleg B.
    24 December 2021, 18:50 |

    2 мс в секунуду це 500 запросів в секунду, похоже на dos трохи

  • Bogdan P.
    24 December 2021, 18:55 |

    Ну это как посмотреть) Но в целом, может и так показаться)

  • Profile deleted
    24 December 2021, 20:32 |

    Нужен хороший пул прокси. Н было бы неплохо уточнить - должен же быть четкий промежуток времени, а не бомбить постоянно?

Current freelance projects in the category Data Parsing

Data parsing through mobile API

Looking for a person with experience in data parsing through mobile API, for parsing e-commerce, rozetka and similar sites. Tasks: 1. Intercepting traffic from the mobile application (Android), setting up a proxy, analyzing requests. 2. Identifying the necessary API endpoints…

PythonData Parsing ∙ 1 day 18 hours back ∙ 27 proposals

Looking for a programmer or vibe coding Automation scraping data 2

https://drive.google.com/file/d/14tP5XWJB9acV4gn_cJrFwMpihUj3EbQz/view?usp=sharing I accidentally sent that link

Web ProgrammingData Parsing ∙ 1 day 21 hours back ∙ 35 proposals

Create a dashboard in https://airtable.com/ for the performance of advertising creatives from Facebook ads.

Full specification https://docs.google.com/document/d/1_n_oYRNZWYxalUA---DM5AD1b5ZSrtePw5J4G42svGw/edit?usp=sharing

Databases & SQLData Parsing ∙ 6 days 15 hours back ∙ 19 proposals

Creation of an Excel file for uploading products to the websites of other partners.

I am interested in creating an Excel table with all parameters. Here is the website - https://heiztechnik.com.ua/ And the positions I am interested in to be transferred: Manual boilers: 1) TIS UNI 15-95 kW (10) pcs 2)TIS HARD 150-500 kW (7) pcs Pellet boilers: 1)TIS PELLET…

Data Parsing ∙ 6 days 19 hours back ∙ 38 proposals

A developer is required for parsing the catalog and automating data import.

Detailed technical specifications in the attached document Please indicate the estimated cost and timeline in your response Do you have experience working with parsing large catalogs What possible difficulties or limitations do you see in this task

Databases & SQLData Parsing ∙ 6 days 22 hours back ∙ 43 proposals

Client
Bogdan P.
Ukraine Poltava  12  0
Project published
4 years back
259 views