Switch to English?
Yes
Переключитись на українську?
Так
Переключиться на русскую?
Да
Przełączyć się na polską?
Tak
Post your project for free and start receiving proposals from freelancers within minutes after publication!

Парсер на PHP

111 USD

  1. 72    3  1
    7 days334 USD

    Внимательно прочитал задание, есть пару вопросов, например:
    1. Почему не справились предыдущие фрилансеры?
    2. Есть какое то техническое ограничение на парсинг StackOverflow с их стороны?

    О себе:
    Senior Full Stack Dev в одной из топовых компаний Украины. Есть опыт менторинга, 1to1. Написал много интеграций с различными сервисами - от поставщика интернет услуг до интеграций с ERP системами. Опыт улучшения и имплементации бизнес процессов.

    Skills:
    4+ years of experience with Java 7, 8, 11;
    4+ years of experience with React.js,Node.js;
    Experience with common front-end development tools such as Babel, Webpack, NPM, etc.;
    Experience with Microservice architecture;
    Experience with third parties integration;
    Strong knowledge of Typescript;
    Strong knowledge of HTML5, CSS3 and ECMAScript 6+;
    Ability to cover production code with tests — both unit and integration ones;
    Willingness to learn and to work with Scala; English B2.

  2. 291    3  1
    25 days668 USD

    Добрый день.
    ОПЫТ РАБОТЫ БОЛЕЕ 8 ЛЕТ. Буду рад сотрудничеству.
    Пишите Л.С., обсудим.

  3. 707    42  0
    4 days111 USD

    Добрый день, можете более подробно рассказать. парсер будет висеть как демон и постоянно парсить или будет вводиться вопрос на вашем сайте и в этот момент будет переводится на англ и искать на стек овер флов и найденый ответ записывать в бд перевод?
    какой перевод? гугл траслейт (апи подойдет 20$\1млн стоимость у гугла)

  4. Another 4 proposals concealed
  • Profile blocked
    28 June 2021, 15:33 |

    Если несколько брались, видимо не читали тз ибо по первому пункту уже ясно что задача не для php. В php нет многопоточности. Есть конечно pthreads, но это нужно на сервер устанавливать это расширение. Отзывы о такой "многопоточности" сомнительные 

  • Profile deleted
    28 June 2021, 16:02 |

    Есть и другие расширения на эту тему, если POSIX вас чем-то обидел. Но вас никто не принуждает форкать конкретный функционал и расшаривать память. 

    Например, если вы можете запустить н-нное количество копий приложения и они будут работать обособленно с разными наборами данных, то чем вам это не многопоточность? 

  • Profile blocked
    28 June 2021, 16:04 |

    тогда нужно дополнительно реализовывать очередь, пул заданий, писать дополнительный велосипед 

  • Profile deleted
    28 June 2021, 16:10 |

    Т.е. писать приложение? Да.

    От того что вы возьмете другой язык, где многопоточность реализована нативно -  необходимость распараллеливать и собирать общую очередь на обработку никуда не денется. Или вы в одном потоке предлагаете 100500 страниц собрать и каждую сразу на асинхронную обработку отдавать?

  • Profile blocked
    28 June 2021, 16:15 |

    Мораль моего первого сообщения в том, что каждый язык имеет ряд плюсов и минусов, где один язык силен, а другой и вовсе не годится. В данном случае это работа не для php. Конечно все зависит от рук, но затраченного времени будет в разы больше.
    Нет, я не предлагаю это делать асинхронно, мало какой проект, где есть большое количество задач, обходится без брокеров сообщений

  • David Bur'yanuvaty
    28 June 2021, 15:51 |

    А зачем тут многопоточность. Речь не идет в задание о скорости. Пусть шуршит себе скрипт в одном потоке. Данные  будут парситься и всё будет хорошо))

  • Profile blocked
    28 June 2021, 15:52 |

    Техническое задание на разработку парсера вопросов и ответов со stackoverflow.com



    Нужно реализовать парсер всех вопросов (как с ответами, так и без них) с последующим переводом на русский язык через переводчик Google (готовая библиотека)


    Парсер должен быть многопоточным.

    Я об этом

     

  • Profile blocked
    28 June 2021, 15:52 |

    не увидела что ответ не мне, прошу прощения

  • Gavryushina Lyubov
    28 June 2021, 16:14 |

    Если на php не получится, то можно на другом языке. Парсер будет работать на сервере, пока не спарсит все вопросы.

  • Profile blocked
    28 June 2021, 16:18 |

    Спасибо за ответ.

  • Profile blocked
    28 June 2021, 16:19 |

    Но на вопросы отвечают каждый день. Нужен функционал который будет сверять вопросы и добавлять новые? или это разовая обработка? 

  • Gavryushina Lyubov
    28 June 2021, 16:27 |

    Сверять и добавлять

  • Profile deleted
    29 June 2021, 1:01 |

    21 417 018 вопросов)) Даже, если по 1 млн в день парсить, то тут 20 дней надо минимум))

Current freelance projects in the category Data Parsing

Scrape Telegram groups

16 USD

Need to scrape telegrams from groups and sort them into folders. Public and private groups are required. Everything that exists in Poland

Data ParsingBot Development ∙ 8 hours 55 minutes back ∙ 14 proposals

Research of the premium segment in Kyiv

Research of the premium segment in Kyiv It is necessary to search for open public communication channels with representatives of the premium segment in Kyiv. What needs to be collected: openly published email or phone number for contact, if it is posted in a public source. Who…

Data ParsingInformation Gathering ∙ 19 hours 15 seconds back ∙ 12 proposals

A specialist in Telegram promotion is required.

29 USD

Tasks: invite real users from the username database to new chats and send messages to the target database. Only quality traffic and work with a live audience are of interest — performers using bots, fake engagement, or low-quality methods are requested NOT TO DISTURB. Work…

Data ParsingSocial Media Marketing (SMM) ∙ 3 days 13 hours back ∙ 8 proposals

Collection of B2B database of companies in Germany

40 USD

Goal: To obtain a list of potential employers (clients) for B2B mailing. Region: Munich (München) + radius of 50 km. Required niches: Construction companies (Bauunternehmen) Food enterprises (Lebensmittelhersteller, meat processing plants, bakeries) Logistics and…

Data ParsingLead Generation & Sales ∙ 3 days 15 hours back ∙ 34 proposals

Consultation on parsing Instagram account subscribers

Hello. It is necessary to conduct a preliminary assessment of the feasibility of the following task. I have a list of Instagram accounts. The goal is to obtain contact information (primarily email addresses) of users who follow these accounts. Previously, I encountered companies…

Data Parsing ∙ 7 days 8 hours back ∙ 13 proposals

Client
Gavryushina Lyubov
Ukraine Lvov  69  0
Project published
4 years back
137 views