Switch to English?
Yes
Переключитись на українську?
Так
Переключиться на русскую?
Да
Przełączyć się na polską?
Tak
Opublikuj swoje zlecenie za darmo i otrzymaj oferty od wykonawców freelancerów już minutę po opublikowaniu!

Парсер на PHP

410 PLN

  1. 72    3  1
    7 dni1229 PLN

    Внимательно прочитал задание, есть пару вопросов, например:
    1. Почему не справились предыдущие фрилансеры?
    2. Есть какое то техническое ограничение на парсинг StackOverflow с их стороны?

    О себе:
    Senior Full Stack Dev в одной из топовых компаний Украины. Есть опыт менторинга, 1to1. Написал много интеграций с различными сервисами - от поставщика интернет услуг до интеграций с ERP системами. Опыт улучшения и имплементации бизнес процессов.

    Skills:
    4+ years of experience with Java 7, 8, 11;
    4+ years of experience with React.js,Node.js;
    Experience with common front-end development tools such as Babel, Webpack, NPM, etc.;
    Experience with Microservice architecture;
    Experience with third parties integration;
    Strong knowledge of Typescript;
    Strong knowledge of HTML5, CSS3 and ECMAScript 6+;
    Ability to cover production code with tests — both unit and integration ones;
    Willingness to learn and to work with Scala; English B2.

  2. 291    3  1
    25 dni2459 PLN

    Добрый день.
    ОПЫТ РАБОТЫ БОЛЕЕ 8 ЛЕТ. Буду рад сотрудничеству.
    Пишите Л.С., обсудим.

  3. 647    42  0
    4 dni410 PLN

    Добрый день, можете более подробно рассказать. парсер будет висеть как демон и постоянно парсить или будет вводиться вопрос на вашем сайте и в этот момент будет переводится на англ и искать на стек овер флов и найденый ответ записывать в бд перевод?
    какой перевод? гугл траслейт (апи подойдет 20$\1млн стоимость у гугла)

  4. Jeszcze 4 ofert jest ukrytych
  • Profil został zablokowany
    28 czerwca 2021, 15:33 |

    Если несколько брались, видимо не читали тз ибо по первому пункту уже ясно что задача не для php. В php нет многопоточности. Есть конечно pthreads, но это нужно на сервер устанавливать это расширение. Отзывы о такой "многопоточности" сомнительные 

  • Profil został usunięty
    28 czerwca 2021, 16:02 |

    Есть и другие расширения на эту тему, если POSIX вас чем-то обидел. Но вас никто не принуждает форкать конкретный функционал и расшаривать память. 

    Например, если вы можете запустить н-нное количество копий приложения и они будут работать обособленно с разными наборами данных, то чем вам это не многопоточность? 

  • Profil został zablokowany
    28 czerwca 2021, 16:04 |

    тогда нужно дополнительно реализовывать очередь, пул заданий, писать дополнительный велосипед 

  • Profil został usunięty
    28 czerwca 2021, 16:10 |

    Т.е. писать приложение? Да.

    От того что вы возьмете другой язык, где многопоточность реализована нативно -  необходимость распараллеливать и собирать общую очередь на обработку никуда не денется. Или вы в одном потоке предлагаете 100500 страниц собрать и каждую сразу на асинхронную обработку отдавать?

  • Profil został zablokowany
    28 czerwca 2021, 16:15 |

    Мораль моего первого сообщения в том, что каждый язык имеет ряд плюсов и минусов, где один язык силен, а другой и вовсе не годится. В данном случае это работа не для php. Конечно все зависит от рук, но затраченного времени будет в разы больше.
    Нет, я не предлагаю это делать асинхронно, мало какой проект, где есть большое количество задач, обходится без брокеров сообщений

  • David Bur'yanuvaty
    28 czerwca 2021, 15:51 |

    А зачем тут многопоточность. Речь не идет в задание о скорости. Пусть шуршит себе скрипт в одном потоке. Данные  будут парситься и всё будет хорошо))

  • Profil został zablokowany
    28 czerwca 2021, 15:52 |

    Техническое задание на разработку парсера вопросов и ответов со stackoverflow.com



    Нужно реализовать парсер всех вопросов (как с ответами, так и без них) с последующим переводом на русский язык через переводчик Google (готовая библиотека)


    Парсер должен быть многопоточным.

    Я об этом

     

  • Profil został zablokowany
    28 czerwca 2021, 15:52 |

    не увидела что ответ не мне, прошу прощения

  • Gavryushina Lyubov
    28 czerwca 2021, 16:14 |

    Если на php не получится, то можно на другом языке. Парсер будет работать на сервере, пока не спарсит все вопросы.

  • Profil został zablokowany
    28 czerwca 2021, 16:18 |

    Спасибо за ответ.

  • Profil został zablokowany
    28 czerwca 2021, 16:19 |

    Но на вопросы отвечают каждый день. Нужен функционал который будет сверять вопросы и добавлять новые? или это разовая обработка? 

  • Gavryushina Lyubov
    28 czerwca 2021, 16:27 |

    Сверять и добавлять

  • Profil został usunięty
    29 czerwca 2021, 1:01 |

    21 417 018 вопросов)) Даже, если по 1 млн в день парсить, то тут 20 дней надо минимум))

Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych

Python / Inżynier Sieciowy: Optymalizacja sieci bota (WAF, Pooling połączeń, Asyncio)

Uproszczona wersja! Proszę o odpowiedź tylko tych, którzy rozumieją i znają się na rzeczy. O projekcie: Zautomatyzowany bot do snajpingu. Podstawowa logika biznesowa (parsowanie, autoryzacja, budowanie pakietów JSON/XML) jest już gotowa i działa w Pythonie. Docelowe środowisko…

PythonParsowanie danych ∙ 10 godzin 33 minuty temu ∙ 14 ofert

OpenCart — katalog wynajmu sprzętu specjalistycznego

492 PLN

OpenCart — katalog wynajmu sprzętu specjalistycznegoPotrzebne jest uruchomienie katalogu wynajmu sprzętu specjalistycznego na OpenCart.Tematyka:koparkipodnośnikiładowarkigeneratorydźwigirusztowaniainny sprzęt budowlany.Preferowane, abyście mieli już gotowy szablon lub…

Programowanie stron internetowychParsowanie danych ∙ 10 godzin 43 minuty temu ∙ 42 oferty

Przenieść program - serwer, na którym był program, padł (oficjalne dozwolone parsowanie danych publicznych)

169 PLN

Witaj! Mój klient ma przypadek opisany poniżej. Potrzebna pomoc w przeniesieniu na nowy serwer i przetestowaniu programu. Lepiej, aby to był programista, który zna się na parsowaniu.

Konfigurowanie oprogramowania i serwerówParsowanie danych ∙ 14 godzin 36 minut temu ∙ 22 oferty

Parsowanie i klasyfikacja dużej liczby obrazów

Należy zrealizować projekt zbierania i strukturyzacji dużej ilości architektonicznych obrazów z otwartych źródeł internetowych.Zadanie obejmuje: automatyczne zbieranie obrazów; ładowanie plików w maksymalnie dostępnej jakości; klasyfikację obrazów według kategorii: Exterior;…

PythonParsowanie danych ∙ 15 godzin 4 minuty temu ∙ 30 ofert

Parsowanie CV z Work.ua i Rabota.ua

Należy pobrać w formacie Excel bazę aktualnych CV z Work.ua i Работа.ua. Preferowane, aby plik Excel zawierał następujące kolumny:ImięNumer telefonu (w formacie +380...)Adres e-mailStanowisko (zawód)Stanowiska, które rozważaKategoria branży (rubryka)Branża, w której…

Wyszukiwanie i zbieranie informacjiParsowanie danych ∙ 1 dzień 14 godzin temu ∙ 18 ofert

Zleceniodawca
Gavryushina Lyubov
Ukraina Lwów  69  0
Zlecenie zostało opublikowane
4 lata temu
137 wyświetleń