Парсер данных с форума.
Работать придется с форумом https://bitcointalk.org/
Нужно реализовать парсеры/скрипты:
1. Парсинг и фильтрация тем с форума
Пример как реализовано у других:
Готовая работа:
https://docs.google.com/spreadsheets/d/1_uQR5RNfwP5ufpwoCyz5s6KGeU1WY0wZoYLXHWT0ERY/edit#gid=1824901123
Видео как работает скрипт:
https://www.youtube.com/watch?v=CdzlCzPaq3w&t=105s
2. Парсинг и фильтрация тем с форума
Пример как реализовано у других:
Готовая работа:
https://docs.google.com/spreadsheets/d/1R7Vq9xGp2k7s7I1H-939r9WFKxQVOVbOJi8YTBEkWTk/edit#gid=0
Видео как работает скрипт:
https://www.youtube.com/watch?v=LXhQ9N_2noQ
3. Отслеживание изменений в/по топику
-Изменение условий
-Цитирование
-Пост
Пример как это реализовано у других:
Готовая работа
https://docs.google.com/spreadsheets/d/1awEtqm7GinftBDeu_jmm16ILA-BofovJvacRympeT94/edit#gid=0
Видео как работает скрипт:
https://www.youtube.com/watch?v=j_dTdkTkQSM
4. Еще один элемент общей сборки согласовываю сугубо в ЛС.
Минусы такой реализации сложно обрабатывать информацию и дальнейшая интеграция на сайт (WordPress).
Нам нужен программист который сможет реализовать парсер на PHP (или другие варианты пишите свои варианты реализации)
Предлагайте этапность реализации, цены и сроки. Рассматриваем партнерство на процент.
То что реализовано у нас на данный момент:
http://free-audio.space/grid.php
Для оперативной связи писать — https://t.me/dubenko_v
-
1 dzień82 PLN
234 1 0 1 dzień82 PLN
Добрый день
Делал уже парсер для форума
Могу и вам сделать
По срокам часа 4
-
Если вы хотите это реализовывать в гугл таблицах, то надо будет скорее всего проплаченный аккаунт. Так как у гугла есть ограничение на время исполнения скриптов.
-
У нас уже это реализовано в гугл.
Нам этот вариант не подходит так как сложность в дальнейшей обработке данных на сайте WordPress.
Нужен автономный парсер который будет собирать постоянно работу. Работая с сервера.
http://free-audio.space/grid.php — здесь обновления происходят каждый 5 минут.
Именно такой формат в итоге проще всего интегрировать на сайт для визуальной работы с ним.
Вся информация нам нужна прежде всего в личных целях (для меня и моей команды аналитиков)
Мы анализируем крипто ICO & Bounty для себя. -
Я ссылку на сайт не давал.
Ссылка выше это вывод в визуально информации которую собирает парсер уже сейчас.
-
Можно все организовать в Ехеле. Вместе с парсингом. Потом организовать CSV выгрузку и заливать на ваш сайт.
-
На сайт в идеале лить информацию без задержки. Методика с эксель показывает что происходит задержка в работе, и мы не моежем своевременно приступить к анализу проектов.
-
Парсинг в эксель у нас уже реализован. Мы готовы алгоритмы передать для того чтоб человек быстрее включился в реализацию работы именно на PHP (или удобном для него языке програмирования)
-
Вы как специалист наверное хотели спросить о том какой формат сбора данных требуется нам и в каком виде выводить инфу...
В идеале mysql
Дабы в дальнейшем можно было из базы выдерать данные и настраивать уже само отображение данных.
Если у Вас есть иные предложения готов выслушать. -
Нет. Я имел ввиду интерфейс передачи данных между парсером и страницей. Базу данных использовать нагрузительно. Поэтому если данные сохранять не надо, то можно через json передавать данные. Почему говорю про передачу данных между-между? Потому как такие системы строятся по объектной модели. Нет смысла впихивать парсер в страницу ))
-
Данные сохранять нужно.
Их нужно помимо того еще и редактировать и фильтровать.
И после портировать на сайт WordPress (или уже на стороне WP это делать) -
Нам нужно парсить данные не единоразово, а постоянно их портировать на сайт WordPress (это делает другой человек)
Главное чтоб он смог подхватить данные для обработки.
И на сайте мы дополняем личным анализом проектов. -
Я плохо воспринимаю задания в виде видеопотока: всё-таки программирование - это работа с текстом. Кроме того, сравнивать результат проще с текстовым описанием, чем с видео того, "как это работает у других". Я уже много раз сталкивался с тем, что в таких случаях вылезают несоответствия, с тем, что на видео не особо заметно, а для заказчика оказывается критично. А мне приходится дорабатывать бесплатно. Сами понимаете, очень неприятная ситуация. Можете дать ТЗ в виде текста? Что именно забирать с форума, как обрабатывать и в каком виде отдавать.
Могу предложить вариант с парсером на Python и выгрузкой результата в базу данных под MariaDB/MySQL. Оттуда Вы легко сможете забирать её и отображать на сайте. Или можно выгружать в CSV, если так будет удобнее. -
Добрый день! Так это Ваши примеры или нет?
-
Aktualne zlecenia dla freelancerów w kategorii Parsowanie danych
Potrzebny parser sklepu internetowego https://www.lcsc.com/należy regularnie (1 raz w miesiącu, lub przy uruchomieniu skryptu) uzyskiwać aktualne informacje o produktach dostępnych w sklepie https://www.lcsc.com/ z katalogu wszystkich działów… Parsowanie danych ∙ 5 godzin 50 minut temu ∙ 28 ofert |
OpenCart — katalog wynajmu sprzętu specjalistycznego
492 PLN
OpenCart — katalog wynajmu sprzętu specjalistycznegoPotrzebne jest uruchomienie katalogu wynajmu sprzętu specjalistycznego na OpenCart.Tematyka:koparkipodnośnikiładowarkigeneratorydźwigirusztowaniainny sprzęt budowlany.Preferowane, abyście mieli już gotowy szablon lub… Programowanie stron internetowych, Parsowanie danych ∙ 22 godziny 17 minut temu ∙ 46 ofert |
Przenieść program - serwer, na którym był program, padł (oficjalne dozwolone parsowanie danych publicznych)
169 PLN
Witaj! Mój klient ma przypadek opisany poniżej. Potrzebna pomoc w przeniesieniu na nowy serwer i przetestowaniu programu. Lepiej, aby to był programista, który zna się na parsowaniu. Konfigurowanie oprogramowania i serwerów, Parsowanie danych ∙ 1 dzień 2 godziny temu ∙ 27 ofert |
Parsowanie stronyWymagana jest implementacja 4 parserów (strony katalogowe) Jest specyfikacja, jest przykład kodu jako referencja. Do zadań należy: Napisanie parsera Podłączenie proxy Logika deduplikacji (przeniesienie logiki z przykładu) Logika haszowania według 3 pól Parser powinien… Parsowanie danych ∙ 2 dni 18 godzin temu ∙ 42 oferty |
Zbieranie (parsowanie) bazy towarów z witryn dostawców (Excel / CSV)
820 PLN
Zbieranie bazy produktów z witryn dostawców (Excel / CSV)Dzień dobry.Potrzebny jest specjalista do zbierania i strukturyzowania danych z kilku witryn dostawców, do których dostęp zostanie zapewniony.Zadanie:Należy stworzyć jednolitą bazę produktów w formacie Excel (XLSX) lub… Programowanie stron internetowych, Parsowanie danych ∙ 4 dni 2 godziny temu ∙ 103 oferty |
Kijów