Парсер данных с форума.
Работать придется с форумом https://bitcointalk.org/
Нужно реализовать парсеры/скрипты:
1. Парсинг и фильтрация тем с форума
Пример как реализовано у других:
Готовая работа:
https://docs.google.com/spreadsheets/d/1_uQR5RNfwP5ufpwoCyz5s6KGeU1WY0wZoYLXHWT0ERY/edit#gid=1824901123
Видео как работает скрипт:
https://www.youtube.com/watch?v=CdzlCzPaq3w&t=105s
2. Парсинг и фильтрация тем с форума
Пример как реализовано у других:
Готовая работа:
https://docs.google.com/spreadsheets/d/1R7Vq9xGp2k7s7I1H-939r9WFKxQVOVbOJi8YTBEkWTk/edit#gid=0
Видео как работает скрипт:
https://www.youtube.com/watch?v=LXhQ9N_2noQ
3. Отслеживание изменений в/по топику
-Изменение условий
-Цитирование
-Пост
Пример как это реализовано у других:
Готовая работа
https://docs.google.com/spreadsheets/d/1awEtqm7GinftBDeu_jmm16ILA-BofovJvacRympeT94/edit#gid=0
Видео как работает скрипт:
https://www.youtube.com/watch?v=j_dTdkTkQSM
4. Еще один элемент общей сборки согласовываю сугубо в ЛС.
Минусы такой реализации сложно обрабатывать информацию и дальнейшая интеграция на сайт (WordPress).
Нам нужен программист который сможет реализовать парсер на PHP (или другие варианты пишите свои варианты реализации)
Предлагайте этапность реализации, цены и сроки. Рассматриваем партнерство на процент.
То что реализовано у нас на данный момент:
http://free-audio.space/grid.php
Для оперативной связи писать — https://t.me/dubenko_v
-
1 day23 USD
234 1 0 1 day23 USD
Добрый день
Делал уже парсер для форума
Могу и вам сделать
По срокам часа 4
-
Если вы хотите это реализовывать в гугл таблицах, то надо будет скорее всего проплаченный аккаунт. Так как у гугла есть ограничение на время исполнения скриптов.
-
У нас уже это реализовано в гугл.
Нам этот вариант не подходит так как сложность в дальнейшей обработке данных на сайте WordPress.
Нужен автономный парсер который будет собирать постоянно работу. Работая с сервера.
http://free-audio.space/grid.php — здесь обновления происходят каждый 5 минут.
Именно такой формат в итоге проще всего интегрировать на сайт для визуальной работы с ним.
Вся информация нам нужна прежде всего в личных целях (для меня и моей команды аналитиков)
Мы анализируем крипто ICO & Bounty для себя. -
Я ссылку на сайт не давал.
Ссылка выше это вывод в визуально информации которую собирает парсер уже сейчас.
-
Можно все организовать в Ехеле. Вместе с парсингом. Потом организовать CSV выгрузку и заливать на ваш сайт.
-
На сайт в идеале лить информацию без задержки. Методика с эксель показывает что происходит задержка в работе, и мы не моежем своевременно приступить к анализу проектов.
-
Парсинг в эксель у нас уже реализован. Мы готовы алгоритмы передать для того чтоб человек быстрее включился в реализацию работы именно на PHP (или удобном для него языке програмирования)
-
Вы как специалист наверное хотели спросить о том какой формат сбора данных требуется нам и в каком виде выводить инфу...
В идеале mysql
Дабы в дальнейшем можно было из базы выдерать данные и настраивать уже само отображение данных.
Если у Вас есть иные предложения готов выслушать. -
Нет. Я имел ввиду интерфейс передачи данных между парсером и страницей. Базу данных использовать нагрузительно. Поэтому если данные сохранять не надо, то можно через json передавать данные. Почему говорю про передачу данных между-между? Потому как такие системы строятся по объектной модели. Нет смысла впихивать парсер в страницу ))
-
Данные сохранять нужно.
Их нужно помимо того еще и редактировать и фильтровать.
И после портировать на сайт WordPress (или уже на стороне WP это делать) -
Нам нужно парсить данные не единоразово, а постоянно их портировать на сайт WordPress (это делает другой человек)
Главное чтоб он смог подхватить данные для обработки.
И на сайте мы дополняем личным анализом проектов. -
Я плохо воспринимаю задания в виде видеопотока: всё-таки программирование - это работа с текстом. Кроме того, сравнивать результат проще с текстовым описанием, чем с видео того, "как это работает у других". Я уже много раз сталкивался с тем, что в таких случаях вылезают несоответствия, с тем, что на видео не особо заметно, а для заказчика оказывается критично. А мне приходится дорабатывать бесплатно. Сами понимаете, очень неприятная ситуация. Можете дать ТЗ в виде текста? Что именно забирать с форума, как обрабатывать и в каком виде отдавать.
Могу предложить вариант с парсером на Python и выгрузкой результата в базу данных под MariaDB/MySQL. Оттуда Вы легко сможете забирать её и отображать на сайте. Или можно выгружать в CSV, если так будет удобнее. -
Добрый день! Так это Ваши примеры или нет?
-
Current freelance projects in the category Data Parsing
BOT, TG
226 USD
Hello everyone, friends. I will try to describe what is needed in more detail, but if questions arise, we will discuss them more deeply and clarify in private messages. We are focused on sales in the construction sector: in general, this includes several sales channels and… Data Parsing, Bot Development ∙ 59 minutes back ∙ 12 proposals |
Need a parser for the online store https://www.lcsc.com/It is necessary to regularly (once a month, or upon script launch) obtain up-to-date information about the products available in the store. https://www.lcsc.com/ from the catalog of all sections.… Data Parsing ∙ 1 day 1 hour back ∙ 41 proposals |
OpenCart — rental catalog of special equipment
135 USD
OpenCart — Equipment Rental Catalog Need to launch an equipment rental catalog on OpenCart. Theme: excavators cherry pickers forklifts generators cranes scaffolding other construction equipment. It is preferable that you already have a ready-made template or developments… Web Programming, Data Parsing ∙ 1 day 17 hours back ∙ 55 proposals |
Transfer the program - the server where the program was located has crashed (officially permitted parsing of government data)
46 USD
Hello! My client has encountered the case described below. We need help transferring to a new server and testing the program. It would be better to have a programmer who understands parsing. Software & Server Configuration, Data Parsing ∙ 1 day 21 hours back ∙ 29 proposals |
Website parsingImplementation of 4 parsers (directory websites) is required. There is a technical specification, and there is a code example as a reference. The tasks include: Writing a parser Integrating a proxy Deduplication logic (transfer the logic from the example) Hashing logic based… Data Parsing ∙ 3 days 14 hours back ∙ 44 proposals |
Kyiv