Парсинг данных с группировкой и выполнениям действий.
Дано:
- Есть информация с разных источников данных ( сайты, канали и тд)
- Есть пользователь со своими соц сетями
Боль: выполнения однообразных действий
Надо: регистрироватся- подписывайся, лайкать, вступать в группу
Проблема: надо тратить много времени ( по 5-10 мин на 1 сайт) несколько сайтов в день, каждый день.
Выгода от использования бота: економленое время и успешная регистрация
Решение: бот который собирает данные, и выполняет ети действия
Требуется:
Создать бота (телеграмм или сайт), который будет собирать информацию с нескольких сайтов и телеграмм каналов для послед. группирования и сортировки
Бот будет работать для пользователей
Там необходимо сделать так, что б новый пользователь мог давать доступ ( почта, телеграмм, твиттер и тд) после етого бот будет виполнять определённые действия с етих акаунтов типа подписка, лайк, и др.
Или второй вариант
сделать сначала сбор данных в таблицу
И потом в ручную администратор проекта будет присваивать каждому варианту - единственный правильный ( либо лайк либо подписка и тд)
И потом когда пользователь присоединяется бот уже будет выполнять сразу правильные действия
Пс ето не будет биржа для зароботка где надо лайкать, добавлять в друзья за монеты, или какие то деньги.
Продукт конкретно под одну нишу для одной сферы.
Для начала:
Напишите идеи или план реализации, который вы видите.
Псс
Вариант разработки ( язык программирования или нюансы в коде - не имеют большого значения)
Скорость сбора данных ( в мили секундах) не важна.
Количество пользователей(нагрузка для бота): всего 10-20 человек
Итого
Что хочу видеть после завершения работы: готовый прототип, который собирает данные, сортирует их и возможность для пользователя автоматически принимать там участие ( выполнив все действия)
Вопросы можете писать где удобно, или в личку
что то похожее нарисовал на листе( прикрепил внизу)
Всегда на связи
Приложения 1
-
1825 52 0 Могу написать бота на java. Если сайт простой - то можно будет обойтись простыми get и post запросами. Если сложный или есть защиты от ботов - тогда нужно будет подключать selenium - полную симуляцию браузера. В первом случае будет работать быстро, во втором случае будет работать медленнее - но зато стабильно. Уже делал подобную программу для сайта - author24 (можете посмотреть в портфолио)
-
250 1 0 Если я правильно понимаю, нужно парсить какое-то количество информации с предоставленных источников и делать с них определенные наборы действий. Пока непонятно сколько ресурсов задействовано и столько нужно получать информации с источника для классификации источника по алгоритму действий пользователя.
Первая часть - парсинг, к ней следующие вопросы:
1) Источники с фиксированного количества ресурсов задействованы? Нужен перечень, каждый источник будет требовать свой алгоритм для простых действий пользователя, на это нужно время... и деньги...
2) Какая информация нужна с источников и сколько, чтобы пользователь мог классифицировать источник по действиям?
Вторая - реализация взаимодействия с полученными данными пользователей. Тоже вопросы:
1) Какие именно взаимодействия помимо лайка, подписки для каждого источника нужно? В телеге, например, нет репоста к себе на страницу.
Помимо этого нужно понимать, что не все ресурсы приветствуют автоматизацию действий пользователя и учетки просто могут улетать в бан даже на этапе тестирования, отсюда следующий вопрос:
… 2) Сколько учеток будет у каждого из пользователей и будут ли какие-то из них выделены под тест?
Я делала подобную задачу, поэтому вопросов много... Вид парсера (гугл таблица, бот в тг - оболочка, проще говоря) и дело десятое. Мне нужно понимать какая нагрузка планируется на скрипт и больше кокретики по самой задаче, чтобы понимать как её реализовать без потерь. Автоматизация действий пользователя - это проблематично для одной соцсети из-за защиты от флуда, а если для перечня, то это еще и очень затратно по времени. Куда проще просто сделать парсер, который будет собирать данные, а пользователи вручную будут уже выполнять действия и это тоже не гарантирует, что все ресурсы адекватно воспримут повышенную активность пользователя.
Так же было бы неплохо понять, по каким критериям классифицируется полученная информация. Если речь о каком-то ключевом слове или параметрам страницы, то можно было бы целиком автоматизировать все с каким-то рандомным приемлимым таймингом на выполнении действий пользователя и тогда этому скрипту вообще не нужна будет никакая оболочка.
Кароче, тз надо:)
-
299 2 0 Здравствуйте. Напишите в личку. нужно понять по какому принципу группировать контент. и Конечно хотелось бы более подробно увидеть схему на конкретном примере. опыт реализации подобных задач огромный, более 10 лет.
-
114 Короч...
Я умею делать ботов для телеги, занимался парсингом с телеграмма и сайтов + работал с БД.
Но!!! Не делал вход с почты... Беру 3 дня, что бы посмотреть как это делается, а так с радостью взялся бы за твой заказ )
-
Вот это да. И у нас есть доналд трамп 😁
-
Актуальные фриланс-проекты в категории Python
Создание Тик-ток фермы с генерацией дохода
27 000 UAH
в поиске человека, который может написать софт, для фермы тик ток, чтобы мы смогли генерировать трафик, получать доход. Ищем готовое решение с полным циклом. Python, Разработка ботов ∙ 2 дня 9 часов назад ∙ 16 ставок |
AI Commenting Platform для TikTok и Instagram.Цель проекта Разработать систему, которая позволяет управлять большим количеством аккаунтов TikTok и Instagram и автоматически публиковать релевантные комментарии под выбранными видео с использованием ИИ. Основной функционал1. Управление аккаунтами Необходимо реализовать… AI и машинное обучение, Python ∙ 3 дня 16 часов назад ∙ 22 ставки |
Построить модель классификации клиентов1. Есть данные клиентов в Mongo/SQL (примерно 20 000 записей с сырыми данными). 2. Необходимо на их основе построить фичи и модель классификации клиентов на поведенческие группы. 3. Проект выполнить на Python. AI и машинное обучение, Python ∙ 5 дней 11 часов назад ∙ 45 ставок |
ИТ Автоматизация ведения VAT-отчетности
10 000 UAH
Необходимо разработать систему для автоматизации переноса данных о продажах из CRM в бухгалтерскую систему Wafeq. Система должна импортировать банковские и платежные отчеты, автоматически сверять платежи с инвойсами, формировать инвойсы для VAT-отчетности и минимизировать ручную… AI и машинное обучение, Python ∙ 5 дней 16 часов назад ∙ 51 ставка |
Инструмент сверки счетов с банком, картами и бухгалтеромТехническое задание: инструмент сверки счетов с банком, картами и бухгалтеромОбщая цель Нужен локальный инструмент (скрипт/небольшое приложение на Python), который запускается вручную раз в 1-2 месяца на моём компьютере и делает сверку между: Счетами, которые я выставил клиентам… Python, Десктопные приложения ∙ 6 дней 4 часа назад ∙ 43 ставки |