Парсинг данных твиттера
У меня есть гугл таблиц несколько с ссылками на твиттер комментарии, столбец А. Нужно собрать напротив каждой ссылки на комментарий данные из твиттера по этому комментарию: количество просмотров, лайки, комментарии (соответственно столбцы В, С, D).
Ссылок на комментарии у меня несколько тысяч. Также каждый месяц будет 10000+ новых комментариев и много разных таблиц. То есть крипт должен иметь настройку, чтобы ему можно было задавать ссылки на таблицы, где нужно собирать информацию.
Рассмотрю ваши предложения, как можно реализовать эту задачу.
Отзыв заказчика о сотрудничестве с Dmytro Myrhorodskyi
Парсинг данных твиттераХороший исполнитель. Все хорошо, рекомендую.
Отзыв фрилансера о сотрудничестве с Євгеном Т.
Парсинг данных твиттераВсе хорошо, быстрые ответы заказчика, рекомендую к сотрудничеству
-
Добрый день!
У меня есть опыт разработки парсеров на Python + Selenium. Подключу автоматизацию для чтения Excel или GoogleSheets. Гарантирую быстрое выполнение и масштабирование для большого количества комментариев.
Примеры работ:
- Парсер интернет-магазина Розетка: https://freelancehunt.com/showcase/work/rozetka-parser-skraper/2003166.html
- Парсер промоакций на бирже ByBit: https://freelancehunt.com/showcase/work/bybit-tokensplash-telegram-bot-parser/1992121.html
Напишите, пожалуйста, в личные сообщения пример ссылки на комментарий и еще раз поля, которые нужно будет собирать. Будет ли это исключительно комментарий, просмотры, лайки/репосты или еще вложения с другими ответами или постом? Спасибо!
-
175 Добрый день.
Я ознакомился с вашим заданием.
Могу реализовать автоматический сбор данных из Twitter-комментариев по ссылкам из Google Таблиц.
Готов предложить оптимальное решение и обсудить детали.
Хотел бы уточнить, вам нужен парсер в виде программы, или подойдет вариант в терминале?
… С уважением,
Матвей
-
601 5 0 Здравствуйте! Ознакомился с вашим запросом. Задача понятна: нужна масштабируемая автоматизация для сбора метрик Twitter (X) напрямую в Google Sheets.
-
1422 13 0 Добрый день.
Ознакомился с задачей. Предлагаю реализацию на Python:
- чтение ссылок из Google Sheets
- сбор данных из Twitter для каждого комментария
- автоматическое заполнение столбцов B / C / D
- готовность к регулярному запуску
Сделаю решение со стабильной архитектурой, чтобы без проблем обрабатывать большие объемы данных в будущем.
…
Уточните, пожалуйста:
- нужно собирать только количество комментариев, или также текст самих комментариев / ответов?
- новые комментарии будут в той же таблице или в новой?
- пришлите, пожалуйста, пример одной ссылки на комментарий, чтобы проверить формат и доступные метрики.
После этого смогу предложить оптимальный подход, сроки и бюджет.
-
5556 12 0 У меня было расширение для браузера которое выполняло эту задачу поэтому без проблем сделаю парсер на Python
-
1455 8 0 Добрый день, у меня есть опыт работы с Питоном, а также с телеграм-ботами, могу выполнить все быстро и качественно, пишите, обсудим детали.
-
1595 7 0 Я вхожу в топ-5 разработчиков в категории «Искусственный интеллект и машинное обучение» среди ~2100 специалистов на платформе. Гарантирую: - Быстрое и качественное выполнение задания - Четкое соблюдение дедлайнов - Регулярная связь на протяжении всего процесса Буду рад обсудить детали вашего проекта в личных сообщениях.
-
172 1 1 Добрый день! Готов выполнить этот проект. Большой опыт разработки разнообразных приложений.
-
147 Добрый день! Ознакомившись с вашим ТЗ, у меня уже есть парсер, написанный на Python + Selenium (необходим Chrome для использования), который парсит количество лайков, комментариев и ответов и записывает их в таблицу. Чтобы скрипт работал, ему нужны ID Google Sheet и токен Google Service, он использует реальные куки файлы для логина в аккаунт Twitter, все необходимые ключи записываются в конфиг-файл, в случае ограничения количества просмотров твитов он просто переключается на другие аккаунты в папке cookies. Если хотите увидеть процесс работы, то могу отправить скриншоты, записи экрана и готовую таблицу.
-
2138 22 2 привет, умею хорошо парсить твиттер
сделаю это в виде тг бота, куда закидываете разные таблички и он выполняет работу
пишите, обсудим детали
-
211 1 0 Здравствуйте! Ознакомился с задачей, могу предложить реализацию через Playwright.
Работаю с Python, имею опыт браузерной автоматизации и сбора данных с сайтов с динамическим контентом (в т.ч. Twitter/X), а также интеграции с Google Sheets API.
Как предлагаю реализовать:
скрипт на Python + Playwright (реальный браузер, без эмуляции API);
чтение ссылок на комментарии из столбца A Google-таблицы;
…
открытие каждого комментария и сбор:
количества просмотров,
лайков,
ответов (комментариев);
запись результатов в столбцы B / C / D соответственно;
поддержка тысяч и десятков тысяч ссылок;
возможность задавать ссылки на любые Google-таблицы через конфигурацию;
обработка ошибок, таймаутов, удаленных/закрытых комментариев;
оптимизация скорости (очереди, паузы, антиблокировка).
При необходимости могу:
добавить логирование;
сделать запуск по расписанию;
подготовить версию для запуска на сервере.
Сроки: 3–5 дней на первую стабильную версию
Стоимость: 200–300$ (фикс, дальнейшие доработки — по договоренности)
Готов обсудить детали и предложить оптимальную архитектуру под ваши объемы.
Актуальные фриланс-проекты в категории Python
Создание многофункционального бота в Телеграм
1000 UAH
(Все материалы предоставлю в приватные сообщения) Вот детальное описание проекта: После нажатия кнопки /start Бот присылает текст с правилами и условиями пользования (под текстом, кнопка ‘ознакомлен’) После нажатия на кнопку, следующее сообщение ‘проверка на подписку’ Три… Python, Разработка ботов ∙ 2 дня 1 час назад ∙ 92 ставки |
Найти товарный фид (Google Merchant XML) для сайта на OpenCart
700 UAH
Необходимо найти прямую ссылку на действующий товарный фид (XML) конкурента для Google Merchant Center Платформа (CMS): OpenCart / ocStore Найти оригинальный фидТребования к результату: Рабочая ссылка на XML-файл Python, Парсинг данных ∙ 4 дня 14 часов назад ∙ 25 ставок |
Розработка Тик-Ток фермы (контент-завод)Необзодимо разработать систему для централизованного управления несколькими TikTok-аккаунтами с автоматической публикацией контента, использованием индивидуальных прокси и имитацией естественной активности аккаунтов. Функциональные требования1. Управление аккаунтами Добавление… Python, Разработка ботов ∙ 5 дней 2 часа назад ∙ 19 ставок |
Улучшить работу Claude Code и работа с написанием софтаСейчас разрабатываю СРМ и Аналитику, софт. Делаю через Клод Код, но понимаю что результаты не лучшие в плане изменений. Есть 2 задачи - Нужно помочь сделать пресет по навыкам, мд и так далее чтобы улучшить качество. Взять проверенные с которыми работали, а не с интернета… AI и машинное обучение, Python ∙ 5 дней 8 часов назад ∙ 26 ставок |
Система OCRНужна система распознавания текста на почтовых конвертах (индекс кому - только числа). Текст иногда может быть рукописным. Распознавание марок (подсчет количества и номинала) Python ∙ 5 дней 11 часов назад ∙ 28 ставок |