Python scraper
Необходимо написать Python-скрипт для выполнения запросов к DuckDuckGo и сбора уникальных ссылок из результатов поиска. Скрипт должен использовать модули requests и beautifulsoup4 или другие (Не использовать Selenium).
1)Поисковые запросы брать из txt файла или https://www.exploit-db.com/google-hacking-database. Поисковые запросы представляют из себя google dork (пример: камера -
inurl:"/view/index.shtml" принтер - intitle:"Hewlett-Packard" inurl:":631/printers/" умный дом -intitle:"Smart Home" intext:"powered by" intext:"home automation")
2)Скрипт должен проходить по всем запросам, после нахождения результатов в браузере собирать ссылки со всех страниц проверять их через базу sqlite на уникальность и сохранять только уникальные в txt.
-
5 дней7719 UAH
640 2 1 5 дней7719 UAHДобрый день.
Прежде всего, я просто поражен теми предложениям фрилансеров, которые пишут "ничего сложного" или "сделаю быстро". Хочется у них спросить - "Вы читали вообще задание ?" или "Пробовали запрос вставить, хотябы первый и получить все страницы, в том числе нажать кнопку показать больше ?"
Я уверен, что тут еще и капча присутсвует. И после 5-6 запросов, все "поломается"... Просто смешно.
Теперь вопрос по существу. А с чем связан отказ от использования Selenium ?
Увидел, как как можно получать страницы дальше и перебивать их. Сделаю
-
1 день1492 UAH
345 2 1 1 день1492 UAHУ меня объемный опыт в парсинга с использованием bs4 готов начать выполнять задание, если вы соглашаетесь отписать в личное сообщение
-
2 дня2573 UAH
283 1 0 2 дня2573 UAHЛюблю такие задания так как уже хорошо знаком с этой темой. Могу помочь реализовать это.
-
7 дней3088 UAH
386 1 0 7 дней3088 UAHДобрый вечер!
С радостью возьмусь за выполнения вашего проекта. Имею достаточный опыт с парсингом и запросами, и опыт работы с БД sqlite.
За деталями пишите в лс буду рад сотрудничевству)
-
2 дня1544 UAH
4154 123 0 2 дня1544 UAHГотов сделать ваше задание. с requests и bs4 знаком очень хорошо!
обращайтесь!
-
1 день5661 UAH
2532 23 2 1 день5661 UAHДобрый день, меня заинтересовал ваш проект и я хотел бы за него взяться. Хотелось бы обсудить детали проекта
-
2 дня1801 UAH
862 14 2 2 дня1801 UAHИнтересная задача . Можете ли вы дать больше подробностей в частном сообщении?
-
3 дня1544 UAH
98 3 дня1544 UAHДобрый день!
Выполнял подобные задания, задача сформулирована ясно.
-
3 дня1647 UAH
563 15 0 3 дня1647 UAHДобро пожаловать Задача довольно легкая, поэтому сложностей не должно быть.
Актуальные фриланс-проекты в категории Python
Построить модель классификации клиентов1. Есть данные клиентов в Mongo/SQL (примерно 20 000 записей с сырыми данными). 2. Необходимо на их основе построить фичи и модель классификации клиентов на поведенческие группы. 3. Проект выполнить на Python. AI и машинное обучение, Python ∙ 1 день 15 часов назад ∙ 31 ставка |
ИТ Автоматизация ведения VAT-отчетности
10 000 UAH
Необходимо разработать систему для автоматизации переноса данных о продажах из CRM в бухгалтерскую систему Wafeq. Система должна импортировать банковские и платежные отчеты, автоматически сверять платежи с инвойсами, формировать инвойсы для VAT-отчетности и минимизировать ручную… AI и машинное обучение, Python ∙ 1 день 21 час назад ∙ 41 ставка |
Инструмент сверки счетов с банком, картами и бухгалтеромТехническое задание: инструмент сверки счетов с банком, картами и бухгалтеромОбщая цель Нужен локальный инструмент (скрипт/небольшое приложение на Python), который запускается вручную раз в 1-2 месяца на моём компьютере и делает сверку между: Счетами, которые я выставил клиентам… Python, Десктопные приложения ∙ 2 дня 9 часов назад ∙ 41 ставка |
Автоматическая публикация видео в социальные сети по расписаниюТехническое задание (ТЗ) Автоматическая публикация видео в социальные сети по расписаниюОписание проекта Нужен скрипт/бот (Python предпочтительно, либо любое другое решение на ваш выбор — главное стабильность и простота поддержки), который автоматически публикует видео из папки… Python, Разработка ботов ∙ 2 дня 21 час назад ∙ 59 ставок |
Бот по прийому/пошуку анкет
1250 UAH
Если коротко: Создать бот в котором можна будет создать и найти анкету, бот должен иметь реферальные ссылки, и т д, Всё ниже расписал Бот со стороны клиента: перед кнопкой /старт текст в центре чата: What can this bot do? Добро пожаловать в Sugar Secret Agency! -Сервис… Python, Разработка ботов ∙ 2 дня 23 часа назад ∙ 63 ставки |
Одесса