Настройка Celenium на сервере + парсинг данных
500 UAHСервер
Ubuntu 18.04, 8ГБ Озу
ISP
Необходимо: настроить на сервере Celenium.
Написать на php/питоне/других языках относительно простые парсеры сайтов.
Сайтов 5, на каждом по 2 страницы, что необходимо разобрать парсером через Celenium. На каждой странице по 10 элементов, что необходимо вырвать со страницы. 5 страниц необходимо прокручивать вниз, чтобы получить подгрузкой все элементы (а затем вырвать)
На вход в скрипт дается URL для парсинга, на выходе из скрипта необходим результат этого парсинга в удобном формате - например json либо запись результатов в mysql, либо иной.
Предпочтительнее вырывать данные через PHP + Celenium (Php-webdriver ), так удобнее и на вход передавать URL, и проводить отладку.
Пример страницы для парсинга с прокруткой - https://ru.hotels.com/search.do?resolved-location=CITY%3A1378654%3AUNKNOWN%3AUNKNOWN&destination-id=1378654&q-destination=%D0%9A%D0%B8%D0%B5%D0%B2,%20%D0%A3%D0%BA%D1%80%D0%B0%D0%B8%D0%BD%D0%B0&q-check-in=2020-07-18&q-check-out=2020-07-26&q-rooms=1&q-room-0-adults=2&q-room-0-children=0
Необходимо прокрутить вниз и вырвать основные данные списка отелей (10-11 штук). Если задача будет успешно и быстро реализована, остальные страницы ваши. Могу помочь с настройкой Celenium на сервере, но я не спец по этой технологии и ориентируюсь на гайды
-
Переможець2 дні500 UAH
1136 46 0 1 Переможець2 дні500 UAH
Добрый день!
Большой опыт в разработке парсеров на python+selenium.
Пишите в лс,буду рад сотрудничеству!
-
1 день200 UAH
235 17 0 1 день200 UAH
Здравствуйте Евгений , имею успешный опыт по парсингу . опыт работы с Селемиум, и конечно портфолио, обрабатываю как html так и xml/json api, обращайтесь , так как новичок на бирже , могу выполнить проект за НИЗКИЕ ЦЕНЫ
-
Привет!
Можно узнать бюджет?
-
Я провел беседу с заказчиком, он относит написание парсеров (да и весь этот проект) к категории QA, а не программированию, не думаю, что стоит рассчитывать на щедрость в бюджете.
-
Владислав, вы не названи ни цену ни стоимость, также я сообщил, что здесь совмещено программирование с QA
-
А причем QA ?
-
SELENIUM
-
Актуальні фриланс-проєкти в категорії PHP
Інтеграція GoPosПривіт, робив хтось інтеграцію GoPos з кастомним сайтом для ресторану в Польщі? Потрібна допомога, у них дуже скудна документація, є тільки swagger і той без описів https://app.gopos.io/doc/swagger-ui/index.html Суть така, використовували від них сайт для онлайн замовлень, якщо… PHP, Веб-програмування ∙ 4 години 38 хвилин тому ∙ 15 ставок |
Прописати мета дані АЛЬТ за допомогою ІІСайт на Laravel, на сайті багато зображень, для яких потрібно прописати коректні за семантикою та релевантні для сторінки АЛЬТ описання зображення в автоматичному режимі, з можливістю перевірки AI та машинне навчання, PHP ∙ 1 день 1 година тому ∙ 30 ставок |
Потрібен розробник для завершення та інтеграції проєкту з автоматичного збору й обробки данних
700 UAH
Основна частина парсера вже реалізована. Парсер працює на Windows-середовищі через Microsoft Edge: сайт має антибот-захист, тому збір даних виконується не прямими HTTP-запитами, а через живу браузерну сесію. Скрипти керують відкритою вкладкою Edge через Chrome DevTools Protocol,… PHP, Веб-програмування ∙ 1 день 7 годин тому ∙ 24 ставки |
Оновлення плагінів і тем WP сайт putevka.uz«Потрібно провести технічний аудит WordPress-сайту, перевірити актуальність, безпеку та сумісність встановлених плагінів і теми. За результатами — запропонувати легальні варіанти оновлення, заміни застарілих рішень або переходу на офіційно доступні аналоги. Платні плагіни та… HTML та CSS верстання, PHP ∙ 1 день 10 годин тому ∙ 36 ставок |
Інтеграція блоку "Де дивитися" (Laravel / Livewire)Потрібно реалізувати інтеграцію зовнішньої стримінгової платформи для сайту про фільми та серіали на Laravel / Livewire. Що потрібно зробити: Реалізувати імпорт зовнішнього каталогу контенту, який оновлюється 1 раз на день. Виконувати матчинг контенту по IMDb ID та/або TMDB ID.… PHP, Веб-програмування ∙ 2 дні тому ∙ 40 ставок |