Розробка веб-парсерів для збирання інформації з сайтів

Завдання: Потрібно зробити тестове парсинг і зібрати базу Telegram-каналів по ніші трейдинг і криптовалюта. Вимоги до каналів: • Тематика: трейдинг, ф'ючерси, скальпінг, сигнали, smart money, торгові боти, навчання трейдингу, криптовалюта, BTC, ETH тощо. • Мова: російська та українська. • Кількість підписників: 300 - 8000. • Канали можуть бути як відкритими, так і закритими (з подачею заявки). • Бажано звертати увагу на живу аудиторію, а не накручених підписників. Ключові слова для пошуку: Трейдинг, Ф'ючерси, Лонг, Шорт, Скальпінг, Фібоначчі, Індикатори, Trading Bot, Smart Money, Біткоїн, Крипта, Стратегія трейдингу, Як заробити в крипті та інші релевантні. Що потрібно в результаті (тестовий етап): • Таблиця в Excel/Google Sheets приблизно на 200–300 каналів. • Колонки: • Посилання на канал • Назва каналу • Кількість підписників • Приблизна оцінка живої аудиторії (якщо можливо) • Зростання за останній місяць (якщо можливо) • Тип каналу (відкритий / закритий) • Посилання на чат (якщо є) • Коротка тематика (наприклад: сигнали, новини, навчання, скальпінг, огляди тощо) Якщо результат тестового парсингу мене влаштує - продовжимо на більший обсяг (500-700 каналів). Бюджет: обговорюється Термін: 2–4 дні (Можливо і більше, якщо знадобиться більше часу) Робота через безпечну угоду. Приклади попередніх робіт по парсингу Telegram-каналів вітаються.

Потрібен спеціаліст для збору та структурування відкритої інформації про продавців з маркетплейсів. Необхідно визначити можливість автоматизованого збору даних та сформувати базу продавців. У відгуку, будь ласка, вкажіть: з якими маркетплейсами маєте досвід роботи; які дані можете отримати (назва продавця, посилання, категорії, рейтинг, кількість товарів, інші доступні поля); приклади подібних проєктів.

Збір посилань на джерела з оголошеннями про оренду житла Потрібно зібрати базу посилань на групи, канали, форуми та майданчики, де публікуються оголошення про оренду житла у великих містах Європи та США. Мета: знайти джерела, де регулярно з'являються оголошення про короткострокову, середньострокову та довгострокову оренду, суборенду, кімнати, студії, квартири та lease takeover. Міста: Почати з: Париж, Женева, Цюрих, Берлін, Амстердам, Барселона, Мадрид, Мілан, Лондон, Нью-Йорк, Лос-Анджелес, Сан-Франциско, Бостон, Чикаго, Майамі. Можна додавати інші великі міста, якщо є хороші джерела. Які джерела шукати: Групи/сторінки Facebook Публічні канали Telegram Спільноти Reddit / посилання для пошуку Посилання Craigslist, особливо для міст США Місцеві форуми та сайти оголошень Дошки оголошень університетів/студентів Спільноти експатів Сторінки Instagram агентств, колівінгів, студентського житла, орендних спільнот Посилання для пошуку X/Twitter Інші публічні сторінки, де люди публікують пропозиції оренди Що потрібно внести в таблицю: Місто Країна Платформа: Facebook / Telegram / Reddit / Craigslist / Форум / Сайт / Instagram / Інше Назва джерела URL Тип оренди: кімната / квартира / суборенда / короткострокова / довгострокова / студентське житло / житло для експатів Мова Чи є це публічним? Так/Ні Оцінена активність: висока / середня / низька Примітки Важливо: Не збирати особисті дані людей. Не копіювати самі оголошення. Потрібні тільки публічні посилання на джерела. Перевіряти, що посилання відкривається. Не додавати дублікатів. Пріоритет — активні джерела, де є свіжі пости за останні 30 днів. Очікуваний результат: Google Sheet / Excel-файл мінімум з 300–500 релевантними посиланнями. Для кожного міста бажано знайти мінімум 20–40 хороших джерел.

Технічне завдання Проєкт Налаштування наповнення та синхронізації двох магазинів Prom.ua з постачальниками автозапчастин. Завдання Необхідно реалізувати завантаження та оновлення товарів від постачальників автозапчастин для двох інтернет-магазинів на Prom.ua. ⸻ 1. Підключення постачальників Необхідно підключити постачальників через: API постачальника; XML, CSV, XLS прайс-листи; або інший доступний спосіб отримання товарів із сайту постачальника. Важливо забезпечити повну синхронізацію товарів між постачальником та магазинами Prom.ua. ⸻ 2. Фільтрація та відбір товарів Необхідно реалізувати можливість відбору товарів під час імпорту за такими параметрами: марка автомобіля; категорія запчастин; підкатегорія запчастин; інші доступні характеристики. Приклад: Для кожного магазину повинна бути можливість окремо визначати, які категорії товарів та які марки автомобілів необхідно завантажувати. Додаткові вимоги до відбору товарів Необхідно реалізувати можливість відбору товарів під час імпорту не лише за марками автомобілів та категоріями запчастин, а також за статусом наявності товару. Повинна бути можливість налаштувати такі сценарії: імпортувати тільки товари, які є в наявності у постачальника; не імпортувати товари зі статусом “немає в наявності”; відключати або видаляти товари з Prom.ua після зникнення їх із наявності у постачальника; Під час налаштування прайсингу повинна бути можливість комбінувати фільтри: за маркою автомобіля; за категорією запчастин; за підкатегорією; за наявністю товару. Приклад: Імпортувати тільки запчастини для Volkswagen та Audi, категорія “Гальмівна система”, які є в наявності у постачальника. Також необхідно реалізувати механізм запобігання дублюванню товарів від різних постачальників. Якщо один і той самий товар присутній у кількох постачальників, у каталог повинен імпортуватися лише один запис товару. Критерії вибору товару при виявленні дублікатів: пріоритет надається товару, який є в наявності у постачальника; якщо товар є в наявності у кількох постачальників, пріоритет надається товару з найнижчою ціною; якщо найдешевший товар відсутній у наявності, система повинна обрати найдешевший товар серед тих, що є в наявності; товари-дублікати від інших постачальників не повинні створювати окремі позиції в каталозі. Приклад: Імпортувати тільки запчастини для Volkswagen та Audi, категорія “Гальмівна система”, які є в наявності у постачальника. Якщо одна й та сама запчастина доступна у кількох постачальників, до каталогу імпортується лише одна позиція — від постачальника з найнижчою ціною серед тих, у кого товар є в наявності. ⸻ 3. Імпорт карток товарів Під час імпорту повинні автоматично завантажуватися: назва товару; артикул; фотографії; опис товару; ціна; характеристики товару; виробник; інші доступні параметри. ⸻ 4. оновлення Необхідно налаштувати автоматичне: оновлення цін при зміні від постачальника ⸻ 5. Видалення відсутніх товарів Товари, яких більше немає в наявності у постачальника, повинні: відключатися; або видалятися з Prom.ua (за погодженням). ⸻ 6. Наповнення магазинів Необхідно: створити структуру категорій; створити підкатегорії; правильно розподілити товари по категоріях; перевірити коректність імпорту товарів. ⸻ 7. Результат роботи Після завершення робіт повинно бути: підключено постачальників; налаштовано імпорт товарів; налаштовано оновлення цін; налаштовано додавання нових товарів; налаштовано відключення або видалення відсутніх товарів; магазини Prom.ua повністю наповнені та готові до роботи.

Потрібно створити Telegram-бота для автоматичного пошуку та моніторингу автомобілів "BUY IT NOW" на аукціонах США (Copart, IAAI) Бот повинен працювати в автоматичному режимі та надсилати повідомлення про нові автомобілі, які відповідають заданим фільтрам.Основний функціоналНалаштування фільтрів: 1. Марка автомобіля; 2. Модель; 3. Рік випуску (від/до); 4. Тип палива; 5. Об'єм двигуна; 6. Пробіг; 7. Діапазон ціни; Функції бота: 1. Автоматичний моніторинг нових лотів; 2. Перевірка оновлень кожних 1-2 хвилини; 3. Захист від повторних сповіщень (антидубль); 4. Можливість додавати та видаляти фільтри через меню бота; 5. Збереження налаштувань вже існуючого пошуку автомобілів. Формат повідомлення: 1. Фото автомобіля (4-фото); 2. Назва та номер лота; 3. Рік випуску; 4. Пробіг; 5. Тип двигуна та об'єм; 6. Ціна buy it now; 7. Посилання на лот.