Розробка простого бота-парсера

Збір посилань на джерела з оголошеннями про оренду житла Потрібно зібрати базу посилань на групи, канали, форуми та майданчики, де публікуються оголошення про оренду житла у великих містах Європи та США. Мета: знайти джерела, де регулярно з'являються оголошення про короткострокову, середньострокову та довгострокову оренду, суборенду, кімнати, студії, квартири та lease takeover. Міста: Почати з: Париж, Женева, Цюрих, Берлін, Амстердам, Барселона, Мадрид, Мілан, Лондон, Нью-Йорк, Лос-Анджелес, Сан-Франциско, Бостон, Чикаго, Майамі. Можна додавати інші великі міста, якщо є хороші джерела. Які джерела шукати: Групи/сторінки Facebook Публічні канали Telegram Спільноти Reddit / посилання для пошуку Посилання Craigslist, особливо для міст США Місцеві форуми та сайти оголошень Дошки оголошень університетів/студентів Спільноти експатів Сторінки Instagram агентств, колівінгів, студентського житла, орендних спільнот Посилання для пошуку X/Twitter Інші публічні сторінки, де люди публікують пропозиції оренди Що потрібно внести в таблицю: Місто Країна Платформа: Facebook / Telegram / Reddit / Craigslist / Форум / Сайт / Instagram / Інше Назва джерела URL Тип оренди: кімната / квартира / суборенда / короткострокова / довгострокова / студентське житло / житло для експатів Мова Чи є це публічним? Так/Ні Оцінена активність: висока / середня / низька Примітки Важливо: Не збирати особисті дані людей. Не копіювати самі оголошення. Потрібні тільки публічні посилання на джерела. Перевіряти, що посилання відкривається. Не додавати дублікатів. Пріоритет — активні джерела, де є свіжі пости за останні 30 днів. Очікуваний результат: Google Sheet / Excel-файл мінімум з 300–500 релевантними посиланнями. Для кожного міста бажано знайти мінімум 20–40 хороших джерел.

Магазин на OcStore 2.3. встановлено модуль "Автоматична обробка прайс-листів. v.9.5". Все налаштовано автором модуля, але зараз є моменти по налаштуванням, які не можу розібрати та допетрати логіку роботи модуля. Наприклад проблема з двома мовами в картці товару, тягне постійно, то одну, то іншу у всі вкладки. Що потрібно: 1) допомогти налаштувати як треба; 2) пояснити покроково що і як налаштовувати, щоб міг самостійно додавати прайси і налаштовувати крон до них.

Технічне завдання Проєкт Налаштування наповнення та синхронізації двох магазинів Prom.ua з постачальниками автозапчастин. Завдання Необхідно реалізувати завантаження та оновлення товарів від постачальників автозапчастин для двох інтернет-магазинів на Prom.ua. ⸻ 1. Підключення постачальників Необхідно підключити постачальників через: API постачальника; XML, CSV, XLS прайс-листи; або інший доступний спосіб отримання товарів із сайту постачальника. Важливо забезпечити повну синхронізацію товарів між постачальником та магазинами Prom.ua. ⸻ 2. Фільтрація та відбір товарів Необхідно реалізувати можливість відбору товарів під час імпорту за такими параметрами: марка автомобіля; категорія запчастин; підкатегорія запчастин; інші доступні характеристики. Приклад: Для кожного магазину повинна бути можливість окремо визначати, які категорії товарів та які марки автомобілів необхідно завантажувати. Додаткові вимоги до відбору товарів Необхідно реалізувати можливість відбору товарів під час імпорту не лише за марками автомобілів та категоріями запчастин, а також за статусом наявності товару. Повинна бути можливість налаштувати такі сценарії: імпортувати тільки товари, які є в наявності у постачальника; не імпортувати товари зі статусом “немає в наявності”; відключати або видаляти товари з Prom.ua після зникнення їх із наявності у постачальника; Під час налаштування прайсингу повинна бути можливість комбінувати фільтри: за маркою автомобіля; за категорією запчастин; за підкатегорією; за наявністю товару. Приклад: Імпортувати тільки запчастини для Volkswagen та Audi, категорія “Гальмівна система”, які є в наявності у постачальника. Також необхідно реалізувати механізм запобігання дублюванню товарів від різних постачальників. Якщо один і той самий товар присутній у кількох постачальників, у каталог повинен імпортуватися лише один запис товару. Критерії вибору товару при виявленні дублікатів: пріоритет надається товару, який є в наявності у постачальника; якщо товар є в наявності у кількох постачальників, пріоритет надається товару з найнижчою ціною; якщо найдешевший товар відсутній у наявності, система повинна обрати найдешевший товар серед тих, що є в наявності; товари-дублікати від інших постачальників не повинні створювати окремі позиції в каталозі. Приклад: Імпортувати тільки запчастини для Volkswagen та Audi, категорія “Гальмівна система”, які є в наявності у постачальника. Якщо одна й та сама запчастина доступна у кількох постачальників, до каталогу імпортується лише одна позиція — від постачальника з найнижчою ціною серед тих, у кого товар є в наявності. ⸻ 3. Імпорт карток товарів Під час імпорту повинні автоматично завантажуватися: назва товару; артикул; фотографії; опис товару; ціна; характеристики товару; виробник; інші доступні параметри. ⸻ 4. оновлення Необхідно налаштувати автоматичне: оновлення цін при зміні від постачальника ⸻ 5. Видалення відсутніх товарів Товари, яких більше немає в наявності у постачальника, повинні: відключатися; або видалятися з Prom.ua (за погодженням). ⸻ 6. Наповнення магазинів Необхідно: створити структуру категорій; створити підкатегорії; правильно розподілити товари по категоріях; перевірити коректність імпорту товарів. ⸻ 7. Результат роботи Після завершення робіт повинно бути: підключено постачальників; налаштовано імпорт товарів; налаштовано оновлення цін; налаштовано додавання нових товарів; налаштовано відключення або видалення відсутніх товарів; магазини Prom.ua повністю наповнені та готові до роботи.

Потрібно створити Telegram-бота для автоматичного пошуку та моніторингу автомобілів "BUY IT NOW" на аукціонах США (Copart, IAAI) Бот повинен працювати в автоматичному режимі та надсилати повідомлення про нові автомобілі, які відповідають заданим фільтрам.Основний функціоналНалаштування фільтрів: 1. Марка автомобіля; 2. Модель; 3. Рік випуску (від/до); 4. Тип палива; 5. Об'єм двигуна; 6. Пробіг; 7. Діапазон ціни; Функції бота: 1. Автоматичний моніторинг нових лотів; 2. Перевірка оновлень кожних 1-2 хвилини; 3. Захист від повторних сповіщень (антидубль); 4. Можливість додавати та видаляти фільтри через меню бота; 5. Збереження налаштувань вже існуючого пошуку автомобілів. Формат повідомлення: 1. Фото автомобіля (4-фото); 2. Назва та номер лота; 3. Рік випуску; 4. Пробіг; 5. Тип двигуна та об'єм; 6. Ціна buy it now; 7. Посилання на лот.

Спарсити повний каталог цих сайтів: https://svit-mebliv.ua/ https://kompanit.com.ua/ru https://amia.com.ua/ https://mebliromax.com.ua/ https://pehotin.com.ua/catalog/ https://www.sokme.ua/ru/ Всі товари потрібно об'єднати в одну загальну таблицю для імпорту в WP. Кожен товар має бути на двох мовах (UA+RU). Також є варіативні товари, це має бути збережено як варіації в базовому функціоналі WP Імпорт на сайт можливий через плагіни, так і кастомне рішення, тому формат таблиці може обговорюватися