Парсинг архітектурних фотографій

Можу зробити швидко та якісно. Потрібно більш детально обговорити.
Буду радий співпраці.

Доброго дня. Готов виконати даний проект маю великий досвiд розробки додаткiв

Вітаю! Готовий до співпраці. Пропоную якісну та швидку роботу. Пишіть.

Спарсити не проблема, але для групування потрібні будуть трати на ші для аналізу та росприділення...

Вітаю, готовий виконати збір архітектурних фотографій з ArchDaily та Architectural Digest.
Планую зробити Python-скрипт для збирання та завантаження зображень у максимально доступній якості, розкласти фото за папками Exterior / Interior / Exterior Top View та прибрати дублікати по URL та hash файлу.

Перед початком хотів би уточнити:
- Який потрібен приблизний обсяг фото;
- Збирати з усього сайту або за конкретними розділами/посиланнями;
- Чи допустима напівавтоматична перевірка для категорії Exterior Top View,
оскільки вона завжди явно виділена на сайтах.

… Результат передам архівом чи через Google Drive.

Доброго дня.
Маю великий досвід у вивантаженні фото із сайтів, побудові зеркал.
На перший погляд задача здається простою взяти два сайти та викачати фото.
Але ArchDaily - це база проектів, їх там понад 30000+, це не включаючи статті, новини.
Architectural Digest - це журнал, як такових проектів там немає, але є стаття-галерея наприклад (тури по домівках як приклад)
Чому не все так легко як здається ?
1. Завантажити та скласти - так це просто. Завантажити 1млн фото це під теребайт даних та сайт скоріш за все якщо це не організовувати у пайнплай - заблокує через декілька годин.
2. Розкласти по папкам - це означає, при умові завантажити все, переглянути кожну фотоку та зрозуміти що на ній.
Тобто питання:
… чи дійсно треба завантажувати все?
чи поякімось фільтрам, даті, кількості проектів/статтів?

від цього дуже залежить кінцева вартість, якщо точечно то це значно дешевше, якщо все з классифікацією, то це буде значно дорожче.

Доброго дня! Завдання зрозуміле. Виконаю автоматичний парсинг фотографій з обох сайтів у максимальній доступній якості, розподілю по папках Exterior / Interior / Exterior Top View та відфільтрую дублікати. Результат передам через Google Drive. Готовий обговорити деталі та строки.

Доброго дня. Можу зібрати всі фотографії з цих сайтів. Тільки проблема буде як їх відрізняти по окремим папкам. Потрібно буде написати нейромережу - щоб відрізняла їх. На другому сайті не відомо звідки саме брати картинки - можно з усього сайту через sitemap - але невідомо скільки їх там.
40 днів / 40000 грн

Вітаю! Зі свого боку реалізую швидкий та стабільний асинхронний парсер на Python. Завантажу фото в максимальній роздільній здатності, налаштую механізм дедуплікації (за хешами файлів), щоб уникнути повторів, та організую автоматичне вивантаження структурованого архіву на Google Drive.

Стосовно сортування за папками (Exterior/Interior/Top View): якщо сайти не мають точних тегів, я підключу легку модель класифікації зображень, щоб автоматизувати цей процес. Давайте обговоримо деталі в приватних повідомленнях!

Вітаю. Можу зібрати архітектурні фото з ArchDaily та Architectural Digest, завантажити їх у максимально доступній якості, розкласти по папках Exterior / Interior / Exterior Top View і прибрати дублікати за URL та hash файлу.

План роботи:

1. Уточнюю потрібний обсяг: кількість фото, категорії або список сторінок/посилань.
2. Пишу Python-скрипт для збору посилань і завантаження зображень.
3. Зберігаю фото в окремі папки за категоріями.
4. Перевіряю дублікати.
5. Передаю результат архівом або через Google Drive.
…
Важливе уточнення: для Exterior Top View може знадобитися ручна або напівавтоматична перевірка, бо така категорія не завжди є окремим фільтром на сайті.

Орієнтовно: 4000 грн, 4 дні. Точну оцінку підтверджу після уточнення кількості фото та правил сортування.

Готовий взятися. Але які мають бути приблизно об'єми парсингу?
Треба уточнити деталі замовлення, пишіть!
Використовую python, uv, github, docker.