Требуется реализовать проверку доступности доменов в многопоточном режиме (возможно с использованием нескольких сот отдельных однопоточных процессов) с сохранением в БД результатов ответа. В случае редиректа сохранять весь путь и ответ последнего редиректа.
Предпочтения в порядке убывания приоритетов С, С++, PHP..
-
2 дня4000 UAH
596 8 0 2 дня4000 UAH
Добрый день!
У меня есть готовый рабочий код системы проверки доменов, написанный на C++ с использованием многопоточности и асинхронности (cURL multi). Во время ожидания ответа каждый поток сразу запускает проверку следующего домена, что обеспечивает производительность более 100 доменов в секунду (протестировано). Результаты сохраняются в PostgreSQL.
-
2 дня3000 UAH
1928 29 1 1 2 дня3000 UAH
Доброго дня! Я завжди на зв’язку, щоб допомогти. Пишіть, обговоримо! І не забудьте зазирнути в портфоліо — там багато цікавого!
-
3 дня3000 UAH
673 7 0 3 дня3000 UAH
Здравствуйте, Андрей!
Смогу написать такой скрипт на Python,имею большой опыт в написании подобных веб скриптов.
Сделаю бистро и качественно!
Запакую в ехе или поставлю на сервер доя автономной работи!!
-
Здравствуйте, подойдет Python?
-
Андрей Сивенко PAS web
здравствуйте. нет.
это худший выбор для многопоточности
-
Доброго дня! Як на вхід подаватимуться списоки доменів – файл (TXT, CSV, JSON), база (PostgreSQL, MySQL, SQLite) чи API?
Які протоколи перевіряти: тільки HTTP/HTTPS чи ще FTP? Що зберігати – код відповіді, весь ланцюжок редиректів, час відгуку?
Яка потрібна швидкість? Скільки доменів на хвилину/годину? Разова перевірка чи постійний моніторинг?
Де це запускатиметься – локально чи на сервері? Чи є обмеження по ресурсах (CPU, RAM)?
-
Андрей Сивенко PAS web
здравствуйте.
- список доменов в файлах тхт, они каждый день обновляются.
- бд PostgreSQL
- HTTP/HTTPS, сохраняем ответ и цепочку редиректов. это основа, но возможны добавления как нс, днс, айпи. но главное - это ответы и редиректы.
- скорость нужно максимальная, от 100 шт в сек, мониторинг регулярный (например, 1 раз в мес по базе на 265 млн записей).
сервер в данный момент такой:
Процессор AMD Ryzen 5 3600 6-Core Processor 4093.575 MHz (12 cores)
Оперативная память 8074 / 63791 MB
Размер дискового пространства 436.74 GB
но по необходимости возможны варианты.
Тут самый важный момент - многопоточность. Без нее это будет проверяться годами, а ежедневно в бд добавляется и из нее удаляется 100тыс доменов. -
Ну одне раз перевірити, а а друге кожен місяць, швидше за все через місяць буде другий результат так як вас забанить клоуфай і тому подібні системи
-
а потім ще наверно хост провайдер по ідеї, коли до нього буде приходити жалоби
-
Це похоже на якийсь ддос на днс сервера, днс теж можуть забанити, і явно вони не дуже будуть довольні....Непонятно наскільки це законо...
-
Как быстро вы хотите что б прошла проверка если у вас +- 265 млн доменов?
-
Андрей Сивенко PAS web
до месяца
-
могу на Rust сделать
-
Могу попробовать сделать на с++, напишите в лс какие у вас бюджеты и сроки для понимания
-
Актуальные фриланс-проекты в категории C и C++
Консультация и аудит текущего проекта на Odoo 19 Community Edition
Ищем Odoo разработчика — соло-разработчика с опытом разработки на Odoo 19 Community Edition, в том числе с использованием Claude Code. Нам нужен специалист, который успешно реализовал проекты в Odoo и имеет практический опыт разработки с использованием Claude Code. Важно:… C и C++, Javascript и Typescript ∙ 1 день 10 часов назад ∙ 5 ставок |
Создание или доработки прошивки и логики под три автономных LoRa-станций на базе ESP32.
5000 UAH
создание или доработки прошивки и логики под три автономных LoRa-станций на базе ESP32. Устройства должны поднимать Wi-Fi точку доступа, отдавать локальный сайт через браузер (HTTP), принимать текст и изображения в радиусе 5-10 км(плюс минус), сохранять данные (желательно на… C и C++, C# ∙ 1 день 12 часов назад ∙ 3 ставки |
Разработка ПО для Arduino (RF-модули 3–7.5 ГГц, автоматическое сканирование частот)Необходимо разработать систему на Arduino для автоматического поиска активного аналогового видеосигнала и автоматической настройки передатчика на обнаруженную частоту.Планируется использование трех отдельных приемно-передающих модулей: 3000–4200 МГц; 4900–6000 МГц; 6100–7500… C и C++, Встраиваемые системы и микроконтроллеры ∙ 2 дня 11 часов назад ∙ 4 ставки |
Чёрная Украина (RP-проект на базе MTA)
51 638 UAH
|
Инженер по инфраструктуре резидентных проксиМы строим сеть резидентных прокси с нуля — полностью собственную, без сторонних поставщиков. Нам нужен один исключительный сетевой инженер для создания всей технической базы. Что вы будете строить: - Android SDK для фонового использования, который направляет прокси-трафик через… C и C++, DevOps ∙ 8 дней 7 часов назад ∙ 13 ставок |
Украина