Парсер каталогу автозапчастин b2c.ad.ua

Завдання полягало в тому, щоб спартувати всі товари декількох марок автомобілів з каталогу автозапчастин на сайті постачальника. Спочатку були зібрані всі марки автомобілів. Було 22 000 моделей автомобілів. Потрібно було спартувати каталог для кожного моделі і спартувати всі товари у всіх категоріях. 4 500 000 автозапчастин було спарковано в кінцевому підсумку. Парсінг зайняв 2 тижні на комп'ютері i7-3930k 3,2 ГГц, 32 ГБ оперативної пам'яті. Парсер працював на емуляторі браузера в 12 потоках