Постепенная индексация страниц товаров для e-commerce сайта

Передо мной стояла задача проиндексировать все страницы товаров нового интернет-магазина, чтобы сделать его видимым для потенциальных покупателей. Работа проводилась поэтапно: первые 24 000 URL, далее 24 000, затем 15 000, еще 24 000 и завершающие 5 000. В результате 116 000 страниц появились в поиске Google, что дало возможность клиентам находить товары и совершать покупки.