www.m-ets.ru scrapper

HTTPS://m-ets.ru wskaźnik wskaźnika
I deciphered the m-ets cipher and created the functions for generating cookies on the fly.
The scrapper jest asynchroniczny. To działa z Celery. Możesz monitorować zadania z Flower.
The scrapper jest super skuteczny. Używa tylko BS4. Możliwość korzystania z proxy.
Występuje około 110K lotów. Całkowita wielkość danych przekracza 10 GB. Database record ma ponad 30 pól.
It downloads all files and extracts all periods from a lot page. to pobiera wszystkie pliki i wyciąga wszystkie okresy z wielu stron.
Używam bazy danych MongoDB.
I attached the example of database record.