Dane z witryny safer.fmcsa.dot.gov
Parsowanie danych
Zadaniem jest:
1 . Napisz parzer dla https://safer.fmcsa.dot.gov w Pythonie za pomocą aiohttp, z możliwością połączenia proxy i zapisania wyników w PostgreSQL. Z jednej strony zbiera się 64 pola. W sumie ponad 100 000 stron.
2 . Wyjaśnij przez Skype, jak to wszystko (parzer) działa.
Zadanie zostało wykonane w ciągu 3 godzin z doradztwem w zakresie ustawienia i uruchomienia oraz wyjaśnieniem zgodnie z p.2.
1 . Napisz parzer dla https://safer.fmcsa.dot.gov w Pythonie za pomocą aiohttp, z możliwością połączenia proxy i zapisania wyników w PostgreSQL. Z jednej strony zbiera się 64 pola. W sumie ponad 100 000 stron.
2 . Wyjaśnij przez Skype, jak to wszystko (parzer) działa.
Zadanie zostało wykonane w ciągu 3 godzin z doradztwem w zakresie ustawienia i uruchomienia oraz wyjaśnieniem zgodnie z p.2.