Парсер
Это простой парсер, который обходит страницы одного сайта (в пределах домена) и собирает базовые SEO/контент данные.
Что собирает:
- `url` страницы
- `title`
- первый `h1`
- `meta description`
- количество внутренних ссылок (`links_count`)
- список внутренних ссылок (`links`, только в JSON)
Результат сохраняется в двух форматах:
- `site_data.json` (полные данные)
- `site_data.csv` (короткая таблица)
Что собирает:
- `url` страницы
- `title`
- первый `h1`
- `meta description`
- количество внутренних ссылок (`links_count`)
- список внутренних ссылок (`links`, только в JSON)
Результат сохраняется в двух форматах:
- `site_data.json` (полные данные)
- `site_data.csv` (короткая таблица)