Site Crawler
Полный обход сайта: загрузка страниц, анализ контента, сбор всех ссылок
Что умеет Site Crawler?
Бесплатно для всех:
- Полный обход сайта до 100 страниц
- Анализ Title, Description, H1, Canonical
- Проверка robots.txt и sitemap.xml
- Поиск битых ссылок (4xx, 5xx)
- Анализ скорости загрузки страниц
- Выявление SEO-ошибок
После регистрации:
- До 100,000 страниц за один анализ
- История проверок 90 дней
- Сравнение сканов — отслеживание изменений
- Поиск дубликатов контента (SimHash)
- Анализ внутренней перелинковки (PageRank)
- Проверка hreflang разметки
- Симулятор robots.txt
- Генерация sitemap.xml
- PDF-отчёт для клиентов
Совет: Зарегистрируйтесь для доступа к полному функционалу и истории проверок.
Домен