Паук

Паук просканирует сайт и автоматически добавит все найденные страницы в Sitemap файл. Нужно просто ввести адрес сайта и нажать на кнопку СТАРТ. Работу паука можно настроить в Настройках Проекта.

В процессе работы паука его можно минимизировать в фоновый режим кнопкой МИНИМИЗИРОВАТЬ В ТРЕЙ. В любое время можно остановить работу паука кнопкой ОСТАНОВИТЬ и затем продолжить сканирование.

Отчет паука

Тут можно настроить количество пауков, которые асинхронно будут сканировать сайт (Количество пауков). Чем больше пауков тем больше нагрузка на интернет соединение и на сервер сайта но Паук тем быстрее будет сканировать сайт. Рекомендованное количество 5.
В отчете так же видны количество страниц, которые в очереди на сканирования, количество проиндексированных страниц и список страниц которые паук на данный момент сканирует.

Список ошибок

В этом участке Паук выводит список ошибок при сканирования, это могут быть страницы которые больше не существуют, которые временно не доступны, javascript команды и т.д.. Правым кликом на строке ошибки откроется следующее меню:

Где:
Поставить в очередь - добавляет страницу обратно в очередь на сканирования.
Добавить в Sitemap - добавляет страницу сразу в Sitemap.
Перейти к ссылке - открывает страницу в основном браузере.
Копировать - копирует в буфер адрес страницы.

Так же можно экспортировать список ошибок в CSV (значения, разделённые запятыми) файл с помощью кнопки ЭКСПОРТИРОВАТЬ СПИСОК ОШИБОК.

Количество URL

Количество страниц которые успешно проиндексированы и добавлены в список Sitemap. Так же можно просмотреть список страниц которые добавлены пауком в Sitemap.