Настройки ограничений

Изменено Чт, 19 Окт, 2023 на 4:52 PM

Ограничения сканирования.
Ограничения в ошибках.

В настройках сканирования Netpeak Spider на вкладке «Ограничения» можно определять границы сканирования и менять ограничения по ошибкам.

1. Ограничения сканирования

Раздел «Ограничения сканирования» содержит следующие настройки:

Максимальное количество сканируемых URL.

Иногда сайт бывает настолько массивным, что нет смысла ждать, пока он полностью просканируется, так как основные виды ошибок будут видны почти сразу. C помощью ограничения количества сканируемых URL можно определить объём страниц, достаточный для анализа сайта.

Максимальная глубина сканирования.

Глубина → это расстояние в кликах от начального URL до анализируемого. С помощью этой настройки можно регулировать, насколько глубоко программа будет сканировать сайт.

Максимальная вложенность URL.

Вложенность → это количество сегментов в URL у анализируемой страницы. Этот показатель статистический и не зависит от начального URL.

С помощью этой настройки можно регулировать, насколько программа будет углубляться в папки на сайте.

Максимальное количество редиректов.

Выставленное в этом поле число влияет на несколько параметров:

сколько редиректов будут учитываться в цепочке (программа будет переходить по ним);
количество редиректов для определения соответствующей ошибки в боковой панели.

Например, по умолчанию здесь установлено значение «5». Это значит, что программа будет переходить максимум по четырём редиректам, а пятый — считать ошибкой.

Значение «0» для перечисленных параметров означает, что ограничения не заданы.

2. Ограничения в ошибках

Раздел «Ограничения в ошибках» включает в себя ограничения, нарушение которых приведёт к генерации соответствующих отчётов об ошибках в программе. Ошибки определяются автоматически, после окончания или остановки сканирования. Определить ограничения для параметров можно через меню «Анализ».

Длина Title → количество символов в теге<title> от 10 до 70. Если содержимое тега Title страницы будет меньше установленной нижней границы диапазона, программа добавит её в отчёт «Короткий Title», если больше верхней границы диапазона, то в отчёт «Макс.длина Title».

Длина Description → количество символов в содержимом тега <meta name="description" /> от 50 до 320. Отчёты «Короткий description» и «Макс.длина description» генерируются аналогично отчётам для тега Title.

Размер контента → количество символов в содержимом тега <body> от 500 до 50 000. Если размер контента будет меньше установленной нижней границы, программа добавит её в отчёт «Мин. размер контента», если больше установленной верхней границы, то в отчёт «Макс. размер контента».

Максимальная длина H1 → количество символов в заголовке <h1> не более 65. Выход за это ограничение влияет на генерацию отчёта «Макс. длина H1».

Максимальный размер HTML → страницы, содержащие большее количество символов чем установлено попадут в отчёт «Макс. размер HTML».

Максимальная длина URL → длина URL страницы, по умолчанию, не должна превышать 2 000 символов. URL, длиной больше установленного значения попадут в отчёт «Макс. длина URL».

Максимальное время ответа сервера → время ответа сервера, по умолчанию, не должно превышать 500 мс, в противном случае, страница попадёт в отчёт «Большое время ответа сервера».

Максимальное количество внутренних ссылок → страница содержит менее 100 внутренних ссылок, в противном случае, она попадёт в отчёт «Макс. количество внутренних ссылок».

Максимальное количество внешних ссылок → страница содержит менее 10 внешних ссылок, в противном случае, она попадёт в отчёт «Макс. количество внешних ссылок».

Максимальный размер изображения → размер изображения на странице не превышает 100 Кбайт, иначе сгенерируется отчёт «Макс. размер изображения».

Минимальное соотношение text/HTML → соотношение чистого текста (параметр «Размер контента») ко всему контенту на странице (параметр «Размер HTML») более 10%, в противном случае программа сгенерирует отчёт «Мин. соотношение text/HTML».

В Netpeak Spider все заданные по умолчанию ограничения в ошибках, основываются на рекомендациях поисковой системы Google. Вы можете изменить их под свои требования.

Например, увеличить максимальный размер изображения → тогда при запуске нового сканирования ошибка уже будет определяться иначе. Точно также это работает для других ограничений в ошибках.