Основні налаштування в Netpeak Spider

1. Мова.
2. Швидкість сканування.
3. Базові налаштування сканування.
4. Мультидоменне сканування.
5. Резервне копіювання з інтервалом.
   
   

На вкладці основних налаштувань ви можете змінювати мову інтерфейсу, швидкість та базові налаштування сканування.
 

1. Мова

Ви можете обрати українську, російську або англійську мову інтерфейсу в Netpeak Spider. Натисніть на кнопку з відповідною назвою і виберіть потрібний вам варіант зі списку. 

Зверніть увагу: щоб налаштування мови повністю оновилися, необхідно перезапустити програму.

2. Швидкість сканування

2.1. Кількість потоків 

Кожен потік створює окреме з'єднання з сайтом, тому будьте обережні: чутливі до навантаження сайти можуть мати проблеми з відображенням інформації. Ви можете регулювати кількість потоків безпосередньо під час сканування, підбираючи оптимальне значення для аналізованого сайту. За замовчуванням у Netpeak Spider встановлено сканування 10 потоків.

2.2. Затримка між запитами 

Це проміжок часу між кожним запитом до сервера. Для чутливих до високого навантаження або захищених сайтів рекомендується налаштовувати цей параметр і встановлювати затримку між запитами, щоб не навантажувати сервер або оминути обмеження сайту. 

Затримка працює для кожного потоку окремо, тому для імітації поведінки користувача рекомендуємо використовувати один потік та затримку між запитами 1500-3000 мс. 

2.3. Максимальний час очікування 

Це час очікування відповіді від сервера в мілісекундах до того, як краулер вважатиме таку сторінку битим посиланням з кодом відповіді «Timeout» і перейде до сканування наступної URL-адреси. Також це налаштування впливає на визначення «Помилки підключення».;.

• Мінімально можливе значення – 50 мс.
• Максимально можливе значення – 90 000 мс. 

2.4. Увімкнення/відключення рендерингу JavaScript

Позначте, щоб увімкнути функцію, яка дозволяє сканувати URL-адресу з рендерингом (виконанням) JavaScript. Це може бути корисним, коли частина контенту генерується або весь сайт розроблений з використанням JS-фреймворків.

У Netpeak Spider рендеринг JavaScript реалізований за допомогою вбудованого браузера Chromium: він виконується тільки для доступних (з кодом відповіді сервера 200 OK) HTML-сторінок, при цьому блокуються скрипти систем аналітики, не завантажуються зображення та iframe.

Основним налаштуванням є "AJAX timeout" - вона встановлює час очікування виконання JavaScript після завантаження сторінки та файлів ресурсів (JS/CSS). Зверніть увагу: чим більше AJAX timeout, то довше відбуватиметься сканування. У більшості випадків стандартне значення (2 секунди) буде достатньо для виконання JavaScript, проте ви можете налаштовувати його самостійно, якщо на сайті, що аналізується, є AJAX-запити, які виконуються довше. Також не рекомендується занижувати це значення, оскільки код може не встигнути повністю обробитись. 

3. Базові налаштування сканування 

3.1. Сканувати лише всередині розділу

Програма скануватиме сайт лише всередині певної категорії, не залишаючи її. 

Зверніть увагу: Netpeak Spider орієнтується по сегменту в адресі сторінки, тому для використання цього режиму необхідно мати відповідну структуру URL. Так, при скануванні всередині розділу категорії товарів за адресою example.com/category-1, goods from example.com/category-1/product потраплять у звіти, а example.com/product не потраплять, оскільки вони починаються з іншого рівня вкладеності в URL, навіть якщо посилання на них знаходиться всередині розділу, що сканується.

3.2. Сканувати всі піддомени

Якщо параметр активовано, то піддомени будуть враховуватися як частина сайту, що аналізується, а посилання на ці піддомени будуть вважатися внутрішніми. Якщо вимкнути цей параметр, всі результати, отримані за піддоменами, не будуть належати до сканованого сайту, а посилання на них вважатимуться зовнішніми.

3.3. Сканувати зовнішні посилання

Оберіть цей параметр, щоб додати всі зовнішні посилання до основної таблиці результатів. Зверніть увагу: за всіма зовнішніми посиланнями визначаються такі ж параметри та помилки, як і за внутрішніми посиланнями. 

Таким чином, у панелі «Помилки» відображатиметься сумарне значення помилок за внутрішніми та зовнішніми посиланнями. Однак, ви можете побудувати звіт тільки за зовнішніми посиланнями, скориставшись сегментацією.

3.4. Перевіряти JavaScript, CSS, та PDF

Програма збирає інформацію (код відповіді, розмір тощо) про знайдені на сайті файли формату JavaScript, CSS, PDF. Важливо, що Netpeak Spider не сканує вміст цих файлів. 

3.5. Перевіряти зображення 

Радимо використовувати це налаштування, оскільки воно: 

• дозволяє програмі збирати основні SEO-параметри за зображеннями.; 
• впливає на визначення таких помилок як: «Биті зображення» та «Макс. розмір зображень»».

3.6. Перевіряти інші MIME-типи

Збір інформації про документи, відео- та аудіофайли. Аналогічно Netpeak Spider не сканує вміст цих файлів, а лише збирає їх загальні SEO-параметри.

Ви можете використовувати вбудовані шаблони для певного способу сканування: від шаблону за замовчуванням, що підходить для більшості стандартних SEO-завдань, до сканування сайту «очима пошукових роботів».

4. Мультидоменне сканування

Відзначте, щоб увімкнути функцію, яка дозволяє сканувати глибину кількох доменів одночасно. Програма розпочинає сканування доменів з тих URL-адрес, у яких глибина дорівнює 0 — щоб це забезпечити, додайте необхідні адреси списком у головну таблицю.

5. Резервне копіювання з інтервалом

Відзначте, щоб програма автоматично зберігала дані сканування. Це корисно, коли існує ризик раптового вимкнення комп'ютера і втрати даних. Резервна копія буде створюватися з інтервалом, який ви вкажете, а також під час зупинки (якщо поставили сканування на паузу) і завершення сканування. Зверніть увагу: чим менший інтервал, тим частіше буде створюватися копія і довше триватиме збір даних. Якщо програма буде раптово закрита, то при наступному запуску відкриється тимчасовий проект, який Netpeak Spider встиг зберегти під час останнього резервного копіювання. Щоб зберегти цей тимчасовий проект, перейдіть у меню «Проект» → «Зберегти» і вкажіть шлях до файлу, де він буде збережений.