Мультидоменне сканування

Змінено Mon, 09 Oct 2023 о 07:39 PM

  1. Навіщо потрібна функція і чим корисна
  2. Як увімкнути мультидоменне сканування в Netpeak Spider
  3. Робота з результатами сканування
  4. Приклад використання

1. Навіщо потрібна функція і чим корисна?

Мультидоменне сканування – це функція, що дозволяє одночасно сканувати кілька доменів углиб у рамках однієї сесії.

Дані сканування виводяться в єдину таблицю, і по ним доступний стандартний набір можливостей Netpeak Spider.

Функція використовується для:

  • просканувати кілька доменів углиб;
  • просканувати список URL та знайти на них биті посилання;
  • знайти сторінки із контактами зі списку сайтів.

    Мультидоменне сканування в Netpeak Spider доступне у тарифі PRO. Докладніше про те, як змінити тариф підписки, ви можете дізнатися у статті.

2. Як увімкнути мультидоменне сканування в Netpeak Spider


Щоб активувати функцію, необхідно:

2.1. Позначити відповідний пункт на основній вкладці налаштувань.

Enable multi-domain crawling

Зверніть увагу, що пункт «Увімкнути мультидоменне сканування» та «Сканувати лише всередині розділу» несумісні. При виборі одного, інший деактивується автоматично.


2.2. Додати адреси необхідних доменів до основної таблиці:

• за допомогою кнопки "Додати URL";

using the Add URLs button


• вибравши один із можливих варіантів додавання у випадаючому меню «Список URL»;

using List of URLs


2.3. Запустіть сканування кнопкою "Старт". Всі вказані домени програма паралельно скануватиме вглиб. Якщо в полі «Початковий URL» було внесено URL-адресу, вона також буде просканована.

Start with Initial URL


Зверніть увагу, що:

• усі URL, які були внесені до таблиці та в полі «Початкова URL», повинні відповідати 200 кодом відповіддю сервера;

• після завершення сканування тільки URL-адреси, що належать хосту, вказаному в полі «Початковий URL», будуть вважатися внутрішніми;
• для цього типу сканування неможливо вказати максимальну кількість сканованих URL для кожного окремого домену у вкладці «Обмеження» налаштувань.


3. Робота з результатами сканування

Після завершення сканування або натискання на паузу буде доступно вивантаження стандартного набору звітів. Якщо вам необхідно працювати з певною частиною результатів, відфільтруйте їх у такий спосіб:

  • за допомогою функції сегментації відфільтруйте потрібну інформацію. Ви можете встановити необмежену кількість параметрів для фільтрації;

Робота з результатами сканування

  • на вкладці «Зведення» бічної панелі відфільтруйте результати за певним параметром, застосувавши його як сегмент;

overview and segment

  • як сегмент можна застосувати й помилки.

Помилки та сегмент


Після використання функції «Застосувати як сегмент» програма повністю переналаштується — Дашборд, Зведення, Помилки, База даних та інші параметри відображатимуться відносно застосованого сегмента.  


Докладніше про цю функцію ви можете дізнатися у статті ‘Що таке сегментація в Netpeak Spider, і як її використовувати‘.

4. Приклад використання

4.1.Масовий аналіз доменів


Для економії часу при регулярній перевірці доменів на SEO-помилки та биті посилання ви можете просканувати їх в рамках однієї сесії, скориставшись функцією мультидоменного сканування. Для цього необхідно:  

  1. Позначити пункт "Увімкнути мультидоменне сканування" на основній вкладці налаштувань.
  2. Додати список доменів до основної таблиці.
  3. Обрати потрібні параметри для аналізу на бічній панелі.
  4. Натиснути «Старт» та дочекатися закінчення сканування.
  5. Сегментувати одержані результати в залежності від поставлених завдань.

Також ви можете обмежити глибину сканування на вкладці «Обмеження», щоб аналізувати домени не переходячи глибше одного URL від головної сторінки.


4.2 Пошук контактів

Щоб швидко зібрати контакти (e-mail, мобільні телефони) з декількох сайтів одночасно, ви можете зробити так:

  1. Позначити пункт «Увімкнути мультидоменне сканування».
  2. Додати список доменів до основної таблиці.
  3. Вибрати шаблон мінімум на бічній панелі для прискорення процесу краулінгу.
  4. На вкладці «Обмеження» встановити глибину «1», оскільки сторінки «Про нас», «Контакти» та подібні розташовуються саме на такій глибині.
  5. Натиснути «Старт» та дочекатися закінчення сканування;
  6. Перенести отримані URL-адреси в Netpeak Checker і перевірити їх на наявність контактної інформації.

4.3. Перевірка наявності битих посилань у списку URL


Щоб перевірити наявність битих посилань у списку URL, потрібно:

  1. Вставити список URL (можна імпортувати з XML Sitemap).
  2. У вкладці «Обмеження» установіть глибину сканування «1».
  3. Запустити сканування кнопкою "Старт".
  4. Після завершення сканування відфільтрувати результати у головній таблиці:
    • налаштувавши сегмент за параметром "Код відповіді сервера" = "404 Not Found",
    • на бічній панелі «Звіти», де у списку помилок з високою критичністю вибрати «Биті сторінки», та застосувати його як сегмент.
  5. Переглянути звіт за битими посиланнями. Інструкцію можна знайти у статті "Як у Netpeak Spider подивитися, які сторінки містять биті посилання". 

Ця стаття була корисною?

Чудово!

Дякуємо за відгук

Даруйте, що не вдалося допомогти вам

Дякуємо за відгук

Розкажіть, як ми можемо поліпшити цю статтю!

Виберіть принаймні одну причину
Необхідна перевірка CAPTCHA.

Відгук надіслано

Дякуємо за допомогу! Ми докладемо всіх зусиль, щоби виправити статтю