Розділ Crawl Stats у Google Search Console надає детальну статистику про те, як Googlebot сканує ваш сайт. Цей інструмент допомагає виявити проблеми, пов’язані з індексацією та доступністю веб-сторінок, а також покращити взаємодію сайту з пошуковою системою.
Основні показники статистики сканування
1. Total Crawl Requests (Загальна кількість запитів на сканування)
- Що це? Загальна кількість запитів, зроблених Googlebot до вашого сайту.
- Чому це важливо?
- Стабільне або зростаюче число запитів зазвичай вказує на здорову активність Googlebot.
- Різке зниження може сигналізувати про проблеми з доступністю сайту.
- Порада: Якщо запитів надто багато, перевірте, чи немає на сайті дубльованого контенту або зайвих ресурсів.
2. Downloaded Data (Завантажені дані)
- Що це? Загальний обсяг даних, завантажених Googlebot (у МБ).
- Чому це важливо?
- Високі значення можуть свідчити про необхідність оптимізації зображень, відео або інших великих ресурсів.
- Різкий стрибок може бути спричинений додаванням нового великого контенту.
- Порада: Оптимізуйте ресурси, такі як зображення (використовуйте WebP) і відео (H.264 або VP9).
3. Average Response Time (Середній час відповіді)
- Що це? Середній час, за який сервер відповідає на запити Googlebot.
- Чому це важливо?
- Оптимальний час відповіді — менше ніж 200 мс.
- Тривалий час відповіді може зменшити кількість сторінок, які Google встигає просканувати.
- Порада: Покращуйте продуктивність сервера, використовуючи кешування та CDN.
4. Host Status (Стан хоста)
- Що це? Статус доступності вашого сервера.
- Чому це важливо?
- Якщо сервер не відповідає на запити, це може призвести до зниження сканування та індексації вебсайту.
- Постійна доступність хоста важлива для стабільного сканування сайту.
Додаткові звіти та їх значення
5. By response Code (Коди відповіді)
- Що це? Розподіл запитів за HTTP-кодами (200, 301, 404, 500 тощо).
- Як інтерпретувати?
- 200 (OK): Усе працює коректно.
- 301/302 (Редиректи): Переконайтеся, що редиректи налаштовані правильно.
- 404 (Не знайдено): Мінімізуйте кількість таких помилок.
- 500 (Помилка сервера): Негайно усуньте ці проблеми, оскільки вони заважають індексації.
- Порада: Використовуйте звіт про помилки в Google Search Console для швидкого усунення недоступних сторінок.
6. By file type (Розбивка за типами файлів)
- Що це? Показує, які типи файлів найчастіше скануються: HTML, зображення, JavaScript, CSS тощо.
- Як інтерпретувати?
- Якщо JavaScript або CSS займає занадто велику частку, це може бути сигналом про те, що сайт покладається на ресурси, які потребують оптимізації.
7. By purpose (Мета сканування)
У цьому розділі показується, на що саме витрачені запити Googlebot:
- Discover: Пошук нових сторінок.
- Refresh: Повторне сканування вже відомих сторінок.
8. By Googlebot Type (За типом Googlebot)
- Googlebot Smartphone: Сканує ваш сайт із точки зору мобільних користувачів (важливо для Mobile-First Indexing).
- Googlebot Desktop: Аналізує сайт для десктопних користувачів.
- Googlebot Images, Video: Сканують медіафайли.
- Порада: Переконайтеся, що всі ресурси (CSS, JS, зображення) доступні для сканування.
Поради для аналізу та оптимізації
- Регулярно перевіряйте статистику: Аналізуйте зміни в активності Googlebot та усувайте виявлені проблеми.
- Використовуйте robots.txt правильно: Переконайтеся, що потрібні ресурси (CSS, JavaScript, зображення) не заблоковані для сканування.
- Зменшення навантаження на сервер: Оптимізуйте зображення, зменшуйте розмір CSS і JavaScript.
- Перевіряйте доступність сторінок: Усувайте помилки 404 і 500, щоб підвищити ефективність сканування.
- Тестуйте рендеринг: Використовуйте інструменти Google (наприклад, URL Inspection Tool), щоб переконатися, що Googlebot коректно бачить ваші сторінки.
Розділ Crawl Stats в Google Search Console — це інструмент для діагностики вашого сайту. Регулярний моніторинг та своєчасна оптимізація параметрів сканування допоможуть вашому сайту залишатися видимим для Google і забезпечать успішну індексацію контенту.