Розповсюдженою проблемою багатьох сайтів є відсутня індексація Гуглом.

Які найпопулярніші проблеми та які методи їх вирішення?

Загрузка сайту

Google не любить сайти, які довго загружаються, відповідно їх індексація відбувається довше. Повільна загрузка може бути наслідком багатьох причин: забагато контенту, який має обробляти браузер користувача, використовуються застарілі сервери, у яких обмежені ресурси тощо.

Є декілька інструментів, за допомогою яких можна провести перевірку швидкості загрузки сайту:

• Інструмент Google для аналізу швидкості загрузки сайту - PageSpeed Insights. Також бонусом будуть рекомендації, які вони дають, щодо оптимізації. 
• Інструмент оцінки швидкості загрузки WebPageTest додатково виділяє елементи, які знижують швидкість сайта.

Швидкість загрузки сайту можна збільшити за допомогою більш швидкого хостингу або використання мережі доставки вмісту - CDN (Content delivery network).

Нескінченні цикли переадресації

Одна із найчастіших проблем, які заважають індексації - нескінченні цикли переадресації, які можуть з’явитись банально через якусь помарку.

Як це можна виправити? 

Якщо використовувати систему управління вмістом WordPress, то за допомогою файлу .htaccess можна знайти сторінки, з яких перенаправлено трафік. Потрібно вставити в пошук Redirect 301 - це виявить всі файли, які мають перенаправлення. Виправте помарки, та за наявності 302 редірект (перенаправлення з однієї сторінки на іншу), потрібно змінити його на 301.

Інструмент Screaming Frog допоможе знайти ще помилки на сайті, якщо вони є. По завершенню усунення помилок, за допомогою Google Search Console подайте повторний запит на індексацію.

Плагіни, які блокують Googlebot

Робота пошукового робота Googlebot може блокуватись деякими плагінами (програмними блоками, що розширюють можливості програми для комп'ютера або движка сайту). У такому разі сканування сайту пошуковими системами буде неможливим. 

Googlebot заблокується, за умови налаштування файлу robots.txt за допомогою однойменного плагіну для WordPress.

Як це можна виправити?

Файл robots.txt повинен бути у кореневій папці сайту і має бути доступним у вигляді: домен/robots.txt. Важливо, щоб у файлі не було «/» (косої лінії) у рядку, оскільки її наявність заблокує всі сторінки, які є у кореневій папці.

JavaScript для рендерингу

Перетворення коду в картинку відбувається під час рендерингу веб-сторінки браузера. Сам JavaScript не є причиною проблем із індексацією, проте вони точно будуть, якщо його використовувати як маскування (коли сайт надає на одній сторінці різний контент або різні URL-адреси користувачам та пошуковикам, що є порушенням Google-рекомендацій.

У деяких випадках бувають відмінності у рендерних та сирих версіях сторінок і це теж може сприйматись як маскування, що стане причиною зупинки індексації. Також Google не зможе проіндексувати сайт, якщо файли JavaScript та CSS будуть приховані.

Не всі варіанти домену

Google Search Console має містити всі версії вашого домена, вони мають бути верифікован. Це дуже важливо при міграції з http:// на https://.

Метатеги

Метатеги noindex та nofollow бувають просто необхідними, проте, якщо вони з’являються не на тій сторінці, якій мають, або ж взагалі застосовані до всього сайту, то він не індексуватиметься.

Як це можна виправити?

Потрібно змінити noindex, nofollow на index, follow.

Штрафні санкції

Потрапити під штрафні санкції від Google можна порушуючи їх рекомендації. За таке сайт можуть просто песимізувати (знизити позицію сайту у видачі пошукової системи). Доки не усунути порушення - сайт не індексуватиметься.

За що можна отримати штрафи?

1. Шкідливе або небажане ПО на сайті
2. Прихований текст або посилання
3. Маскування
4. Прихована переадресація
5. Нерелевантні ключові слова
6. Занадто багато ключових слів
7. Дубльований контент

Мобільна версія

Якщо сайт не адаптований під мобільні платформи, то це буде серйозною проблемою, оскільки з 2019 року перевага Google надається мобільному контенту під час індексації.

Внесення багатьох змін не є обов’язковим, іноді достатньо просто сітки, яка змінюється (макет сайту, який адаптується під розміри екрану та пристрою) та медіавиразів (Media query - використовують тоді, коли потрібно застосувати різні CSS-стилі, для різних пристроїв типу відображення, адаптують CSS під різні параметри та характеристики пристроїв).

Технічне SEO 

Технічна SEO оптимізація дуже важлива для роботи з сайтом, оскільки вона допомагає пошуковикам у скануванні, розумінні та індексуванні сторінок.

Якісне та грамотне технічне SEO може виявити проблеми із скануванням, індексацією та загалом із основними показниками та вирішити їх, навіть тоді, коли здається єдиним виходом - створення нового сайту.

Для успішності сайту потрібні: якісний контент, робота із технічним SEO та створення якісних зворотних посилань.

Вирішивши всі проблеми із індексуванням, гарний трафік від Google вам забезпечено!