Зміст
Як люди дізнаються про сайти? За статистикою, з 10 користувачів тільки 1 вводить посилання в рядок браузера вручну. Решта ж знаходять потрібний їм ресурс через пошукові системи.
Тому, присутність в них (і бажано – в першій десятці результатів видачі за тематичним запитом) є одним з (але далеко не ключовим) факторів успішності будь-якого підприємства. І ось щоб забезпечити хоча б потрапляння в бази даних пошукових систем, сайт необхідно відкрити для індексації.
Та якщо ви сумніваєтеся, чи опинився ваш ресурс в тих самих базах, команда SEO-відділу студії digital-маркетингу EcKit розповість, як проходить перевірка індексації сайту, акцентуючи увагу на основних способах, що застосовуються нашими фахівцями в роботі з проектами наших клієнтів.
Індексація сайту: як це працює
Багатьом може здатися, що індексація і сканування – це слова-синоніми. Але на ділі це два абсолютно різних, хоч і дуже тісно пов’язаних між собою процеси.
Так, під скануванням мається на увазі пошук сторінок для подальшої обробки. Індексацією ж називають додавання сторінки в індекс, тобто – базу даних пошуковика, щоб при релевантному запиті користувача вона з’являлася в результатах пошуку.
При цьому варто відзначити, що сканування сайту не означає Його індексацію. А потрапляння сайту в індекс не означає, що він опиниться на перших позиціях пошукової видачі, адже тут в гру вступає третій процес – ранжування.
Як перевірити, чи проіндексовано сайт
Якщо сторінки вашого ресурсу видно у видачі при введенні відповідного пошукового запиту – значить він проіндексований. При цьому мова може йти не про весь сайт, а про окремі його сторінки. Адже нерідко, трапляється так, що сам проект «висвічується», а ось сторінки, яку слід показати потенційному клієнту – немає. В цьому випадку перевірити індексацію сайту можна за допомогою сторонніх інструментів:
Перевірка в Google Console
“База”, “Основа”, “Фундамент” в питаннях перевірки індексування. Щоб отримати доступ до цього інструменту достатньо увійти в аккаунт Search Console, після чого перейти на вкладку «індексування», розділ «сторінки», де буде відображена Загальна інформація по сторінках, що потрапили або не опинилися в індексі пошукача.
Тут же можна згенерувати повний звіт з докладною інформацією про всі сторінки, перевірені на потрапляння в бази даних Google. А також побачити непроіндексовані сторінки і дізнатися про причини подібного непорозуміння.
Також, на цій сторінці реалізований інструмент перевірки по URL, за допомогою якого ви зможете запросити пересканування і додавання потрібної Вам сторінки в індекс Google.
Перевірка індексації в Google Пошуку
Якщо попередній варіант здався вам занадто складним, перевірити індексацію всього сайту або окремих сторінок можна відразу в пошуковику, використовуючи спеціальні команди-оператори. Наприклад, спробуйте скопіювати адресу вашого ресурсу в рядок пошукача, прописавши перед ним оператор «site:». На ділі це виглядає наступним чином:
site:https://example.com/
Якщо мова йде про конкретну сторінку, запит повинен прийняти наступний вигляд:
site:https://example.com/how-to-chek-indexation/
У разі, якщо сайт доданий в БД пошукових систем, проіндексовані url з’являться в результатах видачі. А за допомогою розділу «інструменти» можна буде уточнити кількість сторінок, що потрапили в індекс за певний проміжок часу.
Перевірка індексації за допомогою сторонніх сервісів
Крім інструментів Google, відстежувати індексацію сайту можна і через сторонні сервіси. Найпопулярнішими (зважаючи на свою умовну безкоштовність з обмеженням в 50 сторінок за день) вважаються linkody.com і smallseotools.com.
Крім того, інструмент для перевірки індексації доступний в Serpstat-е, але лише для сайтів, підключених до Google Search Console:
- Переходимо в розділ “Інструменти”;
- Шукаємо пункт “Індексація сторінок”;
- “Конектимося” за допомогою Серч консолі;
- Знаходимо список сайтів, підключених до GSC;
- Вибираємо цікавить нас проект, тиснемо кнопку «Перевірити сторінки».
Результати перевірки відобразяться в правій частині сервісу.
SEO-інструменти для перевірки сайту
Практично весь десктопний софт, який використовується СЕО-фахівцями для перевірки сайтів на предмет помилок, «з коробки» перевіряє і індексацію.
Букмарклети для перевірки індексації
Під хитрою назвою ховаються невеликі javascript-додатки, що зберігаються в браузері в якості закладок. Розроблені для автоматизації процесу перевірки через пошукову систему. Для активації досить завантажити відповідний скрпит, після чого додати посилання з нього в меню закладок.
Працювати з ним дуже просто – заходимо на цікавий для нас сайт або сторінку, після чого просто натискаємо на закладку – скрипт переведе вас на нову вкладку Гугла з пошуковим запитом, доповненим оператором «site:».
Індексатор Google Indexing API
Абсолютно безкоштовний і вкрай корисний інструмент Гугла, з яким ви зможете:
- Дізнайтеся, коли боти Google отримували інформацію за запитаною URL-адресою;
- Надіслати запит на переіндексацію (актуально при оптимізації);
- Подати прохання на видалення страрниці з бази даних пошуковика.
У порівнянні зі сторонніми сервісами, Indexing API дозволяє відправляти пакетні запити індексування при об’єднанні в один HTTP (але не більше 200 шт.в день). Збільшити квоту можна після впровадження розмітки JobPosting або BroadcastEvent.
Google не індексує сайт: які можуть бути причини
Їх кілька:
- З моменту запуску сайту пройшло занадто мало часу. Хоча розробники не розкривають цю інформацію, фахівцям вдалося з’ясувати, що індексація нових проектів може зайняти від 7 днів до 4 місяців;
- Індексація закрита примусово. Часто, на час розробки або оптимізації, фахівці закривають сайт від ботів пошукових систем через файл robots.TXT або метатег robots в HTML-коді сайту. І по завершенні робіт, банально, забувають відновити вихідні параметри;
- Помилки при використанні “canonical”. Тег, що застосовується в боротьбі з дублюючимся контентом, при неправильному використанні може закривати пошуковому боту доступ до сторінок, які вважаються «неканонічними».
Крім того, проблеми з індексацією можуть виникнути через:
- Відсутності або некоректно складеної «карти сайту» (sitemap.xml);
- Помилок у внутрішній перелинковке (або повна її відсутність);
- Низькій швидкості завантаження сторінок сайту;
- Якості контенту;
- Поганої оптимізації мобільної версії сайту;
- Ігнорування критичних помилок в Google Search Console.
Як можна прискорити індексацію
Googlebot, що відповідає за індексацію, обмежений краулінговим бюджетом, простими словами – має ліміт на перевірку кількості сторінок за один візит. Дізнатися про нього можна в “Серч консолі”, розділ “Індексація”, звіт за кількістю сторінок, оброблених протягом місяця.
При цьому варто відзначити, що він змінюється в залежності від ряду параметрів: розміру сайту, швидкості його роботи, а також потреб. І при виявленні будь-яких помилок, витрачається в рази швидше. Однак, цей процес можна контролювати за рахунок виправлення основних помилок, що заважають просуванню:
- Видалення дублів;
- Унікалізація контенту;
- Усунення битих посилань;
- Коректне налаштування редиректів;
- Прискорення завантаження сторінок.
І саме грамотна внутрішня оптимізація є ключем до правильної індексації вашого сайту.