Содержание
Как люди узнают о сайтах? По статистике, из 10 пользователей только 1 вводит ссылку в строку браузера вручную. Остальные же находят нужный им ресурс через поисковые системы.
Потому, присутствие в них (и желательно – в первой десятке результатов выдачи по тематическому запросу) является одним из (но далеко не ключевым) факторов успешности любого предприятия. И вот чтобы обеспечить хотя бы попадание в базы данных поисковиков, сайт необходимо открыть для индексации.
И если вы сомневаетесь, оказался ли ваш ресурс в тех самых базах, команда SEO-отдела студии digital-маркетинга EcKit расскажет, как проходит проверка индексации сайта, акцентируя внимание на основных способах, применяемых нашими специалистами в работе с проектами наших клиентов.
Индексация сайта: как это работает
Многим может показаться, что индексация и сканирование – это слова-синонимы. Но на деле это два совершенно разных, хоть и очень тесно связанных между собой процесса.
Так, под сканированием подразумевается процесс поиска страниц для дальнейшей обработки. Индексацией же называют добавление страницы в индекс, то есть – базу данных поисковика, чтобы при релевантном запросе пользователя она появлялась в результатах поиска.
При этом стоит отметить, что сканирование сайта не означает его индексацию. А попадание сайта в индекс не значит, что он окажется на первых позициях поисковой выдачи, ведь здесь в игру вступает третий процесс – ранжирование.
Как проверить, проиндексирован ли сайт
Если страницы вашего ресурса видны в выдаче при введении соответствующего поискового запроса – значит он проиндексирован. При этом речь может идти не о всем сайте, а об отдельных его страницах. Ведь нередко, случается так, что сам проект «высвечивается», а вот страница, которую следовалы показать потенциальному клиенту – нет. В этом случае проверить индексацию сайта можно посредством сторонних инструментов:
Проверка в Google Console
«База», «Основа», «Фундамент» в вопросах проверки индексирования. Чтобы получить доступ к этому инструменту достаточно войти в аккаунт Search Console, после чего перейти на вкладку «Индексирование», раздел «Страницы», где будет отображена общая информация по страницам, попавшим или не оказавшимся в индексе поисковика.
Здесь же можно сгенерировать полный отчет с подробной информацией обо всех страницах, проверенных на попадание в базы данных Google. А также увидеть непроиндексированные страницы и узнать о причинах подобного недоразумения.
Также, на этой странице реализован инструмент проверки по URL, с помощью которого вы сможете запросить пересканирование и добавление нужной вам страницы в индекс Google.
Проверка индексации в Google поиске
Если предыдущий вариант показался вам слишком сложным, проверить индексацию всего сайта или отдельных страниц можно сразу в поисковике, используя специальыне команды-операторы. Например, попробуйте скопировать адрес вашего ресурса в строку поисковика, прописав перед ним оператор «site:». На деле это выглядит следующим образом:
site:https://example.com/
Если речь идет о конкретной странице, запрос должен принять следующий вид:
site:https://example.com/how-to-chek-indexation/
В случае, если сайт добавлен в БД поисковиков, проиндексированные url появятся в результатах выдачи. А с помощью раздела «инструменты» можно будет уточнить количество страниц, попавших в индекс за определенный промежуток времени.
Проверка индексации с помощью сторонних сервисов
Помимо инструментов Google, отслеживать индексацию сайта можно и через сторонние сервисы. Самыми популярными (ввиду своей условной бесплатности с ограничением в 50 страниц за день) считаются linkody.com и smallseotools.com.
Кроме того, инструмент для проверки индексации доступен в Serpstat-е, но лишь для сайтов, подключенных к Google Search Console:
- Переходим в раздел «Инструменты»;
- Ищем пункт «Индексация страниц»;
- «Коннектимся» с помощью Сёрч Консоли;
- Нахоидм список сайтов, подключенных к GSC;
- Выбираем интересующий нас проект, жмем кнопку «Проверить страницы».
Результаты проверки отобразятся в правой части сервиса.
SEO-инструменты для проверки сайта
Практически весь десктопный софт, используемый СЕО-специалистами для проверки сайтов на предмет ошибок, «из коробки» проверяет и индексацию.
Букмарклеты для проверки индексации
Под хитрым названием скрываются небольшие javascript-приложения, сохраняющиеся в браузере в качестве закладок. Разрабортанны для автоматизации процесса проверки через поисковую систему. Для активации достаточно скачать соответстующий скрпит, после чего добавить ссылки из него в меню закладок.
Работать с ним очень просто – заходим на интересующий нас сайт или страницу, после чего просто кликаем на закладку – скрипт переведет вас на новую вкладку Гугла с поисковым запросом, дополненным оператором «site:».
Индексатор Google Indexing API
Абсолютно бесплатный и крайне полезный инструмент Гугла, с которым вы сможете:
- Узнать, когда боты Google получали информацию по запрошенному URL;
- Отправить запрос на переиндексацию (актуально при оптимизации);
- Подать прошение на удаление страрницы из базы данных поисковика.
В сравнении со сторонними сервисами, Indexing API позволяет отправлять пакетные запросы индексирования при объединении в один HTTP (но не более 200 шт. в день). Увеличить квоту можно после внедрения разметки JobPosting или BroadcastEvent.
Google не индексирует сайт: какие могут быть причины
Их несколько:
- С момента запуска сайта прошло слишком мало времени. Хотя разработчики не раскрывают эту информацию, опытным путем удалось выяснить, что индексация новых проектов может занять от 7 дней до 4 месяцев;
- Индексация закрыта принудительно. Часто, на время разработки или оптимизации, специалисты закрывают сайт от ботов поисковых систем черех файл robots.txt или метатег robots в HTML-коде сайта. И по завершении работ, банально, забывают восстановить исходные параметры;
- Ошибки при использовании «canonical». Тег, применяемый в борьбе с дублирующимся контентом, при неправильном использовании может закрывать поисковому боту доступ к страницам, считающимся «неканоническими».
Кроме того, проблемы с индексацией могут возникнуть из-за:
- Отсутствия или некорректно составленной «карты сайта» (sitemap.xml);
- Ошибок во внутренней перелинковке (или полное ее отсутствие);
- Низкой скорости загрузки страниц сайта;
- Качества контента;
- Плохой оптимизации мобильной версии сайта;
- Игнорирования критических ошибок в Google Search Console.
Как можно ускорить индексацию
Googlebot, отвечающий за индексацию, ограничен краулинговым бюджетом, простыми словами – имеет лимит на проверку количества страниц за один визит. Узнать о нем можно в «Сёрч Консоли», раздел «Индексация» 0 отчет по количеству страниц, обработанных за месяц.
При этом стоит отметить, что он меняется в зависимости от ряда параметров: размера сайта, скорости его работы, а также потребностей. И при обнаружении каких-либо ошибок, расходуется в разы быстрее. Однако, этот процесс можно контролировать за счет исправления основных ошибок, мешающих продвижению:
- Удаление дублей;
- Уникализация контента;
- Устранение битых ссылок;
- Корректная настройка редиректов;
- Ускорение загрузки страниц.
И именно грамотная внутренняя оптимизация является ключом к правильной индексации вашего сайта.