Причины плохой индексации сайта

Перед тем, как начать паниковать, нужно четко понять симптоматику возникшей проблемы. С этой целью нужно определить причины, из-за которых может быть плохая индексация сайта. Для выполнения этого, можно воспользоваться следующими способами.

Как обнаружить отсутствие индексации

Выполнить проверку данных о сканировании в Яндекс. Вебмастер и Google Search Console.

В Яндекс. Вебмастере нужно открыть раздел «Индексирование» и перейти на «Страницы в поиске». В Google Search Console понадобится открыть вкладку «Покрытие» в разделе «Индекс». Тут пользователь сможет обнаружить последние изменения, которые имеют отношение к удалению и добавлению страниц в индекс, выполнить просмотр истории и оценивать индексацию веб-ресурса поисковым роботом. В случае, если уже длительное время не выполнялось пополнение перечня добавленных страниц, то скорее всего был утерян доступ к площадке.

Поисковые операторы.

В строку поиска можно ввести оператор site: с URL конкретной интернет-площадки. Допустим Google удалось найти определенное количество результатов, а Яндексу другое. Разница в небольшом количестве может связана с отсутствием индексации определенных системных категорий. Если же разница более существенная, то краулинговый бот поисковой системы не находит и не сканирует сайт. При таком раскладе следует задуматься о причинах отсутствия индексации сайта.

Основные причины

Первая причина может быть связана с тем, что сайт закрыт для индексирования. Самой непроницаемой мантией-невидимкой является вот такой текст в файле robots.txt: User-Agent: * Disallow: /. Если будет иметься вот такое прикрытие, то путь к площадке будет трудно найти любой поисковой системе. Директива Disallow: / должна быть удалена.

Есть ещё несколько причин, из-за которых поисковые роботы могут не видеть сайт:

наличие неделегированного домена – на этом должны сделать основной акцент те, кто выполняет размещение/покупку доменов с историей;
некорректная работа тега noindex: при закрытии ненужных страниц от индексации, выполнялось закрытие одновременно нужных;
установка приватных настроек в CMS;
файл .htaccess заблокировал сканирование.

В качестве второй причины можно назвать те ситуации, когда поисковой робот не в курсе того, что существует конкретный сайт или страница. С этой проблемой часто сталкиваются молодые площадки. В особенности, если регистрация сайта в поисковой системе длилась слишком долго, и он даже не стоит в очереди на сканирование. Чтобы поисковые системы его обнаружили, понадобится минимум две недели. Если робот не в курсе вашей площадки из-за того, что её обновления происходят очень редко, то и ссылки на неё отсутствуют. В связи с этим, при добавлении новых страниц, обязательным является выполнение перелинковки.

Причина может иметь отношение и к тому, что сайт находится в бане. Поисковые системы выполняют наложение санкций за разного рода правонарушения. После этого веб-ресурс заносится в черный список ботов, и его индексацией никто не занимается. Владельцы и веб-мастера площадки могут быть не всегда осведомлены об этом. Яндекс. Вебмастер ещё отправляет уведомления о нахождении сайта под фильтрами. Если речь идет об Google, то определить наличие санкций сможет только специализированный SEO-специалист.

Причины наложения фильтров:

наличие нерелевантного и некачественного контента;
назойливые рекламные блоки;
продажа ссылок или ссылочный спам;
заспамленное семантическое ядро;
вредоносный код;
накрученные поведенческие факторы.

В случае устранения технических ошибок, можно одновременно выполнить нейтрализацию плохой индексации сайта. Если говорить о установке неправильных технических параметрах, то речь идет о:

некорректных HTTP-заголовках;
некорректных редиректах (когда вместо 302 используется 301, rel=”canonical” как одна и та же каноническая страница для всего);
неверное указание кодировки, которая для робота отображается как набор нечитаемых символов;
ошибки сканирования, которые отображаются в самих поисковых системах;
хостинг работает нестабильно;
отсутствие или некорректная настройки файла sitemap.xml.

Ещё одна причина может быть связана с низким качеством страниц. В случае вопиюще низкого качества страниц, то поисковые системы могут поставить санкционный крест на сканировании площадки. Наличие бана и будет причиной того, что не происходит индексация сайта. В большинстве случаев плохое качество страниц — это показатель того, что конкуренты имеют гораздо лучшую площадку. Потеря позиций при таком раскладе осуществляется на основе определенного сравнения.

Пессимизация

Поисковые системы для выполнения пессимизации должны обладать определенными основаниями. В частности, речь идет о

неуникальном контенте – наличие страниц с таким же содержимым, которое уже имеется в выдаче и в нет нет особой ценности;
одинаковой структуре заголовков, одинаковых метатегах;
большого количества технических ошибок;
медленной скорости загрузки из-за тяжелых изображений;
неоптимизированном контенте.

Из-за проблем в хостинге или CMS можно столкнуться с медленной скоростью отдачи документов. Сканирование сайта будет продолжаться, но не такими темпами, как бы если бы выполнялась моментальная отдача документов. Способом существенного улучшения индексации сайта является простая оптимизация скорости загрузки. Этот фактор будет отталкивающем и для целевой аудитории конкретной веб-площадки.

Из-за перечисленных причин в большинстве случаев и возникает плохая индексация сайта. Если так и не удалось обнаружить причин пессимизации интернет-ресурса, оптимальным вариантом будет обратиться за помощью к SEO-специалистам. Они смогут не только устранить причину плохой индексации, но и проведут оптимизацию всех настроек.

Источник на материал: Причины плохой индексации сайта

Поделиться записью