Пять причин, по которым статья не попадает в поиск

Статья опубликована неделю назад. Вбиваете кусок заголовка в поиск — её нет. Ещё через неделю — всё так же нет.

Причин немного, и они проверяются по порядку. Начинаю с самых частых.

1. Поисковик о ней не знает

Самое обычное. Робот не обходит интернет сплошняком — он идёт по ссылкам и по картам сайта. Если на статью не ведёт ни одной ссылки и её нет в карте, узнать о ней неоткуда.

Как проверить: откройте вашсайт.ру/sitemap.xml и поищите адрес статьи. Нет — ищите, почему движок её туда не положил.

Что помогает ускорить: ссылка на свежую статью с главной или из раздела блога, упоминание в соцсетях, отправка адреса на переобход в Вебмастере Яндекса и Search Console.

2. Она закрыта от индексации

Второе по частоте и самое обидное, потому что это настройка, а не недоработка.

Три места, где может стоять запрет: мета-тег noindex на самой странице, запрет в robots.txt, заголовок ответа сервера. Чаще всего виноват плагин или шаблон: например, записи определённой рубрики закрываются целиком, и новая статья попадает именно туда.

Отдельная ловушка: запрет в robots.txt не убирает страницу из поиска, но мешает роботу увидеть разрешающие настройки. Если хотите, чтобы страницу индексировали, доступ роботу должен быть открыт.

3. Поисковик считает её неоригинальной

Страница обойдена, не закрыта, но в поиск не попадает. Часто это значит, что система нашла почти такой же текст.

Варианты: текст частично совпадает с другой вашей страницей (две статьи на одну тему), статью скопировали и чужая копия проиндексировалась раньше, или на сайте есть служебные дубли — один и тот же материал по нескольким адресам с параметрами.

Что делать: свести близкие статьи в одну, проставить канонический адрес на основной версии, закрыть служебные адреса с параметрами.

4. Страница технически недоступна роботу

Выглядит нормально в браузере, но робот видит другое: ответ 404 или 500 в момент обхода, бесконечный редирект, страница грузится так долго, что обход прерывается, или весь текст подгружается скриптом, а в исходном коде пусто.

Проверяется просмотром страницы в режиме исходного кода: если текста статьи там нет, его может не увидеть и робот.

5. Её посчитали бесполезной

Самая неприятная причина, потому что чинится не настройкой. Страница обойдена, открыта, уникальна — но в поиск не берут.

Обычно это значит: материал не отвечает ни на один реальный запрос, либо отвечает хуже всех, кто уже стоит в выдаче. Короткий пересказ общеизвестного, без фактов, цифр и собственного опыта.

Лечится переработкой: добавить конкретику, которой нет у соседей по выдаче.

Сколько ждать, прежде чем паниковать

Для нового сайта две-три недели — норма. Для живого сайта, который обновляется регулярно, обычно от нескольких дней до недели.

Если прошло больше месяца, причина точно есть, и она в списке выше.

С чего начать проверку

Первым делом посмотрите, что происходит со страницей технически: открыта ли она роботам, нет ли редиректа, есть ли текст в исходном коде. Это закрывает причины со второй по четвёртую.

У меня для этого есть бесплатная проверка страницы: вводите адрес, она показывает код ответа, запреты индексации, канонический адрес и мета-теги. Регистрация не нужна.

Если там всё чисто, остаются первая и пятая причины — и это уже разговор про ссылки и про сам текст.