Почему Google не индексирует страницу: как разбирать canonical, redirect, noindex и robots без паники

Если страница не индексируется, первая реакция почти всегда эмоциональная: срочно что-то переотправить, поменять title, тронуть robots или несколько раз запросить переобход. Обычно это только добавляет шум. Важно сначала понять, какой сигнал сайт отправляет поиску и не спорит ли он сам с собой.

В большинстве случаев причина лежит в одной из четырёх зон: canonical, redirect, noindex или robots. Именно поэтому полезно смотреть на проблему как на систему, а не как на одну настройку. Такой подход особенно нужен в проектах, где недавно был релиз или перезапуск сайта.

С чего начинать проверку

Сначала посмотрите код ответа URL и каноникал. Если страница редиректится, индексироваться она не будет как самостоятельный документ. Если canonical указывает на другой URL, поисковик может посчитать текущую страницу дублем. После этого уже имеет смысл смотреть robots и наличие `noindex` в HTML. Это гораздо надёжнее, чем наугад править всё сразу.

Почему сигналы конфликтуют

Потому что сайт часто живёт не в одной логике, а в нескольких слоях одновременно: шаблон, клиентский JS, старые редиректы, новый sitemap, служебные архивы, пререндер и ручные SEO-правки. В итоге одна страница может быть разрешена в robots, но иметь `noindex`; быть в sitemap, но редиректить; иметь хороший title, но canonical на другой URL. Здесь особенно важно читать связку из canonical, redirect и noindex и чек-листа первых 24 часов после релиза.

Где ещё искать причину

Если базовые сигналы чистые, проверьте исходный HTML и то, что реально видит бот на странице. Для React-проектов это особенно чувствительно. Иногда страница технически существует, но до гидрации в ней нет достаточно понятного контента. В такой ситуации полезно сопоставить проблему с материалом prerender для React-сайта и посмотреть, не ломается ли публикация именно на уровне рендера.

Что делать дальше

Не пытайтесь чинить индексирование через один инструмент. Лучше соберите короткую карту: URL, код ответа, canonical, robots, noindex, sitemap и фактический HTML. Если видите, что сайт даёт противоречивые сигналы не на одной странице, а системно, логичнее сразу идти в аудит бренда и сайта, чтобы починить контур целиком, а не ловить отдельные симптомы.