Почему сайт не индексируется в Яндексе: порядок проверки

Проверьте именно тот адрес, который должен быть в поиске

Сравните протокол, домен, путь, параметры и конечный адрес после перенаправлений. Иногда проверяют старый URL, а поисковая система выбрала другую версию. В Вебмастере изучите сведения об адресе, статистику обхода и раздел «Страницы в поиске», включая исключённые документы.

Поиск с оператором site: удобен для быстрой ориентировки, но не заменяет сведения об отдельной странице. Запишите статус и дату последнего обхода. Если документ находится в индексе, дальнейшая задача относится к релевантности и видимости, а не к добавлению в поиск.

Документация: Яндекс: страницы в поиске и причины исключения

Доступна ли страница роботу

Открытие в вашем браузере не подтверждает доступность для робота. Сайт может отдавать защитную заглушку, требовать авторизацию или возвращать разные ответы посетителю и поисковой системе. Используйте проверку ответа сервера в Вебмастере и журналы сервера, если доступ к ним есть.

Код 200 должен сопровождать содержательную страницу. Редирект ведёт к нужному адресу, удаление сообщает об отсутствии. Пустую карточку с кодом 200 исправляют в данных; смены статуса недостаточно.

Документация: Яндекс: индексирование сайта

Проверьте robots.txt и запреты индексирования

Изучите действующий robots.txt, метатеги robots и заголовок X-Robots-Tag. После запуска тестовой версии запрет может остаться на отдельных шаблонах, а не на всём сайте. Проверяйте реальный ответ опубликованного URL, а не только настройку в административной панели.

Блокировка обхода может скрыть noindex от робота. Ограничения служебных страниц, поиска и закрытых данных проверяйте отдельно. Приватные сведения защищайте авторизацией, а не robots.txt.

Документация: Яндекс: файл robots.txt; Google: запрет индексирования через noindex

Может ли робот найти полезную страницу

Свяжите услугу с разделом, товар с категорией, статью с блогом. URL только в сообщении разработчика трудно обнаружить. Проверьте ссылки в отрендеренной странице.

В sitemap оставьте актуальные страницы для индексации. Исключите старые редиректы, случайные параметры и ошибки. Запись URL не гарантирует добавления в поиск.

Документация: Яндекс: Sitemap и обнаружение страниц

Что проверять у исключённой страницы

Ориентируйтесь на конкретную причину, которую показывает Вебмастер. Сравните исключённую страницу с канонической версией и похожими адресами сайта. Технические параметры, повторяющиеся карточки и страницы без самостоятельного предложения могут не давать пользователю нового ответа.

Лишний текст не устраняет дубли. Товару нужны модель, свойства и наличие, услуге состав и условия, статье самостоятельный ответ. Оценивайте потерю важных документов, а не индексацию каждой комбинации URL.

Документация: Яндекс: индексирование сайта

Как проверить исправление и что передать специалисту

Повторно проверьте сервер, запреты и текст. Запросите переобход, сохраните дату. Разделяйте публикацию, запрос, визит робота и смену статуса: запрос не подтверждает индексацию.

Для диагностики передайте список URL, их статусы, дату появления проблемы и последние изменения сайта. Приложите примеры из разных шаблонов: услуга, категория, карточка. Это поможет найти общую причину вместо многократной ручной отправки каждого адреса.

• Проблемный адрес и версия, которая должна стать основной.
• Ответ сервера и причина исключения по данным Вебмастера.
• Дата последнего обхода и дата исправления.
• Входящие внутренние ссылки и наличие URL в Sitemap.