HTTP и редиректы
Проверяем коды 200, цепочки перенаправлений, ошибки 4xx и 5xx, доступность по HTTPS и единый вариант адреса.
Техническое SEO
Сайт не индексируется
Разбираемся, почему поисковый робот не обходит важные URL или исключает их после обхода. Проверяем настройки сайта и качество самих страниц, а не ограничиваемся отправкой карты сайта.
Диагностика
От ответа сервера
до решения поисковой системы
Сначала отделяем невозможность обхода от исключения уже загруженной страницы. Это разные проблемы: в первом случае робот не получает содержимое, во втором — получает, но выбирает другой URL или не считает документ полезным для поиска.
Robots и noindex
Сверяем robots.txt, meta robots и X-Robots-Tag. Ищем запреты, оставшиеся после разработки или переноса.
Canonical
Выясняем, не указывает ли страница канонический адрес на главную, старый домен, дубль или URL с другими параметрами.
Sitemap и ссылки
Оставляем в карте канонические URL, проверяем дату обновления и путь к странице из навигации и тематических материалов.
Дубли и параметры
Сопоставляем варианты со слешем, GET-параметрами, сортировками и пагинацией, чтобы поиску не приходилось выбирать из копий.
Содержимое
Проверяем, отвечает ли документ отдельному намерению, не повторяет ли соседние страницы и доступен ли основной текст без действий пользователя.
Результат
Понятно, где именно прерывается путь страницы в поиск
Причина подтверждена
Для каждого важного URL фиксируем ответ сервера, директивы, canonical и статус в инструментах поисковых систем.
Препятствия устранены
Исправляем технические запреты, неверные адреса, карту сайта и внутренние связи в согласованном объёме.
Контроль задан
Формируем список URL для переобхода и точки повторной проверки, не выдавая отправку URL за гарантию индексации.
Порядок работ
Проверяем конкретные URL, затем шаблон
Пришлите несколько страниц, которые должны участвовать в поиске. Доступ к Яндекс Вебмастеру или Search Console помогает увидеть историю, но первичную техническую проверку можно начать без пароля.
Собираем выборку
Сравниваем отсутствующие URL со страницами того же типа, которые уже находятся в поиске.
Проверяем обход
Снимаем HTTP-ответы, директивы, canonical, разметку ссылок и доступность контента для робота.
Исправляем причину
Меняем правила, шаблон или структуру, сохраняя корректные закрытия служебных и дублирующих страниц.
Отслеживаем статус
Обновляем sitemap, отправляем приоритетные URL на переобход и задаём дату повторной проверки.
Яндекс рекомендует сначала смотреть причину в разделе «Исключённые страницы» и отдельно предупреждает: доступность для робота ещё не означает участие URL в поиске. Подробнее — в официальных материалах об анализе индексации и причинах исключения.
Границы работ
Техническая доступность — необходимое, но не достаточное условие
Поисковая система сама решает, включать ли документ и по каким запросам его показывать. Мы не обещаем дату индексации или позицию. Если робот получает страницу, но алгоритм считает её дублем, малополезной или неактуальной, потребуется переработка содержания и структуры. Массово открывать фильтры и технические URL нельзя: это увеличит число дублей и расход обхода. Для проверки сайта целиком подходит технический аудит, а эта услуга сфокусирована на конкретной проблеме индексации.
Вопросы
Перед диагностикой
Почему сайт не индексируется Яндексом?
Проверяем запреты, HTTP-ответы, редиректы, canonical и причину исключения. Даже технически доступная страница может не войти в поиск как дубль или недостаточно полезный документ.
Можно ли гарантировать попадание в индекс?
Нет. Мы устраняем подтверждённые препятствия и улучшаем сигналы страницы, но решение и срок принадлежат поисковой системе.
Достаточно ли добавить URL в sitemap?
Нет. Карта помогает обнаружению, но страница должна быть доступна, канонична, полезна и связана с другими разделами сайта.
Как проверяется результат?
Повторно снимаем технические параметры, отправляем важные URL на переобход и отслеживаем их статус в кабинетах поисковых систем.
Первый шаг
Пришлите URL, которого нет в поиске
Укажите поисковую систему, пример страницы и когда вы заметили проблему. Если таких URL много, добавьте общий тип или раздел.