Сайт пропал из поиска Яндекса: что проверить

Шаг 1. Диагностика в Яндекс Вебмастере

Откройте Яндекс Вебмастер, выберите сайт и раздел «Диагностика». Критичные ошибки, из-за которых сайт исключают из поиска, Вебмастер показывает отдельно, например:

• робот не смог получить IP-адрес сайта — ошибка DNS;
• сервер отвечает ошибкой 5xx или не отвечает вовсе;
• главная страница перенаправляет на другой адрес или отдаёт ошибку;
• сайт закрыт от индексации в robots.txt.

Затем откройте «Индексирование → Страницы в поиске», вкладку исключённых страниц. У каждой страницы указана причина исключения. Если причина одна для всех страниц, это и есть ответ.

Если сайта нет в Вебмастере, добавьте его и подтвердите права. История за прошлые даты не появится, но текущие ошибки будут видны.

Шаг 2. DNS: все NS-серверы должны отвечать одинаково

У домена обычно два и больше NS-сервера. Робот обращается к любому из них. Если зона домена настроена только на одном, то через раз робот получает ошибку, и сайт исключают, хотя у вас в браузере он открывается.

Посмотрите NS-серверы домена:

dig NS example.ru +short

И спросите адрес сайта у каждого из них по очереди:

dig A example.ru @ns1.example-host.ru +short
dig A example.ru @ns2.example-host.ru +short

Ответы должны совпадать и указывать на IP вашего сервера. Если один сервер отвечает пусто или с ошибкой, зону нужно создать и на нём либо сменить NS на те, где зона настроена. Подробнее в разборах сайт не открывается после переноса и DNS_PROBE_FINISHED_NXDOMAIN.

Шаг 3. Ответ сервера и редиректы

Проверьте сайт проверкой сайта: код ответа главной, цепочку перенаправлений и сертификат. Что должно быть:

• главная отвечает кодом 200;
• адреса с http:// и с www за одно перенаправление ведут на основной адрес, без цепочек и петель;
• перенаправление не уходит на другой домен, тестовую копию или страницу входа.

Ошибки 5xx, которые появляются время от времени, тоже приводят к исключению. Их видно в журнале ошибок сервера и в мониторинге доступности.

Шаг 4. robots.txt и noindex

Откройте https://ваш-сайт/robots.txt. Строка Disallow: / в блоке для всех роботов или для Яндекса закрывает весь сайт. Так часто бывает после переноса с тестовой копии, где индексацию закрыли.

Проверьте и код страниц: метатег <meta name="robots" content="noindex"> или HTTP-заголовок X-Robots-Tag: noindex тоже убирают страницу из поиска. В WordPress посмотрите галочку «Попросить поисковые системы не индексировать сайт» в «Настройки → Чтение».

Шаг 5. Взлом

Если в поиске вместо ваших страниц появились чужие (казино, аптеки, иероглифы) или Яндекс пометил сайт как опасный, причина во взломе. Смотрите разборы в поиске чужие страницы сайта и сайт помечен как опасный.

Шаг 6. После исправления

1. В «Диагностике» Вебмастера нажмите «Проверить» у исправленной ошибки.
2. Убедитесь, что в «Индексировании → Файлы Sitemap» добавлен актуальный sitemap и он читается без ошибок.
3. Отправьте главные страницы в «Индексирование → Переобход страниц».
4. Ждите. Возврат в поиск занимает от нескольких дней до нескольких недель, точных сроков Яндекс не называет.

Когда это не технический вопрос

Если страницы на месте в «Страницах в поиске», но сайт опустился в выдаче, это вопрос позиций, а не доступности. Тексты, ссылки и конкуренты — работа SEO-специалиста. Мы этим не занимаемся, но можем убедиться, что технических причин нет.

Когда нужен специалист

• Вебмастер показывает ошибку DNS или сервера, а вы не знаете, где управляется домен и хостинг.
• Ошибки 5xx появляются время от времени, и непонятно почему.
• Нужно проверить сайт целиком: доступность, редиректы, robots.txt, признаки взлома. Это технический аудит.

Сколько стоит у нас

Диапазоны ориентировочные, ставка 3 800 ₽ в час. Точную оценку присылаем до начала работ. Все цены.

Частые вопросы