Почему сайт не в поиске Яндекса

Почему сайт не в поиске: сначала надо разделить два разных случая, потому что лечатся они по-разному. Либо страниц нет в индексе - тогда проблема техническая и решается за день-два. Либо страницы в индексе есть, но не показываются по вашим запросам - тогда проблема в структуре и релевантности, и это работа на месяцы.

Проверяется за минуту. Введите в Яндексе site:вашдомен.ru или откройте Вебмастер, раздел «Индексирование - Страницы в поиске». Если там ноль или единицы - первый случай. Если там все страницы, а по запросам вас нет - второй.

SEO-аудит сайтаот 25 000 до 60 000 ₽сроки: 5-10 дней

Случай первый: страниц нет в индексе

Причины идут по убыванию частоты, и первые три закрывают процентов восемьдесят обращений.

Сайт не добавлен в Вебмастер. Робот найдёт его сам по ссылкам, но это займёт недели, а на новом домене без внешних ссылок может не произойти вовсе. Добавление и подтверждение прав занимает десять минут.

Закрыт в robots.txt. Классика после переезда с тестового домена: разработчик закрыл сайт от индексации на время сборки и забыл открыть. Откройте вашдомен.ru/robots.txt и посмотрите на строку Disallow: /. Если она есть - вот и весь ответ.

Мета-тег noindex в коде. То же самое, но на уровне страницы и незаметнее: в robots.txt всё хорошо, а в шаблоне висит <meta name="robots" content="noindex">. Проверяется поиском по исходному коду страницы.

Сайт совсем новый. Индексация нового домена занимает от нескольких дней до месяца, и это нормально. Ускорить частично можно переобходом страниц в Вебмастере, отменить нельзя.

Сервер отдаёт ошибки роботу. Бывает, что человеку страница открывается, а робот получает 500 или таймаут: сработала защита от ботов, хостинг режет частые запросы, стоит агрессивный файрвол. Смотрится в Вебмастере, раздел статистики обхода.

Страницы недостижимы по ссылкам. Страница есть, но на неё не ведёт ни одна ссылка внутри сайта и её нет в sitemap. Для робота её не существует.

Чеклист

Диагностика: почему страниц нет в поиске

Проверки в порядке проверки. Критичное блокирует индексацию полностью, остальное замедляет её.

17 проверок 8 критично 7 важно 2 можно потом

01 Блокирует индексацию полностью

критично Disallow: / в robots.txt - остался после сборки сайта чинить до запуска
критично Мета-тег noindex в шаблоне страниц чинить до запуска
критично Сайт не добавлен в Вебмастер и права не подтверждены чинить до запуска
критично Сервер отдаёт роботу 5xx или таймаут: защита от ботов, лимиты хостинга чинить до запуска
критично Ограничение по X-Robots-Tag в заголовках ответа чинить до запуска

02 Замедляет или делает индексацию частичной

важно Нет sitemap.xml или он не отправлен в Вебмастер в первый месяц
важно Страница не связана ссылками с остальным сайтом в первый месяц
важно Контент подгружается скриптом и отсутствует в исходном коде в первый месяц
важно Дубли: www и без www, http и https, со слешем и без в первый месяц
важно Канонический адрес указывает на другую страницу в первый месяц
можно потом Медленный ответ сервера: робот снижает частоту обхода когда дойдут руки

03 Индекс есть, показов нет

критично Регион сайта не задан в Вебмастере чинить до запуска
критично Один URL отвечает за десяток разных запросов чинить до запуска
критично В title и H1 нет формулировок, с которыми люди приходят в поиск чинить до запуска
важно Текст скопирован у производителя или с сайта-донора в первый месяц
важно Нет цен, телефона и реквизитов: сайт не выглядит коммерческим в первый месяц
можно потом Наложен фильтр: смотреть раздел «Диагностика» в Вебмастере когда дойдут руки

Случай второй: страницы есть, показов нет

Здесь начинается неприятное, потому что технической кнопки не существует.

Нет региона. В Москве это первое, что я проверяю. Регион задаётся в Вебмастере, и без него сайт не участвует в локальной выдаче, а по гео-запросам конкурирует со всей страной. Занимает пять минут, эффект появляется в течение двух-трёх недель.

Структура не совпадает со спросом. Самая частая причина, и она не про технику. У компании двенадцать услуг, у каждой в Wordstat своя частотность, а на сайте один раздел «Услуги». Он не может быть релевантнее двенадцати страниц конкурента, каждая из которых посвящена ровно одному запросу. Чинится картой страниц, а не переписыванием текстов.

Страница написана про компанию, а не про запрос. H1 «Добро пожаловать», первый абзац про динамично развивающуюся команду. Человек искал «натяжные потолки цена за м2» и в первых двух предложениях этого не нашёл - вернулся в выдачу. Поисковик это увидел.

Спроса нет. Иногда сайт не показывается, потому что запросов, по которым его ждут, не существует. Прежде чем чинить сайт, я всегда выгружаю частотность: бывает, что услуга называется внутри компании одним словом, а ищут её совсем другим, и оно на сайте не встречается ни разу.

Текст неуникальный. Описания товаров, скопированные у производителя, - гарантия того, что страница не будет ранжироваться: у поисковика уже есть тысяча таких же.

Фильтр. Реже, чем на это списывают, но случается. Смотрится в Вебмастере в разделе «Диагностика» и в «Безопасности». Самые частые - за переспам текстов и за накрутку поведенческих. Снимаются устранением причины плюс несколько недель ожидания.

Что сделать сегодня, за час

Откройте robots.txt и убедитесь, что там нет Disallow: /.

Откройте исходный код главной, поиском найдите noindex.

Зайдите в Вебмастер, добавьте сайт, если его там нет, подтвердите права, отправьте sitemap.

Задайте регион. Для Москвы и области это делается в разделе «Информация о сайте».

Сравните число страниц в поиске с реальным числом страниц. Разрыв больше чем в два раза - есть техническая проблема.

Введите в поиск ваш главный коммерческий запрос и посмотрите первые три результата. Если это агрегаторы и маркетплейсы, а не компании - подумайте, стоит ли вообще идти в этот запрос.

Чего делать не надо

Не покупайте ссылки, чтобы «ускорить индексацию». Индексация ускоряется переобходом в Вебмастере, а закупка ссылок на молодом сайте выглядит для алгоритма ровно тем, чем является.

Не переписывайте тексты первым делом. Пока сайт закрыт в robots.txt, качество текста не имеет значения.

Не удаляйте и не пересоздавайте страницы. Каждая смена URL сбрасывает накопленное, и вместо роста вы получаете новый цикл индексации.

Если после этих проверок картина не прояснилась, дальше нужен разбор целиком: техника, структура, спрос и конкуренты в одной таблице с приоритетами. Как это устроено и что приходит на выходе - на странице SEO-аудита. Первичный взгляд на сайт с ответом «здесь техника» или «здесь структура» я даю бесплатно, это занимает минут двадцать.