Сайт сделали, деньги заплатили, а по названию компании в Яндексе — пусто. Ситуация обидная и почти всегда решаемая: в девяти случаях из десяти дело не в «плохом SEO», а в технической мелочи, которая запрещает роботу зайти на сайт или показывать его в выдаче. Ниже — восемь причин по частоте, с которой мы встречаем их на аудитах, и способ проверить каждую своими руками.

1. Сайт закрыт в robots.txt

Самая частая причина. При разработке сайт закрывают от индексации, чтобы недоделанные страницы не попали в поиск, а после запуска забывают открыть. Откройте вашсайт.ру/robots.txt и посмотрите на строку Disallow: / — если она есть без ограничений, робот не заходит никуда.

Проверять надо именно боевой сайт, а не тестовую копию: часто открывают одну, а вторая остаётся закрытой и именно она стоит на домене.

2. Мета-тег noindex в коде страниц

Даже при открытом robots.txt страница может содержать <meta name="robots" content="noindex">. Робот заходит, читает запрет и уходит. Проверяется просмотром исходного кода страницы: правая кнопка, «Исходный код», поиск по слову noindex.

Отдельная ловушка — плагины SEO в WordPress. Галочка «Запретить поисковым системам индексировать сайт» в настройках чтения ставит noindex на весь сайт разом.

3. Сайт не добавлен в Яндекс Вебмастер

Робот найдёт сайт и сам, но это может занять недели. Добавление в Вебмастер и отправка карты сайта ускоряет процесс до нескольких дней. Там же вы увидите, что именно робот думает о сайте: какие страницы обошёл, какие исключил и почему.

Раздел «Индексирование → Страницы в поиске» отвечает на главный вопрос напрямую — сколько страниц реально в базе.

4. Нет карты сайта или она врёт

Файл sitemap.xml подсказывает роботу список страниц. Проблема возникает, когда карта есть, но в ней старые адреса, страницы с редиректами или закрытые в robots. Робот тратит лимит обхода впустую.

Проверьте, что карта открывается по адресу вашсайт.ру/sitemap.xml, адреса в ней совпадают с реальными (тот же протокол, тот же вид с www или без) и она указана в robots.txt.

5. Дубли страниц

Один и тот же контент доступен по адресам с www и без, с http и https, со слешем на конце и без, с параметрами сортировки. Для робота это разные страницы с одинаковым текстом — он выбирает одну, остальные исключает, и выбрать может не ту.

Лечится склейкой: один главный адрес, остальные редиректом на него, плюс тег canonical на страницах. На каталогах это даёт заметный прирост уже через пару обходов.

6. Медленный или падающий сервер

Если сервер отвечает по пять секунд или периодически отдаёт 502, робот снижает частоту обхода. На дешёвом виртуальном хостинге, где сотни сайтов делят один процессор, это обычное дело в часы нагрузки.

В Вебмастере есть отчёт по времени ответа сервера. Если график регулярно уходит выше двух-трёх секунд — проблема не в текстах.

7. Контента слишком мало или он копипаст

Страница из двух предложений и телефона не даёт роботу поводов её показывать. То же с описаниями товаров, скопированными у поставщика: такой текст уже есть в индексе у сотни магазинов.

Это не значит «лить воду». Достаточно по-человечески ответить на вопросы, которые задаёт клиент: что входит, сколько стоит, сколько занимает времени, что будет если не подойдёт.

8. Санкции и следы прошлого владельца

Если домен покупался с рук, у него может быть история: спам, дорвеи, фильтры. Сайт при этом технически исправен, но в поиске не растёт. В Вебмастере такие вещи видны в разделе с диагностикой и нарушениями.

Как проверить всё это за час

• Откройте robots.txt и убедитесь, что нет запрета на весь сайт.
• Посмотрите исходный код главной и типовой внутренней страницы на предмет noindex.
• Добавьте сайт в Яндекс Вебмастер, отправьте sitemap.xml.
• Проверьте, открывается ли сайт по всем четырём вариантам адреса и куда ведут редиректы.
• Наберите в поиске site:вашсайт.ру — увидите, сколько страниц знает поисковик.
• Загляните в отчёт по времени ответа сервера.

Если после этих шагов картина не прояснилась, дело обычно в связке причин — например, дубли плюс медленный сервер. Мы разбираем такое на техническом аудите: смотрим сайт целиком и отдаём список задач по приоритету, а не общие рекомендации.