Вы потратили кучу времени на сайт — купили домен, наполнили контентом, вроде бы все сделали правильно. Но проходит неделя, вторая — а индексации в Яндексе или Google все нет. Проверяете через сервис — а страницы просто не появляются в поиске. Почему?
Давайте разбираться, почему сайт не индексируется, какие ошибки чаще всего мешают и что с этим делать. В этой статье — по-человечески, без технического занудства.
1. Поисковики не знают, что ваш сайт существует
Да, звучит банально. Но это правда. Если вы только что запустили сайт, Google и Яндекс просто не в курсе, что он появился. У них миллионы задач и сайтов, и если вы сами не подсказали им, что у вас появился новый ресурс — он может «висеть в воздухе» неделями.
Что делать?
Добавьте сайт в поисковые сервисы:
- Для Яндекс индексации сайта используйте Яндекс.Вебмастер. Там вы можете добавить ресурс, подтвердить права и отправить страницы на индексацию Яндекс. Не забудьте прикрепить карту сайта (sitemap.xml).
- Для Google — нужен Search Console. Алгоритм похож: добавляете сайт, подтверждаете владение, загружаете карту и ждете, пока начнется индексация страниц в Google.
Если вы используете сервис быстрой индексации сайта, убедитесь, что он не нарушает правила поисковых систем. Многие из них обещают чудеса, но на деле только ухудшают ситуацию.
2. На сайте стоит запрет на индексацию
Очень часто вебмастеры сами закрывают сайт от индексации, даже не подозревая об этом. Такое случается, если вы:
- Используете CMS (например, WordPress) и забыли убрать галочку «запретить поисковикам индексировать сайт»;
- Установили meta-тег <meta name=»robots» content=»noindex, nofollow»>;
- Неправильно настроили файл robots.txt;
- Ограничили доступ для роботов в .htaccess или через заголовки.
Если Яндекс не индексирует страницы, первое, что нужно сделать — проверить robots.txt. В нем не должно быть строки Disallow: /, если вы хотите, чтобы страницы попали в выдачу.
Также важно понимать разницу между внешними и внутренними ссылками. Вы можете, например, случайно запретить индексацию внешних ссылок, хотя именно они помогают поисковику лучше понять структуру интернета. Чтобы закрыть внешнюю ссылку от индексации, используют атрибут rel=»nofollow» — и это вполне легально. Но если у вас таких ссылок сотни, робот может посчитать сайт подозрительным.
3. Страницы слишком медленные или недоступны
Google и Яндекс не любят медленные сайты. Если при заходе на страницу бот ждет по 10 секунд, он может просто уйти. Такое бывает из-за перегруженного сервера, скриптов или плохого хостинга.
Чтобы проверить скорость, используйте PageSpeed Insights. Также можно подключить сервис ускорения индексации, если он предлагает честную техподдержку и улучшение технического состояния сайта.
Но помните: если ваш сайт постоянно дает 500 ошибки или долго загружается — индексация сайта в Яндексе и Google будет страдать.
4. Контент неуникальный или дублируется
Одна из главных причин, почему страница не проходит индексацию в Яндексе — дублирование. Это могут быть:
- одинаковые статьи по разным URL;
- повторы тегов или мета-описаний;
- отсутствие редиректов с www на без www (или с http на https).
Поисковики не любят мусор. Если вы не разметили каноническую версию страниц и не настроили правильные редиректы — ваш сайт может попасть под фильтр. Тогда индексация ссылок Яндексом приостанавливается.
Кстати, проверить, сколько страниц в индексе, можно в Яндекс.Вебмастере или через сервис проверки индексации ссылок. Это удобный способ отследить, все ли работает, и какие URL попали в поисковую базу.
5. Домен под санкциями
Иногда причина глубже — вы купили домен с «темным прошлым». Например, он раньше использовался под дорвеи, спам или «черные» методы продвижения. В этом случае индексация внешних и внутренних ссылокбудет сильно ограничена.
Что делать?
- Проверьте историю домена через Whois и Wayback Machine.
- Если подозрения подтвердились, возможно, проще сменить домен, чем ждать милости от поисковиков.
Если поисковики уже занесли домен в «черный список», восстановление репутации может занять месяцы — а то и не сработать вовсе. Иногда быстрее и дешевле начать с чистого листа.
6. Страницы не связаны между собой
Поисковики любят логичные сайты. Если вы создали десятки страниц, но не поставили на них внутренние ссылки, поисковый робот может просто не дойти до них.
Именно поэтому сервис индексации ссылок часто предлагает удобный аудит: какие страницы не связаны, какие не индексируются, какие требуют дополнительного внимания.
7. Нет внешних ссылок — робот просто не находит путь
Один из самых частых вопросов владельцев: «Почему Google не индексирует сайт, если он открыт и ошибок нет?» Все просто — поисковый робот может его банально не найти. Особенно если:
- сайт новый;
- нет внешних ссылок на ваш сайт;
- вы не оставили ни одного «следа» в интернете: ни комментариев, ни постов в соцсетях, ни публикаций на форумах.
Поисковики находят сайты именно по ссылкам. Поэтому без внешней перелинковки ожидать быстрой индексации бессмысленно. Один из способов ускорить индексацию сайта — вручную разместить несколько ссылок на него: в каталоги, соцсети, карточки компаний (например, Яндекс.Справочник), анонсы в Telegram или даже платные пресс-релизы.
8. Внутренняя структура запутана: сайт слишком сложный
Если у вас сложная структура сайта, и до каких-то страниц можно дойти только через 5–6 кликов — не удивляйтесь, что они выпадают из индекса. Глубокая вложенность страниц ухудшает поведение поисковых роботов: они просто не доходят до конца цепочки.
Как проверить:
- Включите режим «просмотра как Googlebot» в Google Search Console.
- Посмотрите, сколько кликов нужно, чтобы дойти до ключевых страниц с главной.
- Откройте карту сайта и проанализируйте — все ли страницы туда попали.
Правило простое: важные страницы не должны быть глубже второго уровня вложенности, а вообще желательно — в один клик с главной.
9. Проблемы с sitemap.xml
Многие добавляют карту сайта, но не проверяют — а правильно ли она составлена? В итоге получаем: файл sitemap есть, а Google и Яндекс не индексируют сайт все равно. Почему?
Типовые ошибки:
- карта сайта недоступна (404 или 403 ошибка);
- в карте устаревшие адреса или дубли;
- неправильно указан протокол (например, http вместо https);
- вы добавили карту, но не отправили ее в вебмастер-сервисы.
Решение:
- Используйте генераторы карт сайта — например, XML-Sitemaps или встроенные модули CMS.
- Обязательно добавьте sitemap.xml в robots.txt (строка: Sitemap: https://вашсайт.ru/sitemap.xml).
- Проверьте ее в Google Search Console и Яндекс.Вебмастере.
10. Мобильная версия криво сверстана
Да, вы не ослышались. Сайт может быть красивым на компьютере, но робот Google индексирует именно мобильную версию. С 2019 года поисковик перешел на Mobile First Indexing — это значит, что приоритет теперь за смартфонами.
Что это значит:
- если на мобильной версии часть контента скрыта — она не будет проиндексирована;
- если мобильная версия медленно грузится или не открывается — робот посчитает сайт некачественным;
- если весь контент «запихан» в выпадающие блоки — он может быть проигнорирован.
Обязательно проверьте сайт через Mobile-Friendly Test от Google и устраните все ошибки отображения.
11. Технический мусор: дубли, каноникал, 404
Часто сайты не индексируются из-за того, что роботы запутываются в дублях страниц. Это бывает, если:
- сайт доступен по разным адресам (site.ru, www.site.ru, site.ru/index.html);
- используются GET-параметры (?utm_source=telegram), но нет мета-тега rel=canonical;
- дублируются страницы пагинации и фильтры;
- много битых ссылок и 404 страниц.
Все эти ошибки мешают нормальной индексации сайта в Яндексе и Google. Самое разумное — подключить анализ через Screaming Frog или Serpstat, посмотреть карту ссылок и устранить мусор.
12. Вас просто заглушили фильтром
Еще одна грубая, но реальная причина — сайт мог попасть под фильтр, даже если он новый. Например:
- вы массово скопировали чужие тексты;
- разместили 1000 страниц товаров с одинаковыми описаниями;
- создали «дорвей» — сайт на шаблоне с кучей ключей и нулевой пользой.
В таком случае страницы не индексируются в Google, или быстро выпадают. Проверить это можно по запросу site:вашсайт.ru — если в выдаче пусто или 2–3 страницы, а сайт реально большой, значит, дело плохо.
Что делать:
- удалите мусорные страницы и дубли;
- обновите тексты — пусть хотя бы на 50% они будут уникальны;
- напишите нормальный Title и Description — хотя бы для главной и ключевых страниц;
- отправьте сайт на переобход в вебмастерах.
Фильтры — не приговор, но и не шутка. Чем быстрее вы очистите сайт от «мусора» и улучшите контент, тем выше шанс, что поисковики вернут его в индекс.
Что делать, если ничего не помогает?
Иногда кажется, что сделано все правильно: и robots.txt чистый, и sitemap загружен, и структура нормальная. Но индексации как не было, так и нет. Что делать?
Пошаговый чеклист:
- Проверьте DNS и сервер — убедитесь, что сайт не дает ошибок 5xx или 403, особенно ночью.
- Зарегистрируйтесь в Google Search Console и Яндекс.Вебмастере, проверьте статус индексации.
- Отправьте сайт на переобход, особенно если он только что запущен.
- Разместите внешние ссылки — в каталогах, форумах, картах, соцсетях.
- Проверьте уникальность контента через Text.ru, Content Watch, Etxt.
- Анализируйте логи сервера — чтобы понять, как часто приходят роботы и что им мешает.
- Обратитесь к SEO-специалисту, если сайт коммерческий и критично важен для бизнеса.
Если после всех этих шагов сайт все равно не появляется в поиске, не стоит паниковать. Важно понимать, что поисковая индексация — это не мгновенный процесс, особенно для новых или ранее некачественных сайтов. Иногда поисковикам нужно время, чтобы «оценить» сайт, распознать его структуру и назначить ему приоритет в обходе.
Вывод
Тем не менее, если сайт не индексируется месяц и дольше, несмотря на все усилия — это сигнал, что проблема глубже: возможно, в архитектуре проекта, неочевидных ошибках CMS или даже в репутации домена. И здесь уже действительно может потребоваться аудит от профессионала, чтобы устранить все, что мешает поисковым системам вас увидеть.
Главное — не оставлять все «как есть», надеясь, что «само как-нибудь». В SEO, особенно в индексации, инициатива решает все.