Если сайт есть в Яндексе, но его нет в Google, чаще всего причина в одном из пяти пунктов: сайт не добавлен в Google Search Console и робот о нём почти не знает, доступ роботу Google закрыт в robots.txt или на уровне сервера, сайт недоступен из-за блокировок по IP или настроек хостинга, Google не может нормально отрисовать страницы, либо к сайту применены ручные меры. Всё это проверяется в Search Console за полчаса. Ниже — пошаговая диагностика.
Почему Яндекс и Google видят сайт по-разному
Яндекс и Google — разные поисковые системы с собственными роботами, правилами обхода и алгоритмами. Сайт, который хорошо индексируется в одной системе, может быть почти не виден в другой. Особенно часто это происходит с российскими сайтами, которые изначально подключали только к Яндекс Вебмастеру и настраивали под Яндекс.
Сначала проверьте, действительно ли сайта нет в Google. Введите в поиске Google запрос с оператором:
site:example.ruЕсли результатов нет совсем — сайт не проиндексирован. Если страниц мало по сравнению с Яндексом — индексация частичная. Если страницы есть, но по запросам сайт не находится — проблема в ранжировании, а не в индексации. Оператор site: даёт приблизительную картину, точные данные есть только в Search Console.
Шаг 1. Добавьте сайт в Google Search Console
Без Search Console диагностика превращается в угадывание. Подключите сайт и подтвердите права одним из способов: через DNS-запись, HTML-файл, мета-тег или код Google Analytics. Удобнее всего добавить ресурс на уровне домена через DNS — тогда учитываются все варианты адреса.
После подтверждения:
- Отправьте карту сайта sitemap.xml в соответствующем разделе.
- Проверьте главную страницу инструментом проверки URL.
- Запросите индексирование нескольких ключевых страниц.
Если вы ещё не подключали сайт и к Яндексу, логика похожа — см. инструкцию как добавить сайт в Яндекс Вебмастер.
Шаг 2. Проверьте robots.txt
Частая ситуация: в robots.txt есть отдельный блок для Яндекса и общий блок для остальных роботов, в котором случайно стоит полный запрет. Например:
User-agent: Yandex
Disallow: /admin/
User-agent: *
Disallow: /Здесь Яндекс индексирует сайт, а Googlebot получает запрет на всё. Робот выбирает наиболее подходящий ему блок: Google будет следовать правилам для User-agent: * или для Googlebot, если такой блок есть. Учтите также, что директивы Host и Clean-param Google не поддерживает, они на него не действуют.
Совет: откройте отчёт о файле robots.txt в Search Console — там видно, какую версию файла получил Google и были ли ошибки при её загрузке.
Шаг 3. Проверьте доступность сайта для Googlebot
Сайт может открываться у вас и у Яндекса, но быть недоступным для серверов Google. Возможные причины:
- блокировка зарубежных IP-адресов на хостинге, в файрволе или сервисе защиты от DDoS;
- защита от ботов, которая показывает роботу капчу или JavaScript-проверку;
- ограничения по User-Agent в настройках сервера или плагина безопасности;
- ошибки сервера при частых обращениях робота — коды 5xx или таймауты.
Проверить можно в Search Console: инструмент проверки URL показывает, удалось ли Google получить страницу, а отчёт о статистике сканирования — сколько запросов завершились ошибкой. Если там много серверных ошибок, разберите их по статье ошибки 500, 502, 504.
Шаг 4. Проверьте мета-теги и заголовки
Иногда запрет задан только для Google. Проверьте код страницы на теги вида:
<meta name="googlebot" content="noindex">а также HTTP-заголовок X-Robots-Tag. Обратная ситуация тоже встречается: тег robots с noindex стоит для всех, но Яндекс ещё не успел исключить страницы.
Проверьте и тег canonical: если он указывает на другой домен, тестовую копию или главную страницу, Google может не индексировать страницы как самостоятельные.
Шаг 5. Проверьте отображение страниц
Google отрисовывает страницы с выполнением JavaScript, но если важные скрипты или стили заблокированы в robots.txt либо загружаются с ошибками, робот может увидеть пустую страницу. Инструмент проверки URL в Search Console позволяет посмотреть отрисованную версию и HTML, которые получил Google. Если основной текст там отсутствует, проблема в технической реализации.
Шаг 6. Проверьте ручные меры и безопасность
В Search Console есть раздел о ручных мерах и проблемах безопасности. Если Google применил санкции или обнаружил вредоносный код, там будет описание. Яндекс мог ещё не заметить проблему или оценить её иначе. Признаки фильтров и способы их снятия разобраны в отдельной статье блога.
Диагностика: симптом, причина, решение
| Что видно | Вероятная причина | Что делать |
|---|---|---|
| По site: нет ни одной страницы | Сайт не известен Google или закрыт полностью | Добавить в Search Console, проверить robots.txt |
| Проверка URL: «Заблокировано в robots.txt» | Запрет в блоке User-agent: * | Исправить robots.txt |
| Ошибки сервера или таймауты при сканировании | Блокировка IP, защита от ботов, слабый сервер | Разрешить доступ Googlebot, проверить хостинг |
| «Исключено тегом noindex» | Мета-тег или заголовок X-Robots-Tag | Убрать запрет |
| «Просканировано, но не проиндексировано» | Google счёл страницы малоценными или дублями | Улучшить содержание, проверить canonical |
| Есть уведомление о ручных мерах | Нарушение правил Google | Устранить и отправить запрос на проверку |
Если страницы в индексе, но трафика из Google нет
Тогда проблема в ранжировании. Алгоритмы Google иначе оценивают сайты, чем Яндекс: больше внимания уделяется внешним ссылкам, полноте и экспертности контента, удобству мобильной версии и скорости загрузки. Что стоит сделать:
- проверить отчёт об эффективности в Search Console: по каким запросам сайт показывается и на каких позициях;
- оценить мобильную версию и скорость в PageSpeed Insights;
- доработать тексты ключевых страниц: полнота ответа, структура, данные о компании;
- наращивать упоминания и ссылки с тематических ресурсов естественным путём.
Мы в Pear Advert при продвижении всегда подключаем обе панели — Вебмастер и Search Console: разница в данных часто сама указывает на проблему. Для отслеживания результатов пригодится статья как проверить позиции сайта.
Частые вопросы
Сколько времени нужно Google, чтобы проиндексировать новый сайт?
Google не называет фиксированных сроков. Для небольшого сайта, добавленного в Search Console с картой сайта, первые страницы обычно появляются в течение нескольких дней или недель.
Нужно ли отдельно оптимизировать сайт под Google?
Базовые требования у поисковиков общие: доступность, понятная структура, полезный контент. Но robots.txt, мета-теги и настройки сервера нужно проверять с учётом обоих роботов, а Search Console — подключать обязательно.
Может ли хостинг блокировать Google?
Да, если на хостинге или в сервисе защиты включена фильтрация зарубежного трафика или агрессивная защита от ботов. Уточните настройки у провайдера или в панели защиты.
Помогает ли директива Host в robots.txt для Google?
Нет, Google её не поддерживает. Главное зеркало для Google задаётся 301-редиректами и тегом canonical.
Итог
Отсутствие сайта в Google при нормальной индексации в Яндексе почти всегда объясняется технической причиной: сайт не добавлен в Search Console, Googlebot заблокирован в robots.txt, на сервере или тегами, либо страницы недоступны или плохо отрисовываются. Пройдите шаги по порядку и используйте отчёты Search Console — они прямо указывают, что мешает индексации.
Если не хотите разбираться сами — закажите SEO-продвижение в Pear Advert: мы найдём, что мешает Google, исправим настройки и выстроим продвижение сразу в двух поисковых системах.
