Выбор технологий в итоге должен опираться на бизнес-цели — если нужен комплексный подход, сверьтесь с Собственный сайт бренда на странице услуг, или сначала расчётом стоимости выхода на зарубежные рынки прикиньте бюджет.
I. Сначала три типа: разные проблемы — разные решения
| Тип | Симптом | Частые причины |
|---|---|---|
| Не проиндексировано | Страницы нет в индексе Google | Заблокирована, низкое качество, нет внутренних ссылок |
| Индекс не обновляется | В индексе есть, но контент устарел | Низкая частота сканирования, слабые сигналы обновления |
| Ошибки сканирования | Ошибка доступа краулера | Блокировка robots, ошибка сервера, таймаут |
Три типа проблем решаются по-разному — сначала определите тип, потом действуйте.
II. Процесс диагностики: от GSC к логам
Шаг 1: проверьте статус в Search Console. В отчёте «Индексирование страниц» смотрите три типа данных: проиндексировано, не проиндексировано (с причинами), ошибки сканирования. GSC покажет «статус страницы глазами Google» — это бесплатный официальный взгляд.
Шаг 2: смотрите сканирование в логах сервера. GSC даёт только вывод, логи — процесс. Проверьте логи доступа сервера (или статистику сканирования хостера): приходил ли Googlebot? С каким кодом ответа (200/404/403/5xx)? Как часто?
Если «краулер вообще не приходил» — проблема в путях обнаружения (внутренние ссылки, карта сайта); если «приходил, но 4xx/5xx» — проблема в технической конфигурации; если «приходил, 200, но не проиндексировано» — проблема в качестве страницы или настройках индексации.
Шаг 3: исправьте по причине.
| Результат диагностики | Действие |
|---|---|
| Краулер не приходил | Добавьте внутренние ссылки, отправьте карту сайта, проверьте robots |
| Возвращает 403/404 | Исправьте права доступа, исправьте ссылки |
| Возвращает 5xx/таймаут | Почините сервер, снизьте время ответа |
| 200, но не индексируется | Улучшите контент, уберите дубли, отправьте через Indexing API |
Шаг 4: отправьте на проверку. После исправления отправьте URL на перепроверку через «Проверку URL» в GSC и следите за изменением статуса.
| Симптом | Сначала проверьте | Затем проверьте | Вероятная причина |
|---|---|---|---|
| Совсем не индексируется | Статус индексации в GSC | Есть ли сканирование в логах | Изолирована/заблокирована |
| Индексируется только главная | Покрытие в GSC | Структура внутренних ссылок | Глубокие страницы без входа |
| Проиндексировано, но не обновляется | Время последнего сканирования в GSC | Частота обновления | Слабые сигналы обновления контента |
| Ошибка сканирования | Ошибки сканирования в GSC | Коды статуса в логах | robots/сервер |
| Проиндексировано, но не ранжируется | Качество контента | Уровень конкуренции | Недостаточная ценность страницы |