Страница долго не появляется в поиске Google

Симптом

• Страница не появляется в поиске Google, хотя в Search Console заявлена индексация.
• В отчёте «Покрытие» отсутствует запись о странице.
• В логах сервера нет запросов от Googlebot к этой странице.
• В Google Search Console виден статус «Запрошено, но не проиндексировано» (Not indexed).
• Внутренние ссылки на страницу работают, но внешние ссылки отсутствуют.
• Страница загружается медленно (выше 5 с) или содержит ошибки 5xx.
• На странице присутствует мета‑тег noindex или директива X-Robots-Tag: noindex.
• В файле robots.txt запрещён доступ к нужному пути.
• Страница находится в «потенциале» (Crawl delay > 0) и не попала в очередь.

Причина

1. Блокировка поисковика
   - robots.txt содержит Disallow: /path/ или User-agent: * Disallow: /.
   - Метатег noindex или заголовок X-Robots-Tag: noindex.
   - В Search Console включён «Проверка URL» и он показывает «Blocked by robots.txt» или «Noindex».

2. Технические ошибки сервера
   - Ошибки 4xx/5xx при запросе Googlebot.
   - Неправильные коды ответа (например, 301 на страницу с noindex).

3. Слишком медленная загрузка
   - Время ответа > 5 с, что приводит к отказу Googlebot от индексации.

4. Недостаточная внутренняя перелинковка
   - Страница не связана с другими страницами сайта, поэтому Googlebot не обнаруживает её.

5. Проблемы с контентом
   - Дублирующийся контент, слишком короткий текст (< 200 слов).
   - Плохая семантика, отсутствие ключевых слов.

6. Неправильная настройка canonical
   - Canonical указывает на другую страницу, из‑за чего Google игнорирует текущую.

Как проверить