Нет аккаунта? Зарегистрируйтесь
Если вы уже зарегистрированы, авторизуйтесь
Indexing — процесс анализа обнаруженной страницы поисковой системой и возможного сохранения её в индексе для показа в результатах.
Сканирование и индексирование — разные процессы: робот сначала получает разрешённый URL, затем поисковая система решает, обрабатывать ли его и включать ли в индекс. robots.txt не гарантирует исключение URL из результатов, а noindex должен быть доступен для сканирования.
Indexing — процесс анализа обнаруженной страницы поисковой системой и возможного сохранения её в индексе для показа в результатах.
Механизм управляет обнаружением URL, доступом робота, выбором версии страницы или возможностью добавить документ в индекс. Несогласованные директивы могут давать неожиданный результат.
Проверьте HTTP-ответ, robots.txt, meta robots или X-Robots-Tag, canonical, sitemap и фактический URL после редиректов. Используйте инструмент проверки URL и отчёты индексирования.
