Вы видите, что выводит Google?
В этом месяце у нас было две проблемы, когда сайты наших клиентов отлично работали для посетителя, но Google Search Console сообщал об ошибках. В одном случае клиент пытался написать часть контента с использованием JavaScript. В другом случае мы обнаружили, что хостинг, который использовал другой клиент, правильно перенаправлял посетителей… но не Googlebot. В результате веб-мастера продолжали генерировать ошибки 404 вместо того, чтобы следовать реализованному нами перенаправлению.
Googlebot - это робот Google для сканирования веб-страниц (иногда также называемый «пауком»). Сканирование - это процесс, с помощью которого робот Googlebot обнаруживает новые и обновленные страницы для добавления в индекс Google. Мы используем огромный набор компьютеров для получения (или «сканирования») миллиардов страниц в сети. Робот Googlebot использует алгоритмический процесс: компьютерные программы определяют, какие сайты сканировать, как часто и сколько страниц нужно получить с каждого сайта. Из Google: Googlebot
Google извлекает, сканирует и захватывает содержимое вашей страницы, отличное от браузера. Пока Google может ползать сценарии, это делает не означает, что он всегда будет успешным. И то, что вы тестируете перенаправление в своем браузере и оно работает, не означает, что робот Googlebot правильно перенаправляет этот трафик. Потребовался диалог между нашей командой и хостинговой компанией, прежде чем мы поняли, что они делают… и ключом к выяснению этого было использование
Просмотреть как Google инструмент в веб-мастерах.Инструмент «Просмотреть как Google» позволяет вам ввести путь на вашем сайте, посмотреть, смог ли Google его просканировать, и фактически увидеть просканированный контент, как это делает Google. Для нашего первого клиента мы смогли показать, что Google не читает сценарий, как они надеялись. Для нашего второго клиента мы смогли использовать другую методологию для перенаправления робота Googlebot.
Если вы также видите и Ошибки сканирования для веб-мастеров (в разделе "Здоровье") используйте "Просмотреть как Google", чтобы проверить свои перенаправления и просмотреть контент, который получает Google.