Czy widzisz, co pobiera Google?
W tym miesiącu mieliśmy dwa problemy, w których witryny naszych klientów działały doskonale dla odwiedzającego, ale Konsola wyszukiwania Google zgłaszał błędy. W jednym przypadku klient próbował napisać część treści przy użyciu JavaScript. W drugim przypadku odkryliśmy, że hosting, z którego korzystał inny klient, prawidłowo przekierowywał odwiedzających… ale nie Googlebot. W rezultacie webmasterzy w dalszym ciągu generowali błędy 404, zamiast podążać za wdrożonym przez nas przekierowaniem.
Googlebot to robot Google indeksujący sieć (czasami nazywany także „pająkiem”). Indeksowanie to proces, w którym Googlebot odkrywa nowe i zaktualizowane strony, które mają zostać dodane do indeksu Google. Do pobierania (lub „przeszukiwania”) miliardów stron internetowych używamy ogromnego zestawu komputerów. Googlebot wykorzystuje proces algorytmiczny: programy komputerowe określają, które witryny mają indeksować, jak często i ile stron ma pobierać z każdej witryny. Z Google: Googlebot
Google pobiera, indeksuje i przechwytuje treść strony inną niż przeglądarka. Chociaż Google może czołgać się skrypty, tak nie oznaczają, że zawsze będzie się udać. To, że testujesz przekierowanie w przeglądarce i działa, nie oznacza, że Googlebot prawidłowo przekierowuje ruch. Zajęło nam trochę dialogu między naszym zespołem a firmą hostingową, zanim zorientowaliśmy się, co robią… a kluczem do tego było użycie
Pobierz jako Google narzędzie w webmasterach.Narzędzie Pobierz jako Google umożliwia wprowadzenie ścieżki w witrynie, sprawdzenie, czy Google był w stanie ją zaindeksować, a także wyświetlenie zindeksowanej treści tak, jak robi to Google. W przypadku naszego pierwszego klienta byliśmy w stanie pokazać, że Google nie czytał skryptu tak, jak oczekiwali. W przypadku naszego drugiego klienta byliśmy w stanie zastosować inną metodologię do przekierowania Googlebota.
Jeśli zobaczysz Błędy indeksowania w ramach webmasterów (w sekcji Zdrowie) użyj narzędzia Pobierz jako Google, aby przetestować swoje przekierowania i wyświetlić zawartość pobieraną przez Google.