Czy widzisz, co pobiera Google?

pająk robota

W tym miesiącu mieliśmy dwa problemy, w których witryny naszych klientów działały idealnie dla odwiedzających, ale Konsola wyszukiwania Google zgłaszał błędy. W jednym przypadku klient próbował napisać część treści za pomocą Javascript. W drugim przypadku stwierdziliśmy, że hosting, którego używał inny klient, prawidłowo przekierowywał użytkowników… ale nie Googlebot. W rezultacie webmasterzy nadal generowali błędy 404 zamiast podążać za wdrożonym przez nas przekierowaniem.

Googlebot to robot indeksujący sieć Google (czasami nazywany także „pająkiem”). Indeksowanie to proces, w którym Googlebot wykrywa nowe i zaktualizowane strony, które należy dodać do indeksu Google. Używamy ogromnego zestawu komputerów do pobierania (lub „przeszukiwania”) miliardów stron w sieci. Googlebot korzysta z procesu algorytmicznego: programy komputerowe określają, które witryny mają być indeksowane, jak często i ile stron pobierać z każdej witryny. Od Google: Googlebot

Google pobiera, indeksuje i przechwytuje treść strony inną niż przeglądarka. Chociaż Google może czołgać się skrypty, tak nie oznaczają, że zawsze będzie się udać. To, że testujesz przekierowanie w przeglądarce i działa, nie oznacza, że ​​Googlebot prawidłowo przekierowuje ruch. Zajęło nam trochę dialogu między naszym zespołem a firmą hostingową, zanim zorientowaliśmy się, co robią… a kluczem do tego było użycie Pobierz jako Google narzędzie w webmasterach.

pobierz jako google

Narzędzie Pobierz jako Google umożliwia wprowadzenie ścieżki w witrynie, sprawdzenie, czy Google był w stanie ją zaindeksować, i faktycznie zobaczyć zindeksowaną zawartość tak, jak robi to Google. W przypadku naszego pierwszego klienta mogliśmy pokazać, że Google nie czytał scenariusza tak, jak by tego oczekiwał. W przypadku naszego drugiego klienta mogliśmy wykorzystać inną metodologię do przekierowania Googlebota.

Jeśli zobaczysz Błędy indeksowania w ramach webmasterów (w sekcji Zdrowie) użyj narzędzia Pobierz jako Google, aby przetestować swoje przekierowania i wyświetlić zawartość pobieraną przez Google.

Co o tym myślisz?

Ta strona używa Akismet do redukcji spamu. Dowiedz się, jak przetwarzane są dane komentarza.