Google oficjalnie poinformowało o planowanym zastąpieniu starego robota internetowego przeszukującego i indeksującego treść dla smartfonów. Jak stwierdził inżynier Google – Zhijian He, robot ten uniemożliwiał na niektórych stronach indeksowanie treści przeznaczonej na smartfony, a ponadto nie pozwalał na rozpoznanie, że strony te są zoptymalizowane pod smartfony. Wynikało to z faktu, iż do oddzielnych robotów przeznaczonych dla tradycyjnych telefonów oraz dla smartfonów odwoływano się wspólnie jako Googlebot-Mobile. Niektórzy webmasterzy nieumyślnie blokowali więc indeksowanie zawartości na smartfony, chcąc tak naprawdę zablokować jedynie treści dla telefonów tradycyjnych.

Nowy Googlebot dla smartfonów

Aby zapobiec takim sytuacjom i umożliwić zarządzającym stronami lepszą kontrolę, wycofany zostanie „Googlebot-Mobile” dla smartfonów. Nowy robot przeznaczony na smartfony będzie przedstawiał się po prostu jako „Googlebot”. Wprowadzony ma on zostać za ok. 2-3 tygodnie (13-20 luty 2014).


Nowy Googlebot dla smartfonów:

Mozilla/5.0 (iPhone; CPU iPhone OS 6_0 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)


Wycofywany Googlebot-Mobile dla smartfonów:

Mozilla/5.0 (iPhone; CPU iPhone OS 6_0 like Mac OS X) AppleWebKit/536.26 (KHTML, like Gecko) Version/6.0 Mobile/10A5376e Safari/8536.25 (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)

Co istotne, omawiane zmiany nie dotyczą pozostałych dwóch robotów „Googlebot-Mobile” – przeznaczonych dla „zwykłych” telefonów.


Zostające dalej w użyciu roboty „Googlebot-Mobile” dla tradycyjnych telefonów:

  • SAMSUNG-SGH-E250/1.0 Profile/MIDP-2.0 Configuration/CLDC-1.1 UP.Browser/6.2.3.3.c.1.101 (GUI) MMP/2.0 (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)
  • DoCoMo/2.0 N905i(c100;TB;W24H16) (compatible; Googlebot-Mobile/2.1; +http://www.google.com/bot.html)

Nie zmienia się także konwencjonalny Googlebot:

Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)

Istnieje możliwość przetestowania serwisu pod kątem różnych robotów Google. W Narzędziach dla Webmasterów Google (Webmaster Tools) należy skorzystać z opcji „Pobierz jako Google” oraz wybrać odpowiednią opcję:
  • Sieć,
  • Komórkowy Googlebot: smartfony – nowa wersja,
  • Komórkowy Googlebot: smartfony – wersja wycofana,
  • Mobile: XHTML/WML – dla zwykłych telefonów komórkowych.
  • Mobile: cHTML – dla zwykłych telefonów komórkowych (dotyczy ona głównie japońskich witryn)

Ważne skutki dla stron internetowych

W związku z planowanymi zmianami trzeba pamiętać, że będą one miały istotny wpływ na działania blokujące dostęp robotom Google do serwisu. Nowy robot dla smartfonów będzie wykonywał polecenia z pliku robots.txt, meta tagu robots i nagłówka HTTP dla „Googlebot”, a nie dla „Googlebot-Mobile” jak dotychczas. Z tego względu inny efekt będą miały niektóre z obecnych komend w pliku robots.txt. Przykładowo, poniższa jego zawartość doprowadzi do zablokowania dostępu do strony zarówno konwencjonalnemu robotowi jak i przeznaczonemu dla smartfonów:


User-agent: Googlebot
Disallow: /


Z kolei poniższe polecenie zablokuje dostęp jedynie robotom dla tradycyjnych telefonów:


User-agent: Googlebot-Mobile
Disallow: /

Więcej szczegółowych informacji o kontrolowaniu przeszukiwania i indeksowania zawartości stron przez roboty Google znaleźć można we wskazanej sekcji pomocy Google.

Aby mieć pewność, że Twoja witryna jest prawidłowo skonfigurowana pod kątem wyszukiwarki Google nasza agencja przeprowadzić może szczegółowy i obszerny audyt strony mobilnej.