W skrócie
- Google zaleca nagłówki, które pozwalają robotom ustalić, czy treść się zmieniła. Preferowana jest para ETag i If-None-Match, a Last-Modified z If-Modified-Since to starsza metoda, którą najlepiej stosować razem z ETag.
- Nagłówek Cache-Control z wartością max-age określa, jak długo treść pozostaje niezmieniona. Data w Last-Modified musi mieć standardowy format daty HTTP.
- Ruch od Googlebota weryfikuje się trzema krokami: User-Agent, adres IP z zakresu Google i reverse DNS z hostem w domenie googlebot.com. Poprawne nagłówki oszczędzają zasoby serwera i przyspieszają indeksowanie zmian.
Jak Google zarządza pamięcią podręczną podczas indeksowania stron? (Crawling December: HTTP caching)
Google opublikowało najnowsze wskazówki dotyczące efektywnego zarządzania pamięcią podręczną (cache) w procesie indeksowania stron internetowych. W artykule podkreślono, jak serwery mogą współpracować z robotami Google, aby zoptymalizować czas indeksowania i poprawić wydajność witryny.
Kluczowe punkty rekomendacji
1. Obsługa nagłówków HTTP
Google zaleca używanie nagłówków, które pomagają robotom w określeniu, czy treść strony uległa zmianie:
- ETag i If-None-Match: Preferowana metoda weryfikacji zmian treści. Serwer zwraca nagłówek ETag, a kolejne żądania używają If-None-Match.
- Last-Modified i If-Modified-Since: Starsza metoda oparta na dacie modyfikacji pliku. Google sugeruje stosowanie jej razem z ETag.
2. Cache-Control: max-age
Ustawienie nagłówka Cache-Control z wartością max-age pozwala serwerowi określić, jak długo treść pozostaje niezmieniona. Przykład:
3. Formatowanie daty w Last-Modified
Jeśli używasz Last-Modified, pamiętaj, aby stosować standardowy format daty HTTP:
Weryfikacja crawlerów Google
Aby upewnić się, że ruch pochodzi od oficjalnych botów Google, wykonaj trzy kroki:
- Sprawdź User-Agent, który identyfikuje Googlebota.
- Zweryfikuj adres IP – czy należy do zakresu Google.
- Użyj reverse DNS – host powinien odpowiadać wzorcowi *.googlebot.com.
Dlaczego to ważne?
Prawidłowa konfiguracja nagłówków pozwala oszczędzać zasoby serwera i przyspiesza indeksowanie kluczowych zmian na stronie. W efekcie poprawia to widoczność Twojej witryny w wynikach wyszukiwania.
Podsumowanie
Nowe zalecenia Google to krok w stronę lepszej optymalizacji zasobów serwera i efektywniejszego indeksowania stron. Implementacja nagłówków HTTP, takich jak ETag, oraz odpowiednia konfiguracja Cache-Control pomoże Twojej witrynie działać szybciej i skuteczniej. Ustawienia nagłówków cache leżą zwykle po stronie działu technicznego, dlatego takie zalecenia wdraża agencja SEO razem z programistami.
Sprawdź również:
