A | A | A

PRZESZKODY DLA WYSZUKIWAREK

Pewne typy nawigacji na stronach WWW mogą spowolnić lub całkowicie uniemożliwić silnikom wyszukiwarek na dotarcie do zawartości stron serwisu. Boty wyszukiwarek polegają jedynie na hiperlinkowej naturze sieci aby odnaleźć nowe dokumenty lub ponownie odwiedzić te, które mogły ulec zmianie. Skomplikowane systemy nawigacji oraz zbyt głębokie struktury serwisów mogą być blokadą nie do przejścia dla botów wyszukiwarek.

Możliwe przeszkody dla botów:

  • Adresy URL z dwoma lub więcej dynamicznymi parametrami, np. http://www.url.com/strona.php?id=4&select=34rr&user=%JAN%. Pająki mogą mieć problemy z indeksowaniem tak skomplikowanych adresów gdyż często powodują one błędy wśród automatycznych odwiedzających
  • Strony zawierające więcej niż 100 unikalnych linków do innych stron danego serwisu (boty mogą nie odwiedzić wszystkich stron)
  • Strony umieszczone 'głębiej' niż 3 kliknięcia/odnośniki niż strona główna serwisu (jeśli do strony nie prowadzi duża liczba zewnętrznych linków pająki ja zignorują)
  • Witryny wymagające ID sesji lub pliku Cookie aby uaktywnić nawigację (boty mogą nie uzyskać wymaganych elementów, mimo że przeglądarka ludzkiego użytkownika nie ma z tym problemu)
  • Strony zawierające ramki mogą prowadzić do zamieszania którą ze stron zindeksować do wyników
  • Strony dostępne tylko przez wybór opcji z rozwijanego menu i kliknięcie na przycisk
  • Dokumenty dostępne tylko przez funkcje wyszukania
  • Dokumenty celowo zablokowane przez znacznik meta <robots> lub umieszczony na serwerze plik robots.txt
  • Strony wymagające zalogowania
  • Strony, które automatycznie przekierowują użytkownika bez wyświetlenia ich zawartości (może zostać uznane to za spamowanie i mieć rezultat w zablokowaniu serwisu)

Kluczem do upewnienia się, że wszystkie strony serwisu zostaną odwiedzone przez pająki wyszukiwarek jest umieszczenie bezpośrednich, hipertekstowych linków do każdej ze stron. Należy pamiętać, że jeśli na stronie domowej (gdzie większość botów rozpoczyna swoją wizytę) nie ma linku do danej strony prawdopodobne jest, że nie zostanie ona zindeksowana przez wyszukiwarkę. Bardzo pomocną techniką może być tutaj stworzenie mapy serwisu zawierającego listę wszystkich stron oraz linków do nich.


Skocz do góry strony ↑