Wysokokaloryczne pożywki dla pajączków - Xenu Link
Opis programu pozwalającego zindeksować cały swój serwis w wyszukiwarkach z pajączkami ustawionymi na deep crawl.
P.Majewski napisał/a w poniedziałek, 10 czerwca 2002:
W e-zinie Harmony Major znalazłem opis programu Xenu Link (offline link validator), który oprócz swojej podstawowej funkcji, jest doskonałym narzedziem wspomagającym "współżycie" z wyszukiwarkami.
Otóż program ten generuje raport w postaci pliku html. Na końcu raportu jest mapa serwisu obejmująca wszystkie znalezione w obrębie serwisu pliki html.
Mapę taką oddzielamy od raportu i uploadujemmy na serwer. Następnie wystarcczy ją dodać do wyszukiwarki, której spider ma funkcję deep crawl (głęboki indeks, np. Onet.pl) i mamy pewność, że CAŁY serwis zostanie zindeksowany.
