Crawler Jest to robot,pajączek,bot, który automatycznie przegląda strony i indeksuje je
Robot ten krąży w sieci po odnośnikah tekstowych tzw. linki, które zawarte są w kodzie źródłowym na stronach internetowych. Bot ten przechodzi jedynie w kilka poziomów linków dlatego żeby ułatwić mu dotarcie do danej podstrony w serwisie często stosuje się mapę strony, która dostarcza mu informacje o ilości adresów w witrynie internetowej. Aby robot często odwiedzał naszą stronę należy zrobić dobre linkowanie wewnątrz serwisu w taki sposób aby robot miał dostep za odwiedzenia istotnych dla ciebie podstron. Częste odwiedzanie strony przez pajączki (clawlery) przyśpiesza indeksowanie strony internetowej, oraz zwiększa pozycje w wyszukiwarkach
Brak komentarzy:
Prześlij komentarz
PLEASE COMENNT