Menu

Newsletter

Słownik pozycjonowania i ...

Robot wyszukiwarki, crawler, spider, bot

Samodzielny program "poruszający" się po Internecie i zbierający informacje o strukturze i zawartości strony dla wyszukiwarki internetowej. Obecność robota danej wyszukiwarki na stronie jest niezbędna do tego, żeby strona znalazła się w indeksie wyszukiwarki. Roboty służą do dodawania do wyszukiwarek, sprawdzania kodu strony, zbierania informacji o stronie, monitorowania nowości i tworzenia kopii stron.