
Por exemplo, os spiders costumam ser usados para coletar palavras-chave de páginas da web que são então classificadas para que os usuários possam localizá-las por meio de um mecanismo de busca na Internet.
Bots, Rastreamento, Termos da Internet, Robô, Robots.txt, Página da web, Site