Crawling / Rastreamento

Processo através do qual motores de pesquisa descobrem e percorrem páginas e recursos na Web. Uma página que não pode ser adequadamente rastreada pode ter dificuldade em ser descoberta e indexada.