Descrição
Sites podem ser rastreados para auditar links, imagens, metadados, CSS, scripts e problemas relacionados a SEO. Isso é útil para especialistas em SEO, desenvolvedores e donos de sites que verificam visibilidade técnica em buscas.
É um rastreador gráfico de websites. Crawling pode gerar tráfego pesado e coletar dados de páginas, então a pessoa deve respeitar políticas robots, limites de taxa, credenciais e propriedade do site.