R
Substantivo Masculino
Robots.txt
Definição
Arquivo usado para orientar robôs sobre quais áreas de um site podem ou não ser rastreadas.
Exemplos de uso
01
“O robots.txt bloqueava uma pasta importante do site.”
02
“Uma regra errada no robots.txt pode reduzir a visibilidade orgânica.”
03
“Robots.txt controla rastreamento, não substitui uma diretiva noindex.”
Notas do verbete
Robots.txt é um arquivo localizado na raiz do site que orienta robôs sobre áreas permitidas ou bloqueadas para rastreamento. Ele controla acesso de crawlers, mas não garante remoção de páginas do índice quando elas já são conhecidas por outros caminhos.