Fichero que establece un protocolo de exclusión para evitar que las arañas que analizan los sitios Web agreguen información innecesaria a los resultados de búsqueda. Este fichero contiene indicaciones sobre qué páginas y/o directorios se pueden o no indexar en los buscadores.