Le automate.txt levant unique fichier qui donne vrais consignes aux androïde en compagnie de crawl certains moteurs en tenant recherche, sur celui qui’ils peuvent ou bien nenni patrouiller puis en conséquence indexer lorsque de leur passe sur bizarre emploi. Visualisation en tenant l'architecture du site Web – évaluez et modifiez facileme