Escludere dai motori di ricerca un sito (robots.txt)
Per fare in modo che tutto il contenuto di un sito non venga indicizzato dai motori di ricerca e sufficiente inserire nella root un file chiamato robots.txt con il seguente contenuto:
Per maggiori dettagli vedi: http://it.wikipedia.org/wiki/Protoco...usione_robot
Text: 'robots.txt
User-agent: *
Disallow: /
Per maggiori dettagli vedi: http://it.wikipedia.org/wiki/Protoco...usione_robot