Evitar que Google indexe páginas internas de Sharepoint

Otro de los problemas al dar acceso público a Sharepoint es que se indexen páginas internas con contenido sensible. Lo más recomendable es hacer una redirección directamente desde el IIS, pero tampoco viene mal indicar a los robots de los buscadores que no indexen lo que no queremos. Para ello, creamos en el directorio raíz el fichero robots.txt con el siguiente contenido:

User-agent: *
Crawl-delay: 10
Disallow: */_layouts/
Disallow: */_catalogs/
Disallow: */Lists/
Disallow: */Forms/

Share