# fichero robots.txt para www.pinrel.com # Version 1.0 # 17/03/2007 #Evitar que el buscador de Google indexe el directorio "/interno" e "/interno.html" User-agent: Googlebot Disallow:/besavega #Evitar que el buscadorMolesto indexe nada User-agent: buscadorMolesto Disallow:/ #Evitar que el resto de agentes indexen el /interno e "/interno.html y el /otrascosas #El /otrascosas.html se indexará (observar la barra) #El asterisco sólo se puede usar en User-Agent #User-agent:* #Disallow:/interno #Disallow:/otrascosas/ #Evitar que cualquier buscador indexe ficheros .jpg, .gif, .txt y .dat User-agent: * Disallow:/*.jpg$ Disallow:/*.tif$ Disallow:/*.gif$ Disallow:/*.txt$ Disallow:/*.dat$ Disallow:/besavega/*.*