# Opciones comunes para todos los bots
User-Agent: *
Disallow: /_sysutils
Disallow: /OrigenVisitas.aspx*
Disallow: /OriginVisits.aspx*
Disallow: /GenericErrorPage.htm
Disallow: /GenericErrorPage.aspx
Disallow: /x.aspx*
Disallow: /Backweb/
Disallow: /ClientBin/
Disallow: /Localizations/
Disallow: /Scripts/
Disallow: /TPV/
Disallow: /UserControl/
Disallow: /WS/

User-agent: Googlebot
# control para los ficheros terminados en estas extensiones
Disallow: /*.js*
Disallow: /*.css*
Disallow: /*.txt$
Disallow: /*.config$
Allow: /*.xml$
Allow: /*.gz$
Allow: /*.kml$
Allow: /*.kmz$
# no permitir todos los ficheros con ? en la url
Disallow: /*?*
Disallow: /*?

# permitir al bot de imagenes de Google buscar en todo el portal
User-agent: Googlebot-Image
Disallow: /
Allow: /*.gif$
Allow: /*.png$
Allow: /*.jpeg$
Allow: /*.jpg$
Allow: /*.ico$
Allow: /Portals/40/Images
Allow: /Portals/41/Images
Allow: /Portals/49/Images
Allow: /Portals/60/Images
Allow: /Portals/70/Images
Allow: /Portals/71/Images
Allow: /Portals/8/Images

# no permitir el archivado del site
User-agent: ia_archiver
Disallow: /

# permitir a los bots del adsense en todo el site
User-agent: Mediapartners-Google*
Allow: /*

# permitir al bot Googlebot-Mobile en todo el site
User-agent: Googlebot-Mobile
Allow: /*

# permitir al Adsbot-Google en todo el site
User-agent: Adsbot-Google
Allow: /*

# indicamos dónde está nuestro índice de los Sitemaps
Sitemap: http://www.fotocasa.es/sitemaps/sitemap_index.xml