# robots.txt
# Aquí se especifica qué puede hacer cada robot que nos visita

User-agent: webcrawler
Disallow:

User-agent: Googlebot
Disallow:

User-agent: Mediapartners-Google* 
Disallow: