Automatically exported from code.google.com/p/planningalerts
Não pode escolher mais do que 25 tópicos Os tópicos devem começar com uma letra ou um número, podem incluir traços ('-') e podem ter até 35 caracteres.

robots.txt 74 B

1234
  1. User-agent: *
  2. Disallow: /cgi-bin/
  3. Disallow: /scrapers/
  4. Disallow: /api.php