adrianshort
/
planningalerts
espelho de https://github.com/adrianshort/planningalerts.git
1
0
Derivar 0
Código Questões 0 Lançamentos 0 Wiki Trabalho
Automatically exported from code.google.com/p/planningalerts
Não pode escolher mais do que 25 tópicos Os tópicos devem começar com uma letra ou um número, podem incluir traços ('-') e podem ter até 35 caracteres.
314 Cometimentos
2 Ramos
24 MiB
Árvore: c719513b23
Ramos Etiquetas
${ item.name }
Criar ramo ${ searchTerm }
de 'c719513b23'
${ noResults }
planningalerts/docs/robots.txt

robots.txt 74 B
Em bruto Vista normal Histórico

Add a robots.txt file to stop search engines bothering our scrapers and api.
há 16 anos
​
​
​
 1234 
  1. User-agent: *

  2. Disallow: /cgi-bin/

  3. Disallow: /scrapers/

  4. Disallow: /api.php