adrianshort
/
planningalerts
réplica de https://github.com/adrianshort/planningalerts.git
1
0
Fork 0
Código Incidencias 0 Lanzamientos 0 Wiki Actividad
Automatically exported from code.google.com/p/planningalerts
No puede seleccionar más de 25 temas Los temas deben comenzar con una letra o número, pueden incluir guiones ('-') y pueden tener hasta 35 caracteres de largo.
314 Commits
2 Ramas
24 MiB
Árbol: c719513b23
Ramas Etiquetas
${ item.name }
Crear rama ${ searchTerm }
desde 'c719513b23'
${ noResults }
planningalerts/docs/robots.txt

robots.txt 74 B
Original Vista normal Histórico

Add a robots.txt file to stop search engines bothering our scrapers and api.
hace 16 años
​
​
​
 1234 
  1. User-agent: *

  2. Disallow: /cgi-bin/

  3. Disallow: /scrapers/

  4. Disallow: /api.php