adrianshort
/
single_authority_planning_applications
zrcadlo https://github.com/adrianshort/single_authority_planning_applications.git
1
0
Rozštěpit 0
Zdrojový kód Úkoly 0 Vydání 0 Wiki Aktivita
Used for testing uk_planning_scraper Ruby gem in the Morph environment
Nelze vybrat více než 25 témat Téma musí začínat písmenem nebo číslem, může obsahovat pomlčky („-“) a může být dlouhé až 35 znaků.
5 Revize
1 Větev
30 KiB
 
Strom: bbd921e0f9
Větve Značky
${ item.name }
Vytvořit větev ${ searchTerm }
z „bbd921e0f9“
${ noResults }
 ZIP  TAR.GZ
Adrian Short bbd921e0f9 Update README před 6 roky
.gitignore Add template for morph.io scraper před 6 roky
Gemfile Always use the latest uk_planning_scraper gem před 6 roky
Gemfile.lock Always use the latest uk_planning_scraper gem před 6 roky
README.md Update README před 6 roky
scraper.rb First commit před 6 roky

README.md

Scrape planning applications for a single council/authority

  1. Fork this repo to your own GitHub account.
  2. Sign in to Morph with your GitHub account.
  3. Create a new scraper on Morph.
  4. Choose your forked repo (single_authority_planning_applications) as the scraper code.
  5. In the Settings page for your scraper on Morph, create two Secret environment variables:
  6. Set MORPH_AUTHORITY_NAME to the name of your council, eg Hackney.
  7. Set MORPH_DAYS to the number of recent days you want to scrape, eg 7.
  8. Run the scraper.
  9. Use the Morph API to grab your scraped data or download CSV/SQLite files straight from your scraper page. You must be signed in to do that.
  10. On your scraper’s Settings page, tick the Auto run box to make your scraper run once per day.