Bladeren bron

Limit number of properties retrieved per application

pull/38/head
Graeme Porteous 5 jaren geleden
bovenliggende
commit
d6ff621eac
1 gewijzigde bestanden met toevoegingen van 3 en 1 verwijderingen
  1. +3
    -1
      lib/uk_planning_scraper/idox.rb

+ 3
- 1
lib/uk_planning_scraper/idox.rb Bestand weergeven

@@ -213,7 +213,9 @@ module UKPlanningScraper
app.property_detail_urls = []

get(app.property_url) do |res|
res.search('#Property li a').each do |property_link|
res.search('#Property li a').each_with_index do |property_link, index|
break if index >= 10

app.property_detail_urls << base_url + property_link[:href]
end
end


Laden…
Annuleren
Opslaan