Skal scrape boligspriser fra finn.no og lagre de i en postgresql-database.
Kunne ha sammenligninsgrunnlag til neste boligkjøp og forventet avkastning hvis boligprisene stiger ca. 6 % hvert år.
Hva er høyeste pris i en budrunde som jeg er villig til å gå.
F.eks.
Hva er ansett som billig i et område?
Hvor mye er jeg villig til å betale mtp. forventet prisøkning og at jeg skal bo der maks 3 år?
Hva er forventet oppussingskostnad?
Kan man bruke maskinlæring for å finne ut av forventet pris om 3 år?
Kart.finn.no
Eksempel på request:
GET https://kart.finn.no/map/object/content/10/263834841.html
curl -H 'User-Agent: Firefox' "https://kart.finn.no/map/object/content/10/263834841.html"
gir respons som kan sees i testdata_bolig_sorenga.html
extrahere ut data:
xpath -e '/span/span/getText()' testdata_bolig_sorenga.html
curl
xmllint -> bruke x-path
scrapy
cd venv/boligannonse_scraper
scraper crawl finn
postgrest som backendapi
postgres som database
- Kjøre rest-api og database i docker-compose
- Få POST- og GET- request til å fungere for data i boligannonse
- Lage automatisk testscript for POST og GET-request
- Lage