Skip to content

Artsdatabanken/naturvern-kart-lastejobb

Repository files navigation

naturvern-kart-lastejobb

Open Source Love PRs Welcome

Laster geometri for Norske naturvernområder.

Komponenter og dataflyt

Dataflyt

Dataflyt

Tegnforklaring

Symbol Forklaring
Dataflyt API (HTTP REST)
Dataflyt Åpne data
Dataflyt Kart
Dataflyt Lastejobb / Konvertering
Dataflyt Bibliotek
Dataflyt Verktøy
Dataflyt Web-side/applikasjon

Utdatasett

Datasettet som er resultatet av lastejobben havner i repo naturvern-kart.

Baserer seg på åpne data fra (takk til)

Leses av

Bruk i sluttprodukter

Kataloger

  • stages/download: Script for å laste ned eksterne datafiler til temp/
  • stages/transform: Script som produserer resultatet og legger det i build/
  • build: Filene som kommer ut av lastejobben
  • data: Temporær lagring av nedlastede data og mellomformater

Bruk

Download

npm run download

Laster ned eksterne avhengigheter som lastejobben er avhengig av for å produsere sitt resultat i "transform". Denne kjører stegene som ligger i stages/download. Nedlastede data lagres som en konvensjon i katalog data.

Transform

npm run transform

Bruker allerede nedlastede data til å produsere sitt resultat. Denne brukes gjerne mens man utvikler så man slipper å laste ned data hver gang, og kan også brukes uten at man har tilgang til nett sålenge man har gjort download først. Denne kjører stegene som ligger i stages/transform

Sluttproduktet av transform skrives som en konvensjon til katalogen build.

Build

npm run build

Kjører hele lastejobben, først download, så transform.

Deploy

Tar filene fra build-katalogen som er produsert i build eller transform og publiserer disse offentlig slik at andre lastejobber eller konsumenter kan nå dem uten å kjøre lastejobben.

08.03.23

Når byggejobben fullføres opprettes det en release av de tre filene som er nevnt i den historiske "staging.sh", disse hentes ned av et script på hydra, etter at boten har fått melding om at releasen er tilgjengelig. Denne meldingen sendes automatisk, når jobben er fullført.

I tillegg clones repoet naturvern-kart, filene kopieres hit og disse sjekkes så inn i master og tagges med versjonsnummeret til releasen som er laget under byggejobben. Dette for å sørge for tydelig sporbarhet, om noe skulle skjære seg.

TODO: Lage jobb og trigge denne, i natuvern-lastejobb, da denne må oppdateres når det er laget nye data her.