Datalandsbyen

Hei dere!
Orden i eget hus legger opp til at virksomheter kartlegger og beskriver datasett. I den reviderte versjonen av orden i eget hus-veilederen (lanseres 1. november) forsøker jeg å få til en god nok forklaring på et datasett samt kort veiledning rundt dette, for å hjelpe orden i eget hus-arbeidet. Jeg ble inspirert av innspillene deres her.

Å forsøker å definere hva et datasett er tror jeg er nytteløst, men heller gi noen tips til hvordan det er lurt å tenke rundt denne "problematikken".

Teksten jeg har skriblet ned har jeg limt inn under. Hva syns dere?

Hva er et datasett?
Kort fortalt er et datasett "en organisert samling av data". Hvordan et datasett avgrenses og organiseres vil imidlertid variere mellom ulike virksomheter. Har deres virksomhet store datasett vil dere raskt oppdage at disse kan deles inn i mange mindre datasett.

Husk at i veilederens steg fem skal dere beskrive datasettene dere kartlegger. Det vil derfor lønne seg å tenke praktisk rundt datasettavgrensning: Å beskrive utallige, små datasett gir mye ekstraarbeid og er ikke hensiktsmessig. Samtidig vil å beskrive et fåtall, veldig store datasett blir for generelt og ikke gi en nøyaktig nok beskrivelse av innholdet i datasettet. Et sted midt i mellom er å anbefale.

For dere som er interessert i datasett-diskusjonen:

Les Digdirs beskrivelse av datasett (https://www.digdir.no/informasjonsforvaltning/hva-er-et-datasett-og-hvilke-datasett-skal-beskrives/2199).

Følg og bidra til diskusjonstråden i Datalandsbyen vedrørende hva et datasett egentlig er [lenke hit].

@tuva Nå virket den ihvertfall. Veldig fin beskrivelse!

Vi har behov for dette datasettet i utdanning.no. Vi har hittil løst det med å sammenstille flere historiske dumper av brreg-databasen til en forløpsdatabase, dvs. en datakilde med felt for år en org-enhet oppsto og når den eventuelt forsvant. Dermed kan vi finne ut geografisk sted for organisasjoner som ikke lenger er aktiv.

@livar-bergheim

Ja, for at brukere skal ha ubegrensede muligheter til å redigere tidligere innlegg, er terskelen i dag at de trenger tre "upvotes" eller stemmer fra andre brukere. Tidsapspeket er derfor ikke like relevant, men omdømmet er.

Vi kommer til å ta i bruk Datex 3.1, den er dokumentert her: https://docs.datex2.eu/downloads/modelv31.html . Standarden har flere profiler, vi har ennå ikke valgt hvilken profil vi skal bruke. Det kommer til å bli dokumentert på https://www.vegvesen.no/om-oss/om-organisasjonen/apne-data/datex/ på forhånd.

Vi jobber også med en forbedring av vegmeldingene som kommer i løpet av året. Der har vi vurdert en tilpasning som tillater filtrering på fjelloverganger. Det er ennå ikke bestemt om den blir implementert (avhenger av hva vi har tid og penger til, sett opp mot andre ting vi vil gjøre), men det er nyttig å vite at dette er noe som folk har bruk for og etterlyser.

De skriftlige presentasjonene fra dagens møte er å finne her: https://www.digdir.no/informasjonsforvaltning/faglig-arena-informasjonsforvaltning/2846

Opptak finnes her: https://vimeo.com/595799014

Send en e-post til christiane.andrea.frohlich@digdir.no for å motta passord til opptaket.

@jim-j-yang
Flott - og takk for sist 😉
Jeg tar kontakt med det første

Udanningsdata:

Utdanning.no har felles søk mot alle formelt godkjente utdanninger på studieprogramnivå og åpne kurs som det går an å søke på.
Andre datakilder (som DBH) har etterrapportert data for utdanninger/kurs som studenter har gjennomført (f.eks. studenttall).

Her er et søk på "kunstig intelligens"
https://utdanning.no/sok/#hovedfasett=Utdanninger&query_value=kunstig intelligens

Ellers er det jo en glidende overgang mellom informatikk-utdanninger, datavitenskaputdanninger og rene AI-utdanninger. På mitt alma mater, er AI en spesialisering innen master i fysikk.

Forresten, kanskje du skulle tagge innlegget ditt med Python og Pandas, så det blir lettere for de som kjenner disse verktøyene å finne innlegget?

Lånekassen har brukt Collibra siden 2017 som metadatakatalog. I tillegg har vi deltatt i utprøving av Azure Purview som datakatalog siden 2019. Den er fremdeles i public preview.

Det er noe ulike perspektiver på disse tjenestene.

Collibra har en fordel av å ha en godt fungerende meta-meta-modell i bunn. Det gjør at vi kan lage en godt tilpasset logisk representasjon av den kunnskapen vi forvalter i Lånekassen og hvordan relasjoner mellom ulike informasjonsverdier har. Den har også rik og fleksibel støtte for å gjennomføre prosesser i organisasjonen, men vi har så langt ikke benyttet det i stor grad.

Fordelen med en godt integrert datakatalog er at den til enhver tid har kontroll på fysisk data. Dette hjelper inn mot operativ dataforvaltning, flyt og sikkerhet.

Tidligere har vi benyttet oss av løsninger som har vært svært teknisk, men som i hovedsak har tatt utgangspunkt i DBA og informasjonsarkitektens behov. Slike løsninger har det ikke vært grunnlag for å gjøre tilgjengelig for virksomheten som helhet.

@jbr Dei knappane er ein del av kalender-pluginen her i nettforumet. Tok ein rask titt i admin-grensesnittet, og finn ikkje noko alternativ for å skru dei av. Tenker det kan vere ein fin måte å indikere for andre i forumet at ein skal delta på eit arrangement. Men som når ein indikerer at ein Deltar på eit Facebook-arrangement, så er ofte påmelding gjort ein anna stad. Kanskje vi skulle hatt noko hjelpetekst så ikkje nokon trur det er påmelding.

@per-bratterud Tusen takk, linken er fikset.

Hei, det er NFF og NIF som sitter på dataene. Er du kjent med https://www.fotballdata.no og https://wp.nif.no ? Det finnes noe muligheter her.

@christian-rosenvinge

Hei, så fint at du ønsker å delta på dette. Jeg videresender henvendelsen din til Anne Karete. 🙂

Opptak fra Faglig arena i går finnes på Vimeo.

Lenke til opptak: https://vimeo.com/564040954

Send meg en e-post på: christiane.andrea.frohlich@digdir.no om du ønsker å motta passord for å få tilgang til opptakene.

Takk for din tilbakemelding. Vi skal se på det.

Takk for flott eksempel på bruk av ulike datakilder, @torkel-velure

Ettersom jeg både er glad i tinderangling og å dokumentere visittene, ser dette ut som en applikasjon som kan komme til nytte. 🙂

Hei, @alf-sollund.

Spennende tjeneste. Jeg flytter innlegget over til kategorien "Tips og spørsmål", ettersom dette ikke er et eksempel på bruk. Håper det er i orden.

Hilsen redaktør.

Takk for godt eksempel på bruk. Legger til lenker til Enhetsregisteret og Arbeidsgiver- og arbeidstakerregisteret slik at eksempelet kommer med som en del av datasettbeskrivelsene for de datasettene du eksplisitt nevner.

Takk for tips! Denne ser også interessant ut:

ÅRETS VIKTIGSTE DEBATT - DEN DIGITALE FREMTIDEN.
Mandag 16/8 2021 09:00 - 10:00
streaming: ja

Og denne er kanskje litt på sida i forhold til datalandsbyen, men utfordringer rundt private kontra offentlige data, og konsekvenser av at det offentlige bruker "gratis"-tjenester fra teknologigigantene kan være verdt å være obs for for oss alle. ("Gratis" i anførselstegn fordi vi betaler med data, ikke penger.)

KUNNSKAPSHULLENE: DIGITAL PANDEMIBEKJEMPELSE PÅ TEKNOGIGANTENES NÅDE
Tirsdag 17/8 2021 09:00 - 10:00
Streaming: ja