Dataforvaltning 2012Helge Sagen

Faggruppe Norsk Marint Datasenter ved Havforskningsinsituttet

Reorganisering av dataflyt Havforskningsinstituttet

Forprosjekt NMDC som resulterte i datasettkartlegging og infrastruktur søknad

Infrastruktur NMDC Norwegian Marine Data Centre, oppstart 1. august 2012

Utfordringer

▶ Tema

Foto: MAREANO

▶ Norsk Marint Datasenter – Faggruppe ved Havforskningsinstituttet

Visjon: NMD skal være det nasjonale knutepunktet for marine data, også for data som ikke samles inn av Havforskningsinstituttet. Ansvar som ”National Oceanographic Data Centre”, NODC siden 1971.

DATASENTER APPLIKASJONSUTVIKLINGData katalog – Metadata Database designLangtidslagring av forskningsdata Data flytOperasjonell datahåndtering Kvalitetskontroll

PRODUKTER BIOINFORMATIKKData utveksling Sammenstilling av genetikk

dataKarttjenester (WMS) TilgjengeliggjøringMAREANO portalen Genetiske analyse

programmer

4-500 datasett eller tidsserierwww.imr.no/datakatalog

▶ Havforskningsinstituttets datakatalog

▶ Norsk Marint Datasenter – Ferske data på Internett hver dag

Foto: MAREANO

Foto: Havforskningsinstituttet

▶ Automatisk fjordbøye – sender data 1 gang pr time GSM

▶ Fast snitt – klimatologiske snitt

▶ Operasjonelle data 1 mnd Arktis egne data og Coriolis

Foto: MAREANO

MAREANO prosjektet, Havforskningsinstituttet, Norges Geologiske Undersøkelser og Statens Kartverk Sjø kartlegger dybde, bunnforhold, naturtyper og forurensning i norske havområder. Resultater presenteres på www.mareano.no

▶ Kartklient MAREANO Portal

Foto: MAREANO

▶ Havforskningsinstituttets datainfrastrukturprosjekt

Foto: MAREANO

▶ Fagdatabaser – synkronisering skip - datasenter

Foto: MAREANO

En samling fagspesifikke databaser, fisk, fysikk, kjemi…Etablering av innsamlingsdatabaser på fartøyOverføring av innhold ved innsamlingsslutt til NMDSynkronisering av innhold mellom fartøy eller landHistoriske data tilgjenglig sammen med nye data

▶ DOKIPY Metadata

Registrering av metadata om datasett (DIF og EDMED definisjon)Norsk finansierte IPY prosjekter

Bruker høsting av metadata gjennom OAI-PMH som ble utvikle mellom met.no – Havforskningsinstituttet og Norsk Polarinstitutt

▶ Data utlevering via datakataloger (2003)

Lange tidsseriar for miljøovervåkning og forskning (Norges Forskningsråd, 2003, 2004)

Rapport 1; Viktige klimadataserierRapport 2; Viktige terrestriske og limniske dataserierRapport 3; Viktige marine dataserier

▶ Datakatalog fra NMDC forprosjekt 2009-2010

Registrering av metadata om datasett (DIF og EDMED definisjon)NMDC marine datasettLifeWatch Biodiversitets datasett

Foto: MAREANO

▶ NMDC partner datasett – NMDC forprosjekt 2009-2010

No Partner Antall

1 Havforskningsinstituttet 192

2 NTNU, Biologisk stasjon, Trondheim 33 Christian Michelsen Research 04 Forsvarets Forskningsinstitutt 2

5 Universitetet i Nordland 36 Meteorologisk Institutt 87 Nansen senteret 0

8 Norges geologiske undersøkelse 25

9 Norsk Institutt for Naturforskning 310 Norsk Polarinstitutt 611 Statens kartverk Sjø 312 Universitetet i Bergen 24

13 Universitetet i Oslo/CEES 114 Universitetet i Tromsø 2615 Norsk institutt for vannforskning 1416 Akvaplan NIVA 017 UNI Research – UNI Bjerknes 0Tot 310

Establishment of a Norwegian Marine Data Centre that will provide seamless access to marine data and greatly increase the efficiency of marine science in Norway and facilitate the generation of high quality research. Long term objectives:

i.Establish a distributed national infrastructure for marine data sets including historical and contemporary data

i.Make Norwegian marine data sets easily accessible

i.Enable long term stewardship of datasets

i.Operationalize data flow from observations to users minimizing latency

i.Develop advanced applications, products and services

seamless access to marine data48 (83) mill. fra NFR infrastrukturmidler; databaser, tidsserier, registre og samlinger

▶ NMDC infrastruktur

Foto: MAREANO

▶ NMDC organisasjonsmodell

NMDC

Foto: MAREANO

Foto: Havforskningsinstituttet, Johan Kristiansen

▶ NMDC Bruksvilkår – NLOD – CC BY

▶ NMDC Internasjonal koordinering

Grafikk: MAREANO

▶ NMDC Internasjonal koordinering

Grafikk: MAREANO

▶ NMDC Internasjonal koordinering

Foto: MAREANO

▶ NMDC Internasjonal koordinering

Sitering av datasettICSU CODATA International Council for Science -

Committee on Data for Science and Technology

ICSTI TGDCSP International Council for Scientific and Technical Information Data Citation Standards and Practices

Kontrollerte vokabular

Metadata standarder

Data utvekslings standarder

Historisk lagring•Forskningsdata lagres i mange formater og på mange medier•Historiske forskningsdata er lagret på gamle magnettaper eller på papir•Lite metadata er tilgjengelig

Tjenester•Datalager for filer i ulike formater med tilhørende metadata•Database koblinger mot mange databasemodeller•Standardisering av metadata•Standardisering av lagringsformater•Sikkerhetskopier på Norstore

Utveksling av forskningsdata•Eierskap til forskningsdata•Bruksvilkår for forskningsdata (NLOD)

▶ Utfordringer