SeaDataNet – Upravljanje z oceanografskimi in morskimi podatki v okviru pan-evropske infrastrukture.

Dr. Branko Čermelj, Nacionalni inštitut za biologijo, Morska biološka postaja, Piran

Projekt financira evropska komisija

V okviru projekta je bila postavljena delujoča pan-Evropska infrastruktura

namenjena upravljanju morskih in oceanografskih podatkov, s povezavo

Nacionalnih podatkovnih centrov (NODC) za morje iz 35 evropskih obalnih

držav.

EU FP5 2002 - 2005

EU FP6 2006 - 2011

EU FP7 2011 - 2015

SeaDataNet - Pomembna dejstva

Razvoj skupnih standardov za “morske” podatke: Šifranti, formati metapodatkov in formati prenosa podatkov

Vzpostavitev Evropskih zbirk/katalogov morskih projektov, podatkovnih zbirk, organizacij, opazovalnih sistemov v morskem okolju ter križarjenj

Infrastruktura s trenutno povezanimi 83 podatkovnimi centri (povezujejo se novi)

Enoten spletni portal namenjen iskanju in dostopu do vseh podatkov, ki jih centri prispevajo

Skupna SeaDataNet podatkovna strategija in SeaDataNet Licenca

Zbirka orodij, ki jih uporabljajo uporabniki in podatkovni centri

MIKADO: generator XML opisa metapodatkov v katalogih NEMO: preoblikovanje različnih podatkovnih formatov v Seadatanet formate Download Manager: Programska opreme za prenos podatkov ODV: Ocean data view prevzet za vizualizacijo podatkov DIVA: Prostorska interpolacija podatkov za potrebe SeaDataNeta

Razvoj orodij za predstavitev (vizualizacijo) podatkov in klimatoloških analiz

SeaDataNet - Arhitektura sistema

Pristop, ki je bil izbran vključuje naslednje aplikacije-storitve:

1. Iskanje podatkov = metapodatkovne zbirke

2. Varovanje podatkov in zasebnosti = Predstavitev uporabnika, odobritev in

prenos podatkov (to omogoča osrednji autentifikacijski sistem – CAS)

3. Prenos podatkov = dostop do podatkov in prenos podatkov

4. Ogled podatkov = grafična predstavitev metapodatkov, podatkov in

produktov analiz

5. Produkti analiz = analize letnih in sezonskih dinamik posameznih

parametrov na regionalnem nivoju

6. Nadzor sistema = statistične analize delovanja sistema.

7. Vzdrževanje = Nadgradnja metapodatkov s strani partnerjev

Skupni Šifranti Uporaba šifrantov je pomemben predpogoj v vseh metabazah in podatkovnih

formatih zaradi doslednosti in medopravilnosti (BODC).

Format metapodatkov

ISO model je osnova za vse XML formate and izmenjevalno shemo (XSD), ki so bili

določeni za vse zbirke – metapodatkovne baze in nabor podatkov (CDI)

Metapodatkovni standard SIST EN ISO 19115 opredeljuje shemo, ki je potrebna za

opis podatkov in po njem so urejene vse metapodatkovne zbirke:

1. Metapodatkovna baza »morskih« organizacij (European Directory of Marine

Organisations -EDMO),

2. Metapodatkovna baza raziskovalnih projektov (European Directory of Marine

Environmental Research Projects - EDMERP),

3. Metapodatkovna baza podatkovnih centrov (European Directory of Marine

Environmental Data sets - EDMED),

4. Metapodatkovna baza križarjenj (Cruise Summary Reports - CSR) in

5. Metapodatkovna baza opazovalnih sistemov (European Directory of the initial

Ocean-observing Systems - EDIOS),

6. Metapodatkovna baza podatov (Common data Index- CDI),

Cilj je preiti na ISO 19139, ki je kot shema že dovolj zrela in usklajena z INSPIRE

direktivo (IFREMER).

Format prenosa podatkov

Prenos podatkov zahteva uporabo skupnega formata podatkov, ki je združljiv

z ostalimi standardi Seadataneta:

Izbrani in dodelani so bili naslednji formati:

1. SeaDataNet ODV4 ASCII format za profile, časovne serije, ladijske

trajektorije,

2. SeaDataNet MedAtlas kot možni, opcijski format,

3. NetCDF format združljiv z CF metapodatkovno konvencijo (CF climate

and forcast) za prostorske podatke in 3D opazovanja s tokomerji.

Kontrola kvalitete podatkov

(BODC)

Postopki nadzora kontrole kvalitete podatkov so pomembni za:

1. Odkrivanje manjkajočih, predpisanih informacij,

2. Odkrivanje napak nastalih med transferom ali reformatiranju podatkov ,

3. Odkrivanje podvojenih podatkov,

4. Odkrivanje izstopajočih podatkov (špice v podatkih, vertikalne nestabilnosti

itd) ,

5. Dodajanje oznake kakovosti vsaki numerični vrednosti pri tem pa se prvotni

podatkovni zapis ne spremeni.

Programska oprema

Eden izmed glavnih ciljev in izzivov Seadataneta je zagotavljanje celovitega pregled in

dostop do podatkov, ki jih hranijo podatkovni centri. Projekt pa zagotavlja tudi orodja,

za analizo in grafično predstavitev podatkov.

V ta namen je bila razvita skupna programska oprema, ki je dostopna podatkovnim

centrom in uporabnikom podatkov (deloma gre za java programsko okolje

1. Urejanje in vnašanje metapodatkov v XML obliki: MIKADO,

2. Pretvorba Medatlas formata v SeaDataNet Medatlas format: Med2MedSDN,

3. Pretvorba kateregakoli ASCII formata v SeaDataNet ODV4 ASCII format: NEMO,

4. Povezava med podatkovnimi centri in SeaDataNet portal za dostop do podatkov:

Download Manager,

5. Analiza in vizualizacija podatkov: Ocean Data View (ODV),

6. Interpolacija podatkov in variacijska metoda: DIVA .

Portal with harmonised services, data products and

tools for users and data centres

o verv1ew Metadata Standards & Software Events Publications

News

New release of NEMO

Version 1 4.3 available

User manual for metadata d1redones

Seadaraner ar GEO Exhibmon

m November 2011 Istanbul. Turkey

SeaOalaNer article m lntematJOnal lnnovabon

maganne of December 2011

SeaDaraNer PrOJed of tile month

Newsletters

Chelf here ro Newslerrers

EU Panicipant Ponal

Cl1ck here ro PP

Data Access Products

http://www.seadatanet.org

Spletna stran, preko katere je možno dostopati do vseh metapodatkovnih baz , orodij in aplikacij

Pan-European Directory Services

All SeaDataNet cat alogues have been harmonised and tuned in format ,

syntax and semantics {common vocabularies) .

They have a common editor (MlKADO) and onl i ne CMS and online query

interfaces

CDI

l

Common Data Index – nabor podatkov in dostop do njih

Iskanje

Dodaj v košarico

Rezultati

Izbrani podatki

Naroči in se predstavi Podatki Prenos

SDN format

Naročilo odobreno

Preveri status v RSM

Grafična predstavitev podatkov – ODV in DIVA

Regional Products services

Klimatologije in analize prostorske interpolacije podatkov za Arktično

morje, Atlantski ocean, Sredozemsko morje, Baltiško morje in Črno morje

Regionalni produkti

SeaDataNet in EMODNET

SeaDataNet ohranja vodilno infrastrukturo za vse projekte EMODNet :

Kemični sklop – Vzorčevanje kemičnih parametrov v skladu z Direktivo o Morski strategiji,

Hidrografski sklop – S ciljem narediti zelo natančno, digitalizirano, batimetrično karto evropskih morij,

Fizikalni sklop– skupaj z MyOcean and EuroGOOS Regions omogoča dostop do arhivov in podatkov v skoraj realnem času,

Geološki lot- pripravlja podvodne, morske geološke karte,

SeaDataNet je partner v sklopu Biologija.

Nove faze projektov, se bodo začele v letu 2013

CDI dostop do podatkov v okviru številnih projektov

www.geo-seas.eu

www.emodnet-hydrography.eu www.emodnet-physics.eu

www.caspinfo.net

www.blackseascene.net

SeaDataNet CDI Service

www.emodnet-chemistry.eu

CDI – Pokrivnost podatkov – April 2013

> 1,3 milijona CDI vnosov iz 29 držav in 83 podatkovnih centrov ter 435 različnih virov fizikalnih, kemičnih, geoloških, geofizikalnih, batimetričnih in bioloških podatkov ; v letih 1800 – 2013; 90% prosto dostopnih ali dostopnih ob podpisu SeaDataNet licence

Kam gre razvoj v SeaDataNet–u II (2011 – 2015)

Nadgradnja in usklajevanje standardov za vse vrste morskih in oceanografskih podatkov, tistih prikazanih v realnem času in tistih v zapoznelem načinu,

Vsklajenost z INSPIRE direktivo in razvoj pravil v oceanografiji,

Nadgradnja aplikacij na spletni strani, ki bodo omogočale avtomatizirano komunikacijo med strojno opremo in postavitev novih aplikacij namenjenih vizualizaciji podatkov ob uporabi tudi drugih standardov (OGC, ISO and W3C ),

Razvoj tehnologije, ki bo omogočala prenos podatkov senzor – spletna stran v realnem času,

Narediti strukturo Seadataneta še bolj robustno in dodatno razširiti nabor analiz tematskih in regionalnih, agregiranih podatkov.

Geo-Seas, Cork. October 9-10. 2012

/MD/5: International confe,rence on Marine Data

and Information Systems

• Orga n ised in the f rame of Sea Data Net

•

•

In Lucca, Italy, 23-25 Septe mber 2013

4 to pics

- Mar ine information and data management

- Marine environmenta l data bases : infrastr uctures and data

access systems

- Data services in ocean science

- Services for users and ed ucation

sdn-userdesk@seadatan et .org - www.seadatanet.org

WWW.SEADATANET.ORG