digitaal archief vlaanderen · 2016. 2. 29. · inleiding generieke blauwdruk pwc niveau van...
TRANSCRIPT
Digitaal ArchiefVlaanderen
6 augustus 2013
www.pwc.com
Klankbordgroep 2Generieke blauwdruk
DRAFT
Agenda
• Doelstelling van deze klankbordgroep
• Inleiding generieke blauwdruk
• Blauwdruk
1. Dienstenmodel
2. Data architectuur
PwC
2. Data architectuur
3. Applicatie architectuur
4. Technologische architectuur
Slide 2Aug 2013Digitaal Archief Vlaanderen
DRAFT
Doel van deze klankbordgroep is het evalueren van degenerieke blauwdruk en aftasten van de behoeften
1ste deel
Voorstelling generieke blauwdruk
Focus op
• Betrokken partijen
• Dienstenarchitectuur
• Wie doet wat? (archiefbeheerder vs. archiefvormer)
Doelstelling van deze klankbordgroep
PwC
• Wie doet wat? (archiefbeheerder vs. archiefvormer)
• Data architectuur
2de deel
Evaluatie van de voorgestelde blauwdruk en behoefteanalyse
Aanpak
• Oefeningen met behulp van vooraf gedefinieerde vragen
• Discussie in kleine gemengde groepjes(variërende expertise per groep)
Slide 3Aug 2013Digitaal Archief Vlaanderen
DRAFT
Behoeften worden duidelijk wanneer we peilen naar deAS IS situatie en TO BE verwachtingen
AS IS situatie
• Wat is bestuurlijke informatie?
• Hoe gebeurt archivering vandaag?
• Op welk moment wordt gearchiveerd?(dynamisch vs. (semi-)statisch)
• Welke kosten zijn vandaag verbonden
Behoefteanalyse
• Behoeftes in het landschap
• Producent
• Consument
• Mede manager
• Toegevoegde waarde van elk van
Doelstelling van deze klankbordgroep
PwC
• Welke kosten zijn vandaag verbondenaan archivering?
• Toegevoegde waarde van elk vande services in de generiekeblauwdruk
• Bereidheid van besturen omservices betalend af te nemen
• Minimale vereisten voorwelslagen van het project
• Haalbaarheid van generiekeblauwdruk in termen vancomplexiteit, processen,politieke en organisatorischeimpact
TO BE verwachting
• Welke diensten zijn nuttig / ontbrekenin de generieke blauwdruk?
• Liggen de verantwoordelijkheden op dejuiste plaatsen? (archiefbeheerder vs.archiefvormer)
• Wat is voor u een minimale vereistevoor u instapt in het geheel?
Slide 4Aug 2013Digitaal Archief Vlaanderen
DRAFT
De input van de behoefteanalyse vormt samen met degenerieke blauwdruk de basis voor het stappenplan
MobilisatieGeneriekeblauwdruk
Behoefteanalyse Stappenplan
Hoe verloopt deworkflow vanarchivering en welkezijn de generieke
Welke noden inzakeinterne en externeontsluiting zijn er?
1 2Welkearchiefbestandenkunnen in beheerworden gegeven bij het
3
Doelstelling van deze klankbordgroep
PwC
Welke behoeften enfunctionaliteiten zijnnuttig / ontbreken inde generiekeblauwdruk?
zijn de generiekeelementen?
worden gegeven bij hetVIAA +?
Welke diensten kunnenworden voorzien bij departners?
Hoe past het eDepot ineen groter strategischgeheel? Welke anderestappen zijn belangrijkom dit project te doenslagen?
Slide 5Aug 2013Digitaal Archief Vlaanderen
DRAFT
Landschap voor archivering
Inleiding generieke blauwdruk
Regelgeving
• Decreet van 9 juli 2010 betreffende debestuurlijk-administratievearchiefwerking(Archiefdecreet van 9 juli 2010);
Het Archiefdecreet bevat vijf strategische doelstellingen:
• Verhogen van de kwaliteit van het archiefbeheer;• Beter ontsluiten van archiefdocumenten voor de recht- en
informatiezoekende burger;• Openbaar maken van de meeste archiefdocumenten na 30 jaar;• Stimuleren van efficiënte waardering en selectie van
archiefdocumenten;• Toelaten van wetenschappelijk onderzoek.
PwC
Normen en standaarden
• OAIS (ISO 14721)• Audit and Certification of Trustworthy Digital
Repositories (ISO 16363)• ISAD(G) (General International Standard Archival
Description)• ISAAR (International Standard Archival Authority
Record)• …
eDepot
Slide 6Aug 2013Digitaal Archief Vlaanderen
DRAFT
Landschap voor archivering
Kadering in het grotere geheel van actoren en diensten:
Inleiding generieke blauwdruk
PwCAug 2013
Slide 7
DRAFT
Insteek voor de generieke blauwdruk
• OAIS als een geheel van diensten
• Open Architectuur
Standaarden
Duurzaamheid
Schaalbaarheid
Inleiding generieke blauwdruk
PwC
Schaalbaarheid
Virtuele integratiemogelijkheden
• Betrouwbaarheid
Authenticiteit
Integriteit
Risico beheersing
Slide 8Aug 2013Digitaal Archief Vlaanderen
DRAFT
Informatiemodel – Hoofdproces voor archiveringA
rchiv
ering Verw
erk
ing
maak SIP maak AIP ok Archivering
Stuur mail naar deaanvrager
Valide
Not ok
Einde
PreservationdescriptionInformation
Inleiding generieke blauwdruk
PwC
Pro
du
cers
Inte
rfac
eP
rod
cu
ers
Maak aanvraag
Ontvang aanvraag Validatie
Ontvangarchiverings-bevestigingingang
Einde
Contentinformation
Slide 9Aug 2013Digitaal Archief Vlaanderen
DRAFT
Samenstelling van de generieke blauwdruk
• Business architectuur: diensten die beschikbaar zijn voor de producersen de consumers
• Gegevensarchitectuur: beheren van metadata, mogelijkheden omarchiefstukken op te vragen op basis van metadata, gegevens uitwisselingtussen diensten en actoren
• Applicatie architectuur: bepalen van de samenhang van de software,
Inleiding generieke blauwdruk
PwC
• Applicatie architectuur: bepalen van de samenhang van de software,niveau van automatisatie binnen het archief
• Technologische architectuur: technische eigenschappen van deoplossing zoals lager-niveau implementatievereisten en ondersteuning voorinfrastructuur.
Slide 10Aug 2013Digitaal Archief Vlaanderen
DRAFT
Laag 1: dienstenmodel (business architectuur)
1. Dienstenmodel
PwC Slide 11Aug 2013Digitaal Archief Vlaanderen
DRAFT
Preservation PlanningDiensten model
Workflow
Ingest
Archive
Producer interfaces
Web Portal Application
Requests
Temporarystorage
Storage
Systeembeheer
Instap
Opvolging
1. Dienstenmodel
PwC
Archive
Access
Search Dissemination
Consumer interfaces
Web Portal Application
Audit
storageStorage
CatalogBCP DRPRisk man
Proces enpolicybeheer
Slide 12Aug 2013Digitaal Archief Vlaanderen
DRAFT
Instap & opvolgingVoorafgaand aan operationeel proces voor archivering
Wat?
• Afspraken maken en begeleiding van verschillende types organisaties
Type 1: bewustwording voorzien voor besturen die nog niet metarchivering bezig zijn
Type 2: instap faciliteren voor nieuwe klanten en begeleiden bij verdere
1. Dienstenmodel
PwC
Type 2: instap faciliteren voor nieuwe klanten en begeleiden bij verdereevolutie
Type 3: instap faciliteren en verder bouwen op expertise
Samenwerking met alle gebruikers gericht op standaardisatie, integratieen optimalisatie
Slide 13Aug 2013Digitaal Archief Vlaanderen
DRAFT
Instap & opvolgingDuale benadering: begeleiding bieden / expertise samenbrengen
Concreet afspraken maken en opvolging omtrent verschillende thema’s
• Pre-Ingest afspraken (hoe een archiefwaardig maken van data) zoals dubbelsverwijderen, naamgeving en structuur bepalen, …
• Afbakening dynamisch, semi-statisch en statisch archief en de consequentiesnaar digitale archief oplossingen
• Beheren van de levenscyclus (van selectie naar ontsluiting en vernietiging)
• Metadata
1. Dienstenmodel
PwC
• Metadata
• Formaten
Aanvaarde formaten
Strategie: mee archiveren of transformatie bij oproepen
Preservation planning
• Thesaurus: gemeenschappelijke vocabulaire
• Kwaliteitscontrole
• Gebruikte tools en technologie via trend/technology watch
• Security maatregelen (toegangsrechten, privacy regulering)
• Opleidingen
Slide 14Aug 2013Digitaal Archief Vlaanderen
DRAFT
Proces – Opladen dataDienst: Interfaces voor producer
Arc
hiv
ering Verw
erk
ing
maak SIP maak AIP ok Archivering
Stuur mail naar deaanvrager
Valide
Not ok
Einde
PreservationdescriptionInformation
1. Dienstenmodel
PwC
Pro
du
cers
Inte
rfac
eP
rod
cu
ers
Maak aanvraag
Ontvang aanvraag Validatie
Ontvangarchiverings-bevestigingingang
Einde
Contentinformation
Slide 15Aug 2013Digitaal Archief Vlaanderen
DRAFT
Interfaces voor producerVerschillende opties voor interactie met gebruikers*
1. Dienstenmodel
Web interface FTP upload / download Applicaties
Formulier om metadatagegevens toe te voegen
Opladen van document metmetadata gegevens op eenlocatie
Gebruikmaken van eenWebservice of API
Manueel laden van data Databestanden in Ritme bepaald door de
PwC
Impact voor behoefte analyse:
• Welke bestuurlijke informatie komt in aanmerking voor digitalearchivering?
batchvorm applicatie en infrastructuur
Generieke oplossing voorproducers die geenarchiverings-functionaliteiten hebben
• Oplossing voor producersmet reeds bestaandeapplicaties
• Kan gebruikt worden alsinitiële import
Oplossing voor producersmet reeds bestaandeapplicaties
*Zie ook applicatie architectuur
Slide 16Aug 2013Digitaal Archief Vlaanderen
DRAFT
Proces - Vervolmaken SIPDienst: Ingest
Arc
hiv
ering Verw
erk
ing
maak SIP maak AIP ok Archivering
Stuur mail naar deaanvrager
Valide
Not ok
Einde
PreservationdescriptionInformation
1. Dienstenmodel
PwC
Pro
du
cers
Inte
rfac
eP
rod
cu
ers
Maak aanvraag
Ontvang aanvraag Validatie
Ontvangarchiverings-bevestigingingang
Einde
Contentinformation
Slide 17Aug 2013Digitaal Archief Vlaanderen
DRAFT
Ingest
1. Dienstenmodel
Wat?
• SIP wordt ontvangen
• Tijdelijk opslaan SIP en controle van de kwaliteit
• Vervolledigen van de PDI (Preservation Description Information) metadequate informatie om de inhoud op lange termijn op te slaan
PwC
adequate informatie om de inhoud op lange termijn op te slaan
Impact voor behoefteanalyse:
• 2 opties:
Samenvoegen van het object met de PDI tot een SIP
Direct SIP doorsturen indien PDI reeds aangemaakt is door producer
• Met consequenties obv overeenkomsten gemaakt tijdens de instapdienst
• Zie data architectuur
Slide 18Aug 2013Digitaal Archief Vlaanderen
DRAFT
Proces – Vervolmaken AIPDienst: Archive
Arc
hiv
ering Verw
erk
ing
maak SIP maak AIP ok Archivering
Stuur mail naar deaanvrager
Valide
Not ok
Einde
PreservationdescriptionInformation
1. Dienstenmodel
PwC
Pro
du
cers
Inte
rfac
eP
rod
cu
ers
Maak aanvraag
Ontvang aanvraag Validatie
Ontvangarchiverings-bevestigingingang
Einde
Contentinformation
Slide 19Aug 2013Digitaal Archief Vlaanderen
DRAFT
Archive
1. Dienstenmodel
Wat?
• Rendition: verhogen van de duur van de leesbaarheid door transformatie vandocumenten naar een beperkt set van formaten
• Opslaan op lange termijn van de AIP door toevoegen van systeeminformatie
• Bevestiging naar aanvrager en communicatie van referentie
PwC
• Bevestiging naar aanvrager en communicatie van referentie
• Opbouw catalogus:
- Stockeren meta data voor opzoekingen
- Selectie overeengekomen tijdens de instapdienst
Slide 20Aug 2013Digitaal Archief Vlaanderen
DRAFT
Archive
1. Dienstenmodel
Impact voor behoefteanalyse:
• Algemene afspraken gemaakt bij instap en opvolging
• Eigen catalogus of instappen in centrale catalogus?
• Specifieke vereisten mbt:
Toevoegen Aanpassen Verwijderen
PwC
Toevoegen Aanpassen Verwijderen
Aanvraag tot archivering • Op basis van een SIP deAIP aanpassen.
• Context van deaanpassing wordtmeegegeven
• Communicatie mbtverwijderen na verloopbewaartermijn naareigenaar OF aanvraag totverwijdering viawebservice
• Context van deverwijdering bewaren
• Communicatie metrijksarchief
Slide 21Aug 2013Digitaal Archief Vlaanderen
DRAFT
Proces – Opzoeken van dataDienst: Search
1. Dienstenmodel
Verwerking queryrequest
Rapporterenresulaten
Opvragen AIP Genereren DIP Leveren DIP
PwC
Maak aanvraag Ingang
Ontvang aanvraag
Order agreement
Zoek sessie:Zoeken opmetadata ofreferentie
Ontvang queryrequest
Weergaveresultaten
Ontvangen DIP
Digitale leeszaal
Lezen digitaaldocument
Slide 22Aug 2013Digitaal Archief Vlaanderen
DRAFT
Search
1. Dienstenmodel
Wat?
• Indexatie op metadata
• Query mogelijkheden op de geselecteerde metadata en indien mogelijkfulltext
• Resultaten weergaven naar browser of via Web service (voor eigen
PwC
• Resultaten weergaven naar browser of via Web service (voor eigenontsluitingsplatform of integratie met bestaande applicaties)
• Zoekresultaten onderhevig aan de beveiliging (cfr. afspraken instapdienst)
Impact voor behoefteanalyse:
• Afspraken rond bij instap en opvolging
• Enkel eigen gegevens opzoeken of inclusief andere zorgdragers?Geïntegreerd virtueel archief (ultieme doel: ontsluiting van alle juridischtoegankelijke archiefinformatie op maat van de burger)?
Slide 23Aug 2013Digitaal Archief Vlaanderen
DRAFT
Federated search
1. Dienstenmodel
Impact voor behoefteanalyse:
• Oplossing voormeerdere systemen:
PwC Slide 24Aug 2013Digitaal Archief Vlaanderen
DRAFT
Proces – Weergeven van dataDienst: Dissemination
1. Dienstenmodel
Verwerking queryrequest
Rapporterenresulaten
Opvragen AIP Genereren DIP Leveren DIP
PwC
Maak aanvraag Ingang
Ontvang aanvraag
Order agreement
Zoek sessie:Zoeken opmetadata ofreferentie
Ontvang queryrequest
Weergaveresultaten
Ontvangen DIP
Digitale leeszaal
Lezen digitaaldocument
Slide 25Aug 2013Digitaal Archief Vlaanderen
DRAFT
Dissemination
1. Dienstenmodel
Wat?
• Opmaken van de DIP op basis van AIP
• Data weergeven op overeengekomen manier
PwC
Impact voor behoefteanalyse:
• Welke meta data toon ik?
• Hoe toon ik het digitaal object?
• Aan wie toon ik wat?
• Ontsluiting naar burgers toe?
Slide 26Aug 2013Digitaal Archief Vlaanderen
DRAFT
Proces – Presenteren van dataDienst: Interfaces voor consumer
1. Dienstenmodel
Verwerking queryrequest
Rapporterenresulaten
Opvragen AIP Genereren DIP Leveren DIP
PwC
Maak aanvraag Ingang
Ontvang aanvraag
Order agreement
Zoek sessie:Zoeken opmetadata ofreferentie
Ontvang queryrequest
Weergaveresultaten
Ontvangen DIP
Digitale leeszaal
Lezen digitaaldocument
Slide 27Aug 2013Digitaal Archief Vlaanderen
DRAFT
Interfaces voor consumerVerschillende opties voor interactie met gebruikers*
1. Dienstenmodel
Web interface FTP upload / download Applicaties
Formulier om documentenuit catalogus op te zoeken
Downloaden vanopgezochte bestanden
Gebruikmaken van eenWebservice of API
Manueel downloaden vandata
Databestanden inbatchvorm
Ritme bepaald door deapplicatie en de
PwC
data batchvorm applicatie en deinfrastructuur
Generieke oplossing voorconsumenten
• Oplossing voorconsumers met reedsbestaande applicaties
• Kan gebruikt worden voorexport van grote datasets
Oplossing voor consumersmet reeds bestaandeapplicaties
Impact voor behoefte analyse:
• Integratie met ‘actuele applicaties’ met mogelijkheid tot ontsluiting burger?
• Aanbieden van digitale leeszaal?
*Zie ook applicatie architectuur
Slide 28Aug 2013Digitaal Archief Vlaanderen
DRAFT
Additioneel: Beheer van het depot
Workflow
Ingest
Archive
Producer interfaces
Web Portal Application
Temp
Systeembeheer
Instap
Opvolging
1. Dienstenmodel
• Beveiliging
• Volgen van privacy wetgeving
PwC
Archive
Access
Search Dissemination
Consumer interfaces
Web Portal Application
BCP DRPRisk man
Proces enpolicybeheer
• Toegangsrechten
• Garanderen van continuïteit en risico beheersing
• Documenteren van procedures
Slide 29Aug 2013Digitaal Archief Vlaanderen
DRAFT
Laag 2: data architectuur
2. Data architectuur
PwC Slide 30Aug 2013Digitaal Archief Vlaanderen
DRAFT
Packaging Information
Representation
Overzicht AIP
Information Object
Data Object
Ori
gin
al
PDI
Descriptive
Reference
Provenance
2. Data architectuur
PwC
Representation InformationO
rig
ina
lM
igra
tio
n(s
) Information Object
Data Object
Representation Information
DescriptiveInformation
Provenance
Context
Fixity
AccessRights
Slide 31Aug 2013Digitaal Archief Vlaanderen
DRAFT
B. Enkel eenarchiveringsfunctie
A. Overeenkomen over deinhoud
DatamodelBehoefte aan twee types
AIPAIP
2. Data architectuur
PwC
SIP=AIPproducer
SIP
Impact voor behoefte analyse:
• Wie verkiest welk type?
Slide 32Aug 2013Digitaal Archief Vlaanderen
DRAFT
Packaging Information
Representation
Type A: ondersteuning bij de SIP creatie
Information Object
Data Object
RepresentationOri
gin
al
PDI
Reference
Provenance
SIP AIP
Descriptive
2. Data architectuur
PwC
RepresentationInformation
Ori
gin
al
Mig
ratio
n(s
)Provenance
Context
FixityInformation Object
Data Object
RepresentationInformation
DescriptiveInformation
AccessRights
Slide 33Aug 2013Digitaal Archief Vlaanderen
DRAFT
Packaging Information
Representation
Type B: de SIP wordt afgewerkt aangeleverd
Information Object
Data Object
RepresentationOri
gin
al
PDI
Reference
Descriptive Provenance
SIP AIP
2. Data architectuur
PwC
RepresentationInformation
Ori
gin
al
Mig
ratio
n(s
)
Context
FixityInformation Object
Data Object
RepresentationInformation
DescriptiveInformation
Provenance
AccessRights
Slide 34Aug 2013Digitaal Archief Vlaanderen
DRAFT
METS
METS
Voorbeeld invulling standaarden voor het datamodel
Information Object
.docx, RAW, …
Ori
gin
al
PDI
EAD
EAD, OSLO
2. Data architectuur
PwC
PREMIS, CEDARS, MIX, …O
rig
ina
lM
igra
tio
n(s
)EAD, OSLO
EAD, OSLO
PREMISInformation Object
XML, PDF/A, TIFF, …
PREMIS, CEDARS, MIX, …
TBD: To Be Defined –afhankelijk van de databasedie wordt gekozen
TBD*
PREMIS
Slide 35Aug 2013Digitaal Archief Vlaanderen
DRAFT
Laag 3: applicatie architectuur
3. Applicatie architectuur
PwC Slide 36Aug 2013Digitaal Archief Vlaanderen
DRAFT
Applicatie landschap
Client side Server side Server side
Browser
ApplicationWeb
Service of
Portal Rendition
Archive
3. Applicatie architectuur
PwC
Application Service ofAPI
sFTPservice
sFTP client
Archive
Search
Access Temporarystorage
Slide 37Aug 2013Digitaal Archief Vlaanderen
DRAFT
A. Browser
Als producer
• Formulier voor metadata
• Mogelijk om het bestand op te ladenvia formulier
3. Applicatie architectuur
PwC
Als consumer:
• Ophalen DIP
• Zoekfuncties
Zie ‘Search’ en ‘Dessimination’
Slide 38Aug 2013Digitaal Archief Vlaanderen
DRAFT
B. Web service implementatieEén web service voor zowel browser als externe applicaties
Browser Portaal
Web
3. Applicatie architectuur
PwC
Webservice
Applicatie
Slide 39Aug 2013Digitaal Archief Vlaanderen
DRAFT
B. Web service implementatie
• WSDL bestand voor de beschrijving van de functionaliteiten
• Getters & setters om toe te voegen, aangepast aan het OAIS model en deovereengekomen regels
• Het opstellen van een DIP aan de hand van een “consumer” kan enkel alshet e-Depot controle heeft over de SIP. In het andere geval wordt het
3. Applicatie architectuur
PwC
het e-Depot controle heeft over de SIP. In het andere geval wordt hetvolledig object geleverd.
• Aanduiden welke metadata gebruikt wordt voor de search (instapdienst)
- sFTP: leveren van een extra bestand (XML)
- Web Service: voorzien in de functie
- Portaal : aanduiden via web formulier
AIP
SearchMeta-data
Slide 40Aug 2013Digitaal Archief Vlaanderen
DRAFT
C. Zoekomgeving
3. Applicatie architectuur
AIP
SearchMeta-data Indien
leverbaar
referentie
PwC
Meta-data
Fulltext
SearchArchivering
Slide 41Aug 2013Digitaal Archief Vlaanderen
DRAFT
D. Archivering
Wat?
Applicatie ter ondersteuning van
• Ingest: Beheerssysteem voor bestuurlijke informatie met bijbehorendeworkflow
• Archiving: Beheerssysteem voor opslag management
3. Applicatie architectuur
PwC
• Archiving: Beheerssysteem voor opslag management
• Perifere diensten:
- Kwaliteitsbeheer
- Rapportering
- …
Slide 42Aug 2013Digitaal Archief Vlaanderen
DRAFT
Laag 4: technologische architectuur
4. Technologische architectuur
PwC Slide 43Aug 2013Digitaal Archief Vlaanderen
DRAFT
Portal
Workflow
Producer
Van diensten tot infrastructuur
4. Technologische architectuur
PwC
Reporting
Portal
RKMS
Search
Meta data
Reporting
DM
ZLA
NTemporary storage
Consumer
Rendition
AIP
SIP
Slide 44Aug 2013Digitaal Archief Vlaanderen
DRAFT
Bedankt voor uw inbreng!
© 2013 PricewaterhouseCoopers. All rights reserved. “PricewaterhouseCoopers” refers to thenetwork of member firms of PricewaterhouseCoopers International Limited, each of which is aseparate and independent legal entity.
DRAFT
Appendix
PwC Slide 46Aug 2013Digitaal Archief Vlaanderen
DRAFT
Lijst van acroniemen
AIP Archival Information Package
DIP Dissemination Information Package
ISO International Organization for Standardization
OAIS Open Archival Information System
PDI Preservation Description Information
Appendix
PwC
PDI Preservation Description Information
SIP Submission Information Package
XML Extensible Markup Language
Slide 47Aug 2013Digitaal Archief Vlaanderen