Digitaliseringsprojektet och samling av metadata vid digitalisering

Storlek: px

Starta visningen från sidan:

Download "Digitaliseringsprojektet och samling av metadata vid digitalisering"

Rickard Åkesson
för 8 år sedan
Visningar:

1 Digitaliseringsprojektet och samling av metadata vid digitalisering István Kecskeméti PhD, Enhetschef Arkivteknisk enhet

2 Nordisk Arkivakademi Boden

3 Kecskeméti 2008 PhD Museology, Jyväskylä University 2005 MA Museology, Jyväskylä University 1996 BA Conservation, Göteborg University Head of Conservation, digitisation and microfilming, National Archives, Archiving techniques unit Development manager, digitisation and microfilming, National Archives, Archiving techniques unit Head of paper conservation education, EVTEK Institute of Art and Design Private photographer, teacher and conservator

unit 2007-2009 Development manager, digitisation and microfilming, National Archives, Archiving techniques unit

4 Arkivteknisk enhet Conservation and preservation Condition survey project Conservation documentation database Paper historical research Mold research services Conditions in storage criteria for storage rooms Archival materials criteria Digitisation 1,4 million digitised documents by 2008 Quality criteria of digitisation 1,55 million for digitisation May-December ,3 million documents to be digitised Microfilming As a part of digitisation process Quality criteria of microfilming Guidance, consultation, education

1,4 million digitised documents by 2008 Quality criteria of digitisation 1,55 million for digitisation May-December 2009 4,3 million

5 Digitalisering vid Riksarkivet 1948 start av mikrofilmning 1997 VAKKA arkivdatabas, av företag CCC 1999 start av färdigitalisering av stora kartor ( / år) 2003 start av Digitalarkiv, lagring och presentation av digitaliserade filer (master TIFF, SDLT magnetband) 2004 start av digitalisering av mikrofilmer ( / år) 2006 start av digitalisering av bundna volymer, ca s / år December 2007: TIFF / jpg filer i Digitalarkiv 30 Tb Mars 2008: Mikrofilmining en del av digitaliseringsprocesser Augusti 2008: Rekommendation för kvalitetskriterier vid digitalisering Maj 2009: 1,5 miljoner filer 45 Tb Maj December 2009 Digitaliseringsprojekt filer,120 Tb

000 / år) 2006 start av digitalisering av bundna volymer, ca 35.000 s / år December 2007: 1.000.000 TIFF / jpg filer i Digitalarkiv 30 Tb Mars 2008: Mikrofilmining en del av

6 VAKKA Arkivdatabas ISAAD(G) ja ISAAR(CPF) ca 90% av samlimgarna beskrivna

7 Digitaliserade filer: nogrannare indexering när behövs

8 Digitalisering maj MIKROFILMKAMEROR, bild/år digitaliseras CRUSE A-0 färgskannare för kartor och ritningar, 5000/år CRUSE A-2 färgskannare för bindningar, sidor/år ZEUTSCHEL gråskalskannare för bindningar, sidor/år MIKROFILMSKANNARE, bild/år 3 civiltjästeman, bildbehandling Från 1999 färgskanning Från 2004 mikrofilmskanning 1,5 miljoner bildfil i Digitalarkiv (maj 2009) Digitaliseringsproject maj-december filer 120 Tb

bindningar, 35.000 sidor/år ZEUTSCHEL gråskalskannare för bindningar, 20-40.000 sidor/år MIKROFILMSKANNARE, 300.

9 Digitalisering MIKROFILMKAMEROR, bild/år digitaliseras CRUSE A-0 färgskannare för kartor och ritningar, 5.000/år CRUSE A-2 färgskannare för bindningar, sidor/år CONTEX färgskannare för kartor och ritningar, ZEUTSCHEL gråskalskannare för bindningar, sidor/år MIKROFILMSKANNARE, bild/år 6-7 arbetsår + 3 civiltjästeman (bildbehandling) Tjänstedigitalisering ca filer, 150 Tb digitalisering av kyrkoböcker före 1860, ca filer, 130 Tb 3 arbetslösa i projekt (bildbehandling) + extern finansiering 2010 februari 6 miljoner (170 Tb) 2012 ca 16 miljoner TIFF (450 Tb)

000 sidor/år MIKROFILMSKANNARE, 1-2.000.000 bild/år 6-7 arbetsår + 3 civiltjästeman (bildbehandling) Tjänstedigitalisering 2010-2012 ca 5.000.000 filer, 150 Tb 2010-11 digitalisering av kyrkoböcker före 1860, ca 5.

10 Filer Filer

11 Quality criteria for digitisation August 2008, will be updated with metadata from scanning event Gives instructions for digitisation activities of the National Archives of Finland and partner heritage organisations digitizating documents and maps for the Digital Archives of NA Digitisation by camera: accepted after consultation Color digitisation: 300 ppi, 24 bit, color calibration Grey scale digitisation: 300 ppi, 8 bit Black & white digitisation: 600 ppi 1 bit, accepted only after consultation Storage formats: TIFF non packed, WAV, MPEG-2 Storage media: NA master data duplex magnetic tape system, server for use copies (jpg, mp3). 5 year migration interval.

fi/digi/ Digitisation by camera: accepted after consultation Color digitisation: 300 ppi, 24 bit, color calibration Grey scale digitisation: 300 ppi, 8 bit Black & white

12 Digitisation and storage at National Color digitisation 24 bit Archives Grey scale digitisation 8 bit Long term master file, not packed TIFF Tape storage offline, SDLT LTO Usage file, jpg 2 different sizes Server, online INFORMATION SERVICE

not packed TIFF Tape storage offline, SDLT 2003-2009 LTO4 2009-

13 Styrning av projektet Undervisningsministeriet tilldelades euro åt Riksarkivet för digitalisering av samlingar och för att utveckla databaser. Arkivråd Eljas Orrman Enhetschef István Kecskeméti Projektschef Reko Etelävuori Projektschef Tuomas Riihivaara Projektgrupp; administrationschef Anitta Hämäläinen, administrationsexpert Marjut Sievänen-Machado, enhetschef Marja Pohjola, Markku Mäenpää, Juhani Tikkanen, landsarkivschef Tytti Voutilainen, utvecklingschef Päivi Happonen, ICTchef Marko Natri.

Arkivråd Eljas Orrman Enhetschef István Kecskeméti Projektschef Reko Etelävuori Projektschef Tuomas Riihivaara Projektgrupp;

14 Projektchef Reko Etelävuori, ansvarig för digitalisering: Processer, utvidjning av metadata, kvalitetskontroll av digitalisering, bildbehandlingskriterie, utbildning av personal, förvaring av digitala fil, personalansvarighet, rapportering Tuomas Riihivaara, ansvarig för samlingar: Antal och format av valda samlingar, ledning av metadatamatning till VAKKA databas, förklaring av tekniska arkivenhetskoder, utveckling av användbarhet av Digitalarkiv, ansvarighet för anbudsförfarandet, budgetansvarighet

Tuomas Riihivaara, ansvarig för samlingar: Antal och format av valda samlingar, ledning av metadatamatning till VAKKA

15 Tillfällig personal Tillfälligt anställd personal i Riksarkivet mellan : 2 projektchef 3 VAKKA databas matare 3 personer för sortering och katalogisering (kartor och ritningar) 3 konservatorer (kartor och ritningar) 1 konserveringsassistent (kartor och ritningar) 5 skanningstekniker (kartor och ritningar samt mikrofilmrullar) 1 datasystemexpert ( ) 2 personer för indexering (mikrofilade samlingar) 2 personer för mottagning, granskning och matning av digitala filer till Digitalarkiv Företag som digitaliserar (köptjänster), mellan ca personer för digitalisering samt bildbehandling Totalt motsvarar ca. 13 personal år

konserveringsassistent (kartor och ritningar) 5 skanningstekniker (kartor och ritningar samt mikrofilmrullar) 1 datasystemexpert (1.6-15.7.

16 1,55 M - 8 månader Mars-april 2009: förberedning av digitaliseringsprocesser samt samlingsval Maj 2009: projektet startar, rekrytering, planering av anbudsförfarandet (out sourcing), samlinsval, företag som digitaliserar Juni-juli 2009: anbudsförfarande Juni 2009: Utvecling av infrastruktur av digitaaliarkiv Juli: start av digitalisering av mikrofilmer av Riksarkivet Juni-september, november 2009: instruktioner för digitalisering, beroende av samling Augusti 2009: testning av digitaliserings kvalite (outsourced) September 2009: digitalisering av mikrofilm och kort startar av 2 företag Oktober 2009: Utveckling av mottagning av digitala filer, problem med långsamt mottagning November 2009: Förflyttning till ny workflow (MF-digitalisering) November 2009: Full fart December: Pengarna är använda och projektet avslutar

2009: instruktioner för digitalisering, beroende av samling Augusti 2009: testning av digitaliserings kvalite (outsourced) September 2009: digitalisering av mikrofilm och kort startar av 2 företag

17 Digitala processer 1A Mikrokort (fische), köptjänst från B Mikrofilm (rullar), köptjänst från E Mikrofilm (rullar), skannas av Riksarkivet från Kartor och ritningar, skannas av Riksarkivet från Katalogkort, skannas av Riksarkivet från

- 1E Mikrofilm (rullar), skannas av Riksarkivet från 1.7.

18 Process 1A, 1B och 1E Mikrokort: Kyrkoböcker från den överlämnade Karelen Civilregister från den överlämnade Karelen Senator Leo Mechelins samt Gezelius privatarkiv Finska passmyndighets arkiv i St Petersburg Totalt kort, 1,4 miljoner fil, 36 Tb Mikrofilmroll: Krigsdagsböcker från vinter- och fortsättningskrigar Domsböcker Räkenskaper för fögderierna (från 1530 talet) Diarieböcker från ministerier Totalt roll, 1,9 miljoner fil, 56 Tb

19 Process 2 och 3 2. Kartor och ritningar Heraldiska samlingar Lantmäterikartor Typshusritningar Rysk ingengörskommenderingsgruppens kartor och ritningar Vyborgs guvernementskartor Byggnadsregeringens ritningsarkiv Totalt ca kartor och ritningar 3. Katalogiseringskort Totalt ca kort TOTALT minst 4,3 miljoner fil, 130 Tb

ingengörskommenderingsgruppens kartor och ritningar Vyborgs guvernementskartor

20 Vilken metadata samlas? Metadata vid digitalisering kan delas i två kategorier: - Teknisk metadata som beskriver och dokumenterar digitaliseringsprocessen (skanningen). - Innehållsmetadata, som beskriver samlingar (VAKKAarkivdatabas). - Varje arkivenhet har en teknisk ID kod, t.ex KA. Med koden kan digitaliserade bilder kopplas ihop med innehållet.

och dokumenterar digitaliseringsprocessen (skanningen).

21 Metadata Digitalisering 24 bit färg 8 bit gråskal Bildehandling Digitalarkiv Förvaring Användning (bildfil) Metadata, skanning Metadata, bildbehandling Metadata, samlingar VAKKA databas Användning (information om samlingar)

22 Metadata från en billig kamera DSCN7350.JPG CAMERA : E4500V1.2 METERING : MATRIX MODE : A SHUTTER : 1/1886sec APERTURE : F5.3 EXP +/- : 0.0 FOCAL LENGTH : f7.9mm(x1.0) IMG ADJUST : AUTO SENSITIVITY : ISO200 WHITEBAL : AUTO SHARPNESS : OFF DATE : :20 QUALITY : 2272x1704 NORMAL SATURATION : 0 FOCUS AREA : CENTER

23 Skanning, metadata (TIFF) Archive unit identification_page number (arkivenhet_sidonummer) - XMP-Core - Title Place of digitization (company), digitizer (name) - XMP-Core - Creator Time of digitization - XMP-Core - CreateDate Scanner/Camera - TIFF Properties - Make Scanner model - TIFF Properties - Model Software XMP-Core - CreatorTool Jpg: endast Archive unit identification_page number - XMP-Core - Title

24 Skanning, metadata (TIFF)

25 Bildbehandling, metadata Metadata collected from image prosessing: Place of image processing (company), editor (name) - XMPMM - Contributor Time of image processing - XMP-Core - ModifyDate Software (image processing) -XMPMM - softwareagent History of image processing From Photoshop history log (Photoshop CS4 works fine, older versions of Photoshop may write over some previous metadata felts)

27 Skanning, metadata 2.1 t.ex. Skrivning av metadata till 1 Tb yttre hårddisk tar en dygn

28 New work flow MF-skannare Ribbon Server 8 Tb Web Server JPEG TIFF 2 X JPEG DA Import Auditering bildbehandling SIP Digitaliseringsmetadata (automatiserad 2.1) Innehållsmetadata (VAKKA databas) Web-import TIFF LTO Backup Total digitalisering i oktober 1,5-2,5 Tb/dygn Metadata kan skrivas i 1 Tb/dygn hastighet (flera PC, flera Tb) SERVER kan mottaga 1,7 Tb/dygn, men räkna jpg från TIFF bara 0,2 Tb/dygn LTO backup 1,2 Tb/dygn nya servrar för räkning, ny workflow

29 Gråskalsskanning, mikrofilm

31 Digitalarkiv

32 Digitalarkiv

33 Riksarkivet: Digitaaliarkisto:

Relevanta dokument

VAL AV SAMLINGAR FÖR DIGITALISERING - KONSERVERINGSÅTGÄRDER. Stina-Maria Brantberg Konservator

VAL AV SAMLINGAR FÖR DIGITALISERING - KONSERVERINGSÅTGÄRDER Stina-Maria Brantberg Konservator Färdig digitaliserad karta Åbo Stadhs Affritningen 1652 Efter både Gamla och Nya anläggningen till och med