Date post: | 24-Jan-2017 |
Category: |
Technology |
Upload: | ltp-portal-cz |
View: | 888 times |
Download: | 3 times |
Napojení systému
Archivematica na
úložiště CESNET
Michal Růžička ÚVT MU
Projekt LTP PILOT
Masarykova univerzita
V Praze dne 1. 12. 2015
Osnova
• Strategie bit-level ochrany dat.
• Infrastruktura úložišť CESNET.
• Architektura ukládání dat v Archivematica.
• Kontrola integrity.
Dlouhodobá bitová ochrana dat
• Data ochraňuje před ztrátou a
• nekontrolovanou změnou
• z důvodu chyby (lidské, software, hardware, …)
• nebo cílené zlovolné manipulace.
Strategie bit-level ochrany dat
• Bil-level ochrana dat replikací na
• technologicky,
• logicky a
• geograficky oddělené lokality.
• Kontrola konzistence dat
• v rámci jedné lokality a
• mezi lokalitami.
Infrastruktura úložišť CESNET
Geograficky oddělená nezávislá datová centra.
Infrastruktura úložišť CESNET
HSM – Hierarchical Storage Management.
Z hlediska uživatele je přístup k datům
transparentní.
Architektura systému Archivematica
z hlediska ukládání dat
• Systém Archivematica není monolitický
softwarový celek.
• Archivematica Dashboard.
• Archivematica MCP.
• Archivematica Storage Service.
• Gearman Job Server.
• …
Architektura systému Archivematica
z hlediska ukládání dat
• Archivematica Storage Service se stará
o ukládání dat.
• Může běžet na jiném serveru než Archivematica MCP.
• Může obsluhovat více Archivematica instancí,
• se kterými komunikuje síťovým protokolem.
• Samotná Archivematica neprovádí replikaci
dat a bitovou ochranu ponechává v režii
použitého úložiště.
Technologické řešení:
Schéma napojení na CESNET
Technologické řešení napojení
• Archivematica Storage Service ukládá data na
svazek propojený protokolem NFSv4 na CESNET
úložiště.
• Silná a škálovatelná autentizace přes Kerberos.
• Kryptografické zajištění důvěrnosti a integrity dat při přenosu.
• Dobré výkonností parametry.
• Nutné menší změny v kódu, zdroje dostupné na GitHub.
• Storage Service ukládá data na jedinou
(primární) DU CESNET lokalitu.
• Replikace na ostatní lokality v režii DU CESNET.
• Možnosti replikace rozšířeny v rámci projektu LTP Pilot.
Kontrola konzistence dat
• Archivematica API pro ověření konzistence AIP.
• Pracuje jen s ASS známou jedinou kopií dat.
• V rámci LTP Pilot implementován nástroj
FSTreeIntegrityWatch.
• Ukládání integritní informace v rozšířených atributech souborů v
souborovém systému nebo v integritní bázi vJSON formátu.
• Podpora formátu BagIt.
• Podpora mnoha různých algoritmů kontrolních
součtů s možností snadného rozšíření o další.
• K dispozici na GitHub.
Děkuji za pozornost!
Michal Růžička
[email protected] Národní archiv
V Praze dne 1. 12. 2015
DOTAZY?
Odkazy, použité zdroje
https://www.archivematica.org/en/docs/archivematica-1.4/
https://wiki.archivematica.org/Main_Page
https://du.cesnet.cz/cs/infrastruktura_ulozist/start
https://github.com/michal-ruzicka/archivematica
https://github.com/michal-ruzicka/FSTreeIntegrityWatch