PSNC Institutional Repository

Werla, Marcin

Kozak, Michał

Undetermined

dLibra - Repozytorium

Nowak, Aleksandra

Nowe usługi w infrastrukturze sieci MAN i PIONIER

Kalota, Tomasz

Metody prezentacji publikacji cyfrowych: doświadczenia, problemy, perspektywy. Formaty mobilne

EuropeanaCloud
Marcin Werla (mwerla@man.poznan.pl)


Składowanie danych: Rekordy i zbiory
● Skalowalny system składowania danych
● Wsparcie dla dowolnych formatów plików
● Możliwość organizowania danych w zbiory
● Model danych wspierający agregację
Rekord → Reprezentacja → Wersja
Trwałe identyfikatory
● Trwałe identyfikatory dla rekordów danych
● Mapowanie identyfikatorów lokalnych na unikalny identyfikator ECloud
Adnotacje
● Rozdzielenie pomiędzy danymi bazowymi (treść, medatane) i 
dodatkowymi warstwami danych specyficznymi dla aplikacji
Długoterminowa archiwizacja
● Istnieje wiele usług archiwizacji danych w Europie
o EU-DAT (http://www.eudat.eu/partners) 
o DANS (Holandia)
o PLATON (Polska)
● Europeana planuje współpracę z tego typu 
usługami zamiast tworzyć własną, 
niezależną usługę
Dedykowane metody udostępniania
● Wsparcie strumieniowego dostarczania treści dla popularnych formatów 
plików
● Dla plików graficznych (najpopularniejszy typ 
obiektów w Europeanie) usługa strumieniowania 
zgodna ze standardem IIIF 
● Wsparcie dla strumieniowania przez HTTP
dla plików audio i wideo
Indeksowanie metadanych i treści
● Wbudowana usługa indeksowania/wyszukiwania dla określonego zestawu 
formatów, np.:
o EDM, LIDO, ...
o Indeksowanie pełnego tekstu
Skalowalny system przetwarzania danych z szerokim obszarem zastosowań
● Mapowanie metadanych
● Wzbogacanie metadanych
● Analiza treści
● Konwersja treści pomiędzy
formatami
● Genreowanie miniatur
Przetwarzanie metadanych i treści
Hosting aplikacji
● Hosting wybranych aplikacji opartych na usługach Europeana 
Cloud – tworzenie wartości dodanej do bazowych usług

Dodatkowe źródła informacji
• Strategia Europeana 2015-2020 (po polsku)
http://strategy2020.europeana.eu/pl/
• Nowy serwis Europeana Professional
http://pro.europeana.eu/
• Sieć Europeana – warto się przyłączyć
http://pro.europeana.eu/get-involved/our-
network/sign-up
Dziękuję za uwagę!
Marcin Werla <mwerla@man.poznan.pl>


Europeana Cloud

Oznaczanie i udostępnianie zasobów z domeny publicznej
Marcin Werla 
mwerla@man.poznan.pl
http://fbc.pionier.net.pl/



Zastrzeżenie: wynik automatycznego przetwarzania metadanych
Powrót do przeszłości…
• Raport z roku 2011:
– http://dl.psnc.pl/2011/03/10/domena-publiczna-i-licencje-creative-commons-w-polskich-
bibliotekach-cyfrowych/
– http://dl.psnc.pl/2011/04/06/domena-publiczna-i-licencje-creative-commons-w-polskich-
bibliotekach-cyfrowych-czesc-2/
Na początku był Dublin Core….

Zabezpieczenie przed 
kopiowaniem albo otwartość 
sposobem na przetrwanie
Udostępnianie kulturowych baz danych w Internecie
– Budując i udostępniając bazę danych w Internecie robimy to oczywiście z myślą o 
użytkownikach
– Nie można jednak zapominać o tym, że poza naszą bazą 
i użytkownikiem jest jeszcze cały szereg różnorodnych serwisów koegzystujących w sieci
– Ten sieciowy ekosystem dynamicznie się rozwija wpływając tym samym na oczekiwania 
użytkowników naszego serwisu
– Ważne jest dotarcie do użytkowników, najlepiej znajdując się tam, gdzie 
najprawdopodobniej mogą oni oczekiwać lub potrzebować naszych danych/usług
Użytkownicy
Wyszukiwarki 
WWW
Multi
wyszukiwarki
Baza danych, pliki publikacji, …
Agregatory 
danych
Serwisy 
informacyjne
KaRo
FBC, EuropeanaGoogle
Wikipedia, Facebook
H
TM
L
R
SS
Si
te
m
ap
O
p
en
Se
ar
ch
O
A
I-
P
M
H
O
A
I-
O
R
E
R
D
F
R
IS
B
ib
Te
X
Użytkownicy
Wyszukiwarki 
WWW
Multi
wyszukiwarki
Interfejs WWW
Baza danych, pliki publikacji, …
Agregatory 
danych
Serwisy 
informacyjne
Styk z wyszukiwarkami WWW
• Przygotowanie serwisu WWW dla robotów
– Test możliwości eksploracji bazy bez użycia klawiatury
– Test możliwości eksploracji bazy z wyłączonym Java Scriptem i cookies
– Brak „dziwnych” parametrów w adresach URL
– Optymalizacja układu treści i interfejsu serwisu pod kątem wyszukiwarek (SEO)
– Dedykowane narzędzia – np. Google Webmaster Tools
• Specjalne wsparcie dla wyszukiwarek dziedzinowych
– Na poziomie stron WWW serwisu (metatagi)
– Na poziomie treści (np. plików PDF)

http://wlt.synat.pcss.pl/





API Interfejs WWW
Baza danych, linki do obiektów i plików, …
Interfejs WWW 
FBC
Moduł 
analityczny FBC
FBC 
Mobile
API
Baza danych, linki do obiektów i plików, …
Zewnętrzne 
aplikacje
Zewnętrzne 
aplikacje
Dziękuję za uwagę
Kontakt: Marcin Werla (mwerla@man.poznan.pl)


Polish

Oznaczanie i udostępnianie zasobów z domeny publicznej

Platforma chmurowa LoCloud.pl
Marcin Werla
mwerla@man.poznan.pl
LoCloud is funded by the 
European Commission's ICT Policy Support Programme
Podstawowe komponenty 
biblioteki cyfrowej
• Treść i metadane
• Infrastruktura programowa
– System zarządzania biblioteką cyfrową
• Infrastruktura sprzętowa
– Sprzęt (serwery, macierze, …)
– Połączenie sieciowe (+ firewall/router,…)
– … bezpieczne miejsce do ustawienia 
infrastruktury 
• Ludzie
– Odpowiedzialni za treść i metadane
– Odpowiedzialni za oprogramowanie
– Odpowiedzialni za sprzęt
Treść
Oprogramowanie
Sprzęt
Podstawowe komponenty 
biblioteki cyfrowej
• Wszystkie wspomniane komponenty generują koszty
• W mniejszych instytucjach może nie być odpowiedniej 
infrastruktury sprzętowej nadającej się do użycia dla 
biblioteki cyfrowej
• Poza dostępnością sprzętu – problem 
dostępności do fachowej 
wiedzy informatycznej
• Jak ułatwić uruchomienie 
biblioteki cyfrowej 
i obniżyć koszty jej rozruchu 
i utrzymania 
bez ograniczania wartości
dla użytkowników 
końcowych?
Treść
Oprogramowanie
Sprzęt
Szybki
Przyjazne
Interesująca
LoCloud.pl: LoCloud Collections
• Wykorzystanie usługi świadczonej przez PCSS bezpośrednio
– Do końca projektu LoCloud (luty 2016) usługa bezpłatna
• Współpraca międzynarodowa PCSS z
– Firmami komercyjnymi
– Krajowymi agregatorami metadanych
– Operatorami sieci NREN
w celu zapewniania promocji usługi i wsparcia użytkowników 
np. na poziomie konkretnych krajów
Model utrzymania usługi
Platforma chmurowa LoCloud.pl
Dziękuję za uwagę!
LoCloud is funded by the 
European Commission's ICT Policy Support Programme


Platforma chmurowa LoCloud.pl

Kowalski, Łukasz

Leksykon Lublin

Maryl, Maciej

Humanistyczne projekty cyfrowe w Polsce

Prezentacja z konferencji BIBLIONET 2014.Novi Sad, Serbi

Polish Digital Libraries Federation
Marcin Werla, PSNC Digital Libraries Team Leader
Novi Sad, 05 June 2014
Development of digital libraries infrastructure in Poland
0
10
20
30
40
50
60
70
80
90
2002 2003 2004 2005 2006 2007 2008 2009 2010 2011 2012 2013
Increase of the number of digital
libraries between 2002 and 2013
10
1
1
21
1
5
2
3
1
4
3
1
11
1
1
2
1
1
1
1
1
1
1
2
1
1
1
1
1
1
1
Digital libraries in the PIONIER network
- Several hundreds
institutions
- 1.8M objects
DInGO software – „Digitise and Go”
• dLibra:  system for digital libraries (e.g.: http://jbc.bj.uj.edu.pl/) 
• dMuseion: system for digital museums (e.g.: http://cyfrowe.mnw.art.pl/) 
• dLab: system for management of digitisation processes
• dArceo: system for long-term digital preservation
Digitisation process and DInGO software
Planned 
objects
Presentation 
files
MASTER 
files
Digitisation, 
standarisation
On-line access
Preparation of 
digital object
Selection of 
objects for 
digitisation
Archiving
On-line publishing
Digital Libraries Federation
http://fbc.pionier.net.pl/
Public portal
•Searching, browsing
•Digitisation plans, persistent identifiers
Data provider for external services
•Europeana, DART-Europe
•KaRo
Information website for DL creators
•News, publications
•Digital libraries database
Advanced services for DL administrators
•Traffic monitoring
•Metadata analysis module
Competence center for professionals
•E-learning courses
•Q&A platform
Federation statistics
Presently: During last year: 
89,75%
2,50%
1,42%
0,98%
0,75%
0,56%
0,56%
0,45%
0,36%
0,31%
0% 25% 50% 75% 100%
Polska
Niemcy
Wielka Brytania
Ukraina
Irlandia
Stany Zjednoczone
Rosja
Francja
Białoruś
Austria
Visits by country
88 data sources
325 institutions
1.8 million objects
560 thousands 
unique users
1,1 million visits
4,5 million views
Collaboration with Europeana
Europeana.eu = European Digital Library, Museum and Archive
2009 2010 2011 2012 2013
Beginning of 
collaboration in 
EuropeanaLocal
Federation 
connected to 
Europeana
Europeana API 
pilot program 
participation
Polish edition of 
Hack4Europe
Two more 
Hack4Europe 
contests as a 
part of 
Europeana 
Awareness 
project
Collaboration 
on Europeana 
1989 
Europeana 
Cloud project 
started
Spreading good practices in Europe
• As a part of ACCESS IT/ACCESS IT Plus projects two e-learning courses 
were created, covering digitisation and digital libraries topics
– They were translated and made available in Albania, Bosnia, 
Croatia, Greece, Poland, Serbia and Turkey
– In different language versions over 1 000 persons finished these 
courses
• To make it easier to apply in practice, we made DigitLab – an operating 
system which supports digitzation
– In 2013 it won 3rd prize in the contest of Polish Foundation for Free 
and Open Software for the best academic open source project
– http://digitlab.psnc.pl/
IMPACT European Center of Competence
IM
PA
C
T 
C
o
C
in
 D
ig
it
sa
ti
o
n
Tools
Data
Services
Trainings
F
o
u
n
d
in
g
 m
e
m
b
e
r
s
Shared infrastructure for digital libraries competence centers
Optimization of resources usage in digitisation processes 
Standardization of data and tools
Prizes, contests, events
Best practicies
http://digitisation.eu/
Cloud technologies in the cultural sector
Cloud services
Remote support and education
Europeana
Mapping
Aggreg
ation
Enrichment
DLaaS
Small 
libraries
Private 
archives
Home 
museums
Wide access
Local memory institutions
Small institutions: LoCloud http://locloud.eu/
Cloud technologies in the cultural sector
European infrastructure: Europeana Cloud
The 
European
Library
Digital 
Libraries 
Federation
EU-Screen
…
…
The 
European
Library
Digital 
Libraries 
Federation
EU-Screen
……
Portal 
Europeana
Europeana 
Research
vs
http://pro.europeana.eu/web/europeana-cloud
Most important success factors
• Regional collaboration
– Development of digital libraries in Poland as they are at the moment was initiated as a 
series of regional projects, often WITHOUT any dedicated external funding
– In such “regional digital library” model there are usually:
• One host institution which is providing the technical infrastructure
• A number of partners providing content
– First consortium was: Poznan Foundation of Scientific Libraries, PSNC, academic and 
public institutions from the Wielkopolska region – http://www.wbc.poznan.pl/
– Such approach
• Allows to lower the costs for each participating institution (in many aspects)
• Gives small libraries opportunity to promote their collections on-line
• Provides natural platform for collaboration for next projects
• Requires the acceptance of regional consortium “identity”
Most important success factors
• Good technical support
– Shared technology platform (in case of Poland: dLibra/DInGO) 
• Common development directions
• Shared development costs
• Lack of typical risks related to project-based funding
– Not maintained in-house solutions
– Abandoned commercial software
– Rising prices and vendor lock-in
• Documentation and technical support available locally
• Natural environment for development of good users community
– Requires reliable technology partner with proper business model
Lessons learned
• Bottom-up approach made all that possible 
– Did I forget to mention any central institutions in my presentation?
• but…
– Some things were not standardized initially on central level and then “standards” were 
created in many places in parallel
• 40+ variatons of Dublin Core
– Other solutions were blindly copied, while they could be tailored to specific local needs
• The curse of DjVu format popularity
Most important challenges
• Quality in mass digitization projects
– How to check within a month the quality of what a commercial company was preparing 
for 6-8 months?
– How to eliminate cheating companies and not cancel the project?
• Long-term digital preservation
– How to make sure that results of hundreds of digitisation projects are properly secured for 
the future?
Most important challenges
• Data interoperability
– How to make sure that newly developed small systems follow best digital libraries 
practices?
– How to use data automatically with tools for digital humanities researchers?
• Open access to data and proper rights labelling
– Metadata – copyrighted or not? 
• Europeana requires CC0 statement
– Content 
• Is digitisation a creative process?
• Can commercial reuse of public domain materials be free?
• Coordination of Europeana-related efforts
– Assuring proper representation of Polish heritage
Thank you for your attention!
Marcin Werla (mwerla@man.poznan.pl)
http://dl.psnc.pl/
Poznań Supercomputing and Networking Center
ul. Noskowskiego 12/14, 61-704 Poznań,  POLAND,
Office: phone center: (+48 61) 858-20-00, fax: (+48 61) 852-59-54,
e-mail: office@man.poznan.pl, http://www.psnc.pl
affiliated to the Institute of Bioorganic Chemistry of the Polish Academy of Sciences,


English

Polish Digital Libraries Federation

Mielnicki, Marcin

Mamakis, Georgios

Kats, Pavel

Muhr, Markus

Knoth, Petr

Wytrążek, Justyna

Europeana Cloud: Towards a Shared Cloud Computing Infrastructure for European Aggregators

Poznan Supercomputing and Networking Center

Not a member yet