WORKSHOP #1 HOE WORD IK DATA UITGEVER? Alina Saenko & Bert Lemmens FARO, Brussel

Transcriptie

1

2 WORKSHOP #1 HOE WORD IK DATA UITGEVER? Alina Saenko & Bert Lemmens FARO, Brussel

3 AGENDA Voormiddag (9:00 12:30) Deel 1. Data uitgever Deel 2. CSV import Open Refine Stappenplan CSV import Controle van eigen CSV Deel 3. Resolver Basis functionaliteiten Importeer je eigen CSV-bestand en activeer je persistente URI s Middagpauze (12:30 13:00) Namiddag (13:00 14:00) Deel 4. Resolver in de praktijk

4 DEEL 1. DATA UITGEVER

5 DOEL: Museum = online kennisbron: toegang tot betrouwbare en actuele informatie stabiel communicatiekanaal informatie in human/machine readable formaat hoge doorzoekbaarheid/vindbaarheid van data Voor wie? Collectiemedewerkers: op zoek naar object ID s Onderzoekers: op zoek naar bronvermeldingen Onderwijs: op zoek naar leerobjecten Ontwikkelaars: op zoek naar grondstof voor apps

6 STRATEGIE: CIDOC recommendation (2012) IDENTIFICATIE: Museums are the sole authority with responsibility for establishing globally unique and persistent identities (URIs) for each of the objects in their collections; PUBLICATIE Each museum should establish and publish on the internet such a unique and persistent identity preferably as http URI (=URL) for each of its objects; This URL should resolve to a human readable description of the object, which is sufficiently detailed to identify it unambiguously; Ideally, this URL should additionally resolve to a comparable description in a machine processible format, using best practice Linked Data principles; When describing the relationship of the collection object to its cultural context (people, places, events, etc.), the museum should where possible use URLs from common frameworks, rather than minting its own URLs for these concepts;

7 INSTRUMENT (1/3): Persistente URI: webadres samengesteld volgens bepaalde regels met een heldere en consistente structuur die makkelijk te beheren en te gebruiken is stabiel (onveranderlijk) en toegankelijk is op lange termijn object]/[type document]/[identificatienummer] ISA onderzoek-deliverable: D Study on persistent URIs, with identification of best practices and recommendations on the topic for the MSs and the EC, 2012

8 INSTRUMENT (2/3) Resolver:

9 INSTRUMENT (3/3) Data uitgever: De collectiemedewerker die verantwoordelijk is om: persistente URI s toe te kennen aan kunstwerken beelden, webpagina s en ruwe data aan persistente URI s te koppelen het gebruik van persistente URI s opvolgt persistente URI s te documenteren in de collectiedata

10 ORGANISATIESTRUCTUUR management IT-verantwoordelijke data uitgever resolver machine applicatie

11 URL (XML) DATA STROMEN DAM - systeem API / collectiebeheersysteem CMS collectie website CMS Erfgoedinzicht website data uitgever resolver puri mobiele apps Europeana, VKC, Erfgoedinzicht Andere toepassingen collectie website

12 DEEL 2. CSV IMPORTBESTAND

13 13 CSV IMPORTBESTAND PID B958 B958 entity type work work SM work SM work title document type URL enabled notes format reference order Landschap met een koe data Landschap met een koe representation View of the Van Iseghemlaan View of the Van Iseghemlaan data representation styles/cb/public/ roelofs_hollands_landschap.jpg? itok=7ruhuzh9 collectiveaccess.vlaamsekunstcollectie.be/ media/vkc/images/ 8/22372_ca_object_representations_media _897_original.jpg html html SM work The Van Iseghemlaan in the snow data en/collection/the-van-iseghemlaan-in-thesnow 1 html SM work The Van Iseghemlaan in the snow representation collectiveaccess.vlaamsekunstcollectie.be/ media/vkc/images/ 8/29193_ca_object_representations_media _889_original.jpg SM work The infernal cortege data en/collection/the-infernal-cortege-1 1 html SM work The infernal cortege representation collectiveaccess.vlaamsekunstcollectie.be/ media/vkc/images/ 9/94631_ca_object_representations_media _913_original.jpg 1 1 0

14 Open Refine

15 STAP 1. MAAK EEN CSV- IMPORTBESTAND VOOR DE RESOLVER 1. Open het bestand _start in Excel (een lijst met inventarisnummers en titels) 2. Maak volgende reeks kolommen (in deze volgorde!): PID, entity type, title, document type, URL, enabled, notes, format, reference, order 3. Plak de waarden in de kolom inventarisnummer onder PID, en de waarden in kolom titel onder title. Verwijder de twee oorspronkelijke kolommen. 4. Exporteer de lijst als een CSV-bestand Bestandsnaam: _workshop_resolver Opslaan als: CSV (MS-DOS) Extra > Webopties > Codering > dit document opslaan als: Unicode (UTF-8) Opslaan 15

16 16 STAP 2. IMPORTEER HET CSV- IMPORTBESTAND IN GOOGLE REFINE 1. Create Project > Browse (selecteer het CSV-bestand) > Next 2. Character encoding: UTF-8 3. Controleer of Google Refine het juiste teken herkent om de lijst in kolommen op te delen. Selecteer indien nodig het juiste teken in de lijst onder Columns are separated by > update preview 4. Vink Parse cell text into numbers, dates, uit. 5. Project name: _workshop_resolver 6. Create Project

17 17 STAP 3. MAAK RIJEN VOOR DATA EN REPRESENTATION PIDS > Verdubbel het aantal rijen waardoor je voor elke PID een data PID en een representation PID kan maken 1. Kies kolom PID > Edit cells > Transform -> value + ";" + value (Voor elke PID staan er nu twee waarden, gescheiden door een ;.) 2. Kies kolom PID > Edit cells > Split multi-valued cells > Voor What separator currently separates the values? > vul in ; > OK (Voor elke PID zijn er nu twee rijen met telkens een waarde)

18 18 STAP 4. VUL DE STANDAARD WAARDE VOOR ENTITY TYPE IN > Entity type geeft aan welk type entiteit (work, agent, concept, event) de persistente URI identificeert. > in dit geval identificeert elke persistente URI een kunstwerk > work. 1. Typ in de eerste rij van de kolom entity type de waarde work. 2. Kies kolom entity type > Edit cells > Fill down (In alle cellen van de kolom entity type staat nu de waarde work)

19 STAP 5. VUL DE STANDAARD WAARDE VOOR DOCUMENT TYPE IN > Kolom Document type geeft aan welk type document (data, representation) je wil koppelen aan de persistente URI. > Aan elke PID-waarde moet een data en representation document gekoppeld worden. 1. Data pids > Identificeer eerst alle data pids a. Kies kolom title > Facet > Customized facets > Facet by blank > Kies false in het menu links (voor elke PID waarde is er een rij met een titel en een zonder. Daarvan maak je gebruik om de helft van alle PIDs te filteren.) b. Typ in de eerste rij van de kolom document type de waarde data. c. Kies kolom document type -> Edit cells -> Fill down (alle rijen voor de data PIDs hebben nu een waarde data.) 19

20 20 STAP 5. VUL DE STANDAARD WAARDE VOOR DOCUMENT TYPE IN 2. Representation pids > Identificeer nu alle representation pids a. Kies true in het facet menu links (Je filtert nu alle rijen die nog geen titel hebben en dus ook geen document type.) b. Typ in de eerste rij van de kolom document type de waarde representation. c. Kies kolom document type > Edit cells > Fill down (alle rijen voor de representation PIDs hebben nu een waarde representation.) d. Schakel het facet menu uit

21 21 STAP 6. VUL ALLE TITELS AAN Kies kolom title -> Edit cells -> Fill down (Alle rijen hebben nu een titel.)

22 STAP 7. KOPPEL ALLE URL S 1. URL voor data pid > Hoe koppel je URL s van webpagina s aan een data pid? > Hiervoor heb je een lijst van inventarisnummers en URL s nodig. Een voorbeeld vind je in het bestand _URL_data. 1. Maak een nieuwe project met naam URL-data en importeer _URL_data. 2. Ga terug naar je oorspronkelijke project. 3. Kies kolom document type > Facet > Text facet > selecteer data in het facet menu links. (Je filtert nu alle data pids.) 4. Kies kolom URL > Edit cells > Transform > type cells["pid"].value 5. Koppel de URL s uit het andere project: Kies kolom URL > Edit cells > Transform > type cell.cross('url-data', 'INV').cells['URL'].value[0] 22

23 STAP 7. KOPPEL ALLE URL S 2. URL voor representation pid > Hoe koppel je URL s van webpagina s aan een representation pid? > Hiervoor heb je een lijst van inventarisnummers en URL s nodig. Een voorbeeld vind je in het bestand _URL_representation. 1. Maak een nieuwe project met naam: URL-representation en importeer _URL_representation. 2. Ga terug naar je oorspronkelijke _workshop_resolver project. 3. in het facet menu links selecteer representation. (Je filtert nu alle representation pids.) 4. Kies kolom URL > Edit cells > Transform > cells["pid"].value 5. Koppel de URL s uit het andere project: Kies kolom URL > Edit cells > Transform > cell.cross('urlrepresentation', 'INV').cells['URL'].value[0] 23

24 STAP 7. KOPPEL ALLE URL S 3. Meerdere URL s voor representation pid > Let op! Voor kunstwerk 1902-H in kolom URL heb je nu 3 URL s gedefinieerd in een veld, verdeelt door een punt-comma. > Voor dit werk moeten dus meerdere representation PIDs gemaakt worden. a. Kies kolom URL > Edit cells > Split multi-valued cells > What separator currently separates the values? vul in ; > OK b. Kies kolom PID > Edit cells > Fill down c. Kies kolom entity type > Edit cells > Fill down d. Kies kolom title > Edit cells > Fill down e. Kies kolom document type > Edit cells > Fill down Ø Schakel het facet menu uit 24

25 25 STAP 8. GEEF AAN WELKE URI S ACTIEF ZIJN > In de kolom enabled geef je aan voor welke persistente URI s de koppeling met de URL wordt geactiveerd. 1. Type in de eerste rij van de kolom enabled de waarde 1. ( 1 = actief; 0 = inactief) 2. Kies kolom enabled > Edit cells > Fill down (alle data en representation pids zijn nu actief.)

26 26 STAP 9. VUL DE STANDAARD WAARDE VOOR FORMAT, REFERENCE EN ORDER IN > Format geeft het documentformaat van de data pid aan (html, xml, json, pdf) 1. Kies kolom document type > Facet > Text facet > Selecteer data in het facet menu links. 2. Typ in de eerste rij van de kolom format de waarde html. 3. Kies kolom format > Edit cells > Fill down 4. Selecteer representation in het facet menu links 5. Typ in de eerste rij van de kolom reference de waarde Kies kolom reference> Edit cells > Fill down 7. Voor meerdere afbeeldingen geef de volgorde aan, begin met 0 8. Schakel het facet menu uit

27 27 STAP 10. EXPORTEER HET CSV- BESTAND 1. Export > Comma-separated value 2. Save file met bestandsnaam _resolver_import

28 28 CONTOLEER JE EIGEN CSV- IMPORTBESTAND - Laad je eigen CSV-bestand in Google refine - Controleer of alle kolommen correct zijn ingevuld - Pas aan waar nodig - Exporteer als CSV

29 DEEL 3. RESOLVER

30 RESOLVER URI URI URI work URI URI data PID (inventarisnummer) URL beschrijving nieuwe URL URI URI URI representation URL plaatje Standaard melding URI - automatisch - blijft onveranderd - handmatig (import) - verandert samen met ITinfrastructuur

31 31 RESOLVER Ø Open je eigen resolver Test-resolvers: login: admin password: default

32 32 RESOLVER Entities overzicht van opgenomen objecten:

33 33 RESOLVER Add entity een nieuwe object toevoegen

34 34 RESOLVER Entity overzicht van 1 object

35 35 RESOLVER Entity -> Documents overzicht van gekoppelde documenten

36 36 RESOLVER Entity -> Documents -> DATA URL s naar data

37 37 RESOLVER Entity -> Documents -> REPRESENTATION URL s naar afbeeldingen

38 38 RESOLVER Entity -> Persistent URI s

39 39 RESOLVER Import & Export veel records in een keer uploaden

40 40 RESOLVER Import & Export veel records in een keer uploaden Ø importeer je eigen CSV-importbestand Ø exporteer, pas aan en importeer terug Belangrijk! Bij het importeren wordt de bestaande informatie overgeschreven

41 41 RESOLVER Users beheer van gebruikers

42 42 RESOLVER Stats statistieken over gebruik van persistente URI s

43 43 RESOLVER Settings statistieken over gebruik van persistente URI s

44 44 RESOLVER Settings -> Standaard melding Voorbeeld Logo URL: KMSKA.jpg Voorbeeld Default notice : <p>dit werk maakt deel uit van de collectie van het KMSKA. </p> <p>maar helaas hebben we er niets van op het web staan. </p>

45 45 RESOLVER Resultaat:

46 46 RESOLVER Ø Vind een URL naar je eigen logo -> kopieer en plak die in het veld Logo URL Ø Schrijf een voorbeeld van je eigen standaad melding in het veld Default notice Ø Controleer je resultaat via een persistente URI waar geen document aan is gekoppeld

47 MIDDAGPAUZE

48 DEEL 4. PERSISTENTE URI S & RESOLVERS IN DE PRAKTIJK

49 49

50 50

51 51

52 52

53 53 RESOLVER: (maakt webadressen ) vindbaar onveranderlijk beheersbaar

54 54 VINDBAAR: eenvoud continuïteit betekenisvol voorspelbaar

55 55 VINDBAAR: eenvoud > standaard vorm continuïteit betekenisvol > bestaande id s > semantiek voorspelbaar > # URI s

56 ONVERANDERLIJK: vermijd afhankelijkheid van: > open-source project producten > GPL v3 leveranciers projecten resilience > LAMP; HTTP 56

57 57 BEHEERSBAAR: digitalisering > stap-voor-stap efficient informatiebeheer > work pid clusters open data > monitoring hergebruik rechten > toegangscontrole

58 BEDANKT!