MultimediaN E-Culture en Prenten Kabinet Online

Transcriptie

1 MultimediaN E-Culture en Prenten Kabinet Online Vragenlijst voor subject annotatie Mei 2008 Een onderdeel van het invoeren van de objecten is het vastleggen van de onderwerpsontsluiting; ook wel subject annotatie genoemd. De subject annotatie is gedaan met een prototype van MultimediaN E-Culture. Deze questionnaire ondervraagd u over het gebruik van dit prototype. Geeft u alstublieft zo eerlijk en uitgebreid mogelijk antwoord. Neem in ogenschouw dat we het prototype testen en niet u. We zullen u nu per annotatie veld (Wie, Wat, Waar en Wanneer) een aantal vragen stellen. Daarna volgen een aantal algemene vragen over het prototype en uw achtergrond.

2 1 Wie veld - historische personen 1. Hoe zeker was u tijdens de test dat de geselecteerde naam ook de persoon was die u bedoelde? heel onzeker heel zeker 2. Was bij elke geselecteerde suggestie duidelijk uit welke thesaurus deze kwam? nooit duidelijk altijd duidelijk 3. Heeft u termen geselecteerd uit een andere thesaurus dan de Rijksmuseum personen thesaurus? Zo ja, verklaar waarom: 2

3 4. In de lijst met suggesties werd naast de naam ook andere informatie over de persoon weergegeven (mits beschikbaar). (a) Hoe belangrijk vond u de volgende informatie om een potentieel relevante naam snel te herkennen uit de gesuggereerde personen? Geef een volgorde aan van 1 tot 5, waarin u de belangrijkste informatie een 1 geeft en de minst belangrijke een 5. Verklaar u nader voor elke keuze. a informatie volgorde reden verkorte biografische beschrijving b aanvullende tekstuele beschrijving c bron: RMA personen database ULAN, Wikipedia d voorbeelden van andere afbeeldingen van deze persoon e het totaal aantal afbeeldingen van deze persoon in de RMA collectie Mist u nog informatie die u nuttig acht bij het identificeren van de juiste persoon? 3

4 5. Sommige namen komen in meerdere thesauri voor. In een aantal gevallen herkent het systeem dat deze refereren naar een en dezelfde persoon. In zo n geval wordt de persoon als een enkele suggestie getoond. (a) Herinnert u zich gevallen waarin dit voorkwam? Zo ja, hoe nuttig was het om te zien dat een naam in meerdere thesauri voorkwam? helemaal niet nuttig zeer nuttig (b) In andere gevallen kan het systeem niet herkennen dat deze refereren naar een en dezelfde persoon. In zo n geval worden er meerdere suggesties voor dezelfde persoon getoond. Herinnert u zich gevallen waarin dit voorkwam? Zo ja, hoe storend waren de namen die meerdere malen gesuggereerd werden, omdat het systeem niet herkende dat deze dezelfde persoon betroffen? niet storend zeer storend 4

5 6. De persoonsnamen worden gesorteerd op alfabetische volgorde. Was de volgorde van de suggesties nuttig in het gebruik? helemaal niet nuttig heel nuttig 7. Het is mogelijk om meerdere woorden te gebruiken om een persoon te vinden. Bijvoorbeeld door te zoeken op zowel de voor- en achternaam. Heeft u hiervan gebruik gemaakt? Zo ja, waren de suggesties dan relevant? helemaal niet relevant zeer relevant 5

6 2 Wat veld - Iconclass, gebeurtenissen, etc. 1. Hoe zeker was u tijdens de test dat de geselecteerde suggestie ook de term was die u bedoelde? heel onzeker heel zeker 2. Was het nuttig dat de suggesties uit verschillende thesauri in aparte groepen werden weergegeven? helemaal niet nuttig zeer nuttig 3. Was bij elke geselecteerde suggestie duidelijk uit welke thesaurus deze kwam? nooit duidelijk altijd duidelijk 6

7 4. In de lijst met suggesties werd naast de term zelf ook andere informatie over de term weergegeven (mits beschikbaar). (a) Hoe belangrijk vond u de volgende informatie om een potentieel relevante term snel te herkennen uit de gegeven suggesties? (zie volgende pagina) Iconclass Geef een volgorde aan van 1 tot 5, waarin u de belangrijkste informatie een 1 geeft en de minst belangrijke een 5. Verklaar u nader voor elke keuze. informatie volgorde reden a Iconclass notatie (code) b Iconclass group (hoofd van de hierarchie) c exacte plaats in de hierarchie d voorbeelden van andere van andere werken geannoteerd met deze term e het totaal aantal werken geannoteerd met deze term Mist u nog informatie die u nuttig acht bij het identificeren van de juiste term? 7

8 Wordnet Geef een volgorde aan van 1 tot 4, waarin u de belangrijkste informatie een 1 geeft en de minst belangrijke een 5. Verklaar u nader voor elke keuze. informatie volgorde reden a algemene term b synoniem c tekstuele beschrijving d plaats in de hierarchie Mist u nog informatie die u nuttig acht bij het identificeren van de juiste term? 8

9 5. De WordNet suggestie worden gesorteerd op basis van het aantal keer dat ze gebruikt worden in de engelse taal. Was de volgorde van de WordNet suggesties nuttig in het gebruik? helemaal niet nuttig heel nuttig 6. Van de IconClass suggesties worden in eerste instantie alleen hoogste termen in de hierarchie getoond. Was de volgorde van de IconClass suggesties nuttig in het gebruik? helemaal niet nuttig heel nuttig 7. Het is mogelijk om meerdere woorden te gebruiken om een term te vinden. Heeft u hiervan gebruik gemaakt? Zo ja, waren de suggesties dan relevant? helemaal niet relevant zeer relevant 9

10 3 Waar veld - Naam van plaats of land 1. Hoe zeker was u tijdens de test dat de geselecteerde naam ook de plaats was die u bedoelde? heel onzeker heel zeker 2. Was bij elke geselecteerde suggestie duidelijk uit welke thesaurus deze kwam? nooit duidelijk altijd duidelijk 3. De suggesties worden gesorteerd op basis van het aantal keer dat ze gebruikt zijn in voorgaande annotaties. Was de volgorde van de suggesties nuttig in het gebruik? helemaal niet nuttig heel nuttig 10

11 4. In de lijst met suggesties werd naast de naam ook andere informatie over de plaats weergegeven (mits beschikbaar). (a) Hoe belangrijk vond u de volgende informatie om een potentieel relevante plaats snel te herkennen uit de gegeven suggesties? Geef een volgorde aan van 1 tot 5, waarin u de belangrijkste informatie een 1 geeft en de minst belangrijke een 5. Verklaar u nader voor elke keuze. a informatie volgorde reden plaats type b aanvullende tekstuele beschrijving c bron: TGN, RMA plaats thesaurus d voorbeelden van andere afbeeldingen van deze plaats e het totaal aantal afbeelding van deze plaats in de RMA collectie f plaats in de hierarchie Mist u nog informatie die u nuttig acht bij het identificeren van de juiste plaats? 11

12 5. Sommige plaatsnamen komen in meerdere thesauri voor. In een aantal gevallen herkent het systeem dat deze refereren naar een en dezelfde plaats. In zo n geval wordt de plaats als een enkele suggestie getoond. (a) Herinnert u zich gevallen waarin dit voorkwam? Zo ja, hoe nuttig was het om te zien dat een plaatsnaam in meerdere thesauri voorkwam? helemaal niet nuttig zeer nuttig (b) In andere gevallen kan het systeem niet herkennen dat deze refereren naar een en dezelfde plaats. In zo n geval worden er meerdere suggesties voor dezelfde plaats getoond. Herinnert u zich gevallen waarin dit voorkwam? Zo ja, hoe storend waren de plaatsnamen die meerdere malen gesuggereerd werden, omdat het systeem niet herkende dat deze dezelfde plaats betroffen? niet storend zeer storend 6. Het is mogelijk om meerdere woorden te gebruiken om een plaats te vinden. Bijvoorbeeld door te zoeken op de naam van stad en de naam van het land. Heeft u hiervan gebruik gemaakt? Zo ja, waren de suggesties dan relevant? helemaal niet relevant zeer relevant 12

13 4 Wanneer veld In het wanneer veld werd autocompletion niet gebruikt om suggesties te geven. 1. Heeft u suggesties voor het gebruik van autocompletion in dit veld? 13

14 5 Annotatie algemeen 1. Was het voor elke annotatie duidelijk welk veld daarvoor gebruikt moest worden? helemaal niet duidelijk zeer duidelijk 2. Welke functionaliteit miste u in het prototype? Denkt u bijvoorbeeld aan funtionaliteit die u handig vindt in Adlib of de IconClass browser. 3. Wat vindt u de voordelen van het prototype? 4. Heeft u verder nog opmerkingen of suggesties? 14

15 6 Autocompletion Autocompletion is een techniek waarbij het systeem suggesties geeft terwijl u karakters invoert. Het prototype maakt gebruik van autocompletion om termen uit thesauri te suggereren. Wij zijn geïnteresseerd in uw ervaring met autocompletion voor dat u het prototype ging gebruiken. 1. Heeft u ervaring met autocompletion? (u kunt de onderstaande vragen overslaan) 2. Hoeveel ervaring heeft u met autocompletion in ? weinig ervaring veel ervaring 3. Hoeveel ervaring heeft u met autocompletion in zoekmachines (b.v. Google suggest)? weinig ervaring veel ervaring 15

16 4. Hoeveel ervaring heeft u met autocompletion in uw browser? weinig ervaring veel ervaring 5. Heeft u ervaring met autocompletion in andere applicaties? Zo ja, geef de naam/beschrijving van de applicatie en uw ervaring. (a) (b) (c) weinig ervaring veel ervaring weinig ervaring veel ervaring weinig ervaring veel ervaring 6. Hoe nuttig vindt u autocompletion in het algemeen? helemaal niet nuttig zeer nuttig 16

17 7 Algemeen 1. Wat is uw rol binnen het Rijksmuseum? 2. Hoeveel jaar bent u in dienst bij het Rijkmuseum? jaar 3. Hoeveel jaar ervaring heeft u met annotatie? jaar 4. Hoeveel dagen per week besteedt u tegenwoordig aan annotatie? dagen 5. Wat is het soort kunstwerken dat u doorgaans annoteert? 6. Wilt u op de hoogte worden gehouden van de resultaten van dit onderzoek? Zo ja, 7. De resultaten van dit onderzoek zullen strikt vertrouwelijk worden behandeld en alleen voor wetenschappenlijke doeleinden. Geeft u hier toestemming voor? Heel erg bedankt voor uw medewerking! Heeft u nog vragen dan kan u concact op nemen via: michiel.hildebrand@cwi.nl 17