Twee scripties over Waisda?

Dit jaar zijn twee studenten afgestudeerd op onderwerpen waarbij Waisda? een 'case study' was.

Annelies van Ees schreef de scriptie “How to TAG 700.000 videos? The power of games” in het kader van haar studie Information Sciences aan de Vrije Universiteit Amsterdam. Annelies was vanuit de ‘Web & Media’ afdeling van de VU nauw betrokken bij de ontwikkeling en evaluatie van Waisda?. Voor haar scriptie deed ze onderzoek naar de motivaties van spelers om video labeling games zoals Waisda? te spelen, onder andere aan de hand van het prototype TAG. De resultaten van het onderzoek van Annelies zullen worden gebruikt om Waisda? verder te verbeteren en om het spelplezier te vergroten.

Lotte Belice Baltussen studeerde Preservation & Presentation of the Moving Image aan de Universiteit van Amsterdam. Ze liep vanaf september 2009 stage bij Beeld en Geluid, en werkte hierbij aan de evaluatie van Waisda?. Haar scriptie “Barbarians versus Gatekeepers?” gaat over tagging, en het inzetten van crowdsourcing initiatieven bij erfgoedinstellingen. Net als bij de scriptie van Annelies is Waisda? een belangrijke ‘case study’. In de scriptie wordt gesteld dat de huidige archieftheorie niet meer voldoet in het 'Web 2.0' tijdperk waarin het publiek steeds meer toegang krijgt tot en invloed krijgt op hun gedeelde cultureel erfgoed.

Beide scripties kunnen online bekeken en gedownload worden:

- Annelies van Ees. “How to TAG 700.000 videos? The power of games”. Mei 2010.

- Lotte Belice Baltussen. “Barbarians versus gatekeepers? Tagging as a way of defining the emergent Living Archive paradigm”. Maart 2010.

 

Waisda? wint de EuroITV Competition Grand Challenge!

Waisda? heeft de EuroITV Competition Grand Challenge gewonnen. Deze prijs werd dit jaar voor het eerst uitgereikt tijdens EuroITV, dé conferentie op het gebied van interactieve tv en video die dit jaar voor de achtste keer werd gehouden. Waisda? nam het op tegen Smart Video Buddy en Smeet. Smart Video Buddy is een applicatie die video streams analyseert en automatisch semantische concepten herkent, en op basis hiervan links legt naar gerelateerde content. Smeet is een online 3D wereld waarin gebruikers interactieve spellen doen, en live web content delen en bespreken, zoals video, televisie, muziek en evenementen. Meer informatie over de prijs en de andere genomineerden staat op de website van EuroITV.


Eerdere prijzen en nominaties

Het is niet de eerste keer dat Waisda? erkenning krijgt voor zijn innoverende karakter. Zo ontving het spel een TIMAF Best Practices Award tijdens het HartmanEVENT in oktober 2009. Waisda? werd geroemd vanwege de innovatieve manier waarop het spel omgaat met doorzoekbaar maken van publieke content. Daarnaast werd Waisda? genomineerd voor een Accenture Innovation Award.


Meer weten over Waisda?

Degenen die dit blog al langer lezen weten het al, maar voor nieuwkomers zijn de volgende publicaties wellicht interessant. Begin januari dit jaar is het evaluatieverslag van Waisda? verschenen. De evaluatie bestaat uit een kwantitatieve en kwalitatieve analyse van de tags, usability onderzoek naar de huidige interface en gebruikersonderzoek naar de motivatie van spelers. Daarnaast zijn er op de WebScience conferentie recentelijk twee papers over Waisda? gepresenteerd, met hierin de resultaten van het laatste onderzoek naar de bruikbaarheid van de tags, en de plek van Waisda? ten opzichte van de verschillende tagginginitiatieven in het erfgoeddomein. Om op de hoogte te blijven van het laatste nieuws kun je je hier inschrijven voor de Waisda? nieuwsbrief.

Resultaten Waisda? gepresenteerd op WebScience conferentie

In januari berichtten we op dit blog over de uitkomsten van de evaluatie van Waisda?. In de tussentijd is er weer een hoop werk verricht, en de resultaten van dit onderzoek zijn verwerkt in twee papers die afgelopen april door Beeld en Geluid en de Vrije Universiteit Amsterdam gepresenteerd zijn op de WebScience conferentie in Raleigh. Deze twee papers zullen hier kort worden besproken.


Waisda? als onderdeel van tagginginitiatieven in het erfgoeddomein

Binnen de erfgoedsector zijn de laatste jaren verschillende taggingprojecten opgezet. Deze projecten maken deel uit van een bredere trend in de erfgoedsector, waarbij het publiek steeds meer een deel uitmaakt van de online activiteiten van musea, bibliotheken en archieven. Niet alleen hebben mensen via het internet meer toegang tot erfgoedcollecties dan ooit tevoren, het publiek kan vanwege het toenemend 'sociale' karakter van het internet deze collecties op hun eigen manier vormgeven, onder andere door het toevoegen van tags (trefwoorden) aan erfgoedobjecten.

Taggingprojecten maken het mogelijk voor het publiek om invloed uit te oefenen op de  beschrijvingen van erfgoedinstellingen, aangezien de tags opgenomen kunnen worden in de officiële metadata in  catalogi. Daarnaast kunnen tags gebruik worden voor het beter doorzoekbaar en vindbaar maken van online cultureel erfgoed (zie bijvoorbeeld de online catalogus van het PowerHouse Museum in Sydney). Dit betekent een breuk met de traditionele rol van erfgoedinstellingen als 'poortwachters', die de professionele beschrijving van het erfgoed bewaken. Hoewel veel instellingen nog niet bereid zijn om het publiek invloed uit te laten oefenen op bestaande praktijken, zijn er zoals gezegd al verschillende taggingprojecten uitgevoerd door erfgoedinstellingen. Hierbij zijn vier motivaties te onderscheiden:

1. Het overbruggen van de 'semantic gap' tussen de terminologie die professionals gebruiken (veelal gebaseerd op vastgestelde woordenlijsten) en de zoektermen die het algemene publiek gebruikt.
2. Het verrijken van collecties en cultureel erfgoed met feitelijke en contextualiserende informatie.
3. De band tussen het publiek en de erfgoedinstelling versterken.
4. Het gebruiken van tags in het toekomstige werkproces.

In het paper 'Emerging Practices in the Cultural Heritage Domain – Social Tagging of Audiovisual Heritage' van Johan Oomen et al. worden deze vier punten uitgebreid besproken. Daarnaast staan de belangrijkste uitkomsten van de evaluatie van Waisda? in het paper.


Het integreren van tags met professionele annotaties   

In het andere paper is gekeken naar de kwaliteit van de tags die door Waisda? spelers zijn toegevoegd, en worden eerste conclusies gegeven over hoe de tags kunnen worden geïntegreerd in de professionele catalogus van Beeld en Geluid.

Ten eerste is er onderzoek gedaan naar de semantiek van de tags. Het voordeel van de Waisda? tags is dat het trefwoorden zijn die vrij ingevuld kunnen worden. Spelers zijn dus niet verplicht alleen woorden te gebruiken die in een woordenboek of een andere vooraf vastgestelde lijst staan, wat er voor zorgt dat de 'semantic gap' beter kan worden overbrugd. Het nadeel is dat er veel ambiguïteit kan ontstaan. Bijvoorbeeld: de tag 'bank' kan zowel verwijzen naar een bank waarop je kunt zitten als naar een financiële instelling. Daarnaast gebruiken spelers meervoud- en enkelvoudvormen van bepaalde begrippen ('koe' en 'koeien'), en verschillende werkwoordvervoegingen ('gefietst' en 'fietsen'). Naast de semantische analyse van de tags is er door een professioneel documentalist gekeken naar de bruikbaarheid van de tags. Ten slotte is onderzocht welk gedeelte van de tags betrekking heeft op het auditieve en het visuele onderdeel van de programma's door ze te vergelijken met de ondertitelingsinformatie.

De uitkomsten van dit onderzoek staat in het paper van Riste Gligorov et al.: 'Towards Integration of End User Tags with Professional Annotations'.

Uitkomsten evaluatie Waisda? leiden tot prototype TAG

De 'Web & Media' group van de Vrije Universiteit zal zich de komende jaren binnen het Europese onderzoeksprogramma PrestoPRIME onder andere richten op de verdere ontwikkeling van Waisda? in de vorm van The Annotation Game (T.A.G.). In dit video tagging spel zijn verschillende uitkomsten van de evaluatie van Waisda? en aanbevelingen van spelers verwerkt. Zo is er nu bijvoorbeeld een vaste tijdslimiet per spel en kun je door punten te scoren opklimmen naar nieuwe levels. Daarnaast kun je na ieder spel zien welke tags jij én je tegenstanders hebben ingevoerd.

Als je deze en andere nieuwe spelelementen wilt ervaring, klik dan hier om T.A.G. te spelen. We zijn erg benieuwd wat je van T.A.G. vindt, dus als je na het spelen feedback wilt geven, kunt je hier de enquête invullen. Dit zal niet langer dan 10 minuten duren. Alvast bedankt voor je hulp, en veel speelplezier!

Evaluatie pilot Waisda? Video Labeling Game afgerond

Dinsdag 19 mei 2009 lanceerde het Nederlands Instituut voor Beeld en Geluid in samenwerking met de KRO Waisda?, een innovatief annotatiespel voor video. In de vorm van een uitdagend spel worden spelers gevraagd trefwoorden (tags) aan videomateriaal toe te voegen, met als doel de doorzoekbaarheid van audiovisuele archieven te verbeteren. Waisda? is gebaseerd op het principe dat er sprake is van een betekenisvol trefwoord, wanneer meerdere mensen afzonderlijk van elkaar dezelfde tag aan een video toekennen. Waisda? is het eerste operationele video labeling game voor audiovisuele collecties ter wereld. Waisda? maakt deel uit van een serie pilots die binnen het project Beelden voor de Toekomst worden uitgevoerd om de mogelijkheden van publieksparticipatie te verkennen en is nu – na zes maanden looptijd – geëvalueerd.

De pilotfase van Waisda? bleek buitengewoon succesvol. Sinds de lancering trok de website 9.198 unieke bezoekers en voegden 2.296 spelers maar liefst 340.551 tags toe aan 604 items. De website werd 12.297 keer bezocht. In totaal zijn 137.421 (40,3%) van de 340.551 tags binnen tien seconden door twee of meer spelers toegevoegd. De evaluatie laat zien dat het ‘crowdsourcen’ van video-annotaties middels een serious, social game inderdaad mogelijkheden biedt om de vindbaarheid van audiovisueel archiefmateriaal te vergroten. In het rapport staan tevens een aantal succesfactoren en aanbevelingen voor een eventueel vervolg beschreven.

De evaluatie bestaat uit een kwantitatieve en kwalitatieve analyse van de tags, usability onderzoek naar de huidige interface en gebruikersonderzoek naar de motivatie van spelers. Het evaluatieverslag is geschreven door Lotte Belice Baltussen, in samenwerking met Maarten Brinkerink en Johan Oomen, werkzaam bij Beeld en Geluid. Onderzoekers van de Web & Media groep van de Vrije Universiteit Amsterdam (VU) hebben tevens een belangrijke bijdrage geleverd, vanwege hun betrokkenheid bij het Europese onderzoekproject PrestoPRIME. Binnen dit project zal de VU – in samenwerking met Beeld en Geluid – op basis van Waisda? vervolgonderzoek naar geautomatiseerde processen om de tags te analyseren, verbetering van en aanvullingen op het spel- en interface ontwerp en het integreren van de tags in de professionele catalogusbeschrijvingen.

Het evaluatieverslag van de pilot is hier te downloaden (PDF). 

Waisda? enquête: winnaar van de VVV irischeque

De afgelopen weken is er een enquête gehouden onder Waisda? spelers. Via deze enquête wilden we er achter komen hoe we Waisda? in de toekomst leuker kunnen maken. In totaal hebben 41 spelers de vragenlijst ingevuld.

Onder de 41 respondenten is een VVV irischeque ter waarde van € 30,00 verloot, en de winnaar is Aaltje Meijer-Akker. Van harte gefeliciteerd, de cheque is inmiddels naar je verstuurd!

Binnenkort worden de eerste evaluatie van Waisda? afgerond. In dit rapport zijn de resultaten van de enquête opgenomen. We willen alle spelers die de enquête hebben ingevuld bij deze hartelijk bedanken voor de moeite!

We wensen iedereen hele fijne feestdagen toe, en een gelukkig nieuwjaar.

Eerste Waisda? - Boer zoekt Vrouw wedstrijd groot succes

Vorige week kondigden we de eerste Waisda? wedstrijd aan. De wedstrijd heeft gelopen van maandag 23 november 12:00 tot en met maandag 30 november 12:00. De drie spelers die in deze tijd de meeste punten hebben gescoord op Waisda? hebben ieder een Boer zoekt Vrouw bordspel gewonnen.

De winnaars

Na de aankondiging van de wedstrijd op dit blog en op de Boer zoekt Vrouw website is er hard gestreden door de Waisda? spelers om één van de drie bordspellen te bemachtigen.

Degenen die uiteindelijk als winnaars uit de strijd zijn gekomen zijn:

- Op nummer 1: Bart met een score van 1.099.327 punten.
- Op nummer 2: mar61 met een score van 1.079.613 punten.
- Op nummer 3: nelle01 met een score van 397.825 punten.

Wij willen de winnaars bij deze van harte feliciteren. Als het goed is hebben jullie allemaal al een e-mail gehad met de vraag waar we de prijs naar op kunnen sturen. Mocht dit nog niet zijn gebeurd, dan kun je met ons contact opnemen: waisda@beeldengeluid.nl.

Als je feedback wilt geven op Waisda?, vul dan de Waisda? enquête in en maak kans op een VVV irischeque ter waarde van € 30,00.

Fantastisch resultaat

We zijn erg blij dat we drie mensen gelukkig hebben kunnen maken met een prijs, maar ook dat er weer flink veel Waisda? is gespeeld. In de wedstrijdweek is het aantal tags met ruim 50 % gestegen van 220.000 naar 340.000. Het aantal geregistreerde spelers is ook flink gestegen naar 556, ten opzichte van de 406 voordat de wedstrijd begon.

We zijn van plan om in de nabije toekomst weer een wedstrijd te organiseren, dus houd dit blog in de gaten als je weer kans wil maken op mooie prijzen!

Nooit meer alleen spelen dankzij @waisdaspelers

Samen spelen is leuker! Dat geldt natuurlijk ook voor Waisda?. We merken alleen dat het lastig is om in te schatten wanneer je de meeste kans maakt om een medespeler te treffen.

Daarom stellen we je graag voor aan @waisdaspelers! Deze twitterbot stuurt automatisch een tweet wanneer iemand op Waisda? alleen aan het spelen is. Als trouwe Waisda? speler kan je door @waisdaspelers te volgen dus precies in de gaten houden wanneer mensen Waisda spelen en op zoek zijn naar een medespeler! Klik hier om @waisdaspelers op Twitter te volgen.
 
Als je direct vrienden wilt uitnodigen via Twitter dan kan dit ook. Klik hiervoor rechtboven aan de Waisda? website op 'tip een vriend'.

Doe mee aan de eerste Waisda? wedstrijd en maak kans op een Boer zoekt Vrouw bordspel

Recentelijk zijn er heel veel spelers via de Boer zoekt Vrouw website naar Waisda? gekomen. Ze hebben in korte tijd ontzettend veel gespeeld en grote aantallen trefwoorden ingevoerd en hiermee een enorme bijdrage geleverd aan het project. Daarom hebben we besloten om een wedstrijd te organiseren waarbij een Boer zoekt Vrouw bordspel te winnen is. In totaal zijn er maar liefst drie spellen te verdelen!


Spelregels

· De wedstrijd loopt van maandag 23 november 12:00 tot en met maandag 30 november 12:00. De drie spelers die in deze tijd de meeste punten scoren op Waisda? winnen ieder een Boer zoekt Vrouw bordspel.
· Alleen als je een geregistreerde speler bent worden je punten bijgehouden. Registreer je hier als je nog geen Waisda? gebruikersnaam hebt, en zorg dat je altijd inlogt voordat je gaat spelen, anders worden je punten niet meegeteld.
· Je hoeft niet alleen te spelen met afleveringen van Boer zoekt Vrouw, je mag zelf kiezen met welk programma je Waisda? speelt.
· De gebruikersnamen van de winnaars worden op vrijdag 4 december op dit blog bekend gemaakt. Ook zal de winnaar persoonlijk op de hoogte gesteld via zijn of haar e-mail. Zorg dus dat je e-mail adres in je profiel ingevuld is, anders kunnen we geen contact opnemen om te vragen waar we de prijs naar toe moeten sturen!
· Wij zullen jouw e-mailadres alleen gebruiken om contact met je op te nemen als je de gelukkige prijswinnaar bent.
· Over de uitslag kan niet worden gecorrespondeerd.
· Als je op welke manier dan ook vals speelt word je gediskwalificeerd, hier kan niet over worden gediscussieerd.


Tips

Op Waisda? staan handige tips die je kunt toepassen om je score te vergroten. Ook hebben we op dit blog deze tips uitgebreid besproken: deel 1, deel 2, deel 3.


We wensen jullie allemaal heel veel plezier én veel succes!

Vul de Waisda? enquête in en maakt kans op een VVV irischeque van € 30,00

Let op! De enquête is gesloten.

We willen Waisda? in de toekomst graag verbeteren  maken, en daarbij hebben we jouw hulp nodig! We hebben een Waisda? enquête gemaakt, waarin je kunt aangeven wat je van het spel vindt en hoe het verbeterd kan worden.

Het invullen van de enquête duurt ongeveer 10 - 15 minuten. Als je de enquête volledig invult maak je kans op een VVV irischeque ter waarde van € 30,00.

De feedback die je ons geeft is echt onmisbaar om Waisda? te verbeteren, dus we hopen dat je ons hierbij wilt helpen.

Klik hier om de enquête te openen.