CaseWebapplicatie·Onderzoek
Een onderzoekslab wilde een gedragsexperiment online uitvoeren met duizenden deelnemers tegelijk. We bouwden een experimentomgeving met precieze timing, betrouwbare opslag en ruimte voor pieken.
Een onderzoekslab dat experimenten naar keuzegedrag uitvoert.
Deze case is op verzoek van de klant geanonimiseerd. De situatie, de aanpak en de resultaten zijn echt.
Experimenten werden tot dan toe in het lab afgenomen, met dertig tot vijftig deelnemers per studie. Voor een nieuwe studie waren duizenden deelnemers nodig, geworven via een online panel binnen een korte periode.
Een eerdere poging met een zelfgebouwd script op een universiteitsserver liep vast bij enkele honderden gelijktijdige deelnemers, waardoor data verloren ging.
Bij online experimenten telt elke milliseconde reactietijd en kost elke deelnemer geld. Uitval door technische problemen betekent onbruikbare data en verspild panelbudget.
Wat concreet niet goed werkte:Het doel was een experimentomgeving die duizenden gelijktijdige deelnemers aankan, reactietijden nauwkeurig meet, elke respons veilig opslaat en de koppeling met het panel afhandelt.
Na afloop moest het lab de omgeving zelfstandig kunnen hergebruiken voor volgende experimenten.
Voor een experiment dat maar één keer draait, is testen onder realistische belasting belangrijker dan mooie functies. Daar ging de meeste aandacht naartoe.
We vertaalden het experimentprotocol naar schermen, timing en te loggen gegevens en toetsten dat met de onderzoekers voordat er iets gebouwd werd.
Reactietijden worden lokaal in de browser gemeten en samen met apparaatgegevens opgeslagen, zodat afwijkingen achteraf herkenbaar zijn.
We simuleerden vijfduizend deelnemers die binnen tien minuten begonnen. Daaruit kwamen twee knelpunten die we voor de start oplosten.
Deelnemers komen binnen met een unieke code, kunnen maar één keer deelnemen en worden na afronding automatisch teruggeleid voor uitbetaling.
Teksten, condities en randomisatie zijn instelbaar in een beheeromgeving, zodat volgende experimenten geen nieuwe ontwikkeling vergen.
We ontwikkelden een webapplicatie waarin deelnemers het experiment doorlopen op telefoon of computer, met nauwkeurige timing en directe opslag van elke respons. De omgeving schaalt automatisch mee met het aantal deelnemers.
Onderzoekers volgen tijdens de studie de instroom en uitval per conditie en exporteren na afloop de volledige dataset met tijdstempels en apparaatgegevens.
Het experiment leverde een complete dataset op binnen de geplande periode en binnen het panelbudget. Het lab gebruikt de omgeving inmiddels zelfstandig voor nieuwe studies.
We hadden één kans om dit goed te doen. Het draaide zonder haperen, en dat is precies wat we nodig hadden.
CodeSprinter bouwt onderzoeksomgevingen die betrouwbaar meten en meeschalen. We kijken graag naar je protocol en wat er technisch nodig is.
CodeSprinter bouwt software voor onderzoek en maatschappelijke impact. Van eerste idee tot dagelijks gebruik.
