Een bedrijf bouwt een softwaresysteem. Nadat het in productie is genomen, wil het team gebruiksgegevens verzamelen om de geleverde waarde te meten. Welke evaluatiepraktijk levert nauwkeurige gebruiksgegevens op?

Het inbouwen van functionaliteit in de software om operationele gebruiksgegevens te verzamelen (telemetrie) is de meest nauwkeurige methode. Dit levert objectieve, kwantitatieve gegevens op over hoe gebruikers daadwerkelijk met het systeem omgaan, zoals welke functies worden gebruikt, hoe vaak en hoe lang. Een feedbackformulier is subjectief en afhankelijk van de bereidheid van gebruikers om het in te vullen. Het ondervragen van alle gebruikers is onpraktisch en levert vaak subjectieve, kwalitatieve gegevens op. Het interviewen van een steekproef van gebruikers is ook subjectief en kan leiden tot bias, en is niet representatief voor alle gebruiksgegevens.