ONDERZOEK

CONCEPT
TESTING

OKTOBER 2020

DANE VAN DEN DUNGEN

2159527
KARSTEN VAN BOEKHOLT
2156111
MACHIEL WETSELAAR
AVANS BUSINESS INNOVATION
 INLEIDING
Het vak concept testing draait om het testen van een concept
bij de doelgroep waarop je je richt. Dit kan je doen door
middel van een open en een gesloten test. Bij beide testen
lopen we een aantal stappen door door middel van
hypothesen. Uit deze testen kunnen we conclusies trekken
wat er verbeterd moet worden en of de aannames die worden
gedaan kloppen.

Open / Low fidelity: Vincent (2018): ''Low fidelity prototypes

worden ingezet om het idee of concept van een digitaal
product te testen. Zo kan de product market fit voor het eerst
getest worden van een concept dankzij een low fidelity
prototype. De layout en de kern functies en features komen
hierbij duidelijk naar voren. De nadruk ligt nog niet op de
details, waardoor het design minimaal is uitgewerkt. Low
fidelity prototypes worden vaak uitgeschetst op papier.
Hierdoor kan je snel aanpassingen maken en leg je de nadruk
minder op de kleinere details.''

Gesloten / High fidelity: Vincent (2018): ''Bij een high fidelity

prototype werk je het concept uit tot de kleinste details. Zo
laat je secundaire schermen zien zoals het login scherm, de
menu opties en error messages of 404 pagina’s. Daarnaast
worden de details dusdanig uitgewerkt dat ze een usability
test kunnen ondergaan. Het liefst maak je een clickable
prototype tijdens de high fidelity fase, zodat je voor het eerst
door je app, website of webshop heen kan navigeren.''

1
 HET CONCEPT
De iPhone 11 is een moderne smartphone van het merk
Apple. Deze is ongeveer een jaar geleden uitgekomen en voor
de meeste mensen nog redelijk nieuw en onbekend. Er zitten
nieuwe functies op, zoals een extra camera en een nieuwe
manier voor het maken van screenshots die het makkelijker
zou moeten maken.

Voor veel mensen is het lastig om uit te zoeken hoe je deze

functies gebruikt. Vooral als je van een ander merk
smartphone overstapt op de iPhone 11. Wij hebben allebei
onlangs een iPhone 11 gekocht en hier ook moeite mee
gehad.

Wij gaan testen of de functie (de extra camera activeren)

makkelijk te vinden is en dus voor iedereen toegankelijk door
middel van een open en gesloten test.

Designed met Sketchup

2
 ONZEKERHEDEN

De volgende onzekerheden zijn in kaart gebracht:

- Functie is heel moeilijk vindbaar.

- De testpersonen zijn gewend om de homebutton te gebruiken die op
vorige iPhone modellen nog wel aanwezig waren.
- Testpersonen zullen hulp / hints nodig hebben
- Sommigen zullen het vervelend vinden om de iPhone te gebruiken.
- Camera is makkelijk gevonden, maar activatie is moeilijk te vinden
- Personen die dagelijks een iPhone gebruiken zullen het makkelijker
vinden dan degene die dat niet doet

3
 OPEN TEST
Als open test hebben we besloten om de testpersonen de iPhone
te geven en vragen of ze de nieuwe functie van de iPhone kunnen
vinden, maar nog niet te gebruiken, zonder te zeggen wat het is.

Zo komen we erachter hoeveel mensen hier vanaf weten en we

vragen ze dan hoe ze ervan weten.

Goals & assumptions

Het doel van deze test is ontdekken of mensen zich bewust zijn
van nieuwe ontwikkelingen op het aspect van mobiele telefoons.
Met deze test willen we dus eigenlijk bewijzen dat het gebruik van
de nieuwe functie van de iPhone 11, Alhoewel het voor de meeste
mensen onbekend is, makkelijk in gebruik is.

User profile

Omdat de doelgroep van Apple zelf heel breed is, hebben we

gekozen doelgroep studenten. Er zal getest worden op
medestudenten van de opleiding Business Innovation. Dit is erg
interessant om er achter te komen hoe innovatie studenten om
gaan met tech en gear. Natuurlijk stellen we wel de eis dat deze
een iPhone X of lager moeten hebben, of natuurlijk een ander
soort smartphone. De locatie zal dan ook zijn op de
onderwijsboulevard en wij testen dit voor de les, wanneer de
leerlingen arriveren op school.

4
Establishing questions

Maak je dagelijks gebruik van een smartphone of ander device?

Wat voor device gebruik je?

Ben je je bewust van features die je mobiele device kenmerken?

Feedback questions

Heb je voor deze test al eens een iPhone 11 gebruikt en was je

bekend met de functies?

Vind je dat de functie erg innoverend is en waarom?

Tasks

Het is de bedoeling dat de aannames worden getest. Daarom

zullen wij de testpersoon de telefoon geven en vragen of hij/zij de
nieuwste functie van de iPhone kan aanwijzen, zonder iets op het
apparaat uit te voeren.

Eventuele verbeterpunten in deze tijd kunnen zijn, dat het

coronaproof moet zijn. In deze tijd kan je natuurlijk niet zomaar
aan iedereen je telefoon geven, waardoor je bacteriën doorgeeft.
Alhoewel we de telefoons hebben schoongemaakt zou dit een
verbeterpunt zijn.

5
Testpersoon 1:

Maak je dagelijks gebruik van een smartphone?

Ja, ik maak dagelijks gebruik van mijn smartphone.

Wat voor device gebruik je?

Ik maak gebruik van de iPhone 8+.

Ben je je bewust van features die je mobiele device kenmerken?

Ik weet dat de telefoon veel meer kan dan ik weet, maar voor mij is het
niet nodig om het uit te zoeken. Van de meeste weet ik wel hoe ze
werken en gebruik ze ook vaak.

Testpersoon 2:

Maak je dagelijks gebruik van een smartphone of ander device?

Ik gebruik vaak mijn mobiel, maar niet elke dag. Vooral als ik naar
school moet of ergens anders gebruik ik het voor de ns-app en om
muziek te luisteren.

Wat voor device gebruik je?

Ik heb een Huawei smartphone, wel een wat ouder model.

Ben je je bewust van features die je mobiele device kenmerken?

Nee nu ik erg over nadenk heb ik niet veel features gevonden op mijn
mobiel, dit komt omdat ik hem niet vaak gebruik. Wel wil ik er wel
achter komen wat 'ie allemaal kan.

6
Testpersoon 3:

Maak je dagelijks gebruik van een smartphone?

Ik gebruik mijn iPhone elke dag.

Wat voor device gebruik je?

Ik heb een iPhone 7 en die gebruik ik al meer dan 2 jaar.

Ben je je bewust van features die je mobiele device kenmerken?

De iPhone 7 was toen hij uitkwam heel cool, omdat 'ie geen
koptelefoongaatje meer had, zoals de vorige iPhones wel hadden.
Was dus even wennen, maar na een tijdje vond ik het niet meer
vervelend. Ik heb al eerder iPhones gehad, dus voor mij was het
allemaal niet heel nieuw.

Testpersoon 4:

Maak je dagelijks gebruik van een smartphone of ander device?

Ik gebruik mijn mobiel bijna elke dag, maar ik zit er ook niet de hele
dag op.

Wat voor device gebruik je?

Ik heb een Samsung en ook altijd een Samsung gehad, nog nooit een
iPhone.

Ben je je bewust van features die je mobiele device kenmerken?

Ik heb nog een redelijk oud model, dus zoveel nieuwe dingen kan 'ie
niet, maar ik weet wel wat 'ie allemaal kan.

7
Na de vragen hebben we de testpersonen gevraagd de nieuwe
functie van de iPhone 11 aan te wijzen, maar nog niet te zeggen
wat dat dan is.

Testpersoon 1 keek naar de telefoon en zag eigenlijk meteen dat

er 2 camera's opzitten, maar vroeg aan ons waarvoor die diende.
Dat gingen we testen in de gesloten test, dus hebben we nog niet
verteld.

Testpersoon 2 ging als eerste de telefoon aanzetten, alhoewel we

hadden gezegd dat het aan de buitenkant van de telefoon zat,
wilde hij toch kijken of de functie niet tijdens het opstarten was.

Testpersoon 3 wist meteen dat de iPhone 11 een extra camera

heeft en zei dit dan ook tegen ons, ze wees de camera aan, maar
wist wederom niet waar deze voor diende.

Testpersoon 4 kon het na een paar keer goed kijken nog steeds
niet vinden en vroeg ons een hint te geven. We zeiden dat het aan
de achterkant zit en daarna vroeg ze snel of het de 2e camera was.

Uit deze test blijkt dat maar 1 van de 4 wist dat deze functie nieuw
was bij de iPhone 11. Ze zei zelf dat ze het gezien had bij iemand
anders en daarom wist dat het bestaat. Dit bevestigd wel onze
aanname over dat het nog redelijk onbekend is. Wel toonden de
testpersonen allemaal interesse over wat die camera nu eigenlijk
doet en vonden ze het makkelijk te vinden toen ze goed keken.

Een verbeterpunt is zeker het coronaproof maken van de test.

Omdat dit heel lastig wordt hebben we hier nu minimaal gebruik
van kunnen maken. Ook kan de test alleen offline uitgevoerd
worden, terwijl dit ook online zou moeten kunnen.

8
 GESLOTEN TEST
Hypothesen

In de gesloten test worden 2 hypothesen getest.

Hypothese 1: De knop om de 2e camera te activeren is makkelijk vindbaar.

De functie moet natuurlijk makkelijk vindbaar te zijn, ook voor mensen die er nog
niks vanaf weten. Wat onze eigen ervaring hiermee is, is dat het makkelijk
vindbaar is als je het weet.

Hypohese 2: Binnen 1,5 minuut heeft de testpersoon

de stappen doorlopen.

Zelf waren wij na 1,5 minuut al afgehaakt toen we probeerden de functie te

vinden, daarom hebben we voor 1,5 minuut gekozen. Dit zou dan ook het
gemiddelde zijn.

Verbeterpunt in de hypothese zal zijn dat we van te voren de tijd moesten halen
uit andere tests van professionele onderzoekers.

We doen dit door middel van een gebruikerstest.

''Je laat een aantal mensen een aantal taken uitvoeren.''

''Je spoort de tester aan op hardop te zeggen wat hij denkt''.

(Agconsult, z.d.)

Testing

De test vind wederom plaats op de onderwijsboulevard vóór de projectles. De

doelgroep zijn dezelfde 4 studenten als bij de open test.

Bij deze test geven we de telefoon wederom aan de testpersoon en zetten hem
van te voren aan. We vragen de testpersonen een paar stappen te volgen.

Stap 1: Open de camera

Stap 2: Kom erachter hoe je de extra camera gebruikt

Stap 3: Maak een foto met de camera waarbij je gebruikt maakt van de functie van
de extra camera
9
Metrics

We meten de tijd vanaf wanneer de personen de telefoon in hun

handen hebben. We meten de tijd, zodat we kunnen zien of onze
hypothese klopt. We geloven namelijk dat het makkelijk gaat zijn
voor de meesten om binnen 1,5 minuut alle stappen uit te voeren.

De uitkomsten hiervan zijn kwantitatief.

Criteria

We moeten natuurlijk een aantal criteria aan de test stellen. Het

onderzoek moet representatief zijn en dus toegankelijk voor de
student. Dit betekent dat deze test relatief gezien niet al te
complex mag zijn.

Dat het een onderzoek is dat relatief gezien minder complex

verloopt betekent niet dat er vanaf de start aanwijzingen gegeven
mogen worden, dit ruineert de betrouwbaarheid van de test.

Als de proefpersoon na enige tijd wel een hint nodig heeft mag dit
en geeft dit ook weer data vrij.

Ook stellen wij de eis dat minimaal 75% van de testpersonen de

test binnen de afgesproken tijd voldaan moet hebben, anders
moeten we concluderen dat de hypothese niet klopt.

10
gebruikerstest

medeleerlingen business innovation 2 - 5 minuten

Hypothese 1: De knop om de 2e camera

te activeren is makkelijk vindbaar.

Hypothese 2: Binnen 1,5 minuut heeft de

testpersoon de stappen doorlopen.

Bij deze test geven we de

telefoon wederom aan de testpersoon
en zetten hem van te voren aan.
We vragen de testpersonen
een paar stappen te volgen.

De tijd waarin deze

stappen goed gevolgd worden.

De testpersoon binnen 1,5 minuut de stappen heeft

uitgevoerd.
EN/OF 75% van de testpersonen in die 1,5 minuut zitten.

11
Inzichten & resultaten

Testpersoon 1 (figuur 1 & 5):

Deze persoon had het meeste moeite met de functie vinden. Het duurde
dan ook 1:37 minuten totdat deze persoon de stappen doorkwam. Deze
persoon gaf aan na de test dat hij vooraf de test nog niks wist van de
iPhone 11 en het verbaasde hem zelf en ons niet dat hij de functie niet had
gevonden.

Testpersoon 2 (figuur 2 & 6):

Deze persoon ging vlot door de stappen heen en had geen enkele tip of
hulp nodig. Binnen 52 seconden had hij dan ook alle stappen verlopen en
was erg tevreden over zijn eindresultaat.

Testpersoon 3 (figuur 3 & 7):

De 3e ging ook vlot door de stappen heen en had ook weinig moeite met
het zoeken. Hoewel ze zelf een iPhone heeft, wist ze van te voren niet dat
de iPhone 11 deze functie had en was en erg nieuwsgierig naar.

Testpersoon 4 (figuur 4 & 8):

De laatste testpersoon heeft ook binnen de tijd de stappen uitgevoerd.

Deze persoon had ook weinig hulp nodig van ons. Ze vroeg ons wel of ze de
functie goed gebruikte voordat ze de laatste stap uitvoerde, oftewel een
foto maakte.

Conclusie:
De conclusie die wij kunnen trekken is dat onze hypothesen kloppen en dit
kunnen wij bevestigen, omdat 75% van de testpersonen de test binnen 1,5
minuut heeft gedaan en dus binnen de tijd dat het gebruiksgemak voor ons
het hoogst is.

Eventuele verbeterpunten van het concept zal dus zijn dat er een soort van
rondleiding door de camera functie zou moeten zijn, waardoor het
gebruiksgemak verhoogd wordt. Ook zal er meer onderzocht moeten
worden naar de gebruiksgemakken die gemeten zijn door eerdere
onderzoekers van dit concept.
12
Reflectie Karsten:

De meerwaarde van concept testing voor een business innovator ligt echt bij de intentie
en energie die de innovator erin stopt. Wanneer er een concept is ontwikkelt vanuit
passie en een echte duurzame visie zal er vanaf het begin van de test al duidelijk
worden dat de proefpersoon echt interesse toont en er meer ‘effort’ in het
onderzoeksproces wordt gestoken. Dit heeft als resultaat een betrouwbaarder
onderzoek. Als deze basis is gelegd is het als aspirant business innovator een echte
aanwinst voor alle verdere projecten en ontwikkelingen die hij/zij doormaakt. Je kunt het
zien als een kleine bouwsteen van het optimale totaalpakket. Daarnaast is concept
testing erg handig om erachter te komen of bepaalde innovaties wel gewild zijn. Je kunt
de gekste ontdekking doen en het meest creatieve idee hebben van de wereld, maar
wat is de toegevoegde waarde voor de consument? Het is een vraagstuk waar je uren
over zou kunnen praten. Concept testing is simpelweg belangrijk. Niet alleen om je
innovatie te bekijken vanuit een ander perspectief, maar ook om het op basis daarvan
nog beter te maken.

Reflectie Dane:

Tijdens de projecten doen we natuurlijk veel aan concept creating, maar als je de
waarde van een product voor de doelgroep wilt testen, zijn concept testing en de
bijbehorende tactieken heel belangrijk.

Tijdens de tests kwamen we toch achter een paar feiten die we van te voren niet
hadden kunnen voorspellen, maar hiermee konden we ons concept aanpassen en
kwamen we erachter waar de doelgroep écht op zoek naar is. Het is dus van groot
belang dat je als business innovator het concept zonder op alle details in te gaan gaat
testen.
Ik vind zelf dat we te weinig onderzoek hebben gedaan over eerdere onderzoeken
van dit concept. We hebben dit te weinig onderbouwd en zou ik zeker een
verbeterpunt vinden voor de volgende keer.

Ik vond het wel lastig, omdat we natuurlijk gewend zijn om ons eigen concept te testen
en we nu een concept moesten testen dat al helemaal aan alle eisen voldoet volgens
het bedrijf en niet ons eigen concept.

Mij lijkt het dus leuk om in het vervolg concept testing in verband te krijgen met ons
project. Zo leren wij er extra van en zou het ons veel kunnen helpen. Vooral omdat het
heel interessant is.
14
 Literatuurlijst
Alles wat je moet weten over prototypes. (3 juni 2018). Vincent.
Geraadpleegd op 2 oktober 2020,
https://www.conversiedesign.nl/prototypes/

User testing: wat, waarom en hoe?. (z.d.). Geraadpleegd op 8

oktober 2020, https://www.agconsult.com/nl/usability-
blog/user-testing-wat-waarom-en-hoe/

15