Seks fejl i små publikumsundersøgelser og hvordan du undgår dem

Den første fejl dukker op allerede i udkastet: spørgsmålet indeholder sit eget facit. "Hvor meget savner du flere lokale historier?" lægger savnet i munden på læseren. Når jeg læser korrekturen på deltagernes spørgeskemaer, ser jeg det næsten hver gang, og det er sjældent med vilje. Man skriver ud fra det, man selv håber at høre.

Retningen kan også ligge i svarmulighederne. Hvis tre ud af fem skalatrin er positive, får du en rosende overvægt uden at publikum har sagt andet end det, du bad dem om. Lad skalaen være ligeligt balanceret, og tilbyd altid en mulighed som "ved ikke" eller "passer ikke på mig".

En enkel øvelse hjælper: læs hvert spørgsmål højt og spørg dig selv, om en læser, der er uenig med dig, kunne svare ærligt uden at føle sig i klemme. Hvis ikke, skal formuleringen omskrives, før nogen får spørgeskemaet at se.

• Brug neutrale ord som "hvordan oplever du" frem for "hvor godt synes du"
• Giv lige mange positive og negative svartrin
• Tilføj altid en åben mulighed for at svare noget andet

Den næste fejl handler om grådighed. Når man først har fat i publikum, vil man gerne vide alt, og spørgeskemaet vokser til tyve, tredive spørgsmål. Resultatet er, at de sidste svar bliver tilfældige, fordi folk klikker sig igennem for at blive færdige.

I kurset arbejder vi med en grænse: ét skema skal kunne besvares på få minutter, og hvert spørgsmål skal kunne knyttes til en beslutning på redaktionen. Kan du ikke sige, hvad du vil gøre anderledes afhængigt af svaret, så er spørgsmålet pynt.

Det er bedre at lave to små undersøgelser med nogle ugers mellemrum end én stor. Du får friskere svar, du kan justere undervejs, og du undgår, at et langt skema skræmmer netop de travle læsere væk, som du helst vil høre fra.

Når der kun er svaret fra en snes mennesker, fristes man til at tale i procenter. "Syv ud af ti ønsker mere video" lyder som en konklusion, men er i virkeligheden en håndfuld personer. En lille undersøgelse kan pege på spor at følge op, ikke på sandheder om hele publikum.

Jeg beder derfor deltagerne skrive antallet af svar øverst i enhver opsummering og bruge forsigtige formuleringer: "flere nævnte", "enkelte oplevede". Det kan virke omstændeligt, men det beskytter kollegerne mod at tage store beslutninger på tyndt grundlag.

Læg også mærke til, hvem der overhovedet svarede. Dem, der engagerer sig mest, er sjældent et billede af de stille læsere. Skriv det ned som en begrænsning, så rapporten er ærlig om, hvad den kan bære.

• Skriv altid antallet af svar ved siden af hver påstand
• Brug ord som "flere" og "enkelte" frem for procenter ved små tal
• Notér, hvem der ikke svarede

Samtaleguides går galt på en anden måde. Intervieweren holder sig stramt til sin liste, afbryder, når svaret afviger, og går videre til næste punkt. Så får du bekræftet det, du allerede troede, og mister de uventede detaljer, som er hele pointen med en samtale.

En god guide er en støtte, ikke et manuskript. Jeg anbefaler få åbne udgangsspørgsmål og nogle opfølgninger som "fortæl mere om det" eller "hvad skete der så". Stilhed er også et redskab: giv den andens tanke plads, før du fylder rummet.

Øv først med en kollega, og lyt til optagelsen bagefter. De fleste opdager, hvor ofte de selv taler, og hvor mange lukkede spørgsmål der gemmer sig i en guide, som på papiret så åben ud.

En undersøgelse uden opfølgning er spildt tid, både for redaktionen og for dem, der svarede. Alt for ofte ender en rapport i en mappe, fordi ingen på forhånd havde aftalt, hvem der læser den, og hvad den skal udløse.

Før du sender det første spørgsmål afsted, så skriv ned, hvilken beslutning undersøgelsen skal hjælpe med, og hvem der tager den. Efter analysen holder du et kort møde, hvor I vælger én til tre små ændringer og aftaler, hvornår I kigger på dem igen.

Giv gerne også noget tilbage til de svarende. En kort besked om, hvad I lærte, og hvad I nu prøver, viser respekt og gør det lettere at få svar næste gang, uden at du lover mere, end redaktionen kan holde.

• Formulér beslutningen, før du formulerer spørgsmålene
• Aftal ansvarlig og tidspunkt for opfølgning
• Fortæl deltagerne, hvad der kom ud af det

Fordi undersøgelsen er lille, tror man ofte, at reglerne er lempeligere. Men også et skema i et lukket læserforum rummer personlige oplysninger og meninger, som folk har givet i tillid til, at de bruges til det formål, du nævnte.

Sig tydeligt, hvem du er, hvad svarene bruges til, og hvor længe de gemmes. Spørg kun om det, du har brug for; alder og bopæl er sjældent nødvendige. Gengiver du et citat, så fjern detaljer, der kan afsløre afsenderen, især i små lokale fællesskaber.

Det er en del af håndværket, ikke en bremse for det. Når folk oplever, at du behandler deres svar ordentligt, svarer de mere ærligt, og så bliver selve undersøgelsen bedre.