Burgertevredenheid meten bij lokale besturen

Burgertevredenheid meten betekent systematisch en betrouwbaar nagaan hoe tevreden inwoners zijn over de dienstverlening van hun lokaal bestuur. Dat vraagt meer dan een enquête uitsturen. Je meet bij voorkeur mensen met een recente ervaring als gebruiker van een dienst, je combineert verschillende methoden, je meet niet alleen hoe tevreden mensen zijn maar ook waarom, en je vergelijkt het belang van een dienst met de tevredenheid erover. Doe je dat niet, dan meet je vooral het algemene gevoel over de overheid, en dat is iets heel anders dan de kwaliteit van je dienstverlening.

Steeds meer steden en gemeenten willen weten wat hun inwoners van de dienstverlening vinden. De verleiding is groot om snel een online enquête de deur uit te sturen en het gemiddelde cijfer als eindresultaat te nemen. Toch is dat precies waar het misgaat. Onderzoek naar het meten van tevredenheid in lokale besturen, zoals de studie van het Ierse Institute of Public Administration, laat zien dat een tevredenheidscijfer verrassend makkelijk misleidt. In deze gids lees je wat burgertevredenheid meten echt inhoudt, welke methoden er zijn, en waar het in de praktijk fout loopt.

Wat burgertevredenheid meten precies betekent

Voor je iets meet, moet je weten wie je meet. De relatie tussen een inwoner en een lokaal bestuur kent meerdere gedaanten, en die keuze bepaalt welke vragen zinvol zijn. De onderzoeksliteratuur onderscheidt er klassiek vier, elk met een eigen kracht die de dienstrelatie bepaalt.

Voor het meten van dienstverlening is vooral de klant relevant: iemand die een dienst effectief heeft gebruikt. De werkdefinitie uit het onderzoek is helder: een klant is iemand met een recente ervaring als gebruiker van een dienst van het lokaal bestuur, waarbij recent staat voor de voorbije twaalf maanden. Die tijdsgrens is geen detail. Hoe recenter het contact, hoe meer het oordeel op echte ervaring berust en hoe minder op algemene vooroordelen over de overheid. Een bevraging die vraagt naar contact in de voorbije vijf jaar, waarbij slechts een derde van de mensen zich zo’n contact herinnert, meet in de praktijk geen klanttevredenheid maar een vaag publiek gevoel.

Tevredenheid is niet hetzelfde als prestatie

De grootste denkfout is aannemen dat een tevredenheidsscore de kwaliteit van de dienst weergeeft. Dat is niet zo. Tevredenheid is een subjectief oordeel dat verwachtingen, ervaringen en vooroordelen combineert, en het hangt niet altijd samen met de werkelijke prestatie. Er speelt een hardnekkige anti-overheidsbias: veel mensen zien publieke diensten onbewust als trager en minder goed, wat hun oordeel kleurt. Er is ook een negativiteitsbias, waarbij slechte informatie de tevredenheid sterker naar beneden haalt dan goede informatie ze omhoog haalt.

Even belangrijk is het volgorde-effect. Vraag je eerst naar het algemene gevoel over de overheid en pas daarna naar een concrete dienst, dan liggen die concrete scores merkbaar lager. Dat effect is sterker bij algemene vragen en zwakker bij heel specifieke. De les is duidelijk: hoe concreter en dichter bij de echte ervaring je meet, hoe zuiverder je meting. Dit is precies het soort ontwerpkeuze dat een goed opgezette klanttevredenheidsonderzoek onderscheidt van een enquête die vooral ruis oplevert. Dezelfde logica geldt trouwens bij commerciële organisaties, waar klanttevredenheid meten op precies dezelfde ontwerpvragen stuit.

Zeven manieren om burgertevredenheid te meten

Er bestaat niet één juiste methode. Elk instrument belicht een andere kant, en de kunst zit in de combinatie. Hieronder staan de zeven belangrijkste, elk met de sterkste en de zwakste kant erbij.

Administratieve data zijn vaak een onderschatte goudmijn. Een lokaal bestuur weet meestal precies hoeveel oproepen het beantwoordt, hoe lang een dossier duurt en hoeveel bezoekers een loket krijgt. Zo volgt een groot Iers bestuur jaarlijks tienduizenden klantcontacten, met een gemiddelde doorlooptijd in dagen en het aandeel oproepen dat binnen twintig seconden wordt beantwoord, ruim negentig procent in een goed jaar. Zulke cijfers meten geen beleving, maar ze wijzen wel feilloos naar knelpunten, en ze zijn continu beschikbaar zonder dat je iemand iets hoeft te vragen. Kwalitatieve methoden zoals focusgroepen en mystery shopping vullen dat aan met het verhaal achter de cijfers. Voor het harde, representatieve meten blijft de enquête onmisbaar, maar dan wel een enquête die de valkuilen hieronder vermijdt.

De juiste schaal en vraag kiezen

De schaal die je kiest, bepaalt mee welk antwoord je krijgt. Dat klinkt technisch, maar het heeft directe gevolgen voor je conclusie. Studies tonen dat een tevredenheids- of prestatieschaal gemakkelijker hoge scores oplevert, terwijl een verwachtings-, verbeter- of ideaalschaal strengere, lagere scores geeft. Mensen zetten hun kruisje minder snel in het bovenste hokje wanneer je hen vraagt te vergelijken met hun verwachting of met het ideaal.

Een paar vuistregels uit het onderzoek helpen. Meet je algemene tevredenheid, gebruik dan meerdere vragen samen in plaats van één, zoals de gekende driedelige schaal van de American Customer Satisfaction Index die tevredenheid, verwachting en vergelijking met het ideaal combineert. Gebruik een schaal met vijf tot elf punten, want te weinig punten is grof en te veel punten voegt schijnprecisie toe. Wees voorzichtig met bijwoorden: tamelijk tevreden is milder dan heel tevreden, en de afstanden tussen woorden zijn niet gelijk. Wil je een verbeterdoel stellen, stuur dan op het aandeel zeer tevreden, want dat is een ondubbelzinnig positief oordeel. De keuze van je antwoordschaal raakt aan hetzelfde ontwerpvraagstuk als bij een likertschaal, en aan de bredere kwaliteit van je kwantitatieve meting.

Hoe je de antwoorden verzamelt, bepaalt wie je hoort

Het kanaal waarlangs je bevraagt, kleurt je resultaat, omdat elk kanaal andere mensen bereikt en andere mensen laat afhaken. Een schriftelijke bevraging bereikt niet dezelfde inwoners als een digitale, en dat verschil sijpelt door in je cijfers. Wie oog heeft voor representativiteit, kiest het kanaal daarom bewust.

Face-to-face-bevraging levert de rijkste en meest volledige data op, geeft de beste controle over wie de vragen echt beantwoordt en haalt doorgaans de hoogste respons, maar ze is duur. Een schriftelijke bevraging is goedkoper en biedt anonimiteit, wat helpt bij gevoelige onderwerpen, maar ze moet kort zijn en loopt het risico dat bepaalde groepen over- of ondervertegenwoordigd raken, zoals mensen met taal- of leesdrempels. Een telefonische bevraging moet kort en eenvoudig zijn en laat sommige groepen structureel buiten beeld. Een webbevraging is flexibel, snel en goedkoop, maar de ongelijke toegang tot het internet vertekent de steekproef en ze leent zich slecht voor open vragen. Uit een groot aantal studies blijkt dat face-to-face het best scoort op representativiteit en schriftelijk het slechtst.

Ook de lengte telt. Als vuistregel geldt: online vijf tot tien minuten, schriftelijk acht tot twaalf pagina’s, telefonisch vijftien tot twintig minuten en face-to-face maximaal een halfuur. Wordt een bevraging langer, dan daalt zowel de respons als de kwaliteit van de antwoorden, want mensen haken af of vullen op de automatische piloot in. Alleen wanneer inwoners de dienst echt belangrijk vinden, verdragen ze een langere vragenlijst.

Meet ook de drivers, niet alleen de score

Een tevredenheidscijfer vertelt hoe goed je het doet, maar niet waarom. En zonder dat waarom weet je niet waar je moet ingrijpen. Daarom hoort bij elke serieuze meting een driveranalyse: welke onderliggende factoren sturen de tevredenheid? Onderzoek voor de publieke sector in Nieuw-Zeeland identificeerde zes drivers die de tevredenheid over publieke diensten het sterkst bepalen.

Dat de ingeloste verwachting de zwaarste driver is, heeft een belangrijke consequentie: verwachtingsmanagement is vaak een goedkopere hefboom dan de dienst zelf verbouwen. Een realistische belofte en een correcte opvolging wegen zwaarder dan een extra loket. Welke factoren op jouw diensten het zwaarst wegen, achterhaal je met een servicekwaliteitsmodel of een statistische driveranalyse op je enquêtedata.

Gap-analyse: verwachting versus beleving

Tevredenheid krijgt pas betekenis naast verwachting. Een dienst waarover mensen matig tevreden zijn, kan prima presteren als de verwachting laag lag, terwijl een hoge score toch een probleem kan verbergen als de verwachting nog hoger was. Daarom meet je beide, en bereken je de kloof ertussen. Een negatieve kloof betekent dat de verwachting niet is ingelost. Het onderstaande voorbeeld uit een bibliotheekonderzoek maakt het concreet.

Op het eerste gezicht scoort de boekencollectie beter dan het promotiemateriaal, want 5,9 is hoger dan 5,7. Toch is de kloof bij de collectie groter, omdat de verwachting daar veel hoger lag. Een bestuur dat enkel naar de belevingsscore kijkt, zou het verkeerde aspect verbeteren. Deze logica ligt aan de basis van servicekwaliteitsonderzoek, en de vergelijking van beide kloofscores vraagt om een correcte toetsing van het verschil, want twee scores die dicht bij elkaar liggen zijn niet automatisch statistisch significant verschillend.

Van cijfer naar prioriteit: belang versus tevredenheid

De meest praktische stap wordt vaak overgeslagen. Een dienst met een lage tevredenheid is pas een prioriteit als die dienst ook belangrijk is voor de inwoner. Door tevredenheid tegen belang af te zetten, zie je meteen waar je middelen het meest opleveren. Een bevraging van Ierse lokale besturen illustreert dat scherp.

Betaalbaar wonen is voor bijna een kwart van de inwoners een topthema, maar slechts 37 procent is er tevreden over. Dat is een duidelijke prioriteit. Een dienst die hoog scoort op tevredenheid maar laag op belang, mag bij schaarse middelen gerust wat minder aandacht krijgen. Precies deze belang-tevredenheidsafweging maakt van een meting een beleidsinstrument in plaats van een rapportcijfer.

Vergelijken zonder appels met peren

Een score op zich zegt weinig. Zeventig procent tevreden is goed of slecht afhankelijk van waarmee je vergelijkt. Er zijn drie zinvolle ijkpunten: vergelijken over de tijd, vergelijken met andere besturen, en vergelijken tussen groepen inwoners. Elk kent een valkuil. Vergelijken over de tijd werkt alleen als je vragen en methode constant houdt, anders vergelijk je meetfouten in plaats van tevredenheid. Vergelijken tussen besturen loopt spaak als hun bevolking en dienstenpakket sterk verschillen, want een jong, stedelijk bestuur is nu eenmaal moeilijk te vergelijken met een landelijk bestuur met een oudere bevolking.

De rijkste inzichten komen uit segmentatie: tevredenheid uitsplitsen naar leeftijd, buurt of kanaal. Vaak blijken jongere en stedelijke inwoners tevredener dan oudere en landelijke, en net die verschillen wijzen je naar de groepen die aandacht nodig hebben. Zulke vergelijkingen staan of vallen met een voldoende grote steekproef per groep en met een representatieve, gewogen dataset, anders vergelijk je toeval.

Waarom een enquêteknop nog geen meting is

Elk online platform laat je binnen enkele minuten een tevredenheidsenquête naar duizenden inwoners sturen. Dat gemak is precies het risico. De knop indrukken is triviaal geworden, maar alles wat een meting betrouwbaar maakt, is dat niet. Meet je klanttevredenheid of publiek gevoel? Vraag je mensen met recente ervaring, of iedereen? Is je steekproef representatief of antwoorden vooral de ontevredenen? Kies je een schaal die je scores kunstmatig oppompt of net afvlakt? Meet je ook de drivers en het belang, of enkel het cijfer? En corrigeer je voor sociale wenselijkheid en voor de vertekening die de overheid nu eenmaal oproept?

Op elk van die vragen kan een verkeerd antwoord een keurig ogend rapportcijfer waardeloos maken, zonder dat iemand het merkt. Een tevredenheidscijfer van 72 procent oogt even overtuigend of het nu klopt of niet. Daarom is het meten van burgertevredenheid vakwerk: het vraagt iemand die weet waar de meting faalt, de juiste vragen stelt, een representatieve steekproef trekt en het cijfer vertaalt naar een beslissing die hout snijdt. De software levert het getal, de expert levert het inzicht. Dat verschil is voor een lokaal bestuur, dat publiek geld verantwoordt, geen luxe maar een voorwaarde. Vaak is een gestructureerd luisterprogramma dat meerdere methoden combineert waardevoller dan één losse enquête.

Laat je burgertevredenheid professioneel meten

Burgertevredenheid meten is een krachtig instrument om je dienstverlening te sturen, maar alleen in handen van iemand die de valkuilen kent. Bij BABLR zetten we het onderzoek zo op dat de cijfers ook echt iets betekenen: de juiste vraagstelling, een representatieve steekproef, een driver- en gap-analyse, en een vertaling naar concrete prioriteiten. Benieuwd hoe dat er voor jouw bestuur uitziet? Ontdek onze aanpak voor burgerbevraging, lees hoe we werken voor lokale overheden en lokale besturen, of bekijk hoe een marktonderzoek via BABLR verloopt.