Om de standaard zo compleet en zorgvuldig als mogelijk te ontwikkelen, ontvangen we graag jouw feedback op versie 0.9. Deze kun je hier downloaden:
Betrouwbare, waardevolle
impactmeting
Binnen deze pilot willen we met kennis en ervaring uit de praktijk een vrij toegankelijke meetstandaard voor social impact ontwikkelen. Door de manier van meten en rapporteren te standaardiseren, zorgen we voor eenheid in effecten, indicatoren en definities voor zowel impactmakers als impactfinanciers. Hierdoor wordt impactmeting betrouwbaarder, beter vergelijkbaar en waardevoller.
De voordelen van een meetstandaard
Standaardisatie biedt voordelen in tijdbesparing, implementatie (Ă©Ă©n keer uitleggen, door iedereen te begrijpen) en uitwisseling. En zijn de effecten en indicatoren universeel: door iedereen te gebruiken, vergelijken en volgen.
De meetstandaard is van en voor iedereen. Wordt samen ontwikkeld. En is altijd door iedereen te gebruiken.
Van en voor iedereen
De standaard die met deze pilot wordt gemaakt komt publiekelijk online en is voor iedereen toegankelijk. Met duidelijk omschreven effecten en bijbehorende vragen. En heldere instructies hoe te meten en te rapporteren. De meetstandaard is gratis te gebruiken en toepasbaar in alle bekende en eigen impactmanagementsystemen. De standaard wordt doorlopend geactualiseerd en continu doorontwikkeld op gebieden van (verbreding van) thematiek en toepasbaarheid op bijvoorbeeld inkoop.
Voortgang
Versie 0.9 is gereed!
Vanaf eind juli hebben we partners, impactmakers en experts gevraagd om feedback te verzamelen over de Meetstandaard zoals die er toen stond. Iedereen die een steentje heeft bijgedragen: heel erg bedankt! Hiermee kunnen we de Meetstandaard een stap verder brengen. We hebben alle feedback verwerkt en publiceren bij deze de 0.9 versie. Deze is aangescherpt op basis van de feedback, maar nog niet getoetst in de praktijk. Die testfaste begint nu.
De aanpassingen die we hebben gedaan op basis van de feedback is:
- Handleiding toegevoegd; hoe de meetstandaard te gebruiken
- Effecten zijn nu onderverdeeld in overkoepelende categorieën
- Verwoording van een aantal vragen aangepast ten behoeve van leesbaarheid
- FAQ uitgebreid met een aantal vragen ter verduidelijking
Voor de vragenlijst hebben we deze criteria gehanteerd:
- 3-5 vragen per effect (betrouwbaar, maar ook behapbaar voor respondenten)
- minimaal Ă©Ă©n negatief geformuleerde controlevraag
- de vragen zo concreet en algemeen toepasbaar mogelijk gehouden
- elke vraag in hetzelfde format gesteld (dus makkelijk in te vullen en makkelijk te vergelijken)
- taalniveau B1
Doe je mee?
Diverse impactmakers, impactfinanciers en andere ecosysteempartners werken binnen de pilot samen: Rabo Foundation, Stichting DOEN, het Oranje Fonds, Breedweer, Het Theezaakje, Butterfly Effect, Social EnterpriseNL en Voor Goed Agency. Om een standaard te laten werken zijn breed draagvlak en jouw kennis en ervaring uit de praktijk nodig.
”
Willemiek EvertsAanjager Meetstandaard Social Impact
Dit kun je doen
đ„ âïžâïžâïž Ik ben impactmaker
Wil je actief meedoen aan de testfase? Meld je dan aan via een kort mailtje naar tomas@meetstandaard.nl
đ âïžâïžâïž Ik ben impactfinancier
Om van de pilot en uiteindelijk de Meetstandaard een breed gedragen methode te maken, kan jij bijdragen op zowel inhoud (delen van kennis en ervaring m.b.t. meten en rapporteren) als financieel. We maken graag kennis!
đ€ âïžâïžâïž Ik ben ecosysteempartner
Delen? Graag! We willen jou vragen om de pilot meetstandaard zoveel mogelijk onder de aandacht te brengen en te verbinden aan relevante initiatieven, organisaties, bedrijven en personen. Delen? Graag. Hier vind je de mediakit met basisteksten en logoâs. Bedankt!
Zo gebruik je de Meetstandaard
Om jullie social impact te meten kun je kiezen uit de effecten die je nastreeft of belangrijk vindt. Alle effecten hebben we helder gedefinieerd. Bij elk effect hoort een set vragen. Die vragen kun je op verschillende manieren stellen. Hiermee kun je volgens het stappenplan hiernaast de impact meten.
Stap 1: Bepaal hoe je wilt gaan meten (het meetinstrument)
- Vragenlijsten: Praktisch voor het verzamelen van kwantitatieve data maar hier kunnen natuurlijk ook de open vragen (kwalitatieve data) gesteld worden). Gebruik bij voorkeur een systeem zoals Google Forms zodat het verwerken van data naderhand eenvoudig is.
- ĂĂ©n op Ă©Ă©n gesprekken: Handig voor aanvullende kwalitatieve inzichten en geschikt om in een vertrouwde setting door te vragen.
- Kunnen de deelnemers zelfstandig een vragenlijst invullen of hebben ze daar hulp bij nodig? Voor de betrouwbaarheid van het onderzoek gaat de voorkeur vaak uit naar zelfstandig laten invullen. Echter kan het zo zijn dat jouw deelnemers dat lastig vinden bijvoorbeeld omdat zij moeite hebben met lezen, in dat geval is het beter dat een deelnemer de vragenlijst invult onder begeleiding. Dit is niet erg, maar het is wel belangrijk om hier transparant over te communiceren wanneer je de impactmeting uitwerkt tot bijv. een impactjaarverslag.
Stap 2: Bepaal op welke momenten je wilt gaan meten (de meetmomenten)
Kies geschikte momenten voor metingen om veranderingen over tijd te volgen. Het is belangrijk om aan te sluiten bij natuurlijke momenten zoals een afsluitend gesprek of een coachingssessie:
- Nulmeting: Voer deze niet direct aan het begin uit, maar na een korte periode zodat de respondent zich op zijn gemak voelt en minder geneigd is sociaal wenselijk te antwoorden.
- Eindmeting: Aan het einde van de interventie, bijvoorbeeld tijdens een eindgesprek. (dit is niet van toepassing indien je doorlopend of voor onbepaalde tijd begeleiding biedt.
- Tussentijdse of doorlopende meting: Wanneer je doelgroepen voor onbepaalde, of voor langere tijd helpt, dan is het verstandig om naast een nul- en eindmeting ook tussentijds of doorlopend te meten. Regelmatige metingen voor continue monitoring, bijvoorbeeld tijdens maandelijkse voortgangsgesprekken.
Stap 3: Stel de vragenlijst samen
Gebruik de tabel in de Meetstandaard om een vragenlijst samen te stellen, die kan in een systeem als Google Forms, maar wanneer je de impactmeting via Ă©Ă©n op Ă©Ă©n gesprekken wilt doen kan het bijvoorbeeld ook in een bestaand coachingsformulier.
- Selecteer de relevante effecten: Kies de effecten die je wilt meten (bijvoorbeeld zelfvertrouwen, fysieke gezondheid, etc.).Â
- Gebruik de voorgeschreven stellingvragen: Neem de gestandaardiseerde stellingvragen uit de tabel over en verwerk deze tot een vragenlijst in een platform als google forms, surveymonkey of word.Â
- Optionele kwalitatieve vragen: Voeg open vragen toe voor meer inzicht. Wij raden aan om open vragen in een gesprek te bespreken, en niet in een vragenlijst. Dit biedt de kans om door te vragen en meer inzicht te krijgen, waar een open vraag in een vragenlijst vooral tot irritatie leidt.
- Vragenlijst aanvullen: Je wil in de vragenlijst een duidelijke introductie geven. Benoem waarom je de vragenlijst voorlegt, hoe lang het invullen ongeveer zal duren, en wat jullie met de opgehaalde data doen.. Verder kan je de vragenlijst ook gebruiken voor een algemene evaluatie over bijvoorbeeld wat iemand van de interventie vindt, wat iemand van de begeleiders vindt, etc. Probeer wel de vragenlijst zo kort mogelijk te houden. Richt op een maximale invultijd van 10 minuten of maximaal 30 gesloten, en 5 open vragen.
Stap 4: Zet de vragenlijst uit via je gekozen meetmethode en meetmomenten
Door deze stappen te volgen, kan de impact van interventies beter begrepen en verbeterd worden. Door het gebruik van de Meetstandaard Social Impact kunnen impactmakers betrouwbare en waardevolle data verzamelen die inzicht geven in de behaalde resultaten en bijdragen aan hun missie.
Stap 5: Stappenplan voor analyse meetresultaten
Klik hieronder om de video te starten waarin Tomas je uitlegt hoe je de meetresultaten analyseert. Liever tekst? Binnenkort vind je het stappenplan hier ook in documentvorm.
FAQ Meetstandaard Social Impact
Wordt er gebruikgemaakt van gevalideerde vragenlijsten?
Ja. Bestaande gevalideerde vragenlijsten zijn gebruikt als input voor de Meetstandaard. We hebben gezocht naar vragen uit de meest relevante wetenschappelijke vragenlijsten, en deze vergeleken met hoe impactmakers graag hun vragen stellen aan hun doelgroepen. We hebben daarmee het aantal vragen per effect altijd beperkt tot maximaal 5 zodat het voor impactmakers mogelijk is om meerdere effecten in 1 vragenlijst te meten, zonder dat de vragenlijst te lang wordt om in te vullen. De verschillende onderdelen van de Meetstandaard zelf zijn op dit moment nog niet gevalideerd. Dit is wel iets wat we in de toekomst willen gaan doen.
Staan alle effecten hier wel in?
Nee. De effecten die hierin zijn opgenomen gelden op dit moment vooral voor impactmakers die op enige manier bezig zijn met arbeidsparticipatie. Dit maakt dus dat de effecten die er nu in staan, vooral relevant zullen zijn voor deze impactmakers. Maar we willen de Meetstandaard vanzelfsprekend verder uitbreiden naar andere thematiek! Heb je hier sterke behoefte aan, wij staan altijd open voor partnerschappen om de Meetstandaard verder te ontwikkelen. Neem contact op via willemiek@meetstandaard.nl. Het kan ook zijn dat we een effect over het hoofd hebben gezien, oops! In dat geval horen we graag welk effect er volgens jou echt in zou moeten staan! Vul deze vragenlijst in voor je feedback;
Werkt de Meetstandaard ook met andere, bestaande of veel gebruikte (registratie)systemen?
Ja, de Meetstandaard kan worden geĂŻntegreerd in verschillende (registratie)systemen. Dit maakt het mogelijk om impactmetingen naadloos op te nemen in bestaande bedrijfsprocessenâ en software. Maar dat hoeft niet. De Meetstandaard is ook zonder speciale software of systemen te gebruiken.
Hoe verhoudt de Meetstandaard zich tot het Impactpad?
De Meetstandaard biedt aanvullend op het Impactpad een laagdrempelige en gestandaardiseerde manier om te bepalen welke vragen je kan stellen om je impact te meten. De Meetstandaard en het Impactpad zijn hiermee complementair aan elkaar. Het Impactpad helpt organisaties bij het identificeren en formuleren van hun impactdoelstellingen en de stappen die nodig zijn om deze te bereiken. Dit is inclusief handvatten voor het bepalen wat je wilt meten, en hoe je het impactmeten goed kan aanpakken. Hierin wordt veel gerefereerd naar bestaande meetinstrumenten die zich op Ă©Ă©n enkel effect richten. Het is daarmee lastig om meerdere effecten tegelijk te meten zonder teveel van je doelgroep te vragen. De Meetstandaard biedt Ă©Ă©n plek, en een standaardoplossing voor alle effecten die je als impactmaker wilt meten bij je doelgroep. Hiermee vult de Meetstandaard het Impactpad aan op niveau 4 en 5, waar het Impactpad handvatten geeft voor het bepalen welke vragen je moet stellen om je impact te meten. Samen vormen het Impactpad en de Meetstandaard een complete aanpak voor impactmanagement en -meting.
Moet je betalen voor gebruik van de Meetstandaard?
Nee, de Meetstandaard is gratis toegankelijk voor iedereen. Het wordt publiekelijk online beschikbaar gesteld en kan door iedereen worden gebruikt en toegepast in verschillende impactmanagementsystemenâ.
Van wie is de Meetstandaard Social Impact?
De Meetstandaard is van-voor-door iedereen die werkt aan het vergroten van social impact. Het is een algemene voorziening die gratis is toe te passen en werkt met alle gangbare bestaande impact meetsystemen.   Â
Het is de bedoeling om de Meetstandaard onder te brengen in een onafhankelijke organisatie (bijvoorbeeld een stichting). Dit wordt de komende periode onderzocht.
Wat is de rol van Alexander Impact binnen deze pilot?
Alexander Impact coördineert en voert de pilot en het vervolg hiervan uit. Zij staat borg voor onafhankelijke controle en toezicht en streeft naar een zo breed mogelijke aansluiting van het ecosysteem van impactmakers en -financiers door actieve benadering van partijen, heldere communicatie, een zover als mogelijke wetenschappelijke onderbouwing en een kritische houding. Zo moet de Meetstandaard toegankelijk, betrouwbaar en toepasbaar zijn en blijven voor iedereen.
Waarom neemt Alexander Impact dit initiatief?
Alexander Impact heeft als missie om organisaties te helpen zoveel mogelijk impact te maken door kennis te delen.
De Meetstandaard Social Impact is ontstaan vanuit de behoefte bij impact makers- en financiers om het meten van impact laagdrempeliger en waardevoller te maken. Alexander Impact heeft het project om te komen tot de Meetstandaard geĂŻnitieerd en neemt de leiding in de ontwikkeling hiervan.
Met wie wordt samengewerkt?
Om te komen tot de Meetstandaard wordt samengewerkt met meerdere fondsen, sociale ondernemers en andere partijen uit het ecosysteem.
Onder andere met de Rabo Foundation, Stichting DOEN, het Oranje Fonds, ING Fonds, Breedweer, Eva Walraven, Het Theezaakje, Butterfly Effect, Social EnterpriseNL, Impact Noord, Impact Oost, Voor Goed Agency, Sur Atelier, Blixem. De samenwerking en ondersteuning is zowel inhoudelijk als soms ook financieel.
De samenwerking vindt gestructureerd plaats in de In de Advies- en Stuurgroep. Met de Adviesgroep wordt gewerkt aan de inhoudelijke ontwikkeling van de Meetstandaard. Met deze groep, met impactmakers- en financiers, die ervaring heeft met impactmeten vindt maandelijks afstemming plaats om hun inzichten, kennis en kunde mee te nemen in de ontwikkeling van een goede Meetstandaard. Vertegenwoordigers van Vanhulley, OranjeFonds, Deccos en Rabo Foundation nemen hieraan deel. De intentie is er om deze groep uit te breiden met (afvaardiging uit) een kennisinstelling.Â
Parallel aan de inhoudelijke ontwikkeling van de Meetstandaard Social Impact, wordt in de Stuurgroep gewerkt aan de governance, de (door)ontwikkeling van de Meetstandaard en ook het onderbrengen van de Meetstandaard in een onafhankelijke organisatie.
De eerste bijeenkomst vindt plaats na de zomer. Onder andere vertegenwoordigers van Social Enterprise NL, Breedweer, Butterfly Effect, Stichting VoorGoed en de BuzinezzClub hebben aangegeven hier aan deel te willen nemen.
In de ontwikkelfase wordt ook de samenwerking opgezocht met organisaties en kennisinstellingen die ook onderzoek doen naar impact meten.Â
Er wordt continu gewerkt aan het verbreden van draagvlak, met name in de overheids-en publieke sector. Wij staan zeer open voor zeer open voor suggesties, aanbevelingen en introducties.
Hoe wordt de Meetstandaard Social Impact gefinancierd?
De ontwikkelfase ( 2024 – 2025) van de Meetstandaard worden gefinancierd door diverse fondsen en in-kind bijdrage van Alexander Impact.Â
Door financiële bijdragen van de Rabo Foundation, Het Oranje Fonds en Stichting DOEN worden de uren voor projectmanagement en onderzoek en ontwikkeling gedeeltelijk vergoed. Dit is niet kostendekkend. Alexander Impact investeert zelf ook door bij te dragen in uren.
Kan ik een effect meten door slechts een deel van de vragen te gebruiken?
Nee, de Meetstandaard is bedoeld om een gemeenschappelijke vocabulaire te ontwikkelen in het impactmeten en rapporteren. Dit betekent ook dat Ă©Ă©n effect voor iedereen hetzelfde moet zijn. Indien slechts een deel van de vragen van toepassing is (bijvoorbeeld; je doet een interventie op roken; en de vragen bij gezonde leefstijl zijn niet allemaal relevant), dan is het nog steeds belangrijk om alle vragen bij gezonde leefstijl te stellen. In de resultaten zie je dan waarschijnlijk terug dat je leefstijlbreed wellicht minder impact maakt, maar specifiek rookgedrag meer. Juist door het gehele effect alsnog te meten kan je goed zichtbaar maken waar jouw specifieke meerwaarde zit.
Is de Meetstandaard voor impact op individuen, of op groepsniveau?
Je kan de Meetstandaard gebruiken om zowel op individueel als op groepsniveau impact inzichtelijk te maken. Het hoofddoel van de Meetstandaard is om op groepsniveau veranderingen in kaart te brengen en zo de bijdrage van jouw gehele organisatie in kaart te brengen. Als je individuele veranderingen inzichtelijk wil maken en wilt gebruiken voor bijvoorbeeld coaching, is het belangrijk dat je in de vragenlijst van de effecten ook persoonsgegevens kan koppelen (volgens AVG). Zo kunnen coaches ook effectmetingen van de Meetstandaard gebruiken om bijvoorbeeld een begeleidingsplan te maken.
Waarom een schaal van 1-5?
Voor deze fase in de ontwikkeling van de Meetstandaard hebben we gekozen om de vragen te stellen in de vorm van een likertschaal van 1-5 (helemaal mee oneens – helemaal mee eens). Op basis van opgehaalde input van meer dan 50 impactmakers zien we dat de 1-5 schaal het meest gehanteerd wordt. Daarnaast zijn er nog een aantal overwegingen die mee hebben gespeeld:
- Een schaalvraag van 1-5 is mondeling nog goed te stellen; dit wordt vanaf 1-7 lastiger.
- Schaalvragen van 1-5 worden prettiger ervaren door respondenten dan schaalvragen van 1-7 of 1-10.
- Een schaalvraag van meer dan 7 levert geen extra nuancewinst op, en resulteert slechts in een hoger irritatiegehalte bij respondenten.
Hoewel 1-7 schaal wel nuancewinst oplevert ten opzichte van 1-5, wordt 1-5 prettiger ervaren door respondenten. We hebben voor nu bewust de keuze gemaakt voor laagdrempeligheid en een prettige ervaring voor respondenten (en eventuele afnemers van de vragenlijst) boven nuance. We zullen in de pilotfase samen met impactmakers evalueren of het verlies aan nuance erg vervelend is, of dat het zo laagdrempelig mogelijk invullen toch belangrijker is. Een tussenweg van 1-6 is ook mogelijk, echter is een even aantal vrij ongebruikelijk omdat het respondenten forceert om positief/negatief te kiezen. Een even aantal schaalvragen wordt normaliter gehanteerd wanneer respondenten erg veel âneutraalâ antwoorden. In dat geval kan een schaalvraag met een even aantal helpen om de respondent bewust te laten kiezen. Wanneer we na de pilotfase zien dat er relatief veel neutraal wordt beantwoord, zullen we een even aantal antwoorden overwegen voor een nieuwe versie.
Deelnemers/respondenten zijn niet in staat om zelfstandig een vragenlijst in te vullen
Zie âStappenplan toepassen van de Meetstandaard Social Impactâ
Veel effecten, en veel overlap; waarom?
Het aantal effecten dat nu in de Meetstandaard is opgenomen is 21. Met name in de effecten âveerkrachtâ, âzelf-effectiviteitâ en âempowermentâ zit veel overlap. Evenals de effecten âlichamelijke gezondheidâ en âgezonde leefstijlâ (de eerste volgt uit de tweede). In de definities van de effecten zit wel belangrijk onderscheid, en ook in de input die we van meer dan 50 impactmakers hebben opgehaald zien we verschillende toepassingen van deze effecten. Omdat we het belangrijk vinden dat elke impactmaker goed zichtbaar kan maken waar zijn/haar toegevoegde waarde ligt, hebben we de verscheidenheid aan effecten vooralsnog redelijk groot gehouden. Tijdens de pilotfase zullen we samen met impactmakers evalueren of het mogelijk en wenselijk is om het aantal effecten in te korten en de overlap tussen effecten te verminderen.