Waarom maakt het uit wie een nieuwe methode test?

Wie een nieuwe methode test, maakt uit: de kennis, verwachtingen en belangen van de tester kunnen bepalen wat wordt opgemerkt, gemeten en gerapporteerd. Interne resultaten kunnen waardevol zijn, maar onafhankelijk onderzoek helpt nagaan of de bevindingen ook buiten de ontwikkelaars standhouden.

Dat is belangrijk wanneer je een leerplan, een hulpmiddel voor je werk of een aanpak voor zelftwijfel kiest. Een enthousiast succesverhaal kan je aandacht trekken. Voordat je er tijd of vertrouwen in steekt, wil je weten wat dat verhaal werkelijk aantoont.

Wat kunnen interne resultaten je vertellen?

Interne resultaten zijn bevindingen die de ontwikkelaars of uitvoerders van een methode verzamelen. Ze kunnen veelbelovende eerste signalen geven, problemen blootleggen en een breed idee omzetten in iets wat anderen kunnen testen.

Stel dat iemand een aanpak ontwikkelt om sollicitatiegesprekken voor te bereiden. Diegene probeert hem met een kleine groep. De deelnemers zeggen dat ze rustiger zijn en vragen duidelijker beantwoorden. Dat verdient aandacht. De ontwikkelaar kan ook zien welke instructies verwarrend zijn en ze verbeteren.

Het werk van de grondlegger is hier waardevol. Ontwikkelaars kennen hun methoden vaak door en door en kunnen details uitleggen die buitenstaanders missen. Maar bemoedigende feedback laat vragen open. Hielp de methode, of speelden extra oefening, persoonlijke aandacht of hoop mee? Interne resultaten vormen het begin van het onderzoek; ze beantwoorden niet elke vraag.

Wat maakt een onderzoek onafhankelijk?

Onafhankelijk onderzoek geeft onderzoekers ruimte om een methode te testen zonder dat de ontwikkelaars de bevindingen of conclusies bepalen. Onderzoekers moeten zowel teleurstellende als veelbelovende resultaten vrij kunnen rapporteren.

Onafhankelijkheid is meer dan een andere naam op het rapport. Wie betaalt het onderzoek? Wie kiest de meetcriteria? Wie beheert de gegevens? Mag het team publiceren als de methode niet helpt? Deze details wegen zwaarder dan het etiket ‘extern’.

Ontwikkelaars kunnen nog steeds uitleggen hoe je hun methode goed gebruikt. Onafhankelijkheid betekent niet dat je hen buitensluit, maar dat je hun nuttige kennis scheidt van zeggenschap over de uitkomst. Denk aan een kok die een recept deelt: een andere keuken heeft duidelijke instructies nodig, maar de kok mag niet bepalen welke maaltijden als geslaagd tellen.

Hoe vergroot replicatie het vertrouwen?

Replicatie betekent opnieuw testen om te zien of een bevinding standhoudt. Onafhankelijke replicatie combineert een nieuwe test met een team dat zijn eigen conclusies kan trekken.

Stel dat de sollicitatiemethode één groep helpt. Helpt ze ook een andere groep met een andere trainer? Is het voordeel een maand later nog zichtbaar? Herhaalde tests helpen ontdekken of een resultaat afhangt van een vaardige grondlegger, een specifieke situatie of een toevallig geslaagde eerste poging.

Een mislukte herhaling levert nuttige informatie op, niet automatisch een definitief oordeel. Misschien waren de instructies onduidelijk of verschilden de groepen op een belangrijk punt. Tegelijk moeten we niet elke mislukking wegverklaren. Replicatie onderzoekt of een claim eerlijke tests doorstaat, niet of we haar eindeloos kunnen blijven verdedigen.

Waarom is de onderzoeksopzet even belangrijk als onafhankelijkheid?

De onderzoeksopzet is het plan om een claim te testen, inclusief wat je meet en waarmee je het vergelijkt. Ook een onafhankelijk team kan een zwakke test uitvoeren. Onafhankelijkheid alleen is dus niet genoeg.

Bij de sollicitatiemethode kan een vergelijking met mensen die geen hulp krijgen een belangrijke vraag onbeantwoord laten. Wat als elke vorm van begeleid oefenen helpt? Een nuttige vergelijking kan een andere groep evenveel tijd en aandacht bieden via een andere voorbereidingsaanpak.

Het team moet ook bepalen wat succes betekent voordat het de resultaten ziet. Je rustiger voelen, goed antwoorden en aangenomen worden zijn verschillende uitkomsten. Alleen de beste verhalen meetellen kan een methode sterker laten lijken dan ze is. Duidelijke meetcriteria en een volledig verslag van de resultaten laten zowel voordelen als beperkingen zien.

Wat zou onderzoek naar InnerVoice moeten aantonen?

Onderzoek naar InnerVoice moet praktische voordelen onderscheiden van de fundamentele claims. Bewijs dat een oefening iemand helpt, bevestigt op zichzelf niet de volledige achterliggende verklaring.

InnerVoice stelt dat de dynamische balans Zekerheid ↔ Onzekerheid aan elke menselijke emotie ten grondslag ligt. Het stelt ook dat de Vijf transformaties, of 5TFM, een fundamenteel, terugkerend proces beschrijven dat mensen al bewust of onbewust gebruiken om met die verhouding om te gaan, eindigend in Word Vrienden met Je Innerlijke Stem.

Dat zijn bredere claims dan ‘deze oefening hielp me mijn mening te uiten’. Ze testen vraagt om duidelijke voorspellingen en eerlijke vergelijkingen met andere verklaringen. Balans moet los van de uitkomst worden gemeten: iedereen die vooruitgaat ‘in balans’ noemen, maakt de redenering circulair. Het aangeleverde materiaal bevat argumenten, geen onafhankelijke resultaten die deze universele claims bevestigen. Nuttige voorbeelden leggen het model uit; ze bewijzen het niet.

Hoe blijf je open zonder elke claim te aanvaarden?

Je kunt open blijven door je vertrouwen af te stemmen op het bewijs. Een nieuwe methode is niet per se waardeloos als onafhankelijke tests ontbreken, en niet bewezen omdat de ontwikkelaar succes heeft gezien.

Vanuit InnerVoice kan je Stem van Zekerheid zeggen: ‘Dit lijkt het verkennen waard.’ Je Stem van Onzekerheid kan vragen: ‘Wat zien we misschien over het hoofd?’ Beide kunnen helpen; geen van beide hoeft de baas te zijn. Trekt een methode je aandacht, vraag dan: ‘Wie heeft haar getest, waarmee is ze vergeleken en vond een ander team iets vergelijkbaars?’