Fout-negatieven
Resultaten die een werkelijk aanwezig effect niet weten te detecteren.
Resultaat van een statistische test die er niet in slaagt een werkelijk effect te detecteren, waardoor ten onrechte wordt geconcludeerd dat er geen significant verschil is tussen twee varianten, terwijl dat verschil er wel degelijk is. In de context van CRO en A/B testing kan een fout-negatief ertoe leiden dat je een variant verwerpt die eigenlijk beter presteert, simpelweg omdat de test onvoldoende power had (bijv. te kleine steekproef, te korte duur, MDE te laag).
Fout-negatieven worden vaak tegenover fout-positieven geplaatst, die juist ten onrechte aangeven dat een effect significant is terwijl dat niet zo is. De balans tussen deze twee soorten fouten hangt af van de gekozen statistische parameters (betrouwbaarheidsniveau, power) en moet zorgvuldig worden afgestemd om verkeerde beslissingen in optimalisatietests te voorkomen.
Autres termes : Statistiques
Bekijk de volledige woordenlijst- Frequentistische aanpak (A/B test)Een statistische aanpak die de parameters van het model schat uitsluitend op basis van de geobserveerde data, zonder gebruik te maken van voorafgaande informatie.Statistiques
- Bayesian (A/B test)Een statistische benadering die gebruikmaakt van waarschijnlijkheid om onzekerheid over modelparameters weer te geven.Statistiques
- Statistische betrouwbaarheidMate van zekerheid die je hebt in de resultaten van een statistische test.Statistiques
- Vals-positievenResultaten die ten onrechte aangeven dat er een effect is, terwijl dat niet zo is.Statistiques
- Mann-Whitney U TestEen niet-parametrische test die wordt gebruikt om twee onafhankelijke steekproeven te vergelijken en te bepalen of ze uit dezelfde verdeling afkomstig zijn.Statistiques
- MDE (Minimum Detectable Effect)Het kleinste verschil dat, indien aanwezig, betrouwbaar kan worden gedetecteerd in een statistische test.Statistiques