In marketinganalyse verwijst hold out testing naar de praktijk van het achterhouden van een bepaalde marketingactie of campagne van een segment van de doelgroep, om hun gedrag te vergelijken met een controlegroep die de marketingactie wel ontvangt.
Deze methode wordt gebruikt om de effectiviteit van marketingstrategieën of campagnes te evalueren door verschillen in consumentengedrag, zoals aankopen of betrokkenheid, tussen de twee groepen te meten.
Ook wordt het gebruikt in CRO in de vorm van A/B-test die de langetermijneffecten van product / websitewijzigingen meten.
Bij deze holdout-tests krijgt een kleine groep gebruikers uw wijzigingen gedurende een lange periode niet te zien, doorgaans weken of maanden nadat het experiment is beëindigd.
Het helpt bij het begrijpen van de ware impact van de marketinginspanning op consumentenbeslissingen.
