Les organisations sont confrontées à de nombreux défis pour mesurer leur impact à l'aide de méthodologies d'évaluation rigoureuses telles que les essais contrôlés randomisés (ECR). Bien que les exigences techniques, telles qu'une taille d'échantillon suffisante, soient souvent un problème, pour la plupart des organisations, le principal défi consiste à surmonter la résistance interne et externe à l'évaluation d'impact.

Certaines objections sont bien placées. Par exemple, la plupart des apprentissages opérationnels ne nécessitent pas d'évaluation d'impact. Et pour certaines organisations, se concentrer sur la mesure de l'impact peut ne pas être approprié, en particulier lorsque cela détourne des ressources d'autres priorités stratégiques et du suivi des programmes. Les pressions externes des donateurs ou d'autres parties prenantes peuvent être le moteur des évaluations d'impact, avec des conséquences à la fois positives et négatives. Lorsqu'on se soucie peu de l'exactitude ou de la qualité, les organisations gaspillent des ressources qui auraient pu aider à améliorer leurs programmes.