Esaminare i dati a metà di un test A/B: giusto o sbagliato?

Frequentisti e Bayesiani hanno approcci differenti sull’osservazione dei dati a metà di un test A/B. I Frequentisti richiedono l’uso di tecniche come l’alpha spending per mantenere l’affidabilità statistica. I Bayesiani, invece, aggiornano continuamente la distribuzione a priori con i nuovi dati, rendendo il campione pianificato irrilevante. Se avete buone ragioni commerciali per guardare i dati anticipatamente, l’approccio Bayesiano potrebbe essere preferibile. Altrimenti, restate fedeli ai principi Frequentisti e non guardate i dati prima del termine del test.