Test A/B sull ordine delle categorie del menu: dolci in alto o in basso

Un ristorante di pesce stagionale a Yalikavak (Bodrum), aperto solo quattro mesi all anno e con circa 2.400 conti settimanali, voleva una risposta empirica: se metto i dolci in cima al menu QR, il conto medio sale davvero o e solo folklore da blog di psicologia dei menu?

Disegno: 8 settimane, 2 varianti, 4.872 conti

La variante A metteva i dolci in alto, la B li lasciava in basso. Ogni tavolo veniva assegnato allo scan tramite hash deterministico (table_id % 2), cosi lo stesso tavolo vedeva la stessa carta tutta la sera. Bilancio: 2.487 conti in A, 2.385 in B.

Conto medio: 412 TL in A vs 387 TL in B, divario di 25 TL (+6,5%). Welch t-test: p=0,021, significativo al 95%.

Tavoli con bambini: effetto triplo

Su 612 tavoli etichettati famiglia, la differenza esplode a 478 TL vs 401 TL, circa 77 TL. I bambini sono decisori insensibili al prezzo; un gelato in cima rende l ordine quasi automatico.

• Tutti i tavoli: +6,5%
• Famiglie: +19,2%
• Coppie: +2,1% (non significativo)

Bayesiano o frequentista?

Il t-test frequentista dice si, ma guardare ogni settimana introduce peeking e falsi positivi. Con un aggiornamento bayesiano beta-binomiale la probabilita posteriore che A batta B era 94% in settimana 6 e 98,3% in settimana 8. Decisione netta.

Regola pratica: sotto 1.000 conti per braccio, bayesiano; oltre, t-test. Se entrambi concordano sul segno, rollout.

FAQ

Quanto dura? Quattro settimane con 50+ conti al giorno; 6-8 se stagionale.

Come si A/B testa un menu QR? Hash deterministico per tavolo per non inquinare il campione.

Danneggia il brand? No: e architettura informativa, non identita visiva.

Ti è stato utile? Condividilo.