Teste A/B da ordem das categorias do menu: sobremesas no topo ou em baixo

Um restaurante de peixe sazonal em Yalikavak (Bodrum), aberto apenas quatro meses por ano e fechando cerca de 2.400 contas por semana, queria uma resposta empirica: se eu colocar a categoria sobremesas no topo do menu QR, a conta media realmente sobe ou e mito de blog de psicologia de menu?

Desenho: 8 semanas, 2 variantes, 4.872 contas

A variante A colocava sobremesas no topo; a B mantinha-as em baixo. Cada mesa era atribuida no scan por hash deterministico (table_id % 2), garantindo que a mesma mesa visse o mesmo menu a noite toda. Resultado: 2.487 contas em A, 2.385 em B.

Conta media: 412 TL em A vs 387 TL em B, diferenca de 25 TL (+6,5%). Welch t-test: p=0,021, significativo a 95%.

Mesas com criancas: efeito triplo

Em 612 contas marcadas como familia, a diferenca dispara para 478 TL vs 401 TL, cerca de 77 TL. Criancas sao decisoras insensiveis a preco; gelado em primeiro lugar torna o pedido quase reflexo.

• Todas as mesas: +6,5%
• Familias: +19,2%
• Casais: +2,1% (nao significativo)

Bayesiano vs frequentista

O t-test classico diz sim, mas espreitar semanalmente cria peeking e falsos positivos. Uma actualizacao bayesiana beta-binomial dava 94% de probabilidade de A bater B na semana 6, 98,3% na semana 8. Decisao clara.

Regra pratica: abaixo de 1.000 contas por braco, bayesiano; acima, t-test. Se os dois concordam no sinal, faca o rollout.

FAQ

Quantas semanas? Quatro semanas com 50+ contas/dia bastam; 6-8 para sazonais.

Como A/B testar menu QR? Hash deterministico por mesa para nao contaminar.

Afecta a marca? Nao: e arquitectura de informacao, nao identidade visual.

Achou útil? Compartilhe.