A taxa de conversão do teste A/B aumentou, mas por que a empresa pode estar tendo prejuízo? (ferramenta de cálculo de ROI)

Olá. Criei e estou compartilhando o PRISM, uma ferramenta que calcula o verdadeiro impacto financeiro de testes A/B.

• O problema

Ao trabalhar como PM/PO, é comum ver casos em que, porque a taxa de conversão (CR) subiu 2%, decide-se implantar o resultado chamando-o de experimento "vencedor".

Mas e se, por trás disso, o ticket médio (AOV) tiver caído 4%? Dependendo do volume de tráfego, a empresa pode ter um prejuízo anual de dezenas de milhões de won.

Criei isso porque queria validar os resultados dos experimentos de forma rigorosa sob uma perspectiva estritamente financeira (Net Profit), sem cair nas armadilhas dos indicadores.

• Principais recursos (uso imediato sem login)

Cálculo preciso de receita: ao inserir tráfego, CR, variação de AOV, margem etc., o aumento ou redução do lucro líquido anual é calculado imediatamente.

Exportação em PDF: é possível visualizar imediatamente um relatório com um gráfico de cascata intuitivo.

• Link de compartilhamento amigável

Gera uma URL (com parâmetros incluídos) para compartilhar com os colegas exatamente a tela de resultados calculados.

Eliminei totalmente processos incômodos como cadastro ou login. Basta inserir os números e você verá o resultado na hora.

• Link : https://prizm-v2-6dohhi.flutterflow.app/

Ainda está na fase de MVP, então há muitas limitações.

Também implementei, à minha maneira, lógicas de proteção como limites (Threshold) para quando forem inseridos indicadores extremos,

e peço o feedback sincero de quem está no mercado, bem como relatos de bugs!