1 pontos por GN⁺ 2024-12-16 | 1 comentários | Compartilhar no WhatsApp
  • Crystal Ball Challenge é um experimento em que participantes viram a primeira página do WSJ com um dia de antecedência e então negociaram o S&P 500 e títulos do Tesouro americano de 30 anos, mostrando que mesmo conhecer notícias futuras dificilmente se transforma em lucro
  • Em um experimento presencial supervisionado em novembro de 2023, 118 participantes jovens com formação financeira começaram com $50, mas o pagamento médio foi de $51,62, sem diferença estatística em relação ao ponto de equilíbrio
  • A taxa de acerto direcional geral foi de 51,5%, e as previsões de títulos foram melhores que as de ações, mas os participantes não conseguiram apostar mais nos ativos em que acertavam mais
  • Em cerca de 30% dos dias de negociação foi usada alavancagem acima de 20x, e em 4% acima de 60x; com excesso de risco, cerca de metade teve prejuízo e 1 em cada 6 foi à falência
  • Os 5 macro traders experientes convidados tiveram lucro, aumentando em média seus ativos em 130%, mostrando que o valor da informação futura depende fortemente da capacidade de decidir o tamanho da posição

Desenho do experimento: negociar com a capa do WSJ um dia antes

  • O Crystal Ball Challenge transpõe para um experimento de mercado financeiro a ideia do almanaque de resultados esportivos do filme de 1989 Back to the Future II
  • Em novembro de 2023, 118 jovens adultos com formação financeira participaram em um ambiente presencial supervisionado
  • Cada participante recebeu $50 e podia montar posições em futuros do índice S&P 500 e em futuros de títulos do Tesouro americano de 30 anos
  • As condições de informação eram as seguintes
    • A primeira página do WSJ era fornecida com um dia de antecedência
    • Os dados de preço de ações e títulos eram ocultados em preto
    • Os dias negociados eram 1 dia de cada ano entre 2008 e 2022, totalizando 15 dias
    • Em cada data, era possível fazer 1 operação em ações e 1 em títulos
  • Também existe a versão web do Crystal Ball Trading Challenge, mas sem recompensa em dinheiro
  • No site, no momento da redação, mais de 1.500 pessoas haviam jogado

Resultado do experimento supervisionado: média quase no zero a zero

  • O pagamento médio dos participantes foi de $51,62, um aumento de apenas 3,2% sobre o valor inicial
  • Esse resultado não é estatisticamente diferente do ponto de equilíbrio
  • A distribuição dos retornos foi mais frágil do que a média sugere
    • Cerca de 45% tiveram prejuízo
    • 16% quebraram
    • Cerca de 20% chegaram ao pagamento máximo de $100
  • Os participantes fizeram cerca de 2.067 operações, com média de aproximadamente 18 por pessoa
  • O máximo possível era de 30 operações por pessoa, e o número real foi menor por causa de falências e desistência de oportunidades

O tamanho da operação foi um problema maior do que prever a direção

  • Os participantes acertaram a direção de ações e títulos em 51,5% dos casos no total
    • A taxa de acerto direcional em ações foi de 48,2%
    • Em títulos, foi de 56,2%
  • Embora a taxa de acerto em títulos tenha sido maior, houve 40% mais operações em ações do que em títulos
  • O tamanho das apostas quase não se conectava à probabilidade de acerto
    • Em 8 das 30 oportunidades de negociação, o grupo de participantes se concentrou aproximadamente 2 para 1 na direção correta, mas não apostou mais nesses casos
    • Em operações de ações, a correlação entre alavancagem e taxa de vitória foi 0
    • Em títulos, foi de -0,1
  • A alavancagem média foi de 13x em ações e 10x em títulos
    • Considerando apenas operações com alavancagem acima de 5x, foram 22x em ações e 20x em títulos
  • Em cerca de 30% dos dias de negociação, foi usada alavancagem acima de 20x
    • 4% ficaram acima de 60x
    • Em 17 casos, pouco mais de 1% dos dias negociados, foi usada alavancagem de 100x
    • Com 100x de alavancagem, a probabilidade de perder todo o capital podia chegar perto de 50%

Só ajustar o tamanho já poderia reduzir as perdas

  • Se os participantes tivessem aplicado uma alavancagem constante e razoável em cada operação, os resultados poderiam ter melhorado
  • Nas condições do experimento, estimativas razoáveis de volatilidade diária eram as seguintes
    • Ações: 1,5%~2%
    • Títulos: 1%~1,5%
  • Supondo uma taxa de acerto de 55%, o critério de Kelly indicaria aproximadamente os seguintes tamanhos
    • Ações: 6x
    • Títulos: 8x
  • Se todos os participantes tivessem negociado nesses tamanhos, o retorno médio teria sido de 10%
  • Também se estima que a dispersão dos resultados teria caído cerca de 45%
    • No experimento real, cerca de 28% perderam mais de 50% do capital
    • Com o ajuste de tamanho em 6x e 8x, a parcela com perda superior a 50% cairia para 4%
    • Não haveria participantes com perdas acima de 75% nem falências, segundo a estimativa

A diferença que regras de interpretação de notícias poderiam fazer

  • Se os participantes tivessem interpretado os sinais macroeconômicos da manchete com regras simples, poderiam ter obtido uma taxa de acerto maior
  • Em títulos, a regra era vender quando aparecessem sinais de economia forte, inflação alta, energia cara, euro forte e Fed menos acomodatício
  • Em ações, a regra era comprar quando aparecessem sinais de economia forte, inflação baixa, energia cara, euro forte e Fed mais acomodatício
  • Com essas regras, as taxas de acerto seriam as seguintes
    • Ações: 58%
    • Títulos: 64%
  • Calcula-se que essa abordagem teria gerado um retorno médio de 6,1% por dia de negociação e crescimento de capital de 2,4x
  • Quando não houvesse notícia relevante ou quando o número de sinais dos dois lados fosse igual, não operar seria a escolha racional

Resultados dos macro traders experientes

  • Os 5 macro traders experientes convidados encerraram com lucro
  • Eram um grupo altamente selecionado, com experiências como
    • chefe de trading em um dos 5 maiores bancos dos EUA
    • fundador de um dos 10 maiores macro hedge funds
    • trader sênior em um dos 10 maiores macro funds
    • ex-trader sênior de títulos do governo em um dos 3 maiores primary dealers dos EUA
    • ex-trader sênior da Jane Street
  • Em média, aumentaram o capital inicial em 130%, e o retorno mediano foi de 60%
  • Em cerca de um terço das oportunidades, optaram por não apostar; nos dias em que julgavam ter confiança no impacto da notícia no mercado, apostavam pesado
  • A taxa de acerto direcional foi de 63%, acima dos 51,5% dos 118 participantes
    • Em títulos, a taxa de acerto foi de 71%
    • Em ações, foi de 56%
  • A diferença de resultado veio não só da capacidade de prever a direção, mas também de uma decisão mais racional sobre o tamanho da operação

Jogadores da web e os extremos da repetição

  • Os resultados de cerca de 1.500 pessoas que jogaram por diversão na web foram piores que os do experimento supervisionado
  • O resultado mediano dos jogadores da web foi uma perda de cerca de 30% do capital inicial
  • Apenas 40% terminaram com lucro, e 36% quebraram
  • Seis pessoas repetiram o jogo, verificando os resultados de ações e títulos de cada data, e então montaram uma pontuação perfeita
  • Elas apostaram o valor máximo na direção correta em todas as operações e multiplicaram o capital inicial em 70.575x

Cálculo do valor econômico da bola de cristal

  • Foi calculado o valor de uma bola de cristal que entrega a primeira página do WSJ um dia antes em 15 dias de negociação de alta volatilidade
  • Assume-se uma razão entre retorno esperado e risco de 0,2, o que corresponde a acertar a direção do mercado em 60% dos casos
  • Assume-se que um investidor com aversão a risco típica exporia 10% do capital ao resultado de 1 desvio padrão
  • Nesse caso, o retorno esperado por operação seria de 2%, e o retorno ajustado ao risco seria de cerca de 1%
  • Se a bola de cristal fornecesse notícias úteis em 75% dos casos, o equivalente certo em riqueza após 24 operações seria de 1,27x
  • Nesse cálculo, o valor máximo que se poderia pagar pela bola de cristal seria 21% do patrimônio
  • Receber com antecedência o jornal de um único dia por ano teria um Sharpe ratio de cerca de 0,2~0,3, abaixo do que a maioria imagina para investir em ações por 1 ano

Limitações e cuidados

  • O capital inicial de $50 era uma recompensa relativamente pequena, então o comportamento dos participantes pode diferir de como agiriam ao negociar com todo o próprio patrimônio
  • Os resultados poderiam ter sido melhores se eles tivessem recebido informação antecipada sobre empresas específicas para negociar ações individuais
  • Alguns participantes disseram que a informação teria sido mais útil se conhecessem o contexto da notícia de capa, especialmente aquilo com que o mercado estava mais preocupado na época
  • A alavancagem máxima permitida no jogo era maior do que a maioria dos investidores consegue acessar em futuros
  • Opções fora do dinheiro podem ser uma alternativa, mas com custo muito maior
  • O experimento supõe que a posição poderia ser mantida até o fechamento do dia seguinte, mas, na prática, movimentos intradiários poderiam primeiro zerar o capital
  • Na vida real, é difícil para um investidor expor todo o patrimônio a perdas potencialmente ilimitadas, e formas de limitar perdas incluem
    • negociar via estruturas de responsabilidade limitada para restringir a perda ao capital aportado
    • comprar opções de curto prazo fora do dinheiro para limitar a perda máxima em operações alavancadas
  • Estruturas de responsabilidade limitada podem dificultar obter a alavancagem desejada, e a estratégia com opções gera custo adicional

Conclusão: mais importante que informação futura é decidir sob incerteza

  • A tese de Nassim Nicholas Taleb de que “se você der ao investidor as notícias do dia seguinte com 24 horas de antecedência, ele vai quebrar em menos de um ano” não era exatamente igual às condições deste experimento
  • O experimento forneceu apenas 15 capas e os participantes assumiram, dentro do jogo, no máximo algo como $100 de risco financeiro
  • Ainda assim, o resultado aponta fortemente que notícias futuras por si só não bastam
  • Os esforços do setor financeiro para desenvolver sua própria bola de cristal precisam considerar que, sem decisões racionais de tamanho de posição, é difícil transformar isso em valor
  • Os resultados dos 118 participantes com formação financeira mostram a importância de ensinar tomada de decisão sob incerteza e definição do tamanho do investimento a jovens que pretendem entrar no setor financeiro
  • O fato de os 5 traders experientes terem tido lucro sugere que até o investimento discricionário envolve habilidades que podem ser ensinadas

1 comentários

 
GN⁺ 2024-12-16
Opiniões no Hacker News
  • Duas coisas ficam evidentes de cara aqui: a) quase não há horizonte temporal, então na prática é algo próximo de trading de curto prazo
    Não basta saber o que vai acontecer; todos os outros participantes precisam tomar a “ação correta” em pouco tempo e, como o texto diz, isso não acontece com frequência
    b) O WSJ já não é uma fonte de notícias tão boa quanto antes, o que torna o jogo mais difícil. Ainda assim, quando acontece algum grande evento, a notícia do dia anterior pode ajudar. Por exemplo, vender ações de companhias aéreas a descoberto antes de 11/9

    • É difícil concordar que “o WSJ já não é uma fonte de notícias tão boa quanto antes”. A primeira página do WSJ não resume bastante bem as notícias de negócios do dia?
    • Não me convence que reagir a eventos de curto prazo específicos seja particularmente interessante
      Pode haver casos especiais em que “isso com certeza vai derrubar o mercado de ações” seja bem previsível, mas as tendências mais interessantes são as de longo prazo, que continuam por 10 anos ou mais
    • O que eu entendo por day trading é, em grande parte, procurar padrões plausíveis em gráficos de linha e atribuir significado a eles
      Também é uma tentativa de operar com informações públicas que já foram incorporadas aos preços por firmas de trading de alta frequência e por 3.000 traders profissionais altamente pagos do Goldman Sachs
    • Acho que o post do blog dizia que eles selecionaram aleatoriamente artigos do Washington Post dos últimos 15 anos
      Dependendo de quando você acha que esse jornal piorou, daria para testar sua intuição b) pulando, no jogo, os dias posteriores a essa data
    • 11/9 é um bom exemplo. Mesmo que você soubesse um dia antes que aquilo aconteceria, neste experimento isso não teria trazido nenhum ganho. Naquele dia, o mercado não abriu
  • Para a maioria das pessoas, o truque é nunca operar até ter uma percepção realmente grande
    Até lá, é melhor deixar no S&P 500 e não fazer mineração de dados
    Bons títulos que valham uma operação são raros. Podem ser desastres, vitórias eleitorais ou mudanças nas taxas de juros
    Melhor ainda é algo que não chega a ser insider trading, mas fica perto de informação privilegiada. Por exemplo, você trabalha em uma empresa e entende seus pontos fortes, mas o mercado ainda a vê como uma empresa comum. Antes ou logo depois do IPO é o melhor momento

    • Seth Klarman deixa isso surpreendentemente claro em Margin of Safety. O objetivo é sempre comprar algo que vale 1 dólar por menos de 1 dólar
      O valor de um ativo deve ser julgado por você, não pelo mercado, e em geral isso exige bastante pesquisa
      Se você não está disposto a fazer isso, Klarman também afirma que investir em índices é aceitável, embora não seja brilhante. Em especial porque os índices compram e vendem ações não por bons motivos de investimento, mas porque precisam se rebalancear
      Operar com base em notícias e eventos é, em essência, algo mais próximo de aposta, mas se você já decidiu investir e estava esperando o preço atingir seus critérios, pode usar a reação dos outros às notícias como momento de compra
    • O texto também aborda que traders experientes tiveram retornos de 60% a 130% no mesmo teste, enquanto estudantes ficaram com retornos de um dígito ou prejuízos
      Os traders experientes simplesmente não apostaram em cerca de 1/3 das oportunidades de negociação
      É isso que sempre chama atenção nesse tipo de desafio de trading. Ele faz parecer que você precisa estar sempre investido, e muita gente comum cai nessa
    • Na maioria dos casos, vender logo depois de um IPO não é bom, por causa dos insiders e dos vendedores iniciais
      Acho que é um bom ponto de entrada. Ainda assim, negociar IPOs em si é, no geral, muito arriscado; é melhor escolher ações estáveis e já consolidadas
    • Conheço pessoas que operam em tempo integral com base em manchetes, e houve uma época em que a média diária de passos delas era inferior a 200
      Mesmo assim, tiveram bons retornos
    • A citação de Margin Call é muito usada, mas quanto mais vejo o mundo, mais acredito que ela é uma visão ingênua
      “Há três maneiras de ganhar a vida neste negócio: ser o primeiro, ser mais inteligente ou trapacear.”
      Essa frase usa o operador booleano errado. O OR implícito entre as vírgulas deveria virar AND. O motivo é simples: se você não está disposto a trapacear, está deixando essa vantagem para quem trapaceia
  • É um texto interessante, mas, se você der a 5 traders extremamente experientes eventos históricos e mostrar manchetes de eventos financeiramente importantes, como anúncios de CPI ou juros, estimulando bastante a memória, é bem provável que eles se lembrem de muitos dos resultados

    • Exato. É como avaliar um modelo com dados de treino
    • O estudo diz que as pessoas não conseguiram transformar essa informação em uma vantagem estável, enquanto sua explicação mostra por que o vazamento de informação poderia criar uma vantagem estável
  • Se alguém está preocupado porque o mercado está em máximas históricas e mantém dinheiro em caixa para entrar quando vier uma correção, deveria notar que é melhor entrar no mercado agora do que esperar
    Mesmo que a pessoa saiba, por meio de uma bola de cristal, quando a correção virá
    https://ofdollarsanddata.com/even-god-couldnt-beat-dollar-co...

  • Foi bem divertido. Transformei 1 milhão de dólares em 4,5 milhões de dólares, principalmente porque fiz algumas grandes apostas e depois joguei seguro com o resto
    Claro que, na vida real, não recebo as notícias de amanhã, então mantenho 100% em fundo de índice

    • Fiquei curioso sobre qual fundo de índice
  • Espera, neste desafio não dá para saber a data? Estou testando agora e, sem conhecer o clima da época, parece um desafio estranho
    Estou olhando a primeira página agora e só consigo pensar: “isso é 2008?”
    Se você só tem o conhecimento de um dia à frente e nenhum outro contexto, é claro que é difícil. Na vida real, o contexto também existe

    • Se você souber a data exata, fica fácil demais lembrar grandes quedas de ações que ocorreram em datas específicas
      Ainda assim, em muitas questões havia pistas suficientes para reduzir a janela para cerca de 1 ou 2 semanas
  • Joguei esse jogo várias vezes e ele continuou dando bug. Fiz algumas operações e cheguei a 2,3 milhões de dólares, mas depois disso o botão “trade” parou de funcionar
    Estou usando Vivaldi, então talvez isso tenha influenciado

  • O título e a primeira conclusão são enganosos, e a conclusão real é simples: notícias financeiras são, em sua maioria, ruído
    Para aproveitá-las, é preciso um bom filtro
    Se você tivesse uma bola de cristal que mostrasse, com alguma confiabilidade, dados de preços em um momento futuro adequado, por exemplo alguns minutos depois ou mais, uma pessoa competente poderia ficar absurdamente rica

  • É uma suposição de baixo valor, já que não faço trading, mas isso parece mais uma questão sobre o que é uma bola de cristal
    Mostrar o futuro não dá, de graça, insight sobre a dinâmica que produziu esse futuro. E também não é necessariamente preciso conhecer o futuro para entender que dinâmica está em jogo entre vários fatores ou partes

    • Este estudo não é muito útil ou é enganoso. Ele define como bola de cristal algo que não oferece clarividência de verdade
      Você até consegue ver o futuro, mas a informação realmente importante está faltando; nesse caso, não é uma bola de cristal
  • Eles dizem “talvez esse abuso de alavancagem...”, mas é só porque é um joguinho simples
    Se usassem uma página da seção de negócios da The Economist, esse experimento seria completamente diferente. A primeira página do WSJ pode muito bem ser, literalmente, quase clickbait