State of AI 2023 [Google Slides, 163P]

Relatório publicado anualmente que oferece uma visão ampla do presente e do futuro da inteligência artificial

• Research : inovações tecnológicas e capacidades até o momento
• Industry : aplicações comerciais para IA e impacto nos negócios
• Politics : regulação relacionada à IA, significado econômico e geopolítica da IA (Geopolitics)
• Safety : identificação e mitigação de riscos críticos que a IA pode causar
• Predictions : o que deve acontecer no futuro e revisão do desempenho de relatórios anteriores

Resumo por área em 2023

• Research
  • O GPT-4 demonstrou a diferença de capacidade entre modelos proprietários e a melhor alternativa open source, ao mesmo tempo em que comprovou o poder do RLHF (aprendizado por reforço com feedback humano)
  • Aumentaram os esforços para reproduzir ou superar o desempenho de modelos proprietários com base no LLaMa-1/2, usando modelos menores, conjuntos de dados melhores e contextos mais longos
  • Ainda não está claro por quanto tempo os dados gerados por humanos poderão sustentar a tendência de expansão da IA (alguns preveem que os dados para LLMs podem se esgotar até 2025), nem qual será o impacto da adição de dados sintéticos. Vídeos e dados presos dentro das empresas têm grande chance de ser o próximo alvo
  • LLMs e modelos de difusão continuam trazendo avanços para a comunidade de ciências da vida ao abrir novos caminhos em biologia molecular e descoberta de fármacos
  • Com a multimodalidade surgindo como uma nova fronteira, o interesse por todo tipo de agente aumentou significativamente
• Industry
  • Com a demanda fervorosa por GPUs vinda de países, startups, grandes empresas e pesquisadores, a NVIDIA entrou para o clube das empresas de US$ 1 trilhão em valor de mercado
  • Embora os controles de exportação restrinjam a venda de chips avançados para a China, os principais fornecedores de chips estão desenvolvendo alternativas que possam contornar essas restrições
  • Os apps de GenAI liderados pelo ChatGPT tiveram um ano revolucionário em imagem, vídeo, programação, voz, copilots e outras áreas, atraindo US$ 18 bilhões em investimentos de VCs e empresas
• Politics
  • O mundo se dividiu em blocos regulatórios mais claros, mas o avanço da governança global continua lento. Grandes laboratórios de IA estão tentando preencher essa lacuna
  • A guerra dos chips continua, com os EUA mobilizando aliados e a resposta da China ainda sendo insuficiente
  • Espera-se que a IA afete uma série de áreas sensíveis, incluindo eleições e emprego, mas seu impacto ainda não é grande
• Safety
  • O debate sobre risco existencial entrou no mainstream pela primeira vez e se intensificou fortemente
  • Muitos modelos de alto desempenho podem ser facilmente "jailbroken". Para resolver os problemas do RLHF, pesquisadores estão explorando alternativas como self-alignment e pré-treinamento com preferências humanas
  • À medida que as capacidades avançam, está ficando cada vez mais difícil avaliar de forma consistente os modelos SOTA (State of the Art, nível mais alto). Só no feeling não basta

Previsões para os próximos 12 meses

1. Uso de IA generativa para efeitos visuais em produções de nível Hollywood
2. Durante a eleição presidencial dos EUA em 2024, uma empresa de mídia de IA generativa será investigada por suspeita de abuso dessa tecnologia
3. Agentes de IA que se melhoram sozinhos vão superar o SOTA em ambientes complexos (ex.: jogos AAA, uso de ferramentas, ciência)
4. Espera-se que o mercado de IPOs de tecnologia descongele e que haja pelo menos uma listagem de empresa focada em IA (ex.: Databricks)
5. Com a febre de escala do GenAI, também haverá caso em que um grupo gastará mais de US$ 1 bilhão para treinar um único modelo de grande porte
6. A FTC dos EUA ou a CMA do Reino Unido investigarão o acordo Microsoft/OpenAI por possível violação da lei de concorrência
7. O avanço da governança global de IA além de compromissos voluntários de alto nível será limitado
8. Instituições financeiras lançarão fundos de dívida com GPUs para substituir capital de ações de VC no financiamento de computação
9. Uma música gerada por IA entrará no top 10 da Billboard Hot 100 ou no Spotify Top Hits 2024
10. Com o forte aumento das cargas e dos custos de inferência, uma grande empresa de IA (ex.: OpenAI) adquirirá uma fabricante de chips de IA focada em inferência

[xguru]

Relatório State of AI 2022 [Google Slides, 114P]
Relatório State of AI 2021 [Google Slides, 188P]
Relatório State of AI 2020 [Google Slides, 183P]