Empregos substituídos por IA - análise de 5 milhões de trabalhos freelancer

• Análise baseada em dados sobre quais profissões têm maior probabilidade de serem substituídas por IA e quais já estão sendo substituídas na prática
• Análise de dados de trabalhos freelancer no Upwork entre 11/2022 e 02/2024 para identificar as profissões mais negativamente impactadas pela IA
• Por que analisar trabalhos freelancer em vez de empregos em grandes empresas?
  • Primeiro, porque é mais provável que o impacto da IA em determinadas profissões apareça antes no mercado freelancer, e espera-se que grandes empresas sejam muito mais lentas na adoção de ferramentas de IA
  • Segundo, segundo o relatório recente de receita do Upwork, as demissões no setor de tecnologia não tiveram grande impacto no mercado freelancer, e a receita no último trimestre aumentou 14% em relação ao ano anterior

Categorias de trabalho com maior queda

• Ao analisar as 12 categorias de trabalho mais populares no Upwork, a maioria delas mostrou aumento no número de vagas após o lançamento do ChatGPT
• No entanto, houve grande queda nas áreas de redação, tradução e atendimento ao cliente
  • Trabalhos de redação caíram 33%, trabalhos de tradução caíram 19% e trabalhos de atendimento ao cliente caíram 16%

Categorias de trabalho menos afetadas

• Exceto redação, tradução e atendimento ao cliente, a maior parte das outras categorias não foi impactada negativamente e, na prática, o número de vagas aumentou
  • Após o lançamento do ChatGPT, trabalhos de edição/produção de vídeo aumentaram 39%, design gráfico aumentou 8% e web design aumentou 10%
  • Trabalhos de desenvolvimento de software também cresceram: backend aumentou 6% e frontend/desenvolvimento web aumentou 4%

Interpretação dos resultados da análise

• Ferramentas de IA generativa como o ChatGPT já são boas o suficiente para substituir muitas tarefas de escrita. Mas ainda não são perfeitas para outras profissões, como geração de vídeo e imagem
• Vai levar tempo para que os usuários aprendam a usar essas ferramentas de forma eficaz e entendam o que elas podem e não podem fazer
• A queda no número de trabalhos de redação não começou logo após o lançamento do ChatGPT; o ritmo de queda acelerou a partir de agosto, quase 10 meses depois do lançamento

Categorias de trabalho com maior queda no pagamento por hora

• Não há dados diretos sobre correlação entre queda no volume de vagas e queda na remuneração, mas foi feita uma tentativa de estimar aproximadamente o pagamento real recebido por freelancers analisando a faixa de remuneração horária esperada informada nos anúncios
• A área de tradução foi a mais atingida, com queda de mais de 20% no pagamento por hora, seguida por edição/produção de vídeo e pesquisa de mercado
• Design gráfico e web design foram as áreas mais resilientes. Nessas duas áreas, não só o volume como também o pagamento por hora aumentaram ligeiramente

Lições dos resultados da análise

• É difícil tirar conclusões definitivas desses dados, e grande parte das mudanças salariais pode ser apenas variação sazonal normal
• No entanto, é possível ver que design gráfico + web design continuam em demanda e ainda não estão sendo substituídos por ferramentas de IA
• Ferramentas como DALL-E e MidJourney exigem certo nível de conhecimento e criatividade, o que também pode ser visto em alguns anúncios que procuram explicitamente especialistas em geração de imagens com IA
• Gerar imagens visualmente impressionantes com ferramentas de IA exige não só saber montar bons prompts e ajustá-los, mas também muito teste e erro

Habilidades de IA com maior aumento em anúncios de trabalho

• Enquanto algumas profissões têm queda de demanda por causa da IA, outras na verdade estão vendo a demanda crescer
• Ao contrário da hipótese de que haveria uma tendência inicial de crescimento para trabalhos de anotação/rotulagem de dados e de machine learning, os trabalhos de anotação de dados ficaram praticamente estáveis nos últimos 10 meses, e o número de trabalhos de machine learning até caiu ligeiramente após o lançamento do ChatGPT

Trabalhos relacionados à IA com demanda crescente

• As empresas podem estar contratando mais engenheiros de machine learning fora do Upwork, mas nem mesmo nas maiores empresas do mundo a demanda por machine learning aumentou de forma perceptível
• Em contrapartida, tarefas como geração de conteúdo com IA, desenvolvimento de agentes de IA, integração da API do OpenAI/ChatGPT e desenvolvimento de apps de IA estão ganhando popularidade, e o caso de uso mais notável é o desenvolvimento de chatbots
• Após o lançamento do ChatGPT e da API da OpenAI, os anúncios de trabalho relacionados a chatbots explodiram em 2000%

Lições da análise

• A maioria das empresas não está fazendo trabalhos sofisticados como desenvolver seus próprios modelos LLM ou ajustá-los com grandes volumes de dados de treinamento
• Há forte demanda por integrar a API da OpenAI a produtos existentes e desenvolver chatbots para substituir agentes de atendimento ao cliente

Conclusão

• Após o lançamento do ChatGPT, foi observada uma queda perceptível nas áreas de redação, atendimento ao cliente e tradução
• Web design, design gráfico, desenvolvimento de software e produção de vídeo foram as áreas mais resilientes, sem queda de demanda e, em alguns casos, até com crescimento
• Ainda não está claro se as ferramentas de IA ainda não são boas o bastante para esses casos de uso ou se o público em geral ainda não aprendeu a usá-las de forma eficaz
• A ausência de crescimento em trabalhos de anotação de dados ou machine learning sugere que, atualmente, a maioria das empresas não está focada em treinar ou fazer fine-tuning de seus próprios LLMs
• Atualmente, o caso de uso mais popular da IA está no desenvolvimento de chatbots

[GN⁺]

Opiniões no Hacker News

• Resumo: os trabalhos relacionados à escrita aumentaram bastante, enquanto os de tradução e atendimento ao cliente caíram um pouco.

  • Atendimento ao cliente em sites de freelancing implica baixa qualidade.
  • LLMs (Large Language Models) para atendimento ao cliente ainda apresentam desempenho insatisfatório.

• Experiência pessoal de conseguir trabalho no Upwork:

  • A maioria dos clientes acha que é preciso fazer fine-tuning de um novo LLM para atender aos requisitos de agentes de chatbot.
  • Como engenheiro de software, faz trabalhos de fine-tuning de LLM mesmo sem ser engenheiro de machine learning.
  • Na prática, os clientes só precisam de um LLM próximo ao estado da arte, um system prompt adequado, algumas chamadas de funções/ferramentas e RAG (Retrieval-Augmented Generation).
  • LLMs SOTA (State of the Art) são usados para fins gerais, e o fine-tuning de LLM entra na terceira fase do projeto, para melhorar velocidade ou custo, ou aumentar o desempenho em 10%.
  • Para fazer fine-tuning de LLM, conhecimento de machine learning não é indispensável; basta entender o formato do dataset e prompt engineering.

• Visão crítica sobre as estatísticas de sites de freelancing:

  • O artigo se baseia em estatísticas de um único site de freelancing e representa apenas uma parte dos dados do mercado como um todo.
  • Soa como se estivesse relatando tendências gerais do mercado além do Upwork.
  • Não informa que o autor do artigo é cofundador da Revealera, a empresa que forneceu os dados.
  • Ao analisar novos anúncios de vagas no Upwork, foi constatado que a taxa de contratação dos clientes varia de 0% a 70%.

• Questionamentos sobre o aumento nas vagas de design gráfico:

  • A informação de que as vagas de design gráfico cresceram 8% não significa muito sem comparação com anos anteriores.

• Curiosidade sobre outros fatores além da AI:

  • Os dados estão relacionados à AI, mas não há certeza de que ela seja a causa.
  • Os números de atendimento ao cliente surpreenderam, levantando a dúvida se os LLMs são mais eficazes que soluções anteriores para reduzir a escalada de problemas para humanos, ou se isso se deve a outros fatores, como a situação econômica.

• Avaliação sobre Midjourney, Stable Diffusion e DallE:

  • Essas ferramentas de AI são úteis quando se trata de um tema sem componentes específicos e sem algo muito definido em mente.
  • Em situações em que se quer resultados consistentemente bons, ainda é preciso ter habilidade em design gráfico.

• Anúncio da enfermeira de AI da NVidia:

  • A NVidia anunciou uma enfermeira baseada em AI para oferecer orientações relacionadas à saúde.

• Crítica às ferramentas de AI generativa:

  • Dizem que as ferramentas de AI generativa já são boas o bastante para substituir muito trabalho de escrita, mas na prática a internet está sendo coberta por conteúdo sem sentido.

• Impacto da AI na demanda por engenheiros de software:

  • Foi fornecido um link para um artigo recente relacionado sobre o impacto da AI na demanda por engenheiros de software.

• A AI ainda não consegue substituir nem artistas de nível mais baixo:

  • No momento, havia necessidade de imagens em estilo cartoon/quadrinhos para um negócio, mas não foi possível obter um resultado satisfatório com ferramentas de AI.
  • Um cartunista da Indonésia foi contratado no Fiverr e entregou um ótimo resultado em 24 horas.
  • A ideia é continuar usando artistas baratos de países em desenvolvimento para trabalhos gráficos.

• Especulação sobre o aumento das vagas e dos preços em edição de vídeo:

  • À medida que mais pessoas adicionam vídeos usando ferramentas de vídeo com AI, a demanda por vídeo aumenta.
  • A barreira de entrada para produzir vídeos diminuiu, então mais pessoas querem vídeo e começam por conta própria, mas acabam precisando de ajuda.