1 pontos por GN⁺ 4 시간 전 | 2 comentários | Compartilhar no WhatsApp
  • O serviço de crowdsourcing Mechanical Turk, da Amazon, deixará de aceitar novos clientes a partir de 30 de julho de 2026; apenas clientes existentes poderão continuar usando o serviço
  • A AWS afirmou que a decisão foi tomada após uma “análise cuidadosa” e que seguirá fazendo melhorias de segurança e disponibilidade, mas não adicionará novos recursos
  • Lançado em 2005, o serviço era um marketplace que pagava pequenas quantias a pessoas para realizar tarefas simples difíceis de automatizar, como processar CAPTCHAs ou identificar o sentimento de frases
  • O Mechanical Turk permaneceu nos bastidores da indústria de IA, ligado a debates sobre ética no trabalho de crowdsourcing, às fases iniciais do escândalo Facebook-Cambridge Analytica e ao fluxo de anotação de dados para IA no SageMaker
  • Uma análise de 2023 indicou que 33% a 46% dos trabalhadores usavam modelos de linguagem de grande porte para executar tarefas, abalando ainda mais a confiabilidade da anotação de dados e a necessidade de participação humana

Fim do acesso para novos clientes e escopo do serviço restante

  • O site do Mechanical Turk informa que fechará o serviço para novos clientes a partir de 30 de julho de 2026
  • A documentação da Amazon Web Services afirma que a decisão foi tomada após uma “análise cuidadosa”
    • Clientes existentes poderão continuar usando o serviço normalmente
    • A AWS continuará investindo em melhorias de segurança e disponibilidade do Mechanical Turk
    • Não há planos para introduzir novos recursos
  • O serviço não será encerrado imediatamente, mas a entrada de novos clientes e o desenvolvimento de funcionalidades ficarão paralisados

O Mechanical Turk entre o trabalho humano e a IA

  • O Mechanical Turk foi lançado inicialmente em 2005 como um marketplace de crowdsourcing
    • Pessoas realizavam tarefas simples difíceis de automatizar e recebiam pequenas quantias por isso
    • Concluir CAPTCHAs e identificar o sentimento básico de frases eram exemplos típicos
  • Em seu auge, esteve no centro do debate sobre ética do trabalho de crowdsourcing e também teve um pequeno papel nas etapas iniciais do escândalo Facebook-Cambridge Analytica
  • A partir de 2018, a Amazon passou a integrar o Mechanical Turk ao serviço de IA SageMaker, apresentando-o como uma forma de empresas anotarem dados para treinamento de redes neurais
  • O Mechanical Turk também atuou como um auxiliar oculto em modelos nos quais produtos que pareciam IA, na prática, eram movidos por trabalho humano
    • Isso se conecta ao fato de que o Mechanical Turk original também era um truque em que um jogador de xadrez humano escondido fazia uma máquina parecer jogar xadrez
  • A relação com modelos de IA ficou mais complexa com o tempo
    • Uma análise de 2023 estimou que 33% a 46% dos trabalhadores da plataforma usavam modelos de linguagem de grande porte para concluir tarefas
    • Esse resultado levou a questionamentos sobre a confiabilidade dos dados anotados na plataforma e sobre se humanos precisam continuar no loop
  • Depois que a decisão da Amazon se tornou conhecida, um usuário do Reddit disse que trabalhadores e pesquisadores já haviam deixado a plataforma “anos atrás” por causa de bots e fraudes
    • O mesmo usuário previu que alguém na Amazon concluiria que manter os servidores do Mturk era desperdício de tempo e recursos e encerraria o serviço completamente

2 comentários

 
xguru 3 시간 전

Será o fim da era de colar olhinhos em bonecos na internet? haha

 
GN⁺ 4 시간 전
Opiniões no Hacker News
  • Uma análise de 2023 dizia que 33% a 46% dos trabalhadores da plataforma já usavam grandes modelos de linguagem nas tarefas; agora parece que o uso de IA pelos trabalhadores aumentou a ponto de tornar o próprio Mechanical Turk irrelevante

    • Isso provavelmente significa que quem consome os resultados do Mechanical Turk não tem uma boa forma de medir o valor, ou seja, a qualidade do que é produzido
      Se conseguisse medir, não deveria importar se foi feito por uma pessoa ou por um LLM
      Se for feito por um LLM, o custo provavelmente se ajustará ao menor entre o custo do LLM para executar a tarefa e o custo humano
    • Em 2012, eu também fazia esse tipo de inteligência artificial artificial artificial para ganhar um trocado
      Fico feliz que finalmente tenham “corrigido” essa brecha ^^
    • Não parece haver motivo para se importar com como o trabalho é feito
      Basta que o trabalho seja concluído; eu tenho outras coisas para fazer
  • Tentei fazer Turk por um tempo para juntar um dinheiro antes do casamento, mas, como forma de ganhar dinheiro, a eficiência em relação ao tempo era baixíssima
    Acho que, mesmo passando um mês nisso, consegui tirar no máximo uns 10 a 20 dólares

  • Cerca de 10 anos atrás, alguém que havia gerenciado o Mechanical Turk chegou como novo gerente, e naquela época ele já era visto como um beco sem saída
    Ouvi dizer que a Amazon Security mandou fazer upgrade de um MySQL 4.0, cujo suporte já tinha acabado havia muito tempo, para MySQL 5.x, mas, mesmo sendo uma exigência de segurança, a liderança quase não alocou recursos
    Normalmente, quando é uma exigência de segurança, todo mundo se mexe antes mesmo de perguntar “quão alto devo pular?”, mas mesmo assim foi assim, e no fim parece que a própria pessoa fez o trabalho
    A equipe extremamente reduzida que restava estava toda presa a uma enorme dívida técnica e a tarefas de KTLO, e as propostas para resolver isso também esbarravam na barreira de recursos

  • Talvez surja uma startup de alto valor que ofereça Human Intelligence mantendo pessoas reais trancadas numa sala, sem rede, livros nem LLM, monitoradas por câmeras 24 horas por dia

    • Por favor, aproveitem todas as tarefas igualmente
    • Seria melhor primeiro examinar as condições que permitem que uma pessoa produza resultados consistentemente de alta qualidade
    • Se for um isolamento de 24 horas sem nenhum estímulo além do trabalho, fico curioso se a taxa de alucinação aumentaria ou diminuiria
  • Eu nem sabia que isso ainda existia
    Antigamente me ajudou a comprar a expansão “Special Forces” do Battlefield 2
    Eu até poderia comprá-la de qualquer forma, mas, como comprei com o dinheiro que ganhei fazendo Mechanical Turk no tempo livre, não afetou minha renda normal

  • Talvez seja o exemplo menos ambíguo que já vi de IA automatizando trabalho
    Isso não significa, de forma alguma, que os trabalhadores tenham sido automatizados
    Agora os trabalhadores podem usar os modelos atuais para realizar tarefas mais complexas nas inúmeras novas startups de dados de treinamento de IA
    O Turk nunca foi projetado para tarefas mais complexas; o que aconteceu foi que startups criadas para coletar dados de treinamento de IA ficaram com boa parte desse mercado

  • Isso está muito mais perto de um produto ruim ter se tornado obsoleto por causa de produtos melhores do que de uma história de IA substituindo empregos
    Rotulagem humana é um mercado de dois lados e, como toda startup de marketplace sabe, se você não continuar cuidando dos dois lados, a queda de qualidade leva à evasão e a plataforma pode entrar numa espiral em que vai ficando vazia
    Em rotulagem, é preciso entender os limites de cada tarefa e da fadiga, fazer com que trabalho excelente e consistente continue entrando no pipeline e melhorar a plataforma para oferecer uma boa experiência ao cliente
    O AMT foi completamente abandonado em todos esses aspectos
    A remuneração era péssima, e a desonestidade era generalizada
    Era simplesmente um produto ruim, então não há necessidade de idolatrá-lo nem transformá-lo em questão política

  • Então onde se encontram participantes para pesquisa com usuários?

  • Uma pena
    O Mechanical Turk funciona melhor do que qualquer IA

    • Ainda assim, também é IA
      Só de outro tipo
    • Pessoalmente, nunca achei que a qualidade do MT fosse boa