SlopGuard – app do GitHub que pontua e coloca em quarentena PRs/issues de slop de IA (sem fechar automaticamente)
(slopguard.app)É cada vez mais comum que mantenedores de projetos open source sofram com PRs/issues de baixa qualidade gerados por IA. Nos primeiros 30 segundos eles até parecem plausíveis, então não dá para simplesmente ignorar; mas, ao filtrar um por um, o tempo vai embora. Por outro lado, fechar tudo só pelo padrão traz o risco de afastar contribuidores de primeira viagem de verdade.
SlopGuard é um app do GitHub. Com instalação em um clique (sem precisar de Action YAML), ele pontua PRs e issues recebidos de 0 a 100, adiciona tags com características da origem e, se passar do limite, aplica o rótulo slop-quarantine e deixa um comentário com a justificativa. Ele nunca fecha automaticamente. Decisões como tirar da quarentena ou rejeitar ficam a cargo do mantenedor, que faz isso diretamente com comentários /slop approve e /slop reject.
O nível gratuito (hospedado) usa apenas heurísticas. Não precisa de chave de LLM e, no conjunto de avaliação publicado, alcança 100% de precisão e 92% de revocação (eles admitem com franqueza que o conjunto de avaliação é pequeno, e a metodologia está aberta no repositório). O nível pago adiciona julgamento por LLM para capturar até os casos mais sutis.
O código-fonte está disponível (MIT + Commons Clause), então você pode lê-lo diretamente e fazer self-host para seu próprio uso.
Ainda não há comentários.