Merlin Bird ID

• App gratuito de identificação de aves que reduz as opções no local de observação usando som, foto e perguntas; o principal é ajudar até iniciantes a confirmar rapidamente
• O Sound ID analisa em tempo real os sons de aves ao redor e auxilia na identificação comparando a gravação com os dados de cantos e chamados do Merlin
• Photo ID e Bird ID Wizard apresentam uma lista de aves possíveis a partir de uma foto ou de 3 perguntas, com suporte para uso offline
• As aves identificadas podem ser adicionadas à life list com Save My Bird, indo além de uma simples busca e virando um registro pessoal de observação
• O Merlin usa dados de observação do eBird, fotos e sons da comunidade, dicas de especialistas e mapas de distribuição do Birds of the World para fornecer listas de aves adequadas à região e à época

---

Identificação de aves por som, foto e perguntas

• O Sound ID escuta os sons de aves ao redor e mostra em tempo real possíveis correspondências para indicar qual ave está cantando
  • É possível confirmar a ave ouvida comparando o som gravado com os dados de cantos e chamados do Merlin
  • Funciona totalmente offline, podendo ser usado para identificar sons de aves em qualquer lugar
  • As regiões compatíveis incluem EUA, Canadá, Europa, algumas aves comuns da América Central e do Sul, e Índia, com mais espécies e regiões previstas para serem adicionadas
• O Photo ID permite tirar uma foto da ave ou importar uma imagem da galeria para mostrar uma lista curta de possíveis correspondências
  • O Photo ID também funciona totalmente offline, permitindo identificar a ave da foto em qualquer lugar
• O Bird ID Wizard fornece uma lista de candidatos possíveis ao responder 3 perguntas simples sobre a ave que você quer identificar
  • Ajuda observadores de aves de todos os níveis e usuários de atividades ao ar livre a aprender sobre aves em qualquer país do mundo

Registros de observação e listas de aves por região

• Save My Bird é um recurso de scrapbook digital em que, a cada identificação, você toca em “This is my bird!” para adicionar a ave à sua life list
• Com base no eBird, o Merlin pode criar listas personalizadas das aves com maior chance de serem vistas no local onde o usuário está
  • Com opções de filtro, é possível ver aves de acordo com a localização ou a época
  • Também é possível alternar para a visualização completa dos Offline Birds baixados
  • O modo de usar o app pode ser conferido em Merlin Tips and Tricks
• O Merlin também oferece fotos, cantos, chamados enviados pela comunidade e dicas de especialistas do mundo todo
  • Os mapas de distribuição vêm do Birds of the World
  • Os recursos em geral se baseiam em dezenas de bilhões de dados de observação de aves enviados ao eBird

[GN⁺]

Opiniões no Hacker News

• Adoro muito este app. Comecei a usá-lo há cerca de um mês para descobrir quem era o pássaro barulhento que cantava na mata atrás de casa, e acabou sendo um Tufted Titmouse e uma Carolina Wren
  Minha rotina matinal mudou completamente no último mês: agora, em vez de ficar sentado dentro de casa, encho e limpo os comedouros no quintal, deixo amendoins para apaziguar os esquilos e depois me sento no deck para tomar café e comer o café da manhã com o MerlinID aberto no celular
  Não sou bom em aprender novas línguas humanas, mas usando este app de forma consistente por um mês, passei a conseguir distinguir não só as espécies, mas até alguns indivíduos pelos cantos e vozes característicos
  A única coisa que sinto falta é de uma função para catalogar aves individuais e salvar junto as gravações de seus cantos e fotos. Meus cumprimentos aos desenvolvedores; é de longe o melhor app que usei em muito tempo

  • Não entendi bem o que você quer dizer. Tanto “Explore” quanto Life List mostram fotos e cantos juntos
    O app em si é realmente ótimo, mas não gosto do fluxo para adicionar uma ave à Life List. Depois de identificar uma ave por som ou foto, ele pergunta onde/quando você a viu, mas os padrões são péssimos. Mesmo sabendo sua localização e horário atuais, às vezes escolhe aleatoriamente um lugar ou horário de meses atrás, e até ignora quando você acabou de inserir várias observações na localização atual

• O Merlin é um exemplo brilhante do que o “computador no bolso de todo mundo” originalmente poderia ter sido. É um app incrível que conecta as pessoas de forma mais íntima ao mundo ao redor
  Às vezes aparecem pedidos de apoio à organização, mas são solicitações claras e diretas e, até onde sei, não há dark patterns

  • O iNaturalist também é outra joia de app. Gostaria que hackers apoiassem apps assim. Caso contrário, eles podem virar um comércio no estilo AllTrails ou Couchsurfing que ainda caiba no nosso bolso
  • Exato. É um app raro que, em vez de tentar prender sua atenção em um ambiente virtual, ajuda a direcioná-la para o mundo real
    A identificação por som, em especial, é uma forma incrível de ampliar muito o que a maioria das pessoas consegue fazer, e vira uma porta de entrada para que elas passem a identificar mais aves só pelo ouvido. Também faz você prestar mais atenção aos sons na natureza
    Dito isso, o Merlin, e especialmente o eBird, têm um lado de empurrar um pouco demais a observação de aves para uma perspectiva competitiva de “pontuação alta”. Considerando o impacto das mudanças climáticas nas populações de aves, há claramente um problema em incentivar as pessoas a viajar pelo mundo para ver o maior número possível de espécies
    Ainda assim, é uma reclamação pequena, e o Merlin continua sendo um dos poucos apps que eu recomendaria sem reservas a qualquer pessoa que tenha a menor chance de usá-lo

• Sou amigo de alguns pesquisadores da parte de Sound ID deste app. A equipe se esforçou muito para garantir que os modelos de machine learning e a avaliação fossem sólidos
  Internamente, o Sound ID é um bom exemplo de como uma pesquisa cuidadosa, conduzida por especialistas do domínio, pode produzir resultados mais confiáveis do que simplesmente alimentar dados e torcer para dar certo

  • Gostaria que houvesse uma versão que desse nomes algorítmicos a aves específicas, tipo “Fred”, “Bertha”, “Kevin”. As mesmas aves aparecem no jardim e eu já sei as espécies, mas seria ótimo poder confirmar se minha ave favorita encontrou um novo par, ou se aquela ave que vejo na rua um pouco longe de casa é justamente o “Kevin” que costuma aparecer no nosso bebedouro para aves
    Dar nomes de forma consistente a diferentes melros pode ser complicado, mas para outras aves parece algo possível com algum algoritmo de IA
  • A performance da identificação por som é realmente impressionante. Uma vez, várias aves cantavam ao mesmo tempo do lado de fora de casa, a distâncias diferentes, e o app identificou 6 espécies em 30 segundos. Todas as seis sugestões pareciam plausíveis
  • Por favor, agradeça aos seus amigos. Uso o Sound ID há anos ao passear com o cachorro e gosto muito. Passei a me interessar muito mais pelas aves ao meu redor e, quando algo é marcado como uma ave que nunca vi, muitas vezes tento procurá-la. Acho que agora virei observador de aves
  • Alguém perto de casa cria um galo que canta toda manhã. Todo dia olho o app esperando que ele apareça na lista de identificações, mas infelizmente ele nunca foi identificado
    Por favor, diga aos seus amigos que galos também são aves e merecem reconhecimento como o despertador do mundo
  • Gostaria que houvesse algum tipo de API. Tenho uma ideia de observação/rastreamento de aves que precisa identificar aves por som, e o Merlin parece ser o melhor caminho se eles ao menos disponibilizassem isso para as pessoas usarem

• É muito bom ver este app recebendo atenção. Seria ótimo se desenvolvedores ou responsáveis pelo produto viessem aqui dar uma olhada
  A identificação por som funciona especialmente bem até na selva/floresta colombiana, sem rede nenhuma
  Mas o restante do app tem muita coisa a melhorar. Botões frequentemente não funcionam, as telas são inconsistentes, resultados somem etc.
  Em termos de recursos, seria bom ter integração com o iNaturalist. Quando volto a uma gravação anterior, aparece “No matches”, mesmo que houvesse resultados no momento da captura original. Muitas vezes, quando estou na natureza com um grupo e identifico algo, na hora em que vou mostrar para alguém aquilo já desapareceu
  Como ponto de partida rápido, em vez de abrir um formulário web, seria bom colocar um botão de feedback rápido, para facilitar o relato de problemas. Muito obrigado a todos que tornam este app possível

  • Fico curioso para saber que aparelho você usa. Usei este app quase todos os dias por meses em algumas gerações do Google Pixel e nunca passei por esses problemas. Também não entendo exatamente o que você quer dizer com “identifiquei algo, mas quando fui mostrar para alguém tinha sumido”. Quer dizer que, durante a gravação, os matches aparecem, mas quando você para de gravar a identificação desaparece?
    Quando faço gravações muito longas, o app começa mesmo a engasgar. Por isso acabei usando assim: depois de cerca de 10 minutos, paro e começo uma nova gravação
  • A identificação por som parece funcionar bem nestas condições: com o celular fora do bolso, exposto ao ar, sem movimento, e com o app Merlin rodando em primeiro plano. Passos parecem atrapalhar mesmo quando o pássaro canta bem alto, e quando deixo o Sound ID rodando em segundo plano sinto que ele capta menos cantos ou chamados. Não sei se é real ou viés inconsciente
    Também há um efeito estranho em que ele deixa passar um pássaro muito alto e claro que está perto, por exemplo um Baltimore Oriole acima da cabeça, mas acerta um canto fraco e distante
    Seria bom mostrar o trecho do sonograma em que a identificação se baseou. Quando vários pássaros cantam ao mesmo tempo, examinar o sonograma fica especialmente difícil
    Quanto ao restante do app, tive a experiência oposta, mas pode ser um problema específico de cada celular. Ainda assim, é um app excelente
  • Eu realmente adoro o app
    Mas no Android ele trava a cada 255 segundos após ser iniciado. Cronometrei pessoalmente
    Existe alguma forma de enviar um relatório de bug?
  • Quando eu estava na Europa, tentei adicionar uma segunda região e o app travou. Precisei reinstalar para conseguir usá-lo de novo. No iOS, adicionar pacotes regionais está completamente quebrado

• É preciso tomar cuidado ao reproduzir cantos de aves. Alguns dias atrás, toquei o canto de um Cardinal que estava na lista de identificações, e o Cardinal macho que fazia ninho na cerca ficou completamente agitado; depois disso, não vi mais nem o macho nem a fêmea. Antes eu os via todos os dias. São aves muito territoriais
  Fiquei preocupado de ter acabado expulsando-os de um ninho ativo por brincar de reproduzir sons pelo app

  • Depois que comecei a observar aves, ouvi falar em “playback”. Acho que o app não avisa o suficiente: “não use isto para chamar aves; ouça apenas para sua própria referência”
    Se eu fosse um pássaro e ouvisse um canto desconhecido com alguma emoção ou frase específica que eu pudesse entender, fosse até lá e encontrasse um enorme humano-macaco tocando aquele som a partir do próprio corpo, acho que mudaria minha família de lugar
    Cardinals são definitivamente territoriais e expulsam uns aos outros, especialmente na época de nidificação
    Assobiar em tons parecidos, fazer “pishing” para chamar atenção ou tocar sons pelo celular: tudo isso interfere no comportamento normal. Carros, caminhões, cortadores de grama e motos também atrapalham as aves
    https://www.sibleyguides.com/2011/04/the-proper-use-of-playb...
    Quando você toca um canto no território de uma ave, machos e fêmeas vizinhos observam atentamente como aquela ave reage ao “intruso”. Em um estudo (Mennill et al. 2002), um macho dominante de Black-capped Chickadee exposto a um playback agressivo perdeu status ao parecer, para sua parceira e seus vizinhos, um perdedor que não conseguiu expulsar um intruso fantasma
    Como agora conseguimos imitar a linguagem das aves com dispositivos e tocá-la de volta, há claramente potenciais consequências de desfazer famílias de aves
  • Algumas vezes acabei fazendo “Merlin de bunda”
    Toda vez eu pensava: “esse pássaro está superperto! Vou pegar o celular e ver se o Merlin sabe o que é...” até perceber que tinha dado ruim

• Parte interessante:
  “O Sound ID é treinado primeiro convertendo gravações de áudio em uma representação visual, o espectrograma, e depois analisando-a com ferramentas de visão computacional semelhantes às que impulsionam o Photo ID”
  O espectrograma que rola na parte de cima não é só um enfeite bonitinho; é de fato o modo como o reconhecimento funciona

  • Espectrogramas também são bem úteis para identificação manual e, pelo menos para mim, ajudam a lembrar os chamados
  • Legal
    Muito tempo atrás, quando eu trabalhava em um laboratório de linguística na graduação, identificávamos sons, especialmente o ponto de articulação, olhando para espectrogramas tanto quanto ouvindo as gravações
    Por isso parece fazer bastante sentido criar modelos sobre espectrogramas em vez de outras representações do som
  • A maioria das redes neurais de áudio usa espectrogramas

• Venho observando aves ativamente há alguns anos, mas só este ano comecei a usar esse tipo de identificador sonoro. Foi uma ajuda enorme. Já vi mais de 12 espécies novas apenas pelo som, e aprendi a identificar algumas delas por conta própria
  Isso abriu um caminho completamente novo para aproveitar este hobby. Pelo menos aqui, machine learning/IA tem um impacto claro e positivo

• Como observador de aves, no geral fiquei muito impressionado com essa tecnologia e em geral confio nela.
  Mas houve algumas vezes em que fiquei desconfiado quando espécies parecidas estavam na mesma região. Por exemplo, não tenho certeza se há mesmo Purple Finch no meu bairro. Porque o que vejo o dia inteiro são apenas House Finch. Ainda assim, eu posso estar errado. Ele já demonstrou desempenho suficiente para que eu não conclua que errou nesse caso.

  • Com espécies parecidas, ele definitivamente tem dificuldades de vez em quando. Vi isso recentemente com corvos e toutinegras. Ainda assim, no geral é excelente, e quando você observa a ave diretamente, a confusão normalmente se desfaz.
  • Há muitos Blue Jays perto de casa, e eles imitam tão bem o canto de uma determinada espécie de falcão que o Merlin acaba reportando como se fosse esse falcão de verdade. Ouvi gravações reais desse falcão e não consegui distingui-las da imitação do Blue Jay.
    Claro que tecnicamente poderia ter sido uma identificação real, mas tenho quase certeza de que o Bald Eagle detectado pelo Merlin provavelmente eram crianças correndo e gritando mais abaixo na rua.
  • O único erro que vi em aves comuns do Reino Unido também foi com fringilídeos. Em particular, o Merlin continua confundindo o gorjeio que o Greenfinch faz quando está descansando com Goldfinch.
    Visualmente os dois são bem diferentes, mas, em defesa do Merlin, eu também não consigo distingui-los de ouvido.

• Gosto muito deste app e uso o tempo todo.
  Mas tenho uma reclamação: não dá para fazer upload de imagens pela web no PC. Para quem usa DSLR em fotos de observação de aves, a experiência de ter que transferir a foto para o celular e colocá-la no app é realmente sofrida.
  Não é o fim do mundo, e no fim você acaba identificando a ave de outra forma. Ainda assim, seria bom ter uma experiência de uso também para quem não está no celular.

  • Sou o autor do framework Birder. É um conjunto de ferramentas de visão computacional para classificação de aves: https://gitlab.com/birder/birder
    Ainda está em alfa inicial, mas pode ser útil para um fluxo de trabalho com DSLR.
    Se quiser experimentar uma alternativa baseada na web, há um espaço de demonstração em que você pode enviar imagens diretamente pelo navegador: https://huggingface.co/spaces/birder-project/birder-image-cl...
    Mas já aviso: ele foi projetado mais para demonstrar os modelos do que para oferecer uma experiência de uso. Por isso você precisa escolher manualmente o modelo regional apropriado, olhando sufixos como eu-common, arabian-peninsula, de acordo com a região onde a foto foi tirada.
    A cobertura ainda é muito limitada, e mais regiões devem ser adicionadas nos próximos meses.
  • Eu também uso DSLR para fotos de aves. Quando vou identificar uma ave, tiro uma foto do monitor com o celular e coloco no app. O app não precisa de uma imagem de 48 megapixels. Uma foto da tela basta.
  • Eu faço algo parecido, mas só identifico fotos que considero boas o suficiente para publicar. Depois que publico, elas também ficam acessíveis pelo celular (Flickr, IG etc.), então pegar de lá e colocar no app não é grande problema.

• Há um Mockingbird no quintal, ou, mais precisamente, nós moramos no território dele. Ele imita um Gila Woodpecker. Também gravei isso, e, quando reproduzo o vídeo e uso o Bird ID, ele de fato aparece como Gila Woodpecker.

  • Minha experiência foi totalmente diferente. Uma vez baixei este app para ver quantas músicas diferentes um Mockingbird conseguia cantar, mas o app simplesmente retornou “Mockingbird”. Foi ao mesmo tempo surpreendente e decepcionante.