1 pontos por GN⁺ 2025-03-10 | 1 comentários | Compartilhar no WhatsApp
  • Ecosia e Qwant estão criando seu próprio índice de busca por meio do European Search Perspective, com o objetivo de aumentar a independência da tecnologia de busca europeia
  • Um índice de busca é um banco de dados usado por mecanismos de busca para encontrar informações e exibi-las em ordem de relevância, sendo decisivo para a qualidade dos resultados e o controle sobre eles
  • Atualmente, a Ecosia usa em conjunto os índices do Google e Bing, mas planeja adicionar o novo índice ao conjunto de bancos de dados de resultados de busca a partir de 2025
  • A aplicação inicial começará com resultados de busca em francês e alemão, ajustados aos países de origem da Qwant e da Ecosia, em escala reduzida para validação
  • O novo índice busca viabilizar soberania digital, busca com privacidade em primeiro lugar e um conjunto de dados transparente e seguro para infraestrutura de IA, com planos de disponibilizá-lo também para uso externo

O que o European Search Perspective pretende

  • A Ecosia está construindo o European Search Perspective junto com a Qwant
  • O trabalho central é criar um índice de busca próprio, que no futuro poderá ser usado como base tecnológica, incluindo infraestrutura de IA
  • A iniciativa também se conecta a ações relacionadas ao Digital Markets Act e busca um ecossistema tecnológico mais justo, competitivo e democrático

Como o índice de busca será aplicado

  • O índice de busca é um banco de dados usado pelos mecanismos de busca para recuperar informações e mostrá-las na ordem de maior relevância
  • Atualmente, a Ecosia usa em conjunto os índices do Google e do Bing para responder às buscas dos usuários
  • A partir de 2025, o novo índice será adicionado ao conjunto de bancos de dados usado para fornecer resultados de busca
    • Os idiomas iniciais serão francês e alemão
    • O projeto começará em pequena escala nos países de origem da Qwant e da Ecosia
  • O European Search Perspective tem como objetivo aumentar a soberania digital na Europa e fornecer um conjunto de dados transparente e seguro necessário para tecnologias emergentes de IA
  • Ele está sendo desenvolvido como um índice de busca com privacidade em primeiro lugar para uso conjunto de Ecosia e Qwant e, ao contrário de soluções monopolistas, há planos para que possa ser usado também em outros contextos
  • A Ecosia entende que a qualidade do mecanismo de busca está ligada à geração de impacto climático e considera esse desenvolvimento tecnológico um elemento central para o futuro da tecnologia sustentável

1 comentários

 
GN⁺ 2025-03-10
Opiniões no Hacker News
  • É bom olhar para a Qwant com bastante cautela
    Ela recebeu um grande investimento da Axel Springer (Bild, Die Welt), e é bem possível que, em algum momento, essa editora queira algo em troca do investimento
    Se seguir o caminho da Cliqz/Hubert Burda (outra grande editora alemã), podem reinterpretar privacidade como “excluir empresas americanas” e dizer que compartilhar dados com editoras alemãs não tem problema. Algo como: confiem neles, porque obviamente estão do lado do bem e vão tratar os dados com responsabilidade
    A Ecosia, à primeira vista, parece bem melhor. Não tem ligação evidente com a mídia tradicional e não esconde sua inclinação política. Mas tenho dúvidas se é lucrativa e gostaria de verificar de onde o dinheiro realmente vem

    • A Axel Springer-Verlag não é alguém para se tratar com leveza, e receber dinheiro deles é meio como fazer um pacto com o diabo
      Eles controlam canais de notícias que cobrem praticamente todo o espectro, da classe trabalhadora de baixa renda até a classe média alta, e não hesitam em usar esses canais para injetar a visão política que Mathias Döpfner quer disseminar
      Na Alemanha não há comparação, mas nos EUA talvez isso até seja algo comum
    • A Qwant tem má fama na França por fazer promessas grandiosas e fracassar repetidamente
      Por muito tempo foi, na prática, um wrapper do Bing, embora negasse isso
    • A Ecosia é sem fins lucrativos, então gerar lucro em si não é o objetivo
      Eles divulgam todos os meses os gastos e as doações, e em janeiro ganharam cerca de 4 milhões de euros, então eu diria que são suficientemente bem-sucedidos no que se propõem a fazer
    • Li isso como se dissesse que “a Cliqz coletava dados como as empresas americanas”; seria bom esclarecer quais empresas e quais dados você quer dizer
      Para referência, trabalhei na Cliqz
    • Hoje faço a maior parte das buscas na web com o Brave Search, ou no Google acrescentando “... Reddit” ao fim da consulta
      Pelo que me lembro de um passado não tão distante, a Qwant parecia um pouco pior que o Google
  • Enquanto isso, a GOOD Search, sediada na Alemanha, pode ser uma alternativa
    Ela usa o índice de busca independente da Brave e, segundo [1], esse índice também foi desenvolvido em boa parte na Alemanha
    [0] https://good-search.org/
    [1] https://en.reset.org/the-good-search-engine-web-search-witho...

    • O feed de busca da Brave depende fortemente do trabalho de base da Cliqz, que era uma startup alemã sediada em Munique, e essa tecnologia se tornou a base do Brave Search
      A GOOD Search, como uma empresa de propósito alemã, busca colaborar com as melhores tecnologias independentes e atualmente está focada no Brave Search
      Também podemos acessar a Mojeek, sediada no Reino Unido, e estamos em contato com a startup Qwant/Ecosia. Eles talvez tenham um feed de busca independente em francês por volta de meados de 2025, e em alemão possivelmente no início de 2026
      Andreas, cofundador da GOOD Search
    • O Yandex também é bem bom. Tem seu próprio índice e, em buscas relacionadas a política, é muito melhor que o Google
      Desde que não sejam notícias recentes; e também encontra bem sites do tipo torrent
    • Se você quer evitar anúncios, faz sentido pagar pelo serviço, então pensei em migrar para o Kagi, mas ao mesmo tempo também queria reduzir a dependência de empresas americanas
      A GOOD cobra 2 euros por mês por buscas ilimitadas, e fico curioso por que o custo é muito menor que o da Kagi. Talvez o preço do índice da Brave seja muito mais barato do que criar um índice próprio
  • Boa notícia. Hoje a Europa claramente tem motivos para reduzir sua dependência de tecnologia e produtos dos EUA, mas, mesmo deixando isso de lado, é positivo que o mundo restrito dos índices de busca esteja crescendo
    Acho que não seria muito controverso dizer que a busca ficou um pouco estagnada ultimamente, e espero que mais concorrência traga melhorias para todos

  • Excelente. Na verdade, até demorou demais
    Espero que esse tipo de joint venture baseada na Europa aumente em todos os aspectos

    • Acho que a mesma notícia talvez já tenha aparecido uns 6 meses atrás
      A Qwant tinha um desempenho muito bom quando foi lançada e também tinha um belo “lite.qwant.com”, como um DuckDuckGo lite, mas acabou descartando isso e deixando a página inicial inchada
      A Ecosia também era menos complicada e rápida, mas agora parece um site de livro infantil ilustrado e tem mais anúncios
      No fim, acho que as duas vão cooperar para criar a próxima geração do antigo Yahoo! e fracassar
  • Acho que esse formato pode ser o futuro da busca na web
    Motores de busca abertos ou semiabertos se reunindo para oferecer uma experiência de busca aberta e gratuita com uma fonte/índice comum. Seria bom se DDG e Brave também participassem diretamente
    Serviços como a Kagi também são bons, mas, no melhor dos casos, podem virar uma empresa premium fazendo ternos sob medida em uma rua cara de uma cidade caríssima. Não acho que a busca geral tenha essa natureza

    • Uso o Kagi e estou realmente satisfeito. Hoje em dia, nas raras vezes em que preciso voltar ao Google, fico surpreso com a péssima relação sinal-ruído
      Também acho o negócio da Kagi interessante. Acho que sempre há espaço no mercado para empresas que fazem seu trabalho muito bem como negócios sustentáveis, em vez de mirar dominar o mundo em algum setor
      A Kagi não precisa ser uma “assassina do Google”; basta funcionar bem o suficiente para que pessoas como eu fiquem satisfeitas com aquilo pelo qual pagaram
      A Kagi se tornou lucrativa em 2024, após 2 anos de operação, mesmo com os custos atuais de usar o índice do Google, que provavelmente são bem altos. Mesmo que continue como um negócio de nicho, se continuar crescendo (atualmente 41 mil membros [0]), ela serve muito bem para pessoas parecidas comigo
      Não precisa se tornar “busca geral”; basta ser boa o suficiente para as pessoas pagarem
      [0] https://kagi.com/stats
    • Não entendo por que deveria ser assim
      Esse tipo de tentativa já aconteceu dezenas de vezes, e todas fracassaram porque não havia demanda real de mercado. Na maioria dos casos, código aberto não é um recurso
      Não vejo que necessidade ainda não atendida de um número suficiente de usuários isso resolveria para valer a pena
  • É difícil confiar muito em serviços favoráveis à privacidade da França e da Alemanha
    [1]: https://techcrunch.com/2016/08/24/encryption-under-fire-in-e...
    [2]: https://www.laquadrature.net/en/2023/06/05/criminalization-o...
    [3]: https://news.ycombinator.com/item?id=36275795

    • Os EUA interpretam privacidade como algo contra o governo, mas permitem violações ilimitadas de privacidade por empresas
      Na prática, por esse caminho, também se tornam possíveis muitas violações de privacidade por agências de inteligência
      A UE, em vez de lidar com violações de privacidade por empresas, faz concessões quando se trata de privacidade na aplicação da lei
    • Aquilo é uma proposta de lei, e serviços dos EUA são ainda menos confiáveis pelo menos desde o Patriot Act
      Olhando para o que os EUA fazem, mesmo que a Europa não se importe nem um pouco com criptografia e queira apenas serviços estáveis, confiáveis e que não sejam subitamente abusados para fins geopolíticos, ainda há opções melhores do que escolher serviços dos EUA
    • Essas leis não foram aprovadas, mas leis como o Cloud Act dos EUA foram
    • Se você não confia por causa de projetos de lei anti-privacidade que nem sequer foram aprovados na França e na Alemanha, fico curioso para saber em quem você confia
  • Fico me perguntando se alguém conhece um índice de busca AAAA ou um mecanismo de busca para uso em redes somente IPv6
    Os mecanismos de busca atualmente acessíveis via IPv6 retornam resultados demais que não são alcançáveis

  • Pago para usar o Kagi, e, se houver uma alternativa europeia soberana, aceitaria pagar o mesmo valor

  • Bom
    Fico curioso para saber como Ecosia/Qwant se comparam ao Kagi. Uso Kagi há anos com satisfação, mas hoje em dia apoiar alternativas fora dos EUA também parece uma boa ideia

    • Antes do Kagi, usei Qwant como busca padrão por bastante tempo, e os resultados eram muito melhores que os do DDG
      Pelo que me lembro, o Qwant já tinha seu próprio índice havia bastante tempo e complementava com Bing quando havia poucos resultados. O Ecosia é basicamente Bing, e é quase só isso
      No Qwant, talvez seja preciso escrever a consulta de um jeito um pouco diferente. Em vez de uma pergunta como “what is the standard bike chain size”, um estilo antigo de palavras-chave como “bike chain roller standard size” funciona melhor, e pessoalmente acho que esse é o jeito certo
      As configurações de ajuste fino são muito limitadas, mas, no geral, os resultados eram excelentes
    • Quando tento acessar o Qwant, aparece “Unfortunately we are not yet available in your country”
      Estou acessando do Brasil, e acho que nunca vi uma mensagem assim em um mecanismo de busca
    • Acho que mojeek.com é melhor que os dois, mas um pouco pior que o Google, e em nível parecido com o Bing
      O Bing alcança mais longe, mas a qualidade é pior
  • Seria bom ter um índice de busca aberto em que URLs e atributos de crawling fossem compartilhados com outros
    Assim, pequenos players ou pesquisadores poderiam recrawlear apenas sites promissores e criar seu próprio armazenamento local. Seria uma versão da web inteira filtrada para aquilo que tem maior probabilidade de ser útil e seguro para muitas pessoas, ou seja, sem malware
    Se houver custo, poderia ser um produto comercial com preços por porte da organização. Para pesquisadores, seria gratuito se os resultados da pesquisa fossem não comerciais ou sob uma licença permissiva; caso contrário, com desconto. Penso em algo como a precificação do Windows para uso pessoal/servidor, tentando equilibrar rentabilidade e amplo acesso
    Isso permitiria recriar datasets como o RefinedWeb sem violar a lei de direitos autorais. Naturalmente, termos de serviço, direito contratual etc. ainda precisariam ser considerados. Para crawling de uso interno, especialmente não comercial, há uma linha de defesa jurídica mais forte. Só remover a questão de direitos autorais já ajudaria muito

    • https://commoncrawl.org/
    • Vejo alguns problemas nesse arranjo
      Com um índice intermediário, os criadores de conteúdo têm menos margem para decidir de quem permitir ou bloquear o crawling. Por outro lado, hoje o uso de conteúdo para IA é tão escancarado que talvez isso não faça muita diferença
      A atualidade do conteúdo também é um problema. O volume de dados pode ficar enorme, e algumas páginas precisam ser atualizadas com mais frequência do que outras. Cada usuário do índice também pode se interessar por um conjunto diferente de páginas, e não fica claro quem decidiria isso
      Conteúdo centralizado, como o Reddit, também é um problema. Eles já impedem agressivamente que a maioria dos bots rastreie o conteúdo. Seria preciso rastrear muitas páginas por dia e, no fim, é bem provável ser bloqueado. Normalmente, só alguns bots recebem tratamento preferencial para fazer crawling de forma mais agressiva