Google atualiza produtos de busca na web e recursos do Programmable Search Engine

• O Google reformulou o Programmable Search Engine para simplificá-lo em três soluções por caso de uso: busca por site, empresarial e em toda a web
• A busca exclusiva por site foi consolidada no Programmable Search Element, permitindo especificar gratuitamente até 50 domínios
• Clientes corporativos que precisam de recursos avançados podem usar o Vertex AI Search para contar com busca conversacional baseada em IA e recursos de nível empresarial
• Parceiros que precisam de busca em toda a web podem usar uma solução de busca web completa, com acesso ao índice completo do Google mediante solicitação separada
• Todas as transições devem ser concluídas até 1º de janeiro de 2027, e a mudança busca oferecer uma experiência de busca mais focada para parceiros desenvolvedores

---

A evolução do Programmable Search Engine

• O Programmable Search Engine ajudou diversos parceiros, de instituições acadêmicas a sites de varejo, a oferecer recursos de busca dentro de seus próprios sites
• Daqui em diante, o Google pretende oferecer soluções mais avançadas para cada caso de uso, garantindo uma experiência de busca de maior qualidade para usuários e parceiros
• A reformulação tem como objetivo a simplificação e modernização do produto, reorganizando a estrutura para que seja possível escolher a ferramenta ideal conforme o uso pretendido

Caminhos claros para cada necessidade de busca

• Busca exclusiva por site: o Programmable Search Element (Search Element) continua sendo a melhor ferramenta para criar experiências de busca centradas em conteúdo específico
  • É possível especificar até 50 domínios, sendo adequado para conteúdo voltado a públicos específicos
• Busca de nível empresarial: o Google Vertex AI Search continua disponível, oferecendo busca conversacional baseada em IA e recursos de grounding de nível empresarial
• Busca em toda a web: para parceiros que precisam pesquisar em todo o índice da web além dos domínios especificados, o Google oferece uma solução de busca web completa
  • Quem quiser usar esse recurso pode registrar interesse e solicitar mais detalhes por meio de um formulário do Google

Plano de transição para ferramentas mais robustas

• O Google definiu o período de transição até 1º de janeiro de 2027 para que os parceiros possam aproveitar ao máximo o potencial das novas soluções
• Entre os usuários do Search Element, quem pesquisa até 50 domínios poderá continuar usando os recursos atuais
• Se forem usados mais de 50 domínios ou a opção Search the entire web, será necessário migrar para a solução de busca web completa
  • O prazo final para concluir a transição é 1º de janeiro de 2027
• Usuários da Custom Search JSON API poderão migrar para o Vertex AI Search quando lidarem com até 50 domínios, ou para a solução de busca web completa quando precisarem de busca em toda a web

Mudanças na configuração de novos mecanismos

• Todos os novos mecanismos criados após 20 de janeiro de 2026 deverão obrigatoriamente usar o recurso Sites to search
• Os mecanismos existentes não serão afetados e poderão usar a opção Search the entire web até 1º de janeiro de 2027
• Essa mudança estabelece a base para um desenvolvimento de produto mais focado e uma experiência de busca aprimorada

Direção futura

• Com essa evolução, o Google pretende oferecer uma experiência de busca melhor e ferramentas mais personalizadas para parceiros desenvolvedores
• A equipe do Programmable Search Engine manifestou sua intenção de construir junto com os parceiros o ecossistema de busca do futuro

[GN⁺]

Comentários do Hacker News

• O Google alterou silenciosamente a política do Programmable Search (antigo Custom Search)
  Agora, novos mecanismos de busca podem pesquisar no máximo 50 domínios, e o recurso anterior de busca em toda a web será encerrado em 1º de janeiro de 2027
  Se você precisa de busca em toda a web, agora é encaminhado para um “formulário de interesse” de soluções corporativas como o Vertex AI Search
  Não há preço divulgado, nem garantia de resposta
  Na prática, isso parece significar o fim da era dos mecanismos de busca indie e de nicho
  Link do anúncio relacionado: documentação de suporte do Google

  • O DuckDuckGo usa o Microsoft Bing Custom Search, e considero que é um sistema bem mais estável
    Não existe aquela preocupação de o serviço ser encerrado a qualquer momento, como no Google
    customsearch.ai
  • Se o Google perder o recurso ou se o pedido de Partial Stay for negado, pela decisão judicial o Google passará a ter a obrigação de fornecer busca em toda a web a “Qualified Competitors”
    Documento relacionado: PDF da decisão judicial
  • Eu mesmo construí um índice web próprio. No momento, estou indexando 34 milhões de documentos
    greppr.org
    Depender da infraestrutura de outra pessoa é arriscado. O Google Graveyard existe de verdade
  • Hoje foi a primeira vez que descobri que existia o recurso “search the entire web”
    É surpreendente pensar que, na prática, o Google embalava a própria busca para que outros pudessem revender com anúncios
  • Fico curioso sobre quais mecanismos de busca de nicho serão afetados por essa mudança

• Este caso mostra bem o risco de depender de APIs monopolistas
  Assim como as restrições da API do Twitter, é o padrão típico de plataformas fechando cada vez mais seus ecossistemas
  Como alternativas:

  1. montar infraestrutura própria com ferramentas como Meilisearch e Typesense
  2. usar serviços intermediários como SerpAPI (embora o Google esteja tomando medidas legais)
  3. migrar para mecanismos de busca especializados que controlem diretamente suas fontes de dados
     A principal lição é: “você precisa ser dono do seu valor central”
     A mensagem do Google é clara — “a busca indie acabou; pague tarifas enterprise ou vá embora”

• Discussão relacionada: Kagi e o impacto da decisão contra o Google

  • Segundo o post da Kagi, o Google deveria fornecer dados do índice web (metadados de crawl, pontuações de spam etc.) a preço de custo
    Mas esta medida agora parece contradizer aquela decisão
    Provavelmente o Google está tentando eliminar a forma de integração anterior e fazer com que Kagi, Ecosia e outros tenham de comprar os dados de uma maneira menos conveniente

• Na Europa, Qwant e Ecosia estão cooperando para construir um índice de busca próprio
  Projeto EUSP

  • É uma boa tentativa, mas parece ter começado tarde demais para ter impacto limitado
    Ainda assim, a meta é alcançar 30% das consultas de busca na França até o fim de 2025
    Detalhes do projeto

• Essa mudança deve atingir em cheio mecanismos de busca white-label baseados no Google, como Startpage e Ecosia
  Fora o Bing, quase não há alternativas, embora empresas de IA como Perplexity e Anthropic pareçam ter construído índices próprios

  • Como referência, o Mojeek oferece uma API de busca web própria com mais de 9 bilhões de páginas indexadas
    Mojeek API

• Eu estava criando um projeto de brincadeira chamado “Google Search in a TUI”, mas essa política me fez mudar completamente de direção
  Originalmente eu pretendia adicionar o Brave Search como opção de backend, mas agora vou torná-lo o padrão
  Essa mudança foi o fator decisivo

• Eu também queria tentar criar meu próprio mecanismo de busca de brincadeira, e fiquei curioso se alguém aqui já fez isso de verdade

  • Comecei em 2021 e hoje indexo 1,1 bilhão de documentos
    Opero em um único servidor, mas escalar e manter a qualidade é a parte mais difícil
    Até alguns milhões de documentos é fácil, mas quando você chega à casa dos bilhões, vira um problema completamente diferente
    Diário de desenvolvimento: Marginalia Devlog
    Mecanismo de busca real: Marginalia Search
    No momento estou trabalhando na compressão do índice, então o desempenho caiu um pouco
  • Também existe o YaCy, um mecanismo de busca distribuído
    Os usuários rastreiam a web e compartilham seus índices em uma estrutura tipo torrent
    Como mecanismo de busca real, deixa a desejar, mas o conceito é interessante
  • Mas, se não for o Google, é fácil esbarrar em bloqueios contra web crawling

• Dizem que houve uma explosão de crawlers de IA ultimamente, então parece que já deveriam existir muitos novos datasets de toda a web
  Fico curioso sobre por que esses datasets não podem ser oferecidos como API — se é uma questão de qualidade ou de frequência de atualização
  Na prática, isso também poderia virar uma nova oportunidade de negócio

  • A ideia de que “crawlers de IA derrubam servidores” é exagerada
    Mesmo com hardware dos anos 1990, já era possível processar bilhões de requisições
    Basta não gerar a página toda vez e atualizá-la apenas quando houver mudanças

• Fico me perguntando se índices concorrentes como Bing, Ecosia e Qwant são realmente objetivamente inferiores, ou se isso é apenas efeito da inércia do Google
  Será que essa mudança pode, na verdade, estimular a concorrência?

  • O Bing encerrou a API recentemente e, mesmo antes disso, o custo já era muito alto
    Hoje quase não há meios de obter resultados de busca de forma programática
  • A vantagem do Google Programmable Search era ser gratuito e ainda permitir monetização com integração ao AdSense
    Já o Bing cobra por consulta
    Ecosia e Qwant usam o Bing com contratos de licenciamento, então pagam menos do que usuários comuns
  • Para buscas em inglês, outros índices até são utilizáveis, mas para buscas em idiomas minoritários, o Google é praticamente a única opção
    É difícil que outros mecanismos alcancem essa escala
  • O índice do Bing é menor que o do Google, e sites como o Reddit têm acordos exclusivos de busca com o Google, o que piora a qualidade dos resultados
  • Em idiomas que não sejam inglês, a qualidade geralmente é péssima, e bilhões de usuários continuam sem alternativa além do Google