ClickHouse adquire a Langfuse

• A ClickHouse adquiriu a Langfuse, e as duas empresas continuarão desenvolvendo uma plataforma de engenharia de IA baseada em open source
• A Langfuse manterá o modelo open source e self-hosting, sem mudanças imediatas na licença ou na forma de operação do serviço em nuvem
• Com o suporte técnico e de recursos da ClickHouse, será possível reforçar desempenho, estabilidade, segurança e conformidade
• As duas empresas já vinham colaborando de perto, compartilhando infraestrutura de dados e base de clientes, e esta aquisição formaliza a parceria
• A equipe da Langfuse se juntará à ClickHouse e vai se concentrar em aprimorar a plataforma de suporte ao desenvolvimento de agentes de IA para produção

---

Visão geral da aquisição

• A ClickHouse adquiriu a Langfuse, e a Langfuse segue com o objetivo de construir a melhor plataforma de engenharia para LLMs
• Do ponto de vista dos usuários, não há mudanças imediatas no uso, com manutenção dos canais de suporte e do nível de serviço atuais
• Com a aquisição, haverá maior velocidade de desenvolvimento e capacidade de investimento, reforçando desempenho, confiabilidade e execução do roadmap do produto

O que permanece igual

• A Langfuse manterá o open source e o self-hosting, sem planos de mudar a licença
• O Langfuse Cloud continuará operando da mesma forma, com produto, endpoints e experiência de uso inalterados
• A estrutura de suporte também permanece igual, incluindo os SLAs e canais já usados pelos clientes atuais

O que melhora

• Com a entrada na ClickHouse, haverá melhorias de desempenho e confiabilidade em uma arquitetura intensiva em dados
  • Em colaboração com a equipe de engenharia da ClickHouse, as áreas centrais de performance serão reforçadas
• Reforço de segurança e conformidade em nível enterprise, aproveitando os recursos da ClickHouse
• Compartilhamento de know-how em sucesso do cliente e suporte, permitindo dedicar mais tempo ao desenvolvimento centrado no usuário

Contexto de crescimento da Langfuse

• A Langfuse começou para resolver problemas recorrentes no desenvolvimento de agentes baseados em LLM
• No início, conseguiu lançar o produto rapidamente e formar uma comunidade com um protótipo baseado em Postgres
• À medida que o uso cresceu e as limitações do Postgres ficaram evidentes, a Langfuse v3 migrou a camada de dados para ClickHouse
• Com essa mudança, passou a contar com uma arquitetura capaz de análises em alta velocidade e processamento de grandes volumes de dados

Histórico de colaboração com a ClickHouse

• A Langfuse roda sobre ClickHouse, e a ClickHouse usa a Langfuse para melhorar seus próprios agentes
• O Langfuse Cloud é um cliente importante do ClickHouse Cloud, e as duas empresas mantêm feedback técnico e melhorias conjuntas de forma contínua
• A colaboração também foi reforçada por meetups e eventos de comunidade em conjunto (Berlim, São Francisco, Amsterdã etc.)
• Durante a migração do Langfuse v2 para v3, milhares de equipes adotaram o ClickHouse, criando uma base de crescimento mútuo
• Esta aquisição representa a transformação da parceria existente em uma colaboração permanente

Afinidade cultural e técnica

• As duas empresas compartilham uma cultura centrada em open source, uma filosofia de produto voltada ao desenvolvedor e foco em desempenho e confiabilidade
• Toda a equipe da Langfuse se juntará à ClickHouse e continuará desenvolvendo o produto Langfuse
• Espera-se melhora na qualidade do produto por meio da colaboração com uma equipe de engenharia de infraestrutura de classe mundial

Áreas de foco daqui para frente

• Reforço das funções de monitoramento e análise de agentes em ambientes de produção
• Integração de workflows de tracing, labeling e experimentação para reduzir o ciclo de iteração
• Expansão de desempenho para self-hosting em larga escala e implantações enterprise
• Melhorias de UI/UX e experiência do desenvolvedor, mantendo simples recursos complexos
• Compartilhamento do progresso do desenvolvimento por meio de um roadmap público

Comunidade e agradecimento

• A Langfuse cresceu com issues no GitHub, PRs, feedbacks e conversas no Slack
• Para retribuir a confiança da comunidade, vai usar os recursos da ClickHouse para reforçar a confiabilidade do produto
• A equipe continua contratando em Berlim e São Francisco e manterá os canais de comunicação com os usuários

Resumo do FAQ

• Manutenção do open source: sem mudança de licença
• Self-hosting disponível: continuará com suporte
• Langfuse Cloud: produto, endpoints e contratos seguem iguais
• Canais de suporte: sem mudanças
• Composição da equipe: toda a equipe da Langfuse se junta à ClickHouse e continua o desenvolvimento do produto

Participação da comunidade

• Coleta de opiniões de usuários em GitHub Discussions
• Dúvidas de clientes enterprise podem ser enviadas para o e-mail dedicado ([e-mail])

[GN⁺]

Comentários no Hacker News

• Recentemente, a ClickHouse concluiu uma captação de US$ 400 milhões. Dizem que recebeu uma avaliação de US$ 15 bilhões, mais do que o dobro de um ano atrás
  Agora está se posicionando não apenas como um produto de banco de dados, mas como um “software de banco de dados para desenvolvimento de agentes de IA”
  Link para a matéria da Bloomberg

  • Após adquirir recentemente a PeerDB, a ClickHouse lançou um serviço de hospedagem de Postgres e também está expandindo sua plataforma de observability com base em HyperDX e ClickStack
    Agora, com a adição da Langfuse, está evoluindo como uma alternativa a Snowflake / Databricks
  • Investidores são notoriamente volúveis. Empresas que dependem de capital de VC dificilmente conseguem parar antes de alcançar sucesso completo
    Hoje em dia, todo mundo está em busca de uma narrativa de IA, então para captar investimento é quase inevitável seguir essa corrente
  • O mercado atual de funding torna difícil parecer voltado ao futuro sem uma “história de IA e agentes”
    Mesmo uma startup de banco de dados com milhões em receita parece menos atraente do que uma startup de IA deficitária se não tiver essa narrativa
    A narrativa de IA virou premissa básica e condição de sobrevivência
  • Ganhar dinheiro como fornecedor puro de banco de dados já é difícil há 10 a 20 anos
    Por isso, a maioria faz pivot para tendências quentes (segurança, observability, cripto, IA etc.)

• Achei interessante a frase “nosso objetivo é construir a melhor plataforma de engenharia para LLMs”.
  É surpreendente ver a ClickHouse, que originalmente era uma empresa de banco de dados de séries temporais, dizer isso

  • Essa frase não é da ClickHouse, e sim o headline da Langfuse
    No anúncio oficial da ClickHouse (link), o título é “o futuro do observability open source para LLMs”, indicando que a equipe da Langfuse continuará seu trabalho dentro da ClickHouse
  • A ClickHouse não é uma empresa de banco de dados de séries temporais, e sim de banco de dados colunar
    Mesmo assim, a linguagem relacionada a LLM ainda soa um pouco estranha. Sempre que empresas de banco de dados mencionam LLMs, parece um pouco pose
  • Como na analogia “a Berkshire Hathaway originalmente era uma empresa têxtil, mas hoje é um conglomerado”, empresas passam por expansão e evolução contínuas
    A ClickHouse também nunca foi, em essência, um banco de dados de séries temporais
  • Modelos de linguagem podem ser vistos como uma espécie de modelo de série temporal
    Ao estudar NLP, quando se tem esse insight, o conjunto de ferramentas que você pode usar fica muito mais amplo
  • Sim, aquele artigo foi escrito do ponto de vista da Langfuse, não da ClickHouse

• A aquisição da HyperDX no ano passado pela ClickHouse (parte do ClickStack) combina bem com esta aquisição da Langfuse
  Hoje em dia, a maioria das plataformas de observability está adicionando recursos de observação de LLMs
  Link relacionado

  • Fiquei curioso para saber que plataforma você está usando e quais recursos procura em uma nova plataforma

• Gostaria de perguntar a quem já usou Langfuse junto com ClickHouse
  Já usei ferramentas wrapper de LLM como Langchain, LlamaIndex e Autogen, mas acabei evitando porque eram de baixa qualidade ou ficavam obsoletas muito rápido
  A Langfuse é diferente dessas ferramentas?

  • Já usei Langfuse, e é totalmente diferente de Langchain ou Autogen
    Está mais para uma ferramenta de logging/tracing de LLM; “gerenciamento de prompts” e “recursos de experimento” são opções secundárias
    A maioria das ferramentas mencionadas tem pouca utilidade e provavelmente vai desaparecer em breve
  • Os recursos de observability são úteis em produção, mas esses frameworks não fazem tanta coisa assim na prática
    Para um desenvolvedor experiente, é melhor projetar diretamente uma estrutura melhor
  • Nossa equipe gosta da Langfuse para observability baseada em OpenTelemetry
    Mas os recursos de gerenciamento de prompts são simples demais, o que decepciona um pouco

• Esta aquisição parece fazer parte não apenas do hype de IA, mas também do movimento de consolidação entre fornecedores de dados
  A Snowflake adquiriu a Observe, a AWS facilitou colocar logs do CloudWatch no catálogo Iceberg, e a Azure também está tentando algo semelhante com o Fabric
  Agora, a fronteira entre análise de dados e observability está ficando cada vez mais difusa

• Agora entendo a migração dolorosa da ClickHouse v2 para v3
  Guia de upgrade

  • Mas essa mudança já estava planejada há um ano e não tem relação com esta aquisição

• Como fã da ClickHouse, acho que a área de avaliação de agentes (agent eval) é um ponto forte do produto
  Esta aquisição parece uma estratégia para aprofundar sua presença em um mercado onde seus próprios produtos já funcionam bem, reforçando a integração vertical

  • Você quer dizer algo como isto? Tracing de agentes OpenAI no ClickStack

• É impressionante que a Langfuse, sendo da turma YC 23, tenha sido adquirida tão rapidamente

  • Como o valor da aquisição não foi divulgado, não está claro se é caso de parabenizar ou de consolar
    Há uma boa chance de terem queimado os US$ 4 milhões do seed de 2023, e isso pode ter sido uma fire sale
  • Como todas as métricas são relativas, não dá para dizer necessariamente que foi um ótimo negócio

• (Parabéns, equipe!) Parece que alguém está sendo adquirido todos os dias ultimamente
  O que será que está acontecendo no cenário macroeconômico?

  • (repassando os agradecimentos)

• Talvez a ClickHouse aproveite a oportunidade para resolver a documentação confusa da Langfuse