Airbyte - ELT de código aberto

 (airbyte.io)
7 pontos por xguru 2021-02-01 | 1 comentários | Compartilhar no WhatsApp

  • Alternativa de código aberto ao Fivetran/Stitch

  • Pode ser usado com instalação própria, de nó único em diante

  • Integração com K8s e Airflow

  • Agendamento de atualizações, ressincronização manual completa e monitoramento em tempo real

  • Começou com 41 fontes e 6 destinos e continua adicionando conectores continuamente (junto com a comunidade open source)

→ Destination: Redshift, Snowflake, BigQuery, Postgres, JSON/CSV local

→ Source : Google Analytics, Facebook Ads, Google Ads, Salesforce, SQL Server/MySQL/Postgres, Jira, Intercom, Github, Looker, Mailchimp, Mixpanel, Marketo, Sendgrid, Slack, Shopify, Stripe, Twilio, Zendesk, Zoom..

  • Como está descrito no site como uma ferramenta de EL(T), ela é forte em Extract e Load,

Transform também oferece suporte a transformadores próprios em SQL/Java, mas parece também usar dbt.

Leituras relacionadas

1 comentários

 
xguru 2021-02-01

Para Fivetran, Stitch e dbt, consulte o vídeo "Entendendo a infraestrutura de dados mais recente" no YouTube do GeekNews