Airbyte - ELT open source
(airbyte.io)-
Alternative open source à Fivetran/Stitch
-
Peut être auto-installé et utilisé, du nœud unique jusqu'à plus large échelle
-
Intégration avec K8s et Airflow
-
Planification des mises à jour, resynchronisation complète manuelle, supervision en temps réel
-
Parti de 41 sources et 6 destinations, avec ajout continu de connecteurs (avec la communauté open source)
→ Destination : Redshift, Snowflake, BigQuery, Postgres, JSON/CSV local
→ Source : Google Analytics, Facebook Ads, Google Ads, Salesforce, SQL Server/MySQL/Postgres, Jira, Intercom, Github, Looker, Mailchimp, Mixpanel, Marketo, Sendgrid, Slack, Shopify, Stripe, Twilio, Zendesk, Zoom..
- Comme indiqué sur le site avec l'expression outil EL(T), il est particulièrement fort sur l'Extract et le Load,
la partie Transform prend aussi en charge des transformers SQL/Java natifs, mais semble également utiliser dbt.
1 commentaires
Pour Fivetran, Stitch, dbt, etc., consultez la vidéo de GeekNews sur YouTube « Comprendre les infrastructures de données récentes »
#3 Outils ETL/ELT (Fivetran, Stitch, Matillion, Panoply) https://youtu.be/fn0sN3PFip0
#4 Modélisation des données et gestionnaires de workflow (dbt, Airflow, Dagster, Prefect) https://youtu.be/IdVO1dC4bM8