Airbyte - ELT mã nguồn mở
(airbyte.io)-
Giải pháp thay thế mã nguồn mở cho Fivetran/Stitch
-
Có thể tự cài đặt và sử dụng, từ một node đơn lẻ
-
Tích hợp với K8s và Airflow
-
Lập lịch cập nhật, đồng bộ lại toàn bộ thủ công, giám sát thời gian thực
-
Bắt đầu với 41 nguồn dữ liệu và 6 đích đến, đồng thời đang liên tục bổ sung connector (cùng với cộng đồng mã nguồn mở)
→ Destination: Redshift, Snowflake, BigQuery, Postgres, JSON/CSV cục bộ
→ Source: Google Analytics, Facebook Ads, Google Ads, Salesforce, SQL Server/MySQL/Postgres, Jira, Intercom, Github, Looker, Mailchimp, Mixpanel, Marketo, Sendgrid, Slack, Shopify, Stripe, Twilio, Zendesk, Zoom..
- Đúng như cách trang chủ mô tả là công cụ EL(T), nó mạnh về Extract và Load,
Transform cũng hỗ trợ SQL/Java transformer riêng, nhưng có vẻ cũng sử dụng dbt.
1 bình luận
Về Fivetran, Stitch, dbt, v.v., hãy tham khảo video "Tìm hiểu hạ tầng dữ liệu mới nhất" trên YouTube của GeekNews.
#3 Các công cụ ETL/ELT (Fivetran, Stitch, Matillion, Panoply) https://youtu.be/fn0sN3PFip0
#4 Mô hình hóa dữ liệu và trình quản lý workflow (dbt, Airflow, Dagster, Prefect) https://youtu.be/IdVO1dC4bM8