Apache SeaTunnel - nền tảng tích hợp dữ liệu phân tán, hiệu năng cao

• Nền tảng để đồng bộ hóa và chuyển đổi dữ liệu quy mô lớn theo chế độ offline hoặc thời gian thực

• Dự án Apache Incubator (tên cũ là Waterdrop)

• Dễ sử dụng, cấu hình linh hoạt, phát triển low-code

• Hỗ trợ streaming thời gian thực

• Phân tích dữ liệu offline từ nhiều nguồn

• Xử lý dữ liệu hiệu năng cao

• Có thể tổng hợp và xử lý dữ liệu bằng SQL

• Hỗ trợ Spark Structured Streaming

• Hỗ trợ Spark 2.x

• Plugin được hỗ trợ

 → Input : Fake, File, Hdfs, Kafka, S3, Socket,..

 → Filter : Add, Checksum, Convert, Date, Drop, Grok, Json, Kv, Lowercase, Remove, Rename, Repartition, Replace, Sample, Split, Sql, Table, Truncate, Uppercase, Uuid,..

 → Output : ElasticSearch, File, Hdfs, Jdbc, Kafka, Mysql, S3, Stdout,..