搜索开源项目
找到 6 个与"数据管道"相关的项目
SeaTunnel
Apache-2.0分布式数据集成平台,用于在数据库、数据湖和消息系统之间大规模迁移和转换数据。
- 后端
Kestra
Apache-2.0基于 YAML 的声明式编排平台,用于调度和编排数据管道、ETL 任务和业务工作流。
- 自动化
Prefect
Apache-2.0以 Python 为核心的工作流编排平台,用普通 Python 代码构建、调度和监控数据管道。
- 自动化
Beam
Apache-2.0统一的编程模型,用于定义批处理和流处理数据管道,可在多种执行引擎间以可移植的方式运行。
- 分析
Vector
MPL-2.0高性能可观测性数据管道,用于采集、转换和路由日志、指标和链路追踪数据。
- 监控
Apache Kafka
Apache-2.0将数据存储为可持久回放日志的分布式事件流平台,专为高吞吐实时数据管道而构建,而非传统的点对点队列。
- 后端