SeaTunnel
데이터베이스, 데이터 레이크, 메시징 시스템 간에 대규모로 데이터를 이동하고 변환하는 분산 데이터 통합 플랫폼입니다.
개요
Apache SeaTunnel은 데이터베이스, 데이터 웨어하우스, 오브젝트 스토리지, 메시지 큐 등 매우 다양한 데이터 소스와 목적지에 미리 만들어진 커넥터를 통해 연결하여, 팀이 시스템 쌍마다 커스텀 통합 코드를 작성하지 않고도 데이터 동기화·변환 파이프라인을 정의할 수 있게 해줍니다. 배치와 스트리밍 데이터 이동을 모두 지원합니다.
SeaTunnel은 여러 다른 시스템 간에 데이터를 이동하고 변환해야 하는 데이터 엔지니어링 팀에 적합하며, (카탈로그에 있는) Flink와 Spark를 보완합니다 — 그것들은 이미 흐르고 있는 데이터를 처리하는 반면, SeaTunnel은 이기종 시스템 간의 최초 연결·이동 단계를 담당합니다.
- 카테고리
- 백엔드
- 언어
- Java
- 라이선스
- Apache-2.0
광고
관련 프로젝트
Kestra
Apache-2.0데이터 파이프라인, ETL 작업, 비즈니스 워크플로를 스케줄링하고 오케스트레이션하는 YAML 기반 선언형 오케스트레이션 플랫폼입니다.
- 자동화
Prefect
Apache-2.0일반 Python 코드로 데이터 파이프라인을 구축, 스케줄링, 모니터링하는 Python 네이티브 워크플로 오케스트레이션 플랫폼입니다.
- 자동화
Apache Kafka
Apache-2.0데이터를 영구적이고 재생 가능한 로그로 저장하는 분산 이벤트 스트리밍 플랫폼으로, 전통적인 1:1 큐잉이 아니라 고처리량 실시간 파이프라인을 위해 만들어졌습니다.
- 백엔드
Apache RocketMQ
Apache-2.0매우 높은 처리량에서 금융 등급의 트랜잭션 신뢰성을 위해 만들어진 분산 메시징·스트리밍 플랫폼입니다.
- 백엔드
잘못된 정보를 발견하셨나요? GitHub에서 수정 제안하기