Alluxio
計算エンジンとストレージシステムの間に位置し、両者間の高速で統一的なアクセスのためにデータをキャッシュする、データオーケストレーション層です。
- 活発にメンテナンスされている
- 財団の支援あり
- 寛容なライセンス
概要
Alluxio は、計算フレームワーク(Spark や Trino など)と1つ以上の基盤ストレージシステム(S3、HDFS など)の間に位置し、統一された名前空間を提示するとともに、頻繁にアクセスされるデータをメモリや高速なローカルディスクにキャッシュすることで、基盤データを移動させることなく分析ワークロードを高速化します。計算とストレージの所在地を分離します。
Alluxio は、リモートまたは低速なストレージに対して分析エンジンを実行し、キャッシュと統一の層を求めるデータプラットフォームチームに向いています。カタログに既にあるオブジェクトストレージシステム(MinIO、SeaweedFS)とは異なる役割で、ストレージそのものではなく、ストレージの前段に位置します。
このカタログに掲載されている理由
カタログ評価: ★★★☆☆ (3/5)
Distinctive data-orchestration/caching layer for analytics workloads, adds real diversity to storage.
- 成熟
- 財団によるガバナンス
- カテゴリ
- ストレージ
- 言語
- Java
- ライセンス
- Apache-2.0
関連プロジェクト
CubeFS
Apache-2.0クラウドネイティブで大規模なデータ集約型アプリケーション向けに構築された、分散ファイルシステム兼オブジェクトストレージシステムです。
活発にメンテナンスされている
- ストレージ
Velero
Apache-2.0Kubernetes クラスタ向けのバックアップ・復元・移行ツールで、クラスタリソースと永続ボリュームデータの両方を損失から守り、あるいはワークロードをクラスタ間で移動できます。
活発にメンテナンスされている
- ストレージ
Ceph
LGPL-2.1単一の統合クラスタから、オブジェクト・ブロック・ファイルストレージを提供する、業界標準の分散ストレージシステムです。
活発にメンテナンスされている
- ストレージ
Longhorn
Apache-2.0より重いストレージシステムに比べ、デプロイと運用がシンプルであることを目指して設計された、Kubernetes 向けの軽量な分散ブロックストレージです。
活発にメンテナンスされている
- ストレージ
誤りを見つけましたか? GitHub で修正を提案する