コンテンツへスキップ
FindOpenSource

Alluxio

計算エンジンとストレージシステムの間に位置し、両者間の高速で統一的なアクセスのためにデータをキャッシュする、データオーケストレーション層です。

概要

Alluxio は、計算フレームワーク(Spark や Trino など)と1つ以上の基盤ストレージシステム(S3、HDFS など)の間に位置し、統一された名前空間を提示するとともに、頻繁にアクセスされるデータをメモリや高速なローカルディスクにキャッシュすることで、基盤データを移動させることなく分析ワークロードを高速化します。計算とストレージの所在地を分離します。

Alluxio は、リモートまたは低速なストレージに対して分析エンジンを実行し、キャッシュと統一の層を求めるデータプラットフォームチームに向いています。カタログに既にあるオブジェクトストレージシステム(MinIO、SeaweedFS)とは異なる役割で、ストレージそのものではなく、ストレージの前段に位置します。

カテゴリ
ストレージ
キーワード
data-orchestrationcaching-layerbig-dataunified-namespace
言語
Java
ライセンス
Apache-2.0

誤りを見つけましたか? GitHub で修正を提案する