Apache Iceberg™向けSnowflakeストレージ

Icebergテーブルは、ガバナンスの確保された単一のデータに対して複数のエンジンを動作させるオープンテーブルです。

Apache Iceberg™テーブル向けSnowflakeストレージを使用すると、Snowflakeがストレージのレイアウト、コンパクション、ガベージコレクション、ライフサイクル管理を自動的に処理します。最初のCREATE ICEBERG TABLE文を実行するだけで、暗号化、Time Travel、Fail-Safe、クロスプラットフォームレプリケーションなどの保護機能が組み込まれたフルマネージドのIcebergテーブルを作成できます。

セルフマネージド型のストレージは、運用の負担がチームにかかります。これには、IAMの設定、ライフサイクルポリシー、コンパクション、ガベージコレクションを含む、30以上のセットアップおよびメンテナンス作業が含まれます。ポリシーの設定ミスが1つでもあるとテーブルのメタデータが破損する恐れがあり、ファイル数が管理されずに増加するとコストの予測が困難になります。

Snowflake Horizonによって管理された同一のテーブルに対し、互換性のあるIcebergエンジンから読み取りおよび書き込みを行うことができます。データを複製したり、単一の環境にロックインされたりすることなく、使い慣れたエンジンやツールを活用できます。

Apache Iceberg™テーブル向けSnowflakeストレージは、 Horizonカタログ を使用して、互換性のあるIcebergエンジンに対する安全な双方向の読み取りおよび書き込みアクセスを提供します。これにより、データの複製や同期パイプラインを作成することなく、ガバナンスの効いた単一のテーブルを維持しながら、データスタック全体での高度な相互運用性を実現します。

Snowflakeは、圧縮、ガベージコレクション、ライフサイクル管理を含む、Icebergテーブルのメンテナンスを自動化します。チームがこれらの作業を手動でスケジュールしたり管理したりする必要はありません。Snowflakeのコンピュートによるストレージリクエストコストが含まれているため、定期的なメンテナンスによって個別のリクエスト料金が請求に加算されることはありません。

Snowflakeはテーブルベースの料金体系を採用しているため、請求対象はテーブル内のアクティブデータのみとなります。Snowflakeのコンピュートによるストレージリクエストコストが含まれているため、孤立したファイル、メタデータのオーバーヘッド、さらにはGET、PUT、LISTリクエストのすべてがコストに加算されるセルフマネージドストレージで発生しがちな、バケットベースの課金による予期しない請求を回避できます。