「Delta Lake とは何か - connecting the dots」
オープンソースのデータフォーマットであるDeltaは、Parquetファイルとトランザクションログ(Delta Log)から成り立っている。Delta形式のフォーマットを用いて構築されたテーブルは、Deltaテーブルと呼ばれ、Deltaテーブルのデータストアを、Delta Lake (デルタレイク) と呼ぶ。多くの場合、データの実体はAWS S3などのオブジェクトストレージ上 (データレイク) に保管されている。そこで今回はデルタレイクについてまとめる。
コンテンツ文字数:0 文字
見出し数(H2/H3タグ):0 個
閲覧数:54 件
2022-09-18 08:32:00