Apache Iceberg作为一款新兴的数据湖解决方案在实现上高度抽象，在存储上能够对接当前主流的HDFS，S3文件系统并且支持多种文件存储格式，例如Parquet、ORC、AVRO。相较于Hudi、Delta与Spark的强耦合，Iceberg可以与多种计算引擎对接，目前社区已经支持 ...

　　在上一篇文章中我们主要讲解了iceberg各个元数据文件中的数据组织形式，那么这些元数据是怎么生成的呢？如何通过spark写入iceberg？本文将带大家简单了解一下使用spark 2.4.7 batch写入iceberg的整体流程。 spark写入示例 　　本文主要演示如何使用 ...

基于iceberg的master分支的9b6b5e0d2（2022-2-9）。 参数说明 1、PARTIAL_PROGRESS_ENABLED（partial-progress.enabled） 默认为 false。该参数能够让合并任务以group为单位做提交，当其中一个group任务失败 ...

metadata_location 属性，通过这个属性可以拿到 iteblog 表的 Iceberg 的 metadata 相关路 ...