Apache Iceberg 是一種用於大型分析表的高效能格式,Iceberg 將 SQL 表的可靠性和簡潔性帶到了大數據領域,同時也讓 Spark、Trino、Flink、Presto、Hive 和 Impala 等引擎同時安全地處理同一張表。
Iceberg 支援靈活的 SQL 指令,可用於合併新資料、更新現有資料列以及執行定向刪除。 Iceberg 可以立即重寫資料檔案以提高讀取效能,也可以使用刪除增量來加快更新速度。
Iceberg 能夠處理為表格中的行產生分區值的繁瑣且容易出錯的任務,並自動跳過不必要的分區和檔案。無需額外的篩選條件即可實現快速查詢,並且表格佈局可以隨著資料或查詢的變更而更新。
重點更新
- 進階資料叢集與維護(Hilbert 空間填充曲線)
- 完整支援原生地理空間型態(Geospatial Types)與 Variant 型態
- 刪除向量(Deletion Vectors)與 Flink 數據清理管線升級
- REST Catalog 規範與控制平面功能強化

留言
張貼留言