Apache Impala 4.4.0正式发布了！

历时半年多，Impala 4.4终于发布了！本次更新带来了不少新功能，受限于篇幅，这里简要列举一些，后续文章再挑重点的进行介绍。

支持更多Iceberg表上的语句

支持对 Iceberg V2 表的 UPDATE 语句，用来更新已有数据。
支持 DROP PARTITION 语句删除 Iceberg 表的分区。
支持 OPTIMIZE 语句做 compaction 来清理小文件和delete文件等。
支持读取包含 equality delete 的数据。
支持用SQL语句查询 Iceberg 表的元数据（如history、snapshots等）。
支持建表时指定主键。
此外还优化了Iceberg V2表上的读性能。

历史信息查询

Impala会维护一个内部 Iceberg 表记录历史查询信息，该表由 Coordinator 自动创建，记录了每个查询的基本信息，包括从query profile中提取的信息，如内存使用量、spill-to-disk数据量等（IMPALA-12426）。

值得一提的是，Impala也维护了一个内存中的表来查询正在运行的查询信息 (IMPALA-12540)。

Event Processor增强

EventProcessor是Catalogd中的一个组件，用来从HMS拉取更新（即event）并回放到元数据缓存中。Impala 4.4对EventProcessor做了若干提升，如：

• Event处理失败时自动Invalidate对应的表并继续处理下一个Event (IMPALA-12832)。之前的版本需要管理员执行全局 Invalidate Metadata 来恢复，代价较大。
• 更多的性能提升，如
  • 更高效地处理不连续的同表事件（IMPALA-12463）
  • ALTER_TABLE事件尽可能不刷新文件元信息（IMPALA-12487）<