tencent cloud

引擎内核版本
最后更新时间:2024-07-31 17:47:43
引擎内核版本
最后更新时间: 2024-07-31 17:47:43
DLC 根据不同应用场景提供了不同的内核版本,并针对内核做了大量的特性和性能优化,内核版本一览如下所示。
如果您的场景主要为交互式查询,推荐使用 Presto 引擎和 SparkSQL 引擎和最新的内核版本。
如果您的场景主要使用批作业,推荐使用 Spark 作业引擎和 Spark3.2内核版本。
引擎类型
内核版本
说明
Presto
SuperSQL-P 1.0
基于原生 Presto 0.242 版本实现,在此基础上支持动态加载数据源、Dymanic Filter 增强、 Iceberg V2 表、非分区表的 INSERT OVERWRITE、支持执行 Hive UDF。
SparkSQL
SuperSQL-S 1.0
基于原生 Spark3.2版本实现,在此基础上支持 Iceberg 1.1.0、Hudi 0.12.0、自适应 Shuffle Manager。
Spark 作业
Spark 3.2
基于原生 Spark3.2版本实现,在此基础上支持 Iceberg 1.1.0、Hudi 0.12.0、Python3、支持自适应 Shuffle Manager。
Spark 2.4
基于原生 Spark2.4版本实现,在此基础上支持 Iceberg 0.13.1、Python2、Python3。

本页内容是否解决了您的问题?
您也可以 联系销售 提交工单 以寻求帮助。

文档反馈