tencent cloud

引擎内核版本
Last updated:2024-07-31 17:47:43
引擎内核版本
Last updated: 2024-07-31 17:47:43
DLC 根据不同应用场景提供了不同的内核版本,并针对内核做了大量的特性和性能优化,内核版本一览如下所示。
如果您的场景主要为交互式查询,推荐使用 Presto 引擎和 SparkSQL 引擎和最新的内核版本。
如果您的场景主要使用批作业,推荐使用 Spark 作业引擎和 Spark3.2内核版本。
引擎类型
内核版本
说明
Presto
SuperSQL-P 1.0
基于原生 Presto 0.242 版本实现,在此基础上支持动态加载数据源、Dymanic Filter 增强、 Iceberg V2 表、非分区表的 INSERT OVERWRITE、支持执行 Hive UDF。
SparkSQL
SuperSQL-S 1.0
基于原生 Spark3.2版本实现,在此基础上支持 Iceberg 1.1.0、Hudi 0.12.0、自适应 Shuffle Manager。
Spark 作业
Spark 3.2
基于原生 Spark3.2版本实现,在此基础上支持 Iceberg 1.1.0、Hudi 0.12.0、Python3、支持自适应 Shuffle Manager。
Spark 2.4
基于原生 Spark2.4版本实现,在此基础上支持 Iceberg 0.13.1、Python2、Python3。

Was this page helpful?
You can also Contact Sales or Submit a Ticket for help.
Yes
No

Feedback