通过标准 Spark 引擎查询外部数据源
Download
聚焦模式
字号
DLC 支持选择非托管的数据进行查询分析，目前已支持的数据源包括：MySQL、EMR Hive(COS)、EMR Hive(HDFS)、EMR Hive(CHDFS)、PostgreSQL、SQL Server、ClickHouse、TCHouse-D。用户可以通过 DLC 的控制台对其他数据源进行新增和管理操作。本文以查询 TCHouse-D 为例。
前置条件
创建网络连接
1. 登录 数据湖计算 DLC 控制台，选择服务所在区域。
2. 单击左侧菜单中网络连接配置，创建新的网络连接。网络配置类型选择跨源型，实例来源选择新的网络配置，选择数据源类型为 TCHouse-D，选择需要查询的 TCHouse-D 实例，在绑定数据引擎中选择标准Spark引擎，保存配置，等待连接状态显示为正常，即为创建成功。
新增数据目录
1. 登录 数据湖计算 DLC 控制台，选择服务所在区域，登录用户需要有创建数据目录的权限。
2. 选择 TCHouse-D 作为数据源类型后，选择对应实例进行关联。
3. 填写数据源校验信息后单击下一步 > 确定，待该数据目录状态显示为创建成功，即可在数据探索中进行正常查询等操作。
数据管理
目前 DLC 支持对非托管数据进行数据库信息查看及数据表数据预览功能。
数据库信息查看
途径一：数据探索页查看
1. 登录 数据湖计算 DLC 控制台，选择服务所在区域，登录用户需要有数据表查看的权限。
2. 进入数据探索页，选择数据目录为需要查询的数据目录，鼠标移入数据库名称后出现菜单，单击基本信息，弹窗内可查看数据库的基本信息。
途径二：数据管理页查看
1. 登录 数据湖计算 DLC 控制台 ，选择服务所在区域，登录用户需要有数据表查看的权限。
2. 进入数据探索页，根据数据目录名称，即可进入详情页查看库表信息。
数据表数据预览
1. 登录 数据湖计算 DLC 控制台，选择服务所在区域，登录用户需要有数据表查看的权限。
2. 进入数据探索页，鼠标移入数据表名称出现菜单，单击预览数据，执行 SQL 语句可将数据表的数据进行查询显示。
注意：
需选择与该数据源 VPC 所在网络配置绑定的数据引擎进行查询。
文档反馈