tencent cloud

流计算 Oceanus

动态与公告
产品动态
产品简介
产品概述
产品优势
应用场景
购买指南
计费概述
计费模式
退费说明
调整配置费用说明
快速入门
从零开始上手
创建独享集群
创建 SQL 作业
创建 JAR 作业
创建 ETL 作业
创建 Python 作业
操作指南
作业管理
作业开发
作业监控
作业日志
事件与诊断
元数据管理
快照管理
作业调优
依赖管理
集群管理
权限管理
SQL 开发指南
开发指南概述
术语和数据类型
DDL 数据定义语句
DML 数据操作语句
MySQL CDC 多 Source 复用
上下游开发指南
SET 控制语句
运算符和内置函数
标识符与保留字
Python 开发指南
ETL 开发指南
概述
ETL 作业术语表
上下游开发指南
常见问题
联系我们

ETL 作业术语表

聚焦模式
字号
最后更新时间: 2023-11-08 16:21:14
ETL 作业常用术语如下:
术语
详细说明
流计算
流计算是面向流式数据的计算,它从一个或多个流式数据源读取持续不断产生的数据,经过引擎中多个算子的组合进行高效计算,再根据实际需要,将结果输出至下游的多种数据目的,例如消息队列、数据库、数据仓库、存储服务等。
数据源表(Source)
为流计算系统持续提供输入数据。
数据目的表(Sink)
流计算系统处理结果输出的地方。
Schema
表示一个表的结构信息,例如各个列名、列类型等。对于 PostgreSQL 而言,Schema 是介于 Database 和 Table 之间的一个层级,可以理解成数据库内部的命名空间。
MySQL
一种常用数据库,在 ETL 作业中可用作数据源表与数据目的表。
PostgreSQL
类似 MySQL 的关系型数据库。
ClickHouse
ClickHouse 是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS),在 ETL 作业中可用作数据目的表。
Elasticsearch
实时的搜索与数据分析引擎。
字段映射
字段映射实现了从数据源表中抽取数据,对数据进行计算、清洗,再把数据加载到目的表中。
常量字段
可以输入一个自定义常量字段到目的源表相应的字段中。
计算字段
可以对从数据源表抽取出来的字段数据进行 内置函数 数值转换或者计算。


帮助和支持

本页内容是否解决了您的问题?

填写满意度调查问卷,共创更好文档体验。

文档反馈