数据集成节点配置参数及说明-操作指南-文档中心-腾讯云

离线实时同步支持输入、输出和转换三种类型的数据节点，本文将重点说明各读、写及转换节点配置及底层数据类型映射。 
读写节点配置
数据库类型
读取节点
写入节点
关系型数据库
﻿MySQL 离线节点（读取）﻿
﻿MySQL 离线节点（写入）﻿
﻿
﻿TDSQL-C Mysql 离线节点（读取）﻿
﻿TDSQL-C Mysql 离线节点（写入）﻿
﻿
﻿PostgreSQL 离线节点（读取）﻿
﻿PostgreSQL 离线节点（写入）﻿
﻿
﻿SQL Server 离线节点（读取）﻿
﻿SQL Server 离线节点（写入）﻿
﻿
﻿Oracle 离线节点（读取）﻿
﻿Oracle 离线节点（写入）﻿
﻿
﻿DB2 离线节点（读取）﻿
﻿DB2 离线节点（写入）﻿
﻿
﻿DM 离线节点（读取）﻿
﻿DM 离线节点（写入）﻿
﻿
﻿SAP HANA 离线节点（读取）﻿
﻿SAP HANA 离线节点（写入）﻿
﻿
﻿SAP IQ（sybaseIQ） 离线节点（读取）﻿
-
大数据
﻿HIVE 离线节点（读取）﻿
﻿Hive 离线节点（写入）﻿
﻿
﻿HBase 离线节点（读取）﻿
﻿HBase 离线节点（写入）﻿
﻿
﻿Clickhouse 离线节点（读取）﻿
﻿Clickhouse 离线节点（写入）﻿
﻿
﻿DLC 离线节点（读取）﻿
﻿DLC 离线节点（写入）﻿
﻿
﻿Kudu 离线节点（读取）﻿
﻿Kudu 离线节点（写入）﻿
﻿
﻿HDFS 离线节点（读取）﻿
﻿HDFS 离线节点（写入）﻿
﻿
﻿Greenplum 离线节点（读取）﻿
﻿Greenplum 离线节点（写入）﻿
﻿
﻿GaussDB 离线节点（读取）﻿
﻿GaussDB 离线节点（写入）﻿
﻿
﻿Gbase 离线节点（读取）﻿
﻿Gbase 离线节点（写入）﻿
﻿
﻿TBase 离线节点（读取）﻿
﻿TBase 离线节点（写入）﻿
﻿
﻿Iceberg 离线节点（读取）﻿
﻿Iceberg 离线节点（写入）﻿
﻿
-
﻿Doris 离线节点（写入）﻿
消息列表
﻿Kafka 离线节点（读取）﻿
-
NoSQL
﻿Mongo 离线节点（读取）﻿
-
﻿
﻿Elasticsearch 离线节点（读取）﻿
﻿Elasticsearch 离线节点（写入）﻿
﻿
-
﻿Redis 离线节点（写入）﻿
半结构化
﻿COS 离线节点（读取）﻿
﻿COS 离线节点（写入）﻿
﻿
﻿FTP 离线节点（读取）﻿
﻿FTP 离线节点（写入）﻿
﻿
﻿SFTP 离线节点（读取）﻿
﻿SFTP 离线节点（写入）﻿
﻿
﻿Rest API 离线节点（读取）﻿
-
转换节点配置
转换类型
节点
字段转换
﻿字符串替换﻿
﻿
﻿字段分割﻿
数据清洗
﻿数据过滤﻿
﻿
﻿去重﻿
﻿
﻿数据连接（join）﻿
﻿

数据库类型	读取节点	写入节点
关系型数据库	MySQL 离线节点（读取）	MySQL 离线节点（写入）
		TDSQL-C Mysql 离线节点（读取）	TDSQL-C Mysql 离线节点（写入）
		PostgreSQL 离线节点（读取）	PostgreSQL 离线节点（写入）
		SQL Server 离线节点（读取）	SQL Server 离线节点（写入）
		Oracle 离线节点（读取）	Oracle 离线节点（写入）
		DB2 离线节点（读取）	DB2 离线节点（写入）
		DM 离线节点（读取）	DM 离线节点（写入）
		SAP HANA 离线节点（读取）	SAP HANA 离线节点（写入）
		SAP IQ（sybaseIQ）离线节点（读取）	-
大数据	HIVE 离线节点（读取）	Hive 离线节点（写入）
		HBase 离线节点（读取）	HBase 离线节点（写入）
		Clickhouse 离线节点（读取）	Clickhouse 离线节点（写入）
		DLC 离线节点（读取）	DLC 离线节点（写入）
		Kudu 离线节点（读取）	Kudu 离线节点（写入）
		HDFS 离线节点（读取）	HDFS 离线节点（写入）
		Greenplum 离线节点（读取）	Greenplum 离线节点（写入）
		GaussDB 离线节点（读取）	GaussDB 离线节点（写入）
		Gbase 离线节点（读取）	Gbase 离线节点（写入）
		TBase 离线节点（读取）	TBase 离线节点（写入）
		Iceberg 离线节点（读取）	Iceberg 离线节点（写入）
		-	Doris 离线节点（写入）
消息列表	Kafka 离线节点（读取）	-
NoSQL	Mongo 离线节点（读取）	-
		Elasticsearch 离线节点（读取）	Elasticsearch 离线节点（写入）
		-	Redis 离线节点（写入）
半结构化	COS 离线节点（读取）	COS 离线节点（写入）
		FTP 离线节点（读取）	FTP 离线节点（写入）
		SFTP 离线节点（读取）	SFTP 离线节点（写入）
		Rest API 离线节点（读取）	-

转换类型	节点
字段转换	字符串替换
字段转换		字段分割
数据清洗	数据过滤
		去重
		数据连接（join）

节点配置参数及说明

本页目录：

读写节点配置

转换节点配置