datax(26):各个数据库与datax字段映射

全栈程序员-站长 • 2022年5月16日下午7:20 • 未分类 • 阅读 172

datax(26):各个数据库与datax字段映射通过源码解读Column-datax中的数据类型，可以知道datax框架中只有7（enumType种）种数据类型，那么各个数据库的字段是如何和datax的字段进行相互映射？一、ADBPGDataX内部类型ADBPG数据类型Longbigint,bigserial,integer,smallint,serialDoubledoubleprecision,float,numeric,realStringvarchar,char,tex.

大家好，又见面了，我是你们的朋友全栈君。

通过源码解读Column-datax中的数据类型，可以知道datax框架中只有7（enum Type种）种数据类型，那么各个数据库的字段是如何和datax的字段进行相互映射？

一、ADB PG

DataX 内部类型	ADB PG 数据类型
Long	bigint, bigserial, integer, smallint, serial
Double	double precision, float, numeric, real
String	varchar, char, text
Date	date, time, timestamp
Boolean	bool

二、ADS

DataX 内部类型	ADS 数据类型
Long	int, tinyint, smallint, int, bigint
Double	float, double, decimal
String	varchar
Date	date
Boolean	bool
Bytes	无

三、Cassandra

DataX 内部类型	Cassandra 数据类型
Long	int, tinyint, smallint,varint,bigint,time
Double	float, double, decimal
String	ascii,varchar, text,uuid,timeuuid,duration,list,map,set,tuple,udt,inet
Date	date, timestamp
Boolean	bool
Bytes	blob

四、DRDS

DataX 内部类型	DRDS 数据类型
Long	int, tinyint, smallint, mediumint, int, bigint
Double	float, double, decimal
String	varchar, char, tinytext, text, mediumtext, longtext
Date	date, datetime, timestamp, time, year
Boolean	bit, bool
Bytes	tinyblob, mediumblob, blob, longblob, varbinary

五、FTP

DataX 内部类型	FTP文件数据类型

Long	Long -> 字符串序列化表示
Double	Double -> 字符串序列化表示
String	String -> 字符串序列化表示
Boolean	Boolean -> 字符串序列化表示
Date	Date -> 字符串序列化表示

六、HBase

DataX 内部类型	HBase 数据类型
Long	int, short ,long
Double	float, double
String	string,binarystring
Date	date
Boolean	boolean

七、 Phoenix

DataX 内部类型	Phoenix 数据类型
String	CHAR, VARCHAR
Bytes	BINARY, VARBINARY
Bool	BOOLEAN
Long	INTEGER, TINYINT, SMALLINT, BIGINT
Double	FLOAT, DECIMAL, DOUBLE,
Date	DATE, TIME, TIMESTAMP

八、Hive

DataX 内部类型	Hive表数据类型
Long	TINYINT,SMALLINT,INT,BIGINT
Double	FLOAT,DOUBLE
String	String,CHAR,VARCHAR,STRUCT,MAP,ARRAY,UNION,BINARY
Boolean	BOOLEAN
Date	Date,TIMESTAMP

九、KingbaseES

DataX 内部类型	KingbaseES 数据类型
Long	bigint, bigserial, integer, smallint, serial
Double	double precision, money, numeric, real
String	varchar, char, text, bit, inet
Date	date, time, timestamp
Boolean	bool
Bytes	bytea

十、MongoDB

DataX 内部类型	MongoDB 数据类型
Long	int, Long
Double	double
String	string, array
Date	date
Boolean	boolean
Bytes	bytes

十一、ADB PG

DataX 内部类型	Mysql 数据类型
Long	int, tinyint, smallint, mediumint, int, bigint, year
Double	float, double, decimal
String	varchar, char, tinytext, text, mediumtext, longtext
Date	date, datetime, timestamp, time
Boolean	bit, bool
Bytes	tinyblob, mediumblob, blob, longblob, varbinary

十二、ODPS

DataX 内部类型	ODPS 数据类型
Long	BIGINT
Double	DOUBLE
String	STRING
Date	DATETIME
Boolean	Boolean

十三、TSDB

DataX 内部类型	TSDB 数据类型
String	TSDB 数据点序列化字符串，包括 timestamp、metric、tags 和 value

十四、Oracle

DataX 内部类型	Oracle 数据类型
Long	NUMBER,INTEGER,INT,SMALLINT
Double	NUMERIC,DECIMAL,FLOAT,DOUBLE PRECISION,REAL
String	LONG,CHAR,NCHAR,VARCHAR,VARCHAR2,NVARCHAR2,CLOB,NCLOB,CHARACTER,CHARACTER VARYING,CHAR VARYING,NATIONAL CHARACTER,NATIONAL CHAR,NATIONAL CHARACTER VARYING,NATIONAL CHAR VARYING,NCHAR VARYING
Date	TIMESTAMP,DATE
Boolean	bit, bool
Bytes	BLOB,BFILE,RAW,LONG RAW

十五、OSS

DataX 内部类型	OSS 数据类型
Long	Long
Double	Double
String	String
Boolean	Boolean
Date	Date

十六、OTS

DataX 内部类型	OTS 数据类型
Long	Integer
Double	Double
String	String
Boolean	Boolean
Bytes	Binary

十七、PostgreSQL

DataX 内部类型	PostgreSQL 数据类型
Long	bigint, bigserial, integer, smallint, serial
Double	double precision, money, numeric, real
String	varchar, char, text, bit, inet
Date	date, time, timestamp
Boolean	bool
Bytes	bytea

十八、SqlServer

DataX 内部类型	SqlServer 数据类型
Long	bigint, int, smallint, tinyint
Double	float, decimal, real, numeric
String	char,nchar,ntext,nvarchar,text,varchar,nvarchar(MAX),varchar(MAX)
Date	date, datetime, time
Boolean	bit
Bytes	binary,varbinary,varbinary(MAX),timestamp

十九、本地文件

DataX 内部类型	本地文件数据类型

Long	Long
Double	Double
String	String
Boolean	Boolean
Date	Date

版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容，请联系我们举报，一经查实，本站将立刻删除。

发布者：全栈程序员-站长，转载请注明出处：https://javaforall.net/145715.html原文链接：https://javaforall.net

赞 (0)

全栈程序员-站长

0 0

DirectX修复工具的详细使用步骤介绍[通俗易懂]

DirectX修复工具的详细使用步骤介绍[通俗易懂]DirectX修复工具的详细使用步骤介绍@TOCDirectX修复工具是一款系统级工具软件，简便易用，无需安装，可直接运行，下面为大家分享的是DirectX修复工具的详细使用步骤介绍首先我们下载DirectX修复工具，再找到并打开“维护电脑”，在找到并打开“恢复软件”，再点“DirectX修复工具”2.这时候解压之后，这里有两个DirectXRepair.exe修复工具，另一个Direc…

全栈程序员-站长
2022年6月10日
47
zabbix监控mysql各项指标

zabbix监控mysql各项指标准备两台虚拟机zabbix-server（服务端ip:192.168.176.138）zabbix-agent（客户端ip:192.168.176.139）两台分别上传zabbix.repo到/etc/yum.repos.d下面安装前工作//关闭防火墙systemctlstopfirewalldsetenforce0//时间同步yum-yinstallntpdatentpdatepool.ntp.org服务端[root@localhost~]#yum-y

全栈程序员-站长
2022年6月10日
66
集合转成数组的方法_数组转化为集合

集合转成数组的方法_数组转化为集合1.转换方法1.遍历的方式，依次添加到集合中。2.Arrays.asList()方法3.List.of()方法4.Collections.addAll(集合，数组)方法，将集合存储到数组中1.1遍历的方式这种方式转换成的集合，集合长度可变，可以后续向集合添加数据int[]i={1,5,8,7,11,52};//1.遍历的方式Listlist=newArrayList();for(intx:i){

全栈程序员-站长
2026年1月25日
2
centos 如何退出vim

centos 如何退出vimHowtoexittheVimeditor?点击ESC进入“正常模式”，然后输入“:”，进入“命令模式”。此时屏幕的下方会出现一个冒号，你可以输入以下命令，并按“ENTER”执行：:q，退出（:quit的缩写）:q!，退出且不保存（:quit!的缩写）:wq，保存并退出:wq!，保存并退出即使文件没有写入权限（强制保存退出）:x，保存并退出（类似:wq，但是只有在有更改的情况下才保存）:exit，保存并退出（和:x相同）:qa，退出所有(:quitall的缩写)

全栈程序员-站长
2022年5月23日
43
google Gmail_国外的新鲜玩意

google Gmail_国外的新鲜玩意前不久，Google推出了Buzz，Buzz的说白了，就像QQ空间里面的好友关注，每天你登陆后，你都可以看到你所关注的好友做了哪些更新。让你和好友的关系更紧密。事实上，这个功能我甚至不会去使用它。为什么呢？因为我现在QQ上的好友更新已经太多了，我光是看QQ好友的更新已经觉得很累了。再去关注Buzz，想把我累死啊。。所以其实现在中国的互联网市场上，成功还是腾讯和百度，Google是一个竞争…

全栈程序员-站长
2022年10月15日
6
java如何输入字符串?「建议收藏」

java如何输入字符串?「建议收藏」关于java如何输入字符串的文章早已是非常多了，本文是对我个人过往学习java，理解及应用java字符串的一个总结。此文内容涉及java如何输入字符串等相关问题，希望对大家有所帮助。java如何输入字符串?首先，导入java.util.*包。然后，你需要新建一个读取标准输入(键盘)的扫描器对象。现在，你可以从键盘输入字符串了。以上这一行把键盘输入的一行字符串读取到变量s中。请看一个完整的简单示例：以上就是java如何输入字符串的详细内容。我整理了一些ja

全栈程序员-站长
2022年7月16日
9

发表回复

关注全栈程序员社区公众号