2020年9月9日星期三

从Oracle、SQLServer、Mysql等异构数据库高速抽取数据到GP(greenPlum)

greenplum数据连接配置,注意连接类型要选择PostgreSQL

clipboard

新建数据连接,源选择异构的示例数据库SampleSource(H2数据库)

clipboard

目标页签选择GP的数据连接和表

目标表更新方式:新增并更新数据到目标表

关键字段:不为空即可

插入前执行语句:系统会自动生成Merge语句,将merge语句替换成Copy语句

COPY 表名 FROM STDIN DELIMITER '|' NULL 'None'

(DELIMITER 表示列分隔符;NULL 'None'的意思是值为null的数据会被填充为"None")

具体可以参考postgresql(greenplum)的COPY ... FROM STDIN 的语法。

clipboard

注意:老的pg版本语法上略有不同,需根据当前版本的语句来写COPY语句。


执行任务,10万行数据导入。实测4G数据导入GP用时100秒左右。

clipboard从Oracle、SQLServer、Mysql等异构数据库高速抽取数据到GP(greenPlum)亿恩比酷尔亚马逊电商培训见面会 泉州站超实用IT工具精彩详解亚马逊2019年全年规划你做好了吗?2020年YouTube十大创意广告新鲜出炉!60天打造亚马逊品类排名前三爆款Lazada频繁换帅 本地化遭遇的困局?巧用26个英文字母,记住和facebook账户有关内容!

没有评论:

发表评论