DATAX改造支持geometry类型数据同步

数据库使用postgresql安装了postgis插件存储了geometry空间数据,想使用datax做数据同步,但datax本身不支持geometry类型数据,如何改造呢?

1.首先下载已改造支持geometry类型的datax引擎,下载地址

https://download.csdn.net/download/letterss/88799803

 2.将下载的datax引擎解压,将plugin里面reader模块的postgresqlreader和wrtier模块的postgresqlwriter分别替换自己的引擎模块即可,如果只使用postgresql数据库,则不用替换直接使用下载的引擎。

3.测试

新建了两张表my_table,my_table_copy1

CREATE TABLE my_table (id SERIAL PRIMARY KEY, geom GEOMETRY);

CREATE TABLE my_table_copy1(id SERIAL PRIMARY KEY, geom GEOMETRY);

向my_table添加数据

INSERT INTO my_table (geom) VALUES ('POINT(0 0)'); 

查询数据显示如下

 

使用datax同步,dataxjson如下

{
	"job": {
		"setting": {
			"speed": {
				"channel": "6",
				"byte": "12242880"
			},
			"errorLimit": {
				"record": "5",
				"percentage": "0.02"
			}
		},
		"content": [{
			"reader": {
				"name": "postgresqlreader",
				"parameter": {
					"username": "XVko54UY9nOe/3JQGQUikw==",
					"password": "fMaKElymbiVDjjwluBXyhA==",
					"column": ["\"id\"", "\"geom\""],
					"splitPk": "",
					"connection": [{
						"table": ["public.my_table"],
						"jdbcUrl": ["jdbc:postgresql://localhost:5432/postgres"]
					}]
				}
			},
			"writer": {
				"name": "postgresqlwriter",
				"parameter": {
					"username": "XVko54UY9nOe/3JQGQUikw==",
					"password": "fMaKElymbiVDjjwluBXyhA==",
					"column": ["\"id\"", "\"geom\""],
					"preSql": ["truncate table public.my_table_copy1"],
					"connection": [{
						"table": ["public.my_table_copy1"],
						"jdbcUrl": "jdbc:postgresql://localhost:5432/postgres"
					}]
				}
			},
			"transformer": []
		}]
	}
}

 同步成功,可以看到my_table_copy1 geom字段也有数据了,且数据一致

相关推荐

  1. postgresql中geometry类型数据迁移

    2024-02-02 21:48:03       9 阅读
  2. mybatis映射postgres数据库geometry类型

    2024-02-02 21:48:03       18 阅读

最近更新

  1. TCP协议是安全的吗?

    2024-02-02 21:48:03       18 阅读
  2. 阿里云服务器执行yum,一直下载docker-ce-stable失败

    2024-02-02 21:48:03       19 阅读
  3. 【Python教程】压缩PDF文件大小

    2024-02-02 21:48:03       18 阅读
  4. 通过文章id递归查询所有评论(xml)

    2024-02-02 21:48:03       20 阅读

热门阅读

  1. 云贝教育 | 【技术文章】Oracle 19c RAC修改网络

    2024-02-02 21:48:03       31 阅读
  2. Arduino开发板的功能

    2024-02-02 21:48:03       30 阅读
  3. mysql8 允许外网连接mysql

    2024-02-02 21:48:03       29 阅读
  4. 总是提示安装不了tensorflow

    2024-02-02 21:48:03       35 阅读
  5. Yii2之类自动加载

    2024-02-02 21:48:03       26 阅读
  6. 2024/2/1 备战蓝桥杯 3-3 二叉树

    2024-02-02 21:48:03       34 阅读
  7. 拓扑空间论学习与Transformer的联系

    2024-02-02 21:48:03       34 阅读
  8. C语言宏的进化

    2024-02-02 21:48:03       30 阅读
  9. Python程序设计 数据容器(List、Tuple、Dict、Set)

    2024-02-02 21:48:03       29 阅读
  10. 学生寝室管理系统

    2024-02-02 21:48:03       31 阅读