备案控制台
探索云世界
开发者社区 数据库 关系型数据库 文章 正文

ETL for Oracle to PostgreSQL 3 - DATAX

2018-05-06 4127
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
云原生数据库 PolarDB MySQL 版，Serverless 5000PCU 100GB
推荐场景：
PolarDB for MySQL 多主集群体验
云原生数据库 PolarDB 分布式版，标准版 2核8GB
推荐场景：
使用PolarDB-X与Flink搭建实时数据大屏
云数据库 RDS MySQL Serverless，0.5-2RCU 50GB
推荐场景：
学生管理系统数据库设计 搭建个人博客
简介：

标签

PostgreSQL , Oracle , ETL , datax

背景

Datax是阿里巴巴开源的一款ETL工具，在云端可以作为服务直接使用，同时用户也可以下载开源代码自行部署。

1 开源Datax

http://gitlab.alibaba-inc.com/datax/datax/wikis/quick_start

配置源端数据源 Oracle reader

http://gitlab.alibaba-inc.com/datax/datax-wiki/wikis/datax-plugin-oraclereader

配置目标数据源 PostgreSQL writer

http://gitlab.alibaba-inc.com/datax/datax-wiki/wikis/datax-plugin-pgwriter

2 阿里云服务DataWorks

配置源端数据源 Oracle reader

https://help.aliyun.com/document_detail/47765.html

配置目标数据源 PostgreSQL writer

https://help.aliyun.com/document_detail/47767.html

PostgreSQL Writer

https://help.aliyun.com/knowledge_detail/49830.html

附加说明

Datax在阿里云端使用时，支持BULK模式（使用rds pg, hdb pg, rds ppas的oss外部表），从OSS并行加载到PostgreSQL, PPAS, HDB PG中。

文章标签：
云原生数据库 PolarDB
数据集成 Data Integration
关系型数据库
Web App开发
PostgreSQL
DataX
Oracle
关键词：
oracle云原生数据库 PolarDB
Oracle数据库一键上云postgresql
etl云原生数据库 PolarDB
相关实践学习
使用PolarDB和ECS搭建门户网站
本场景主要介绍基于PolarDB和ECS实现搭建门户网站。
阿里云数据库产品家族及特性
阿里云智能数据库产品团队一直致力于不断健全产品体系，提升产品性能，打磨产品功能，从而帮助客户实现更加极致的弹性能力、具备更强的扩展能力、并利用云设施进一步降低企业成本。以云原生+分布式为核心技术抓手，打造以自研的在线事务型(OLTP)数据库Polar DB和在线分析型(OLAP)数据库Analytic DB为代表的新一代企业级云原生数据库产品体系， 结合NoSQL数据库、数据库生态工具、云原生智能化数据库管控平台，为阿里巴巴经济体以及各个行业的企业客户和开发者提供从公共云到混合云再到私有云的完整解决方案，提供基于云基础设施进行数据从处理、到存储、再到计算与分析的一体化解决方案。本节课带你了解阿里云数据库产品家族及特性。
德哥,digoal
目录
相关文章
三分钟热度的鱼
|
29天前
|
Oracle 关系型数据库 分布式数据库
PolarDB常见问题之PolarDB(Oracle兼容版) 执行命令报错如何解决
PolarDB是阿里云推出的下一代关系型数据库，具有高性能、高可用性和弹性伸缩能力，适用于大规模数据处理场景。本汇总囊括了PolarDB使用中用户可能遭遇的一系列常见问题及解答，旨在为数据库管理员和开发者提供全面的问题指导，确保数据库平稳运行和优化使用体验。
三分钟热度的鱼
53 1
1845197920913064
|
1月前
|
关系型数据库 分布式数据库 数据库
PolarDB PostgreSQL版：Oracle兼容的高性能数据库
PolarDB PostgreSQL版是一款高性能的数据库，具有与Oracle兼容的特性。它采用了分布式架构，可以轻松处理大量的数据，同时还支持多种数据类型和函数，具有高可用性和可扩展性。它还提供了丰富的管理工具和性能优化功能，为企业提供了可靠的数据存储和处理解决方案。PolarDB PostgreSQL版在数据库领域具有很高的竞争力，可以满足各种企业的需求。
1845197920913064
99 0
wljslmz
|
7月前
|
Oracle 关系型数据库 数据库
PostgreSQL和Oracle两种数据库有啥区别？如何选择？
PostgreSQL和Oracle两种数据库有啥区别？如何选择？
wljslmz
201 0
前方一片光明
|
8月前
|
SQL Oracle 关系型数据库
物化视图（Oracle与PostgreSQL对比）
物化视图（Oracle与PostgreSQL对比）
前方一片光明
140 0
bjcuug
|
8月前
|
SQL Oracle 关系型数据库
PostgreSQL技术大讲堂 - 第27讲：Oracle-FDW部署
从零开始学PostgreSQL，PG技术大讲堂 - 第27讲：Oracle-FDW部署
bjcuug
167 2
听风与他
|
4月前
|
SQL Oracle 关系型数据库
Oracle,Postgresql等数据库使用
Oracle,Postgresql等数据库简单使用
听风与他
133 0
Oracle,Postgresql等数据库使用
q7s2kces74wvy
|
7月前
|
Oracle 关系型数据库 分布式数据库
如何从Oracle迁移到PolarDB(ADAM)（二）
如何从Oracle迁移到PolarDB(ADAM)（二）
q7s2kces74wvy
128 0
q7s2kces74wvy
|
7月前
|
SQL Oracle 关系型数据库
Polar DB-O （兼容 Oracle 语法版本）和Polar DB PostgreSQL 版本概述（二）
Polar DB-O （兼容 Oracle 语法版本）和Polar DB PostgreSQL 版本概述（二）
q7s2kces74wvy
692 0
Z2O安全攻防
|
11月前
|
SQL 安全 Oracle
MySQL&SQL server&Oracle&Access&PostgreSQL数据库sql注入详解
MySQL&SQL server&Oracle&Access&PostgreSQL数据库sql注入详解
Z2O安全攻防
343 0
Wesky
|
SQL Oracle 网络协议
【.NET 6】使用EF Core 访问Oracle+Mysql+PostgreSQL并进行简单增改操作与性能比较
唠嗑一下。都在说去O或者开源，但是对于数据库选型来说，很多人却存在着误区。例如，去O，狭义上讲，是去Oracle数据库。但是从广义上来说，是去Oracle公司产品或者具有漂亮国垄断地位和需要商业授权的数据库产品。
Wesky
323 0
【.NET 6】使用EF Core 访问Oracle+Mysql+PostgreSQL并进行简单增改操作与性能比较
数据库

关系型数据库

热门文章

最新文章

  • 1
    你的数据库用对索引了吗？一文揭秘PolarDB XPlan索引选择
  • 2
    为PostgreSQL讨说法 - 浅析《UBER ENGINEERING SWITCHED FROM POSTGRES TO MYSQL》
  • 3
    德哥的PostgreSQL私房菜 - 史上最屌PG资料合集
  • 4
    PostgreSQL 如何实现批量更新、删除、插入
  • 5
    PostgreSQL 9种索引的原理和应用场景
  • 6
    PostgreSQL 与基友们的故事之 - Redis (无限缓存,实时标签...)
  • 7
    PostgreSQL 百亿地理位置数据 近邻查询性能
  • 8
    PostgreSQL OLTP高并发请求性能优化
  • 9
    PostgreSQL 分库分表 插件之一 pg_shard
  • 10
    PostgreSQL 9.5 新特性之 - 水平分片架构与实践
  • 1
    PolarDB闪电助攻，《香肠派对》百亿好友关系实现毫秒级查询
    47
  • 2
    【MySQL系列笔记】MVCC
    30
  • 3
    你的数据库用对索引了吗？一文揭秘PolarDB XPlan索引选择
    62522
  • 4
    【MySQL系列笔记】索引
    84
  • 5
    【MySQL系列笔记】隔离锁
    82
  • 6
    【MySQL系列笔记】事务
    62
  • 7
    超1/3中国500强企业都在用的「汇联易」，为什么选用阿里云RDS？
    134356
  • 8
    PolarDB +AnalyticDB Zero-ETL ：免费同步数据到ADB，享受数据流通新体验
    101536
  • 9
    详解MySQL字符集和Collation
    128886
  • 10
    RDS MySQL 数据库运维简述
    761

    • 相关产品

  • 云原生数据库 PolarDB
    文档详情 产品详情

    • 相关课程

    更多
  • 7天突破PolarDB for PostgreSQL 2022版
  • 关系型数据库ACP认证课程
  • 关系型数据库线上预习视频
  • PolarDB for PostgreSQL 入门
  • PostgreSQL云上开发实践
  • PostgreSQL实战进阶

    • 相关电子书

    更多
  • 2023云栖大会：和客户一起玩转PolarDB新特性
  • 2023云栖大会：PolarDB for AI
  • 2023云栖大会：AnalyticDB PostgreSQL

    • 相关实验场景

    更多
  • PolarDB NL2SQL：自然语言驱动的数据智能
  • 阿里云百炼xAnalyticDB PostgreSQL构建AIGC应用
  • 云原生数据库PolarDB快速入门
  • PolarDB for AI：在数据库中通过SQL实现AI能力
  • 使用CloudLens采集PolarDB日志并进行审计分析
  • PolarDB for PostgreSQL 闪回特性体验

    • 推荐镜像

    更多
  • postgresql
  • oracle
  • clickhouse
    • 下一篇
    阿里云oss简介和使用流程