ETL(抽取、转换、装载)是企业信息化中系统集成、数据仓库软件经常遇到的。当面临以下情况时，需要有较好的模式来解决：
* 大数据量
* 复杂逻辑
* 大量表
下面列举几种模式，供大家参考。
也欢迎提出你的方案，共同探讨。
本文转自DavyYew 51CTO博客，原文链接：http://blog.51cto.com/davyyew/705585，如需转载请自行联系原作者
【DB】几种ETL模式
2017-11-09
1372
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
目录
相关文章
|
SQL
存储
运维
|
5月前
|
Oracle
关系型数据库
数据库
|
6月前
|
SQL
Oracle
关系型数据库
|
SQL
分布式计算
运维
【大数据开发运维解决方案】Sqoop增量同步mysql/oracle数据到hive(merge-key/append）测试文档
上一篇文章介绍了sqoop全量同步数据到hive，
本片文章将通过实验详细介绍如何增量同步数据到hive，以及sqoop job与crontab定时结合无密码登录的增量同步实现方法。
286
0
0
|
SQL
Oracle
前端开发
|
SQL
Oracle
关系型数据库
|
NoSQL
数据库
MongoDB的db.currentOp()输出结果分析
1588
0
0
|
存储
JSON
NoSQL
数据集成模块中如何配置Mongo DB数据同步(2)
MongoDB是面向文档的NoSQL（非关系型）数据库，它的数据结构由字段（Field）和值（Value）组成，类似于JSON对象。
数据集成的Mongodb输出组件提供了写入Mongodb数据库的能力。本文重点介绍如何配置Mongodb的加载策略。
207
0
0
|
存储
JSON
NoSQL
数据集成模块中如何配置Mongo DB数据同步(1)
MongoDB是面向文档的NoSQL（非关系型）数据库，它的数据结构由字段（Field）和值（Value）组成，类似于JSON对象。
数据集成的Mongodb输入组件提供了从mongodb数据库中全量和增量两种读取方式，并且能够对数据自动进行数据分片，从而可以并发的高校读取数据。
2077
0
1
|
关系型数据库
数据库
PostgreSQL
PostgreSQL的DB在表空间之间迁移
Background
The /data/01 disk space is insufficient, but /data/02 is sufficient, so we migrate some data to /data/02.
1546
0
0