使用Datax将MySQL中的数据导入到TableStore中

  1. 云栖社区>
  2. 阿里云存储服务>
  3. 博客>
  4. 正文

使用Datax将MySQL中的数据导入到TableStore中

chen1255 2016-07-04 15:38:39 浏览7685
展开阅读全文

背景

由于我们的数据在MySQL中的数据已经快接近亿级别,在访问MySQL并发读写的时候遇到了很大的瓶颈,严重的Block了我们的业务发展,主要从白天十点到晚上十点之前,并发访问的用户比较多,我们在写的前面加上了队列,系统后台自动同步。但是读上没有很好的办法解决,所以我们急需一个有较高吞吐量的实时存储系统。

本来准备自己搭建Hbase集群,但是考虑到运维代价和成本,最终放弃了这个方案。后面给阿里云发工单,了解到阿里云有一个类似于Hbase的产品,叫做TableStore,简单看了一下,总结一下优势:高并发、低延迟、按量计费、全托管。经历了一段时间的调研和使用之后,发现能满足我们业务需求,最终决定选用TableStore。

业务代码改造完成之后,需要将历史数据同步过去,使用了阿里开源的Datax插件,因此把整个迁移流程记录下来,分享给大家

网友评论

登录后评论
0/500
评论
chen1255
+ 关注
所属云栖号: 阿里云存储服务