OssImport系列之一——架构

  1. 云栖社区>
  2. 阿里云存储服务>
  3. 博客>
  4. 正文

OssImport系列之一——架构

鸣镝 2017-07-12 10:40:58 浏览4380
展开阅读全文

相关文章:OssImport系列之二——单机部署
相关文章:OssImport系列之三——分布式部署

概述

OssImport工具可以将本地、其它云存储的数据迁移到OSS,它有以下特点:

  • 支持的丰富的数据源,有本地、七牛、百度BOS、AWS S3、Azure Blob、又拍云、腾讯云COS、金山KS3、HTTP、OSS等,并可根据需要扩展;
  • 支持断点续传;
  • 支持流量控制;
  • 支持迁移指定时间后的文件、特定前缀的文件;
  • 支持并行数据下载、上传;
  • 支持单机模式和分布式模式,单机模式部署简单使用方便,分布式模式适合大规模数据迁移。

架构

OssImport是基于 master-worker 的分布式架构,如下图:

Master --------- Job --------- Console
    |
    |
   TaskTracker
    |____

网友评论

登录后评论
0/500
评论
鸣镝
+ 关注
所属云栖号: 阿里云存储服务