OTSReader自己定义切分主键

  1. 云栖社区>
  2. 阿里云DataWorks>
  3. 博客>
  4. 正文

OTSReader自己定义切分主键

dataworks@李珍珍 2019-04-04 14:32:34 浏览8006
展开阅读全文

该配置项属于高级配置项,是用户自己定义切分配置信息,普通情况下不建议用户使用。

适用场景通常在OTS数据存储发生热点,使用OTSReader自动切分的策略不能生效情况下,使用用户自定义的切分规则。split指定是的在Begin、End区间内的切分点,且只能是partitionKey的切分点信息,即在split仅配置partitionKey,而不需要指定全部的PrimaryKey。
例如对一张主键为id01、id02的OTS进行抽取任务,主键是数据0~90可以配置为:

{
"job": {
       "setting": {
           "speed": {
               "byte": 1048576
           },
           "errorLimit": {
            

网友评论

登录后评论
0/500
评论
dataworks@李珍珍
+ 关注
所属云栖号: 阿里云DataWorks