开发者社区> 问答> 正文

hbase 大量写入很慢

一个列族,每个200多列,一秒写30000条数据,使用mutate添加数据,clientbuffer缓存大小为10M,四台测试机,128G内存,分配60G给Hbase,该怎么优化

展开
收起
xx三生石xx 2017-03-17 19:08:07 8117 0
3 条回答
写回答
取消 提交回答
  • 使用批量写入

    2020-03-18 17:02:52
    赞同 展开评论 打赏
  • 码农一枚

    可以使用bulkload方式写入,通过mr程序生产hfile文件,直接用bulkload导入生成的hfile文件,速度非常快。

    2019-07-17 20:56:22
    赞同 展开评论 打赏
  • 采用什么方式入hbase,数据量较大建议使用bukload

    2019-07-17 20:56:22
    赞同 展开评论 打赏
问答排行榜
最热
最新

相关电子书

更多
大数据时代的存储 ——HBase的实践与探索 立即下载
Hbase在滴滴出行的应用场景和最佳实践 立即下载
阿里云HBase主备双活 立即下载