AI 助理
备案控制台登录注册
开发者社区 问答 正文

hbase 大量写入很慢

一个列族，每个200多列，一秒写30000条数据，使用mutate添加数据，clientbuffer缓存大小为10M，四台测试机，128G内存，分配60G给Hbase，该怎么优化

展开
收起
q977734161-22656 2017-03-17 19:08:07 8262 分享
分享
 版权
举报

版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。

3 条回答
写回答
取消 提交回答
  • galaxystar

    使用批量写入

    2020-03-18 17:02:52 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
  • 小步快快跑
    码农一枚

    可以使用bulkload方式写入，通过mr程序生产hfile文件，直接用bulkload导入生成的hfile文件，速度非常快。

    2019-07-17 20:56:22 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
  • 1754789823472075

    采用什么方式入hbase，数据量较大建议使用bukload

    2019-07-17 20:56:22 举报
    赞同 评论

    评论

    全部评论 (0)

    登录后可评论
问答分类：
缓存 分布式数据库 Hbase 云数据库HBase版
问答标签：
云数据库HBase版很慢
问答地址：
开发者社区 > 数据库 > 问答
相关问答
hbase查询速度很慢
519
4
0
这个dataphin数据集成写出到hbase很慢，大量时间消耗在写入重试
328
0
0
hbase写入很慢，但是集群负载也不高
2139
1
0
hbase scan返回100行，第一次很慢
7342
2
0
请教一个问题。我在用spark读取hbase数据时，默认是一个regoin一个task。发现有些re
1129
0
0
odps导出数据到hbase,这个报错是什么意思啊？
747
1
0
hbase 表获取一行表数据如何用代码描述呢？
1639
1
0
删除hbase 表中多行数据如何用代码描述呢？
1878
1
0
删除 hbase 表中一行数据如何用代码描述呢？
1909
1
0
hbase表中添加数据如何用代码描述呢？
1566
1
0
AI助理

你好，我是AI助理

可以解答问题、推荐解决方案等