hbase小助手 + 关注

hbase小助手 参与了问答:

请教下,spark缓存rdd,前端应用是否可以直接查询这个rdd?

请教下,spark缓存rdd,前端应用是否可以直接查询这个rdd?

“对于同步的前端请求,不建议,一般rdd cache了,如果处理查询处理逻辑复杂也还是要几十秒才能返回。”

hbase小助手 参与了问答:

phoenix链接工具

在命令行操作不方便,有没有做查询推荐的连接工具呢

“https://mp.weixin.qq.com/s/GeAEHEa29T_QLgqQm6SAyA 内附安装使用说明(SQuirreL)”

hbase小助手 参与了问答:

spark SQL 的bucketBy设置bucket数量

spark SQL 的bucketBy怎么设bucket数量比较好啊?感觉bucket少了join起来并发度太低,bucket多了又是一大堆小文件,有推荐值不?

“先按照bucketcolumn和bucketnumber做repartition”

hbase小助手 参与了问答:

如何设置Hbase后台服务进程数与RPC数量

在做Hbase优化时,调整如题参数好像没有什么明显优化,想问一下,这两个参数修改的依据是什么。

“一般是根据数据量,以及可用资源来调整,适当调整可作为辅助优化的选项,太大了会导致资源不足,GC频繁。建议查找具体瓶颈环节,针对性优化”

hbase小助手 参与了问答:

用Phoenix会对集群性能影响大吗?

用Phoenix会对集群性能影响大吗?

“如果数据量比较大的 写入本来压力挺大”

hbase小助手 参与了问答:

二级索引存储在ES和Phoenix有什么区别?

二级索引存储在ES和Phoenix有什么区别?

“es没有Phoenix并发高,速度快的。弄到solr/es主要目的是解决全文模糊查询”

hbase小助手 参与了问答:

未来phoenix有支持存储过程的计划吗

未来phoenix有支持存储过程的计划吗

“用spark就可以了”

hbase小助手 参与了问答:

互联网金融hbase集群多大规模?

互联网金融hbase集群多大规模?

“阿里云的数据大概将近80T数据”

hbase小助手 参与了问答:

phoenix 的加盐,SALT_BUCKETS 怎么来评估了?如果region超过了默认的大小,会分离吗?

phoenix 的加盐,SALT_BUCKETS 怎么来评估了?如果region超过了默认的大小,会分离吗?

“phoenix加盐目的是为了避免数据热点,不建议指定过多分桶数量,过多会导致数据过于分散,会导致查询性能下降”

hbase小助手 参与了问答:

查询条件是 Where B='xx' and A='yy',phoenix怎么用去查?

问个全局索引的例子,如果这样查询条件是 Where B='xx' and A='yy',phonix怎么用去查?

“在全局索引表中,已经包括了b列数据和a列的数据,phoenix只需要读取了一次索引表就可以拿到这行数据”

hbase小助手 参与了问答:

一张非常宽的表,如果创建globalindex 默认会创建不止一张索引表吗?

一张非常宽的表,如果创建globalindex 默认会创建不止一张索引表吗?

“执行一次create,只会创建一张索引表”

hbase小助手 参与了问答:

创建全局索引表,如果查询字段没有在索引表中,那么此时是不会使用索引表的,那么我需要把其他的字段全部include进索引表吗?

创建全局索引表,如果查询字段没有在索引表中,那么此时是不会使用索引表的,那么我需要把其他的字段全部include进索引表吗?

“会使用索引表,但需要回查主表。把其他字段include进去就只查索引表,不会回查主表了。可以使用Hint 强制指定索引,也可以Include”

hbase小助手 参与了问答:

Phoenix查询数据有性能测试数据吗?

Phoenix查询数据有性能测试数据吗?

“使用ycsb工具可以分析性能数据,需要增加下phoenix module”

hbase小助手 参与了问答:

一个表创建多个索引,会根据查询自动找到对应的索引?

一个表创建多个索引,会根据查询自动找到对应的索引嘛

“现在一张主表默认可以创建10索引表。但是实际上需要根据业务合理规划索引表来创建索引表。一次查询主表一次只能使用一个索引表。云hbase支持一个主表使用多个索引表,提供更丰富的索引能力”

hbase小助手 参与了问答:

phoenix查询 出现多条key不是1的数据问题?

phoenix查询语句select * from table where key=1 会出现很多key不是1的数据,select columns from table where key=1不会

“explain查询是否走索引,看看是否索引损坏”

hbase小助手 参与了问答:

索引表损坏怎么修复?

索引表损坏怎么修复?

“删除索引表,重建索引,否则会影响查询效率”

hbase小助手 参与了问答:

Phoenix能支持事务吗?

Phoenix能支持事务吗?

“phoenix支持简单事务,但是早期版本不建议将事务使用在生产环境”

hbase小助手 参与了问答:

phoenix可以读取hbase的多个版本的数据吗?

phoenix可以读取hbase的多个版本的数据吗?

“phoenix不支持hbase多版本特性”

hbase小助手 参与了问答:

phoenix 可以支持多少字段,要做因子分析,担心字段不支持那么多?

phoenix 可以支持多少字段,要做因子分析,担心字段不支持那么多?

“支持上百万字段,支持动态字段。”

hbase小助手 参与了问答:

phoenix+hbase 与 es+hbase 对比有什么优势么?

phoenix+hbase 与 es+hbase 对比有什么优势么?

“并发、易用性完全不一样,你可以认为Phoenix就是newsqlphoenix是sql层,与hbase完全组合,赋予hbase更多能力,更加便捷”
3
暂未提供

感兴趣or擅长的领域:

暂无
更多>
王爽wasugar
王爽wasugar
文章:0丨 粉丝:2073丨 话题:0
云hbase+spark
云hbase+spark
文章:33丨 粉丝:6757丨 话题:0
封神
封神
文章:34丨 粉丝:10574丨 话题:2
祥栖
祥栖
文章:4丨 粉丝:3189丨 话题:0
所在jason
所在jason
文章:15丨 粉丝:6855丨 话题:0
hbase小能手
hbase小能手
文章:112丨 粉丝:3007丨 话题:0
更多>