作者: hbase小能手
1448人浏览
评论数：0
4年前
标题中提及"事务"可能会给大家带来误解，这篇文章不是在讨论HBase如何支持分布式事务能力的，而是介绍HBase用来处理内部事务操作的特性，这个特性被称之为Procedure V2，也是2.0版本的主打特性之一。 本文内容基于HBase 2.1版本，整体内容组
作者: 行者武松
1899人浏览
评论数：0
5年前
Apache Spark是一款快速、灵活且对开发者友好的工具，也是大型SQL、批处理、流处理和机器学习的领先平台。 2009年，Apache Spark从美国U.C. Berkeley的 AMPLab为起步，现在已经成为世界上主要的大数据分布式处理框架之一。S
作者: 祝威廉
2927人浏览
评论数：0
5年前
前言 之前因为仅仅是把HBase当成一个可横向扩展并且具有持久化能力的KV数据库，所以只用在了指标存储上，参看很早之前的一篇文章基于HBase做Storm 实时计算指标存储。这次将HBase用在了用户行为存储上，因为Rowkey的过滤功能也很不错，可以很方便的
作者: 松伯
749人浏览
评论数：0
7年前
def main(args: Array[String]) { val sparkConf = new SparkConf().setMaster("local").setAppName("cocapp").set("spark.kryo.registrat
作者: 阿姆斯特芬
3609人浏览
评论数：0
3年前
Cloudera-manager(CDH6.3.0)大数据平台搭建一指禅指南(impala,kudu,hdfs,hive,kafka,yarn,spark,hbase,hue) CHD6，大量hadoop生态的重大更新升级，果断把现有系统升级到CHD6上。
作者: 知与谁同
1456人浏览
评论数：0
5年前
1. 什么是Apache Spark？ Apache Spark是一个为速度和通用目标设计的集群计算平台。 从速度的角度看，Spark从流行的MapReduce模型继承而来，可以更有效地支持多种类型的计算，如交互式查询和流处理。速度在大数据集的处理中非常重要
作者: 祝威廉
3173人浏览
评论数：0
6年前
一些概念 一个partition 对应一个task,一个task 必定存在于一个Executor,一个Executor 对应一个JVM. Partition 是一个可迭代数据集合 Task 本质是作用于Partition的线程 问题 Task 里如何使用Kaf
作者: 杨振平
693人浏览
评论数：0
8年前
Hadoop，HBase，Storm，Spark到底是什么？ Hadoop=HDFS+Hive+Pig+... HDFS: 存储系统MapReduce：计算系统Hive：提供给SQL开发人员（通过HiveQL）的MapReduce，基于Hadoop的数据仓库
作者: 封神
1409人浏览
评论数：1
6年前
大家好，我正在使用阿里云的产品，现在公司要求使用spark访问Hbase，如何将一个Rdd写入Hbase，java语言，求指导
作者: hbase小助手
288人浏览
评论数：1
4年前
可以使用 shc 实现，参考： https://github.com/hortonworks-spark/shc/
作者: hbase小助手
596人浏览
评论数：1
4年前
如果不行的话，只能批量处理了，就谈不上实时了，听您说的可以做实时，是怎么做的呢？
