AI 助理
备案控制台登录注册
开发者社区 数据库 NoSQL数据库 文章 正文

HBase+Spark技术双周刊 第四期

2019-01-19 3520
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
本文涉及的产品
Redis 开源版，标准版 2GB
推荐场景：
搭建游戏排行榜
云原生多模数据库 Lindorm，多引擎 多规格 0-4节点
推荐场景：
海量数据下Lindorm查询实践
云数据库 Tair（兼容Redis），内存型 2GB
推荐场景：
通过缓存加速数据库访问
简介： 群直播 线下活动 推荐专家

a7c54fbf1d2733e0ce75cdade4ccc903ffd2d0e6

直播往期回顾——视频回看及PPT下载


Solr增强HBase检索能力基础介绍及场景
在本期视频中，阿里高级开发工程师天斯介绍了Solr如何增强HBase检索能力，并通过示例帮助大家快速上手HBase+Solr查询应用。

HBase钉钉群直播预告


1月22日 Phoenix 全局索引原理与实践 张赟
1月29日 Spark on rds/MongoDB/HBase/Redis/OSS多数据源 云覆

阿里云栖开发者沙龙——线下活动


【1月18日 下午1:30】 阿里云栖开发者沙龙北京专场—互联网下半场的角逐：玩转轻资产的大数据服务
【1月19日 下午1:30】 阿里云栖开发者沙龙合肥专场：高并发企业级应用架构实践分享

推荐专家


沐远——阿里云数据库技术专家
沐远，专注大数据分布式计算数据库领域， 研发Spark及自主研发内存计算，目前为广大公有云用户提供专业的云HBase数据库及计算服务。想了解，沐远 “一个数据引擎开发者的成长之路”，点击链接查看吧！

技术社群


【HBase生态+Spark社区大群】
群福利：群内每周进行群直播技术分享及问答
加入方式1：点击link申请加入
加入方式2：钉钉扫码加入
1

文章标签：
云数据库HBase版
数据库
大数据
Hbase
分布式数据库
开发者
关键词：
apache spark技术
云数据库HBase版技术
apache spark hbase
云数据库HBase版spark
hbase apache spark
相关实践学习
lindorm多模间数据无缝流转
展现了Lindorm多模融合能力——用kafka API写入，无缝流转在各引擎内进行数据存储和计算的实验。
云数据库HBase版使用教程
  相关的阿里云产品：云数据库 HBase 版 面向大数据领域的一站式NoSQL服务，100%兼容开源HBase并深度扩展，支持海量数据下的实时存储、高并发吞吐、轻SQL分析、全文检索、时序时空查询等能力，是风控、推荐、广告、物联网、车联网、Feeds流、数据大屏等场景首选数据库，是为淘宝、支付宝、菜鸟等众多阿里核心业务提供关键支撑的数据库。 了解产品详情: https://cn.aliyun.com/product/hbase   ------------------------------------------------------------------------- 阿里云数据库体验：数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引，您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接，领取免费ECS&RDS资源，30分钟完成数据库上云实战！https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
hbase小能手
目录
相关文章
土木林森
|
4月前
|
存储 分布式计算 Hadoop
数据湖技术：Hadoop与Spark在大数据处理中的协同作用
【10月更文挑战第27天】在大数据时代，数据湖技术凭借其灵活性和成本效益成为企业存储和分析大规模异构数据的首选。Hadoop和Spark作为数据湖技术的核心组件，通过HDFS存储数据和Spark进行高效计算，实现了数据处理的优化。本文探讨了Hadoop与Spark的最佳实践，包括数据存储、处理、安全和可视化等方面，展示了它们在实际应用中的协同效应。
土木林森
253 2
土木林森
|
4月前
|
存储 分布式计算 Hadoop
数据湖技术：Hadoop与Spark在大数据处理中的协同作用
【10月更文挑战第26天】本文详细探讨了Hadoop与Spark在大数据处理中的协同作用，通过具体案例展示了两者的最佳实践。Hadoop的HDFS和MapReduce负责数据存储和预处理，确保高可靠性和容错性；Spark则凭借其高性能和丰富的API，进行深度分析和机器学习，实现高效的批处理和实时处理。
土木林森
228 1
喜欢猪猪
|
6月前
|
分布式计算 Java Apache
Apache Spark Streaming技术深度解析
【9月更文挑战第4天】Apache Spark Streaming是Apache Spark生态系统中用于处理实时数据流的一个重要组件。它将输入数据分成小批次（micro-batch），然后利用Spark的批处理引擎进行处理，从而结合了批处理和流处理的优点。这种处理方式使得Spark Streaming既能够保持高吞吐量，又能够处理实时数据流。
喜欢猪猪
103 0
张飞的猪
|
8月前
|
分布式计算 大数据 Spark
Spark大数据处理：技术、应用与性能优化(全)PDF书籍推荐分享
《Spark大数据处理：技术、应用与性能优化》深入浅出介绍Spark核心，涵盖部署、实战与性能调优，适合初学者。作者基于微软和IBM经验，解析Spark工作机制，探讨BDAS生态，提供实践案例，助力快速掌握。书中亦讨论性能优化策略。[PDF下载链接](https://zhangfeidezhu.com/?p=347)。![Spark Web UI](https://img-blog.csdnimg.cn/direct/16aaadbb4e13410f8cb2727c3786cc9e.png#pic_center)
张飞的猪
201 1
Spark大数据处理：技术、应用与性能优化(全)PDF书籍推荐分享
1941623231718325
|
9月前
|
分布式计算 Hadoop 大数据
大数据技术：Hadoop与Spark的对比
【6月更文挑战第15天】**Hadoop与Spark对比摘要** Hadoop是分布式系统基础架构，擅长处理大规模批处理任务，依赖HDFS和MapReduce，具有高可靠性和生态多样性。Spark是快速数据处理引擎，侧重内存计算，提供多语言接口，支持机器学习和流处理，处理速度远超Hadoop，适合实时分析和交互式查询。两者在资源占用和生态系统上有差异，适用于不同应用场景。选择时需依据具体需求。
1941623231718325
395 1
jjczqyjxgdegi
|
9月前
|
机器学习/深度学习 分布式计算 API
技术好文：Spark机器学习笔记一
技术好文：Spark机器学习笔记一
jjczqyjxgdegi
62 0
游客zn7mvnkypuy76
|
9月前
|
存储 SQL 分布式计算
技术心得记录：深入学习HBase架构原理
技术心得记录：深入学习HBase架构原理
游客zn7mvnkypuy76
123 0
hnrk7epeorhrk
|
9月前
|
存储 缓存 分布式计算
必知的技术知识：Hbase配置（伪分布式模式）
必知的技术知识：Hbase配置（伪分布式模式）
hnrk7epeorhrk
828 0
峰七（林学维）
|
分布式计算 安全 Shell
Maxcompute Spark 访问 阿里云 Hbase
引子 本来这个东西是没啥好写的，但是在帮客户解决问题的时候，发现链路太长，不能怪客户弄不出来，记录一下 需求列表 MaxCompute Spark包 (写文章时刻为版本 0.32.1, 请自行更新，本文不是文档) Spark 配置 spark.
峰七（林学维）
1218 0
Maxcompute Spark 访问 阿里云 Hbase
神巧合
|
分布式计算 Spark
spark访问hbase
import org.apache.hadoop.hbase.{HBaseConfiguration, HTableDescriptor} import org.apache.hadoop.hbase.mapreduce.TableInputFormat import org.apache.spark.rdd.NewHadoopRDD val conf = HBaseConfigurat
神巧合
1695 0
数据库

NoSQL数据库

热门文章

最新文章

  • 1
    MongoDB Wiredtiger存储引擎实现原理
  • 2
    当物流行业遇见MongoDB
  • 3
    从难缠的模糊查询聊开 - PostgreSQL独门绝招之一 GIN , GiST , SP-GiST , RUM 索引原理与技术背景
  • 4
    YARN(hadoop2)框架的一些软件设计模式
  • 5
    为什么在大数据处理中Cassandra与Spark如此受欢迎？
  • 6
    MongoDB应用案例：使用 MongoDB 存储商品分类信息
  • 7
    PostgreSQL 中如何找出记录中是否包含编码范围内的字符，例如是否包含中文
  • 8
    SQLServer · 最佳实践 · 开发基于.NET CORE的LINUX版本的数据库应用
  • 9
    13个Mongodb GUI可视化管理工具，总有一款适合你
  • 10
    PostgreSQL SQL log duration time 源码分析
  • 1
    Redis应用—9.简单应用汇总
    55
  • 2
    【赵渝强老师】管理MongoDB的运行
    56
  • 3
    Redis应用—8.相关的缓存框架
    56
  • 4
    Redis应用—7.大Value处理方案
    69
  • 5
    Redis应用—6.热key探测设计与实践
    88
  • 6
    Redis应用—5.Redis相关解决方案
    31
  • 7
    Redis应用—4.在库存里的应用
    30
  • 8
    【赵渝强老师】监控Redis
    34
  • 9
    Redis应用—3.在购物车里的应用
    24
  • 10
    Redis应用—2.在列表数据里的应用
    58

    • 相关课程

    更多
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第一阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第三阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第四阶段
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第五阶段
  • 大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第七阶段
  • 大数据实时计算框架Spark快速入门

    • 相关电子书

    更多
  • Hybrid Cloud and Apache Spark
  • Scalable Deep Learning on Spark
  • Comparison of Spark SQL with Hive

    • 相关实验场景

    更多
  • 5分钟上手Flink MySQL连接器
  • 搭建Hadoop环境
    • 下一篇
    通义万相2.1视频/图像模型新升级！可在阿里云百炼直接体验
    AI助理

    你好，我是AI助理

    可以解答问题、推荐解决方案等