阿里云E-MapReduce 关注
手机版

开源大数据周刊-第65期

  1. 云栖社区>
  2. 阿里云E-MapReduce>
  3. 博客>
  4. 正文

开源大数据周刊-第65期

开源大数据 2017-08-25 11:25:55 浏览1294 评论0

摘要: EMR Task计算节点发布,更加灵活的调整计算能力;hbase集群在线无感知扩容磁盘。

产品动态:

  • EMR Task计算节点发布,更加灵活的调整计算能力
  • hbase集群在线无感知扩容磁盘

资讯:

Apache Kylin是一个开源的分布式分析引擎,提供Hadoop之上的SQL查询接口及多维分析(OLAP)能力,支持对超大规模数据进行秒级查询。

自2011年5月“大数据时代已来”的号角奏响以来,“大数据”三个字就反复在政府、行业、学术各大会议中出现。这表明,一方面,近5~6年里人们关注大数据的热情高涨;另一方面,大数据确实给人类生产生活带来了空前的变化和影响。

随着现代信息技术的不断发展,世界已跨入了互联网+大数据时代。全球正掀起以融合、渗透、创新为特点的新一轮信息革命。大数据已成为世界主要国家抢占新一轮经济和科技发展制高点的重大战略选择。

技术

大数据生态很复杂,对于个人来说,要全部学会可能要花费好几年时间。而对于企业来说,要最大程度发挥其价值,构建一个成熟稳定、功能多样的大数据平台,期间花费的时间以及人力成本着实难以估量,更何况还需要考虑持续维护的问题。这就是七牛的Pandora大数据平台灵感的来源,我们构建一个大数据平台,作为产品提供给用户,快速帮助用户挖掘数据价值。

本文讲述某个企业级SaaS产品自动化测试项目的实践过程。文章介绍了项目遇到的挑战、应对策略和实施过程,最后总结了企业级SaaS产品给自动化测试带来的新挑战和项目的六点实践经验。

本文探讨 Kafka 各个版本对消息中偏移量的处理

大数据的分布式调度是在进行数据ETL过程中起到了总体的承上启下的角色,整个数据的生产、交付、消费都会贯穿其中,本文从调度、分布式调度的特征展开,再对大数据调度个性化特征的一些阐述,由满足大数据使用的架构和业务场景的需求上娓娓道来,从实践的角度分享如何打造一个高可用、高效率、灵活性的大数据调度平台。

欢迎入群技术交流!

_HBase_dingding

EMR_dingding

云HBase微信交流群请加:g418615


版权声明:信息都是来自互联网,如果侵权,请联系我们,我们负责删除。

阿里云E-Mapreduce团队出品

用云栖社区APP,舒服~

【云栖快讯】青年们,一起向代码致敬,来寻找第83行吧,云栖社区邀请大神彭蕾、多隆、毕玄、福贝、点评Review你的代码,参与互动者将选取50位精彩回复赠送“向代码致敬”定制T恤1件,最终成为“多隆奖”的小伙伴还将获得由阿里巴巴提供的“多隆奖”荣誉证书和奖杯。  详情请点击

网友评论