封神 + 关注
阿里技术专家,专注大数据领域,6年分布式引擎研发经验

封神 发表了文章:

云HBase建设之开篇

发布时间:2017-03-13 22:04:23 浏览:3761 回帖 :0

阿里云云HBase团队在2月份推出了云HBase产品,此款产品的内核在集团内部已经使用了6年之久,那么跟社区版本的HBase有怎样的区别,我们又做了怎样的产品化,本系列将会为用户详细介绍这些点。

大数据 hbase HTTPS 集群 物联网 报表

封神 发表了文章:

云HBase助力物联网建设

发布时间:2017-03-13 11:53:51 浏览:4440 回帖 :0

物联网最大的特点写入量大,要求延迟低,且数据存量巨大。云HBase非常满足物联网存储需求,存储数P甚至百P的空间存储需求,延迟稳定在数毫秒之内,跟Hadoop分析体系有较为深入的结合,满足分析类的需求...

架构 hbase hadoop HTTPS 数据库 互联网 spark 物联网 容灾 离线分析 磁盘 存储 ScreenShot

封神 评论了文章:

是骡子是马,拉出来溜溜 ——阿里云HBase在大搜车的试用

发布时间:2017-03-10 11:10:58 浏览:8437 回帖 :3

        大搜车中国领先的车商服务平台。凭借多年对汽车行业的深刻洞察与理解推出了适合汽车经销商集团及大型二手车商的业务经营管理系统“大风车”适合中小二手车商的经营管理系统“车牛”汽车消费...

阿里云 hbase SQL 开发环境

“跟产品同学讨论下,后续云HBase增加公网访问的需求,这样就可以在自己的机器上访问了。 安全通过白名单设置,请注意设置。”

封神 参与了问答:

请问阿里云上可以搭建虚拟机吗,我需要搭建一个hbase的数据存储平台,至少3个服务器,可以在云服务器上搭建吗

,我需要搭建一个hbase的数据存储平台,至少3个服务器,可以在云服务器上搭建吗

“可以直接使用云HBase产品的,https://cn.aliyun.com/product/hbase?spm=5176.8142029.388261.47.sEPQ3Z 这个有更多的保障”

封神 发表了文章:

云时代的大数据存储-云HBase

发布时间:2017-02-23 18:26:15 浏览:4067 回帖 :0

纵观数据库发展的几十年,从网状数据库、层次数据库到RDBMS数据库,在最近几年的NewSQL的兴起,加上开源的运动,再加上云的特性,可以说是日新月异。云HBase数据库及时上线,一站式解决客户的大数据...

分布式 大数据 架构 hbase 性能 HTTPS 数据库 集群 云盘 报表 磁盘 存储 ScreenShot 数据存储

封神 参与了问答:

云hbase性能如何

有性能测试吗?

“目前写在大部分情况下比开源版本高出30%+,比如ycsb测试,低字节(10byte左右)高频访问,较多字节会先打满网络带宽,还没有hbase性能本身。”

封神 参与了问答:

请问阿里hbase服务的安全性是怎么做的?

像ip白名单,公网ip访问hbase云服务是怎么做到的数据安全性和集群的安全性

“一、目前访问hbase ui及hdfs ui需要有两个条件:(默认情况下,是不能访问的)1、在白名单中配置 你当前的公网ip,2、设置账号密码3、只开通80端口转发,不能直接访问50070等hdfs端...查看全部>

封神 发表了话题:

云HBase的使用场景及HBase的发展前景

发布时间:2017-02-15 11:40:57 参与人数:34

阿里云目前推出了云HBase产品,是基于 Hadoop 的一个分布式数据库,支持海量的PB级的大数据存储,适用于高吞吐的随机读写的场景。见 https://www.aliyun.com/product...

话题奖品:
淘公仔1个
纪念版T恤3个
定制笔记本2个
已结束

封神 参与了问答:

Spark 接入 Log Service,从日志头部开始消费要怎么配置

如题,spark消费logservice中的日志数据,默认是从尾部开始消费,怎么配置从头部开始消费val loghubStream = LoghubUtils.createStream( ssc,...

“可以参考文档:https://help.aliyun.com/document_detail/28121.html?spm=5176.doc28116.6.622.0Mxgty”

封神 参与了问答:

云服务器ECS上能部署Cloudera的Hadoop集群吗

云服务器ECS上能部署Cloudera的Hadoop集群吗

“这个是可以的,不过建议使用emapreduce云服务,目前产品费用0折,参考:https://www.aliyun.com/product/emapreduce?spm=5176.8142029.38...查看全部>

封神 参与了问答:

使用公网:50070访问不了hadoop的hdfs界面怎么办?

阿里云选择的是ubuntu14 64位,但是访问不了

“不要开放50070端口,会有安全问题,参考 Hadoop黑客赎金事件解读及防范”

封神 参与了问答:

在阿里云上自己搭建hadoop/hive的官方版本的集群,可不可以使用oss的服务

我在阿里云上搭建了,hadoop/hive官网开源版本的集群,不是使用阿里云提供的E-MapReduce版本,不知道能不能在官方版本的hive中使用阿里云oss作为数据源?如果可以,能否提供一下示例代...

“这个是可以的,目前阿里云E-MapReduce团队把访问oss的code部分共享给了社区,参见: http://hadoop.apache.org/docs/r3.0.0-alpha2/hadoop-...查看全部>

封神 评论了文章:

你的大数据安全么?“Hadoop集群遭遇勒索软件攻击 ”

发布时间:2017-01-24 10:56:13 浏览:7923 回帖 :1

近期,各大安全组织检测到勒索软件正在攻击Hadoop集群,再次表明黑客正在尝试从“大数据”中获利,你的数据资产有没有被黑客get了? ◇◆◇◆◇ 勒索软件攻击Hadoop事件综述 最近,...

大数据 安全 MongoDB 阿里云 服务器 hadoop HTTPS 云栖大会 数据库 安全组 集群 安全意识 数据安全 数加 aliyun

“Hadoop黑客赎金事件解读及防范:https://yq.aliyun.com/articles/68945?spm=5176.8091938.0.0.LjStzH 可以参考这个解决”

封神 发表了文章:

Hadoop黑客赎金事件解读及防范

发布时间:2017-01-19 19:55:01 浏览:7043 回帖 :0

年关将至,Mongodb数据丢失的事情还在眼前,数以千计的Mongodb数据库已经被删除或者被黑客勒索,就在最近一段时间,黑客也在攻击Hadoop,有不少Hadoop集群的数据全部丢失,这些数据甚至有...

安全 MongoDB hdfs hadoop HTTPS 安全组 集群 数据安全 spark aliyun e-mapreduce 数据备份 黑客

封神 发表了文章:

分布式(hadoop)内核研发面试指南

发布时间:2016-12-22 11:22:03 浏览:18174 回帖 :5

本文是同学们进入阿里云等公司的hadoop内核研发岗位的一个指引,需要具备哪些要求,如果不具备则可以往这方面努力。

分布式 算法 阿里云 hadoop 线程 源码 项目开发 排序 操作系统 spark 多线程 面试 安全机制

封神 评论了文章:

E-MapReduce 集群环境小记

发布时间:2016-08-17 14:03:46 浏览:2188 回帖 :1

大家在使用E-MapReduce的时候,都想对E-MapReduce的集群环境细节有些了解。这里根据实践,总结一下E-MapReduce集群环境与应用启动与停止,供大家在实际使用中进行参考。

云栖社区 大数据 分布式系统与计算 e-mapreduce

“这个赞”

封神 发表了文章:

ROLAP与大数据

发布时间:2016-12-01 15:25:39 浏览:5323 回帖 :2

大数据相关的场景比较多,常见的有:ETL(数据提取、转换、加载)、实时流式(监控报警、风控等)、机器学习(推荐引擎、用户画像等)、非结构化分析(视频、图片、语音、文本等)、海量大数据在线存储(HBas...

大数据 hbase hdfs hadoop HTTPS SQL 数据仓库 spark 开源大数据 OLAP MPP Hive 存储 presto

封神 评论了文章:

2016美国QCon看法:在Beam上,我为什么说Google有统一流式计算的野心

发布时间:2016-11-22 18:50:37 浏览:5826 回帖 :1

Google在开源社区和云计算上是有很深的痛感的,这种痛感也在促使Google做更多的转变,比如拥抱社区推出更多开源产品,在云计算产品形态上也屈身向3A靠拢,本文中介绍的流式计算产品Beam就是拥抱社...

大数据 架构 Apache Processing 流式计算 开源大数据 google

“离心力太大,不太看好这个项目,也许最终只有google的伙伴玩玩。”

封神 发表了文章:

阿里云开源大数据内核团队招聘人才

发布时间:2016-10-27 11:30:23 浏览:7735 回帖 :0

此次发布的岗位均是 Hadoop、Spark、HBase、flink等底层引擎内核的研究机会,机会难得,小伙伴们赶紧尝试下。工作地点杭州、北京。简历发给我:dragon.caol@alibaba-in...

linux 大数据 java 阿里云 hbase hadoop 源码 数据库 spark 搜索引擎 scala 开源大数据 招聘 Elassearch

封神 参与了问答:

E-mapreduce是否提供实时计算的功能

E-mapreduce是否提供实时计算的功能,比如spark streaming等

“目前已经 提供了storm的。”
6
09年加入阿里巴巴,阿里云高级技术专家、架构师;专注在大数据领域,多年分布式经验;先后研发上万台Hadoop、ODPS集群;先后负责阿里分布式调度平台YARN;自主研发分布式内存计算引擎,负责Spark; 目前为广大公共云用户提供专业的大数据结构化存储服务(云HBase)

感兴趣or擅长的领域:

更多>
hbase小能手
hbase小能手
文章:113丨 粉丝:3044丨 话题:0
明惠
明惠
文章:18丨 粉丝:1721丨 话题:0
玄陵
玄陵
文章:16丨 粉丝:7072丨 话题:0
王爽wasugar
王爽wasugar
文章:0丨 粉丝:2079丨 话题:0
所在jason
所在jason
文章:15丨 粉丝:7215丨 话题:0
jark
jark
文章:2丨 粉丝:128丨 话题:0
更多>
游客3rgfkm4z2yr6s
游客3rgfkm4z2yr6s
文章:0丨 粉丝:0丨 话题:0
游客tcsxmptaj65cq
游客tcsxmptaj65cq
文章:0丨 粉丝:0丨 话题:0
游客g4ydw2ykmmskc
游客g4ydw2ykmmskc
文章:0丨 粉丝:0丨 话题:0
游客xig2usbup4ww6
游客xig2usbup4ww6
文章:0丨 粉丝:0丨 话题:0
游客cf2kepytsb7lm
游客cf2kepytsb7lm
文章:0丨 粉丝:0丨 话题:0
游客gjju4j6amzfn4
游客gjju4j6amzfn4
文章:0丨 粉丝:0丨 话题:0