云场景实践研究第82期:亿方云科技

简介: 2017云栖大会HBase专场,亿方云科技CTO 王成军带来HBase在亿方云客户端同步系统中的应用实践的演讲。本文分析亿方云科技在HBase方面的实践,并对亿方云HBase演进和应用作了分享。

更多云场景实践研究案例,点击这里:【云场景实践研究合集】联合不是简单的加法,而是无限的生态,谁会是下一个独角兽

2017云栖大会HBase专场,亿方云科技CTO 王成军带来HBase在亿方云客户端同步系统中的应用实践的演讲。本文分析亿了方云科技在HBase方面的实践,并对亿方云HBase演进和应用作了分享。

“我们用云端HBase最大的好处是,以前我们所做的事情有人帮我们做了,特别是运维上的工作,我们现在基本上不太关注HBase够不够用问题。现在很多的基础性工作由阿里云帮我们做。”

——王成军

亿方云科技CTO


采用的阿里云产品

  • 阿里云云数据库 HBase版本

为什么使用阿里云

阿里云完成了公司在运维方面的工作,特别是运维方面的。现在很多的基础性工作由阿里云帮公司完成。


关于 亿方云

亿方云是硅谷团队打造的企业文件管理及协作云平台,为企业提供海量文件的集中存储与管理、用户权限控制以及最高级别的数据安全保障。

移动时代,亿方云创造简单易用的产品体验,让员工可以随时随地对企业文件进行安全便捷的访问、共享和协作,实现企业人与数据的无缝连接。


为什么选择阿里云?

752903f205ed107b52fea08210c80595c446f251

以上是亿方云提出的数据处理架构,亿方云当初是没有一个完整的数据处理架构,当初设计这部分内容时候甚至不觉得这个信息需要做长久化,因为时效性非常短,文件最终状态才是大家关心的,过程当中的消息似乎没有太大的保存价值。但是大家想象一个场景,创建一个空文件,文件名字叫“新建文档”,我马上得重命名一下,假如他们不做持久化,也不把时序做处理,信息丢过去终端先收到了文件的改名,然后才收到了创建文件,这个时候这两个操作还能够成功吗?改名的时候这个文件还没有创建,改名字的操作不见了,原来这个文件的操作是需要有时序的。

这就引出问题,一方面要对信息做持久化,另一方面要对后一个任务处理。我们有很多的文件处理是需要有上门的情况,就必须要对时序做特定的标注,然后做特定处理。新建、编辑、修改、删除以及分享,或者我发起了希望你来上传的操作,把我的权限给到你,让你来上传,那么这些操作其实都需要先有一个消息给到对方,让对方把对应的消息做处理,这个消息对写起到的主要作用就是把前面抛过来的不管是数据变更也好、文件操作也好,处理掉以后丢给后面的推送消息任务,让这个消息推送到某客户端上面,这还涉及到端上有订阅机制,订阅的信息也要分设备、分终端、分用户。有的时候大家会遇到这样的情况,除了普通的客户端以外,还会建立web上的推送消息。

对于文件操作的信息其实是一项非常好的风控信息来源,当行为是一系列集合,当这个集合符合一定模型的时候就会找到它的操作背后所做的初衷。举个例子来说,公司里某位程序员因为各种不满意,走之前把公司的代码带走了,文档都删了,企业里现在的信息资产都是文件的形式,这些东西如果突然没有代价很大。即使这个操作是可逆的,但是一样会造成损失,在恢复的时间就要付出更大的代价。公司需要有一个非常好的技术信息体系来支撑,操作必须得有上下文的关联关系,是能够从中间截断的,需要把原来很多操作剥成上下文可以隔离的,同时,推送一条消息给老板,说这个行为有一些什么倾向。

现在已经开始提供一些基于文件内容的分析,当你看视频的时候,会发现优库有一些打点的关键节点,比如说《速度与激情》,就是希望看到翻车的那一段视频,直接找到那个点。以前更多的是通过人肉编辑方式。文件的元数据是对文件做一些分类标签,它属于人文社科,还是属于化学等等,这些元数据的存放是非常符合Key value方式的。


拥抱阿里云所带来的成效

亿方云科技用云端HBase最大的好处是,以前他们所做的事情有人帮他们做了,特别是运维上的工作,他们现在基本上不太关注HBase够不够用问题。现在很多的基础性工作由阿里云帮他们做。


关于亿方云的更多实践详情:云Hbase数据库在亿方云实践之路HBase
原文发布日期:2018-01-11
云栖社区场景研究小组成员:沈金凤,仲浩。

相关实践学习
lindorm多模间数据无缝流转
展现了Lindorm多模融合能力——用kafka API写入,无缝流转在各引擎内进行数据存储和计算的实验。
云数据库HBase版使用教程
  相关的阿里云产品:云数据库 HBase 版 面向大数据领域的一站式NoSQL服务,100%兼容开源HBase并深度扩展,支持海量数据下的实时存储、高并发吞吐、轻SQL分析、全文检索、时序时空查询等能力,是风控、推荐、广告、物联网、车联网、Feeds流、数据大屏等场景首选数据库,是为淘宝、支付宝、菜鸟等众多阿里核心业务提供关键支撑的数据库。 了解产品详情: https://cn.aliyun.com/product/hbase   ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
3月前
|
存储 人工智能 网络安全
科技云报到:云服务的中场战事,从AI应用开始
从去年的大模型之战,到今年的AI应用之争,云服务正在迈入全新的发展阶段。AI这个杠杆将各家厂商的竞争策略更向前推进了一步。
138 0
|
7月前
|
云安全 存储 人工智能
云启智能新纪元,2024可信云大会亮点抢先看!
2024年可信云大会将于7月23-24日在京举行,聚焦云计算与人工智能融合,探讨智算服务与大模型云服务。
242 0
|
8月前
|
存储 机器学习/深度学习 人工智能
『亚马逊云科技产品测评』在当前飞速发展的AI人工智能时代云服务技术哪家强?
『亚马逊云科技产品测评』在当前飞速发展的AI人工智能时代云服务技术哪家强?
118 0
|
机器学习/深度学习 人工智能 算法
亚马逊云科技 云技能孵化营 初识机器学习
亚马逊云科技 云技能孵化营 初识机器学习
|
存储 机器学习/深度学习 人工智能
|
机器学习/深度学习 新零售 人工智能
MWC2018:阿里云发布8款云计算AI产品,中国科技已领先世界一步
北京时间2月27日晚间,阿里云在西班牙巴塞罗那MWC展会上表示,中国数字化转型正在进入快车道,新零售、新制造、ET城市大脑等产业AI实践已经快世界一步。大会上,阿里云全球同步发布了8款云计算和人工智能产品,包括图像搜索、智能客服云小蜜、大数据PaaS产品Dataphin等。
7271 0
|
机器学习/深度学习 Web App开发 程序员
【云周刊】第208期:阿里云MWC 2019发布7款重磅产品,助力全球企业迈向智能化
【特别通知】2019年3月起云周刊将以云栖社区消息及阿里云APP消息的形式推送给订阅用户,不再单独发送邮件,关注云周刊的同学请点击订阅云周刊! 本期头条 阿里云MWC 2019发布7款重磅产品,助力全球企业迈向智能化 当地时间2月25日,在巴塞罗那举行的MWC 2019上,阿里云面向全球发布了7款重磅产品,涵盖无服务器计算、高性能存储、全球网络、企业级数据库、大数据计算等主要云产品,可满足电子商务、物流、金融科技以及制造等各行业企业的数字化转型需求,助力全球企业迈向智能化。
2716 0
|
新零售 人工智能 安全
【云周刊】第160期:MWC2018-阿里云发布8款云计算AI产品,中国科技已领先世界一步
MWC2018:阿里云发布8款云计算AI产品,中国科技已领先世界一步,50个“杀手级”AI项目 !(附链接),文本分析了4000万条Stack Overflow讨论帖,这些是程序员最推荐的编程书(附代码)...更多精彩内容,尽在云周刊!
6011 0
|
机器学习/深度学习 分布式计算 算法
云场景实践研究第75期:袋鼠云
电力与人的生活是息息相关的。电力的类型可以分为两类,第一类是集中式电站,第二类是分布式发电。集中式发电占主流,但在启动建设的过程中会涉及一些问题。而分布式发电站的成本比较低,实施简单。本文介绍了在大数据下光伏发电的意义,实现过程中遇到的困难,在阿里云的帮助下改进的措施,和取得的成果。
1697 0
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等