1. 云栖社区>
  2. 全部标签>
  3. #分布式系统与计算#
分布式系统与计算

#分布式系统与计算#

已有96人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

阿里云HBase SQL一站式解决复杂查询难题

在大数据场景中,HBase由于其高吞吐,高并发,实时可见等特性往往被作为在线主存储,云HBase团队融合了在线存储引擎和全文引擎的优势,解决了针对在线大数据存储的复杂查询难题,并提供SQL统一表达,降低用户使用门槛。通过一站式产品能力,用户可以更加灵活高效地解决业务问题。

云栖社区 数据存储与数据库 分布式 大数据 分布式系统与计算 实时系统 hbase SQL 同步 solr 索引 数据同步 phoenix big data

阿里云文件存储极速型NAS正式上线商用,打造百微秒级稳定时延的共享文件存储

阿里云文件存储极速型NAS正式上线商业化,针对共享文件存储在海量小文件场景下的性能短板进行了深度优化,大幅度降低了小文件读写的IO响应时延,提升性能。

数据存储与数据库 架构 分布式系统与计算 性能 持续集成 容器 aliyun 高性能 数据结构 存储 小文件 文件存储 NAS 极速 共享文件存储

教程:Data Lake Analytics + OSS数据文件格式处理大全

0. 前言 Data Lake Analytics是Serverless化的云上交互式查询分析服务。用户可以使用标准的SQL语句,对存储在OSS、TableStore上的数据无需移动,直接进行查询分析。

数据存储与数据库 大数据 分布式系统与计算 OSS hadoop SQL Json Apache 正则表达式 string Hive Create 存储 数据湖 DataLake

Schedulerx2.0工作流支持数据传输

1. 前言 Schedulerx2.0是阿里中间件自研的基于akka架构的新一代分布式任务调度平台,提供定时、任务编排、分布式跑批等功能,具有高可靠、海量任务、秒级调度等能力。 Schedulerx2.0提供可视化的工作流进行任务编排,该文章将详细介绍如何使用schedulerx2.0的工作流进行上下游任务的数据传输。

分布式 开发框架与中间件 分布式系统与计算 阿里中间件 控制台 string exception class 工作流 SchedulerX 任务调度 scheduler

5分钟让你了解 ZooKeeper 的功能和原理

5分钟让你了解 ZooKeeper 的功能和原理 一 .Zookeeper功能简介 ZooKeeper 是一个开源的分布式协调服务,由雅虎创建,是 Google Chubby 的开源实现。 分布式应用程序可以基于 ZooKeeper 实现诸如数据发布/订阅、负载均衡、命名服务、分布式协 调/通知、集群管理、Master 选举、配置维护,名字服务、分布式同步、分布式锁和分布式队列 等功能。

深度学习 分布式 Java核心技术 分布式系统与计算 java 服务器 数据库 配置 集群 分布式系统 zookeeper watcher

深入对比 HBase 与阿里云的表格存储服务

谷歌的 Bigtable 于 2016 年推出了兼容 HBase 的接口,而作为国内最早推出分布式 NoSQL 数据存储服务的阿里云表格存储也在最近正式发布了HBase Client,能够帮助用户将业务轻松从 HBase 迁移至表格存储。

数据存储与数据库 互联网产品及应用 分布式 分布式系统与计算 NOSQL 阿里云 hbase HTTPS 高可用 数据库 集群 负载均衡 aliyun 表格存储 数据存储

SpringMVC+Mybatis+dubbo实现SOA架构(1)

今天是2016年2月24日(今日重写,已是`3月4号`了),距离完成上一个项目已经过去两个多月。去年11月份,开始接手java开发项目,之前做过一点东西,但那是两三年之前的事情了,很多函数也已经不记得了,接手该项目是对自己的一个考验吧。

架构 分布式系统与计算 java

避免闲置云资源浪费 | 阿里云轻量级分布式应用服务 SAE 邀您公测

您是否遇到过: 资源利用率低,多数服务器CPU平均利用率在10%以下,用户需为大量闲置资源买单。 感知 IaaS 购买和集群运维,人员技能要求高,运维效率低。 想拥抱 Kubernetes、微服务架构来解决业务痛点,但学习曲线陡。

分布式 架构 分布式系统与计算 微服务 IaaS 弹性伸缩 aliyun html 企业应用 开发框架

在创业公司,不懂运维的程序员如何兼顾公司的运维工作

我是一名创业公司的Java开发工程师,公司没有运维团队,由程序员负责代运维。

云栖社区 Java核心技术 分布式系统与计算 java 程序员 创业 配置 微服务 测试 EDAS

blink+tablestore实现无限扩展性,高实时汇总计算及排行榜

#问题背景 最近开始了一个全新的ugc项目,要求对用户的点赞,评论,转发等等的数据进行统计按权重进行积分,并进行排序。要求排行榜的实时性在5分钟内,最好能进行全实时的计算,要求高度的准确性。 实际工作中这样的场景是非常多的,主要是各种数据的实时汇总,比如用户购买总量,用户点赞总量, 商品销售总量,不是要历史的数据而是要现在最新的总量数据,这个数据可能是1天的汇总,也可能是数年的汇总。另一方面

数据存储与数据库 架构 分布式系统与计算 性能 阿里技术协会 数据库 Image 流式计算 表格存储 存储 数据存储

blink cep基于用户的行为分析大杀器

#场景 今天我们做o2o有很多的线下场景需要基于用户的行为进行分析,比如 我们在商场入门口装了一个摄像头,可以通过摄像头识别商场进入的人脸,和出去时候的人脸,这样形成了2条数据。商场想统计下,每个用户在商场的逗留时间。这里面就出现了一种pattern的模式,就是当用户进门和出门这两个事件都发生的时候,激发某个动作(事件)。比如在这里是在用户出门的时候将用户进门时间和出门时间

架构 算法 分布式系统与计算 阿里技术协会 Image 存储

HBaseConAsia2019圆满落幕,一文带你看遍HBase以及大数据行业最新动态

HBaseCon是Apache软件基金会官方授权,Apache HBase社区支持举办的技术会议,主要目的是分享,交流HBase这个开源分布式大数据存储的使用和开发以及发展。HBaseCon发起于2012年。

大数据 Java核心技术 架构 分布式系统与计算 java hbase SQL Apache 阿里技术协会 数据库 集群 Image 索引 存储

玩转云端丨redis的5种对象与8种数据结构之字符串对象(上)

引言 本文是对《redis设计与实现(第二版)》中数据结构与对象相关内容的整理与说明。本篇文章只对对象结构,1种对象——字符串对象。以及字符串对象所对应的两种编码——raw和embstr,进行了详细介绍。

云栖社区 数据存储与数据库 互联网产品及应用 分布式 redis 分布式系统与计算 服务器 数据库 Image CPU 数据结构 存储

使用EMR-Kafka Connect进行数据迁移

流式处理中经常会遇到Kafka与其他系统进行数据同步或者Kafka集群间数据迁移的情景。使用EMR Kafka Connect可以方便快速的实现数据同步或者数据迁移。本文介绍使用EMR Kafka Connect的REST API接口在Kafka集群间进行数据迁移。

分布式系统与计算 Apache 数据库 配置 集群 Image 数据迁移 同步 e-mapreduce EMR 数据同步 zookeeper kafka 流式处理

须弥SUMERU:宜信分布式安全服务编排实践

安全防御的本质之一是增加攻击者的攻击成本,尤其是时间成本。而如何尽早和及时地发现潜在的安全风险变得尤为重要,因此安全扫描对时效性要求很高。本文为大家介绍宜信安全团队应用分布式安全服务编排的实践经验。

安全与风控 python 分布式 安全 分布式系统与计算 性能 Image 版本管理 工作流

字节码技术在模块依赖分析中的应用

本文介绍 Java 字节码技术在 Android 模块依赖分析中的应用。文中的“字节码”特指“Java 字节码”。

云栖社区 android 算法 分布式系统与计算 java 函数 模块 源码 gradle class account

机器学习在交通标志检测与精细分类中的应用

本文主要介绍机器学习技术在高德的地图数据生产的具体应用,这些技术方案和设计都已经过验证,取得了不错的效果,并且为高德地图数据的快速更新提供了基础的技术保证。

云栖社区 网络与数据通信 互联网产品及应用 深度学习 故障方案 前端与交互设计 算法 分布式系统与计算

Redis实现分布式锁与Zookeeper实现分布式锁区别

**# Redis实现分布式锁与Zookeeper实现分布式锁区别****前言: 在学习过程中,简单的整理了一些redis跟zookeeper实现分布式锁的区别,有需要改正跟补充的地方,希望各位大佬及时指出 Redis实现分布式锁思路 基于Redis实现分布式锁(setnx)setnx也可以存入key,如果存入key成功返回1,如果存入的key已经存在了,返回0. Zookeeper实现分布式锁思路 基于Zookeeper实现分布式锁 Zookeeper是一个分布式协调工具,在分布式解决方案中。

编程语言 深度学习 分布式 redis Java核心技术 分布式系统与计算 jvm 性能 解决方案 多线程 session zookeeper

海量结构化数据存储技术揭秘:Tablestore存储和索引引擎详解

前言 表格存储Tablestore是阿里云自研的面向海量结构化数据存储的Serverless NoSQL多模型数据库。Tablestore在阿里云官网上有各种文档介绍,也发布了很多场景案例文章,这些文章收录在这个合集中《表格存储Tablestore权威指南》。

数据存储与数据库 系统研发与运维 分布式 架构 分布式系统与计算 TableStore 数据库 索引 表格存储 数据结构 存储 数据存储

44
GO