1. 云栖社区>
  2. 全部标签>
  3. #分布式系统与计算#
分布式系统与计算

#分布式系统与计算#

已有83人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

阿里PouchContainer资源管理探秘:PouchContainer底层的内核技术

PouchContainer 是阿里巴巴集团开源的高效、轻量级企业级富容器引擎技术,拥有隔离性强、可移植性高、资源占用少等特性。可以帮助企业快速实现存量业务容器化,同时提高超大规模下数据中心的物理资源利用率。已助力阿里巴巴集团实现在线业务 100% 容器化,双 11 容器规模达到百万级。

系统软件 系统研发与运维 linux 分布式 分布式系统与计算 docker ubuntu LOG 容器 volume CPU Bash

智能媒体管理产品文档转换/预览功能介绍(4)--快速搭建

智能媒体管理提供了 Cloud Native 架构的文档转换/预览服务,本文介绍快速搭建的示例,让您用 DIY 的体验方式实现文档预览功能。

数据存储与数据库 架构 分布式系统与计算 OSS 阿里技术协会 paxos aliyun 开发环境 test html Office

Best Practice - ossutil Concurrency Parameter Adjustment

前言 前面支持一个国外客户,使用ossutil上传文件到OSS,一直调整不好--jobs和--parallel参数。因此给客户写了一篇简单的英文文档。 用户可从这里获取ossutil。 官网: https://help.

数据存储与数据库 分布式系统与计算 OSS LOG shell aliyun Machine file performance

ossutil报"Cannot assign requested address"解决方案

问题 某用户使用如下命令上传目录到OSS,中间隐去bucket name。 ./ossutil cp oss:///img/330802010400071904 -r -j 15 /home/oss/video-algorithm/ 出现如下错误。

数据存储与数据库 分布式系统与计算 shell 解决方案 Socket

ossutil大文件断点续传

# OSS断点续传 ## 应用场景 当调用OSS的PutObject来上传较大的文件时,如果上传过程中出现错误,比如网络错误,那么此次上传失败。重试时必须从文件起始位置上传。 针对这种情况,OSS提供了分片上传(Multipart Upload)来达到断点续传的效果。

数据存储与数据库 分布式系统与计算 OSS 阿里技术协会 shell aliyun test file html

ossutil增量上传

经常碰到内部同学或者外部客户问ossutil关于增量上传的问题。本文简单描述下原理并举例说明。 # 应用场景 ## 场景一 某用户有一批文件(比如1000个)要上传到OSS(或从OSS下载,或从OSS拷贝到OSS,下同),当执行批量上传的过程中出现失败(比如在上传第601个文件时失败)。

数据存储与数据库 分布式系统与计算 OSS 阿里技术协会

ossutil的过滤参数include/exclude

# 应用场景 某些用户在本地或者OSS上存放了不同类型的文件,比如jpg文件和pptx文件。用户希望在(批量)上传jpg文件的时候设置不同的meta和ACL,而(批量)上传pptx文件的时候设置另外的meta和ACL。

数据存储与数据库 分布式系统与计算 OSS 阿里技术协会 path

Flink技术源码解析(一):Flink概述与源码研读准备

一、前言 Apache Flink作为一款高吞吐量、低延迟的针对流数据和批数据的分布式实时处理引擎,是当前实时处理领域的一颗炙手可热的新星。关于Flink与其它主流实时大数据处理引擎Storm、Spark Streaming的不同与优势,可参考https://blog.csdn.net/cm_chenmin/article/details/53072498。 出于技术人对技术本能的好奇与冲动,

分布式 分布式系统与计算 监控 线程 Apache 阿里技术协会 源码 配置 集群 API 脚本 stream source html

阿里云Kubernetes SpringCloud 实践进行时(6): 熔断器聚合监控

讲述了在阿里云Kubernetes容器服务基础之上,如何快速搭建基于Spring Cloud的微服务架构中的基础设施之熔断器聚合监控Hystrix Turbine。

分布式 架构 分布式系统与计算 java docker mysql 数据库 微服务 容器 kubernetes k8s springcloud hystrix 熔断器 turbine

阿里云Kubernetes SpringCloud 实践进行时(5): 弹性服务与容错处理

讲述了在阿里云Kubernetes容器服务基础之上,如何快速搭建基于Spring Cloud的微服务架构中的基础设施之分布式弹性服务与容错处理框架Hystrix及其监控仪表板Hystrix Dashboard。

分布式 架构 分布式系统与计算 java 监控 docker mysql 数据库 微服务 容器 kubernetes k8s springcloud hystrix 熔断器

阿里云Kubernetes SpringCloud 实践进行时(4): 分布式链路追踪

讲述了在阿里云Kubernetes容器服务基础之上,如何快速搭建基于Spring Cloud的微服务架构中的基础设施之分布式追踪系统Zipkin。

分布式 架构 分布式系统与计算 java docker mysql 阿里技术协会 数据库 微服务 容器 kubernetes k8s springcloud Zipkin 分布式追踪

阿里云Kubernetes SpringCloud 实践进行时(1): 分布式服务注册与发现

讲述了在阿里云Kubernetes容器服务基础之上,如何快速搭建基于Spring Cloud的微服务架构中的基础设施之分布式服务的注册与发现Eureka。

分布式 架构 分布式系统与计算 java docker mysql 阿里技术协会 数据库 微服务 容器 kubernetes k8s springcloud Eureka 服务注册

OceanBase的正确使用方法

OceanBase不是设计出来的,而是在使用过程中不断进化出来的。因此,系统使用以及运维的方便性至关重要。 OceanBase的使用者是业务系统开发人员,并交由专门的OceanBase DBA来运维。

数据存储与数据库 系统研发与运维 分布式 架构 分布式系统与计算 java Oceanbase mysql SQL spring 集群 JDBC test source

深度解析 PouchContainer 的富容器技术

PouchContainer 是阿里巴巴集团开源的高效、轻量级企业级富容器引擎技术,拥有隔离性强、可移植性高、资源占用少等特性。可以帮助企业快速实现存量业务容器化,同时提高超大规模下数据中心的物理资源利用率。

系统软件 linux 分布式系统与计算 日志 配置 镜像 容器 cmd

如何使用Kafka Connect实现同步RDS binlog数据

本文介绍如何在E-MapReduce上使用Kafka Connect实现同步RDS binlog数据

架构 分布式系统与计算 RDS 数据库 开源 配置 集群 Image 同步 e-mapreduce Server binlog 流计算 kafka 流式系统

阿里云泛娱乐事业部首席架构师张翔贺:全球化趋势下游戏出海与游戏安全业态

由GMGC主办的第七届全球游戏大会(简称:GMGC北京2018)4月2日上午于北京国家会议中心盛大开幕!本届大会以“游戏改变世界”为主题,作为亚太地区最具影响力的开年首场游戏大会,是游戏及泛娱乐从业者绝对不容错过的行业盛会!阿里云游戏云事业部首席架构师张翔贺以“全球化趋势下游戏出海与游戏安全业态”为主题进行分享。

云栖社区 安全与风控 数据存储与数据库 系统研发与运维 大数据 安全 架构 分布式系统与计算 人工智能 解决方案 云市场 数据中心

阿里影业“灯塔平台”今日正式启动,阿里影视云解决方案强势推出

依托阿里巴巴构建的商业生态版图,为电影片方和宣发公司服务的一站式电影宣发平台——“灯塔”在现场点亮,被正式宣布启用。在灯塔点灯仪式中阿里云副总裁孙磊登台与众嘉宾一起完成了点灯仪式,同时孙磊表示今后阿里云将作为灯塔计划的组成部分之一,正式为阿里影业打造的电影产业新基础设施提供云计算服务,以期共同赋能影视产业。

云栖社区 数据存储与数据库 系统研发与运维 网络与数据通信 大数据 分布式系统与计算 服务器 加密 云服务器 阿里技术协会 配置 集群 解决方案 存储

OceanBase质量保证——RD开发

OceanBase系统一直在不断演化,需要在代码不断变化的过程中保持系统的稳定性。因此,合理的质量保证体系关乎系统的成败。为了保证系统质量,OceanBase做了大量工作,在RD(指开发工程师)开发、QA(指测试工程师)测试、上线试运行各个阶段对系统质量把关。

数据存储与数据库 系统研发与运维 分布式 测试技术 分布式系统与计算 Oceanbase 函数 内存管理 测试 编码规范 分布式存储 单元测试 压力测试

20
GO