1. 云栖社区>
  2. 全部标签>
  3. #集群#
集群

#集群#

已有5人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

【转】Kettle集群

Kettle集群   Kettle是一款开源的ETL工具,以其高效和可扩展性而闻名于业内。其高效的一个重要原因就是其多线程和集群功能。 Kettle的多线程采用的是一种流水线并发的机制,我们在另外的文章中专门有介绍。

服务器 配置 cluster 集群 Server schema Socket

数据库集群原理

转自http://wangshuxing123-126-com.iteye.com/blog/737484 对于应用服务器集群,应该是非常常见的。通过集群,可以很简单地通过乘法的方式将服务能力扩大(而且这种扩充的成本要远低于垂直扩充,你只要比较一下一个满配4CPU的PC服务器与2台满配2CPU的服务器的价格就知道了),并且,可以提供系统的高可用性,当一台服务器出现问题时,可以由其他服务器提供服务,避免了服务的中断。

服务器 性能 高可用 数据库 集群 负载均衡 同步 应用服务器 路由器

超详细!使用 LVS 实现负载均衡原理及安装配置详解

负载均衡集群是 load balance 集群的简写,翻译成中文就是负载均衡集群。常用的负载均衡开源软件有nginx、lvs、haproxy,商业的硬件负载均衡设备F5、Netscale。这里主要是学习 LVS 并对其进行了详细的总结记录。

nginx 算法 mac 服务器 配置 集群 负载均衡 Server 脚本

开源实时消息推送系统 MPush

系统介绍 mpush,是一款开源的实时消息推送系统,采用java语言开发,服务端采用模块化设计,具有协议简洁,传输安全,接口流畅,实时高效,扩展性强,可配置化,部署方便,监控完善等特点。同时也是少有的可商用的开源push推送系统。

安全 android 监控 源码 配置 集群 websocket 负载均衡 Server oschina github

Everything you should know about etcd

前言 etcd 是一个在Docker相关场景中使用非常流行的服务发现组件,在分布式的场景中,服务发现组件起着重要的作用,通常服务发现服务会扮演如下几种不同的角色。 服务发现 在分布式系统的中,以松耦合的方式提供不同组件之间的访问、配置等信息。

分布式 docker 性能 配置 集群 容器服务 API 分布式系统 etcd 存储

Zookeeper笔记(一)初识Zookeeper

为什么需要Zookeeper Zookeeper是一个典型的分布式数据一致性的解决方案, 分布式应用程序可以基于它实现诸如数据发布/订阅、负载均衡、命名服务、分布式协调/通知、集群管理、Master选举、分布式锁和分布式队列等功能。

分布式 服务器 配置 集群 负载均衡 zookeeper

Zookeeper笔记(三)部署与启动Zookeeper

下载zookeeper安装包 去Zookeeper官网,下载地址http://zookeeper.apache.org/releases.html, 建议下载稳定版本, 我下载的是zookeeper-3.4.6.tar.gz,解压到合适的目录, 就可以进行配置和启动。

java 防火墙 Apache path 配置 集群 Server 空格 zookeeper JDK

消息队列入门(二)消息队列的规范和开源实现

AMQP规范 AMQP 是 Advanced Message Queuing Protocol,即高级消息队列协议。AMQP不是一个具体的消息队列实现,而 是一个标准化的消息中间件协议。目标是让不同语言,不同系统的应用互相通信,并提供一个简单统一的模型和编程接口。

消息队列 集群 消息中间件 多线程 exchange 余额宝 Consumer JMS ActiveMQ

容器服务里限制应用的带宽

容器场景下,一个标准的需求就是限制容器能够使用的最大资源,在Kubernetes里,我们可以很方便的设置一个容器能使用的最大内存,也能限制容器能分配到的CPU。然而容器使用的资源不光CPU和内存,网络带宽也是很重要的资源,设想某个应用因为代码缺陷把整个节点的带宽打满,必然影响同一台机器上其他的其他服务,造成服务的不可用。

docker 集群 容器服务 容器 centos 带宽 Transfer kubernetes 流控 隔离 容器隔离

使用Memcached Session Manager扩展Session管理

1.Tomcat的session管理 在请求过程中首先要解析请求中的sessionId信息,然后将sessionId存储到request的参数列表中。 然后再从request获取session的时候,如果存在sessionId那么就根据Id从session池中获取session, 如果sessionId不存在或者session失效,那么则新建session并且将session信息放入session池,供下次使用。

服务器 memcached 配置 tomcat 集群 scope session 存储

聊聊SOA面向服务架构

一、什么是SOA SOA(Service-Oriented Architecture),即面向服务的架构。 SOA是一种粗粒度、松耦合服务架构,服务之间通过简单、精确定义接口进行通讯,不涉及底层编程接口和通讯模型。

架构 监控 集群 负载均衡 Registry 高性能 分布式系统 SOA zookeeper

一致性哈希算法的应用及实现

一致性哈希算法(Consistent Hashing Algorithm)是一种分布式算法, 由MIT的Karger及其合作者提出,现在这一思想已经扩展到其它领域。 1997年发表的学术论文中介绍了“一致性哈希”如何应用于用户易变的分布式Web服务中。

分布式 算法 memcached 集群 数据迁移 HASH 对象存储 分布式系统 存储 数据存储

ActiveMQ的几种消息持久化机制

1. JDBC持久化方式 使用JDBC持久化方式,数据库会创建3个表:activemq_msgs,activemq_acks和activemq_lock。 activemq_msgs用于存储消息,Queue和Topic都存储在这个表中。

性能 日志 levelDB 数据库 配置 集群 索引 metadata 磁盘 ActiveMQ 存储

关于ActiveMQ的几种集群配置

ActiveMQ的几种集群配置。 Queue consumer clusters 此集群让多个消费者同时消费一个队列,若某个消费者出问题无法消费信息,则未消费掉的消息将被发给其他正常的消费者,结构图如下: Broker clusters 此种配置是一个消费者连接到多个broker集群的中的一个broker,当该broker出问题时,消费者自动连接到其他一个正常的broker。

配置 集群 static Consumer session ActiveMQ utf-8

分布式服务框架原理(一)设计和实现

1.分布式服务框架设计 分布式服务框架一般可以分为以下几个部分, (1)RPC基础层: 包括底层通信框架,如NIO框架、通信协议,序列化和反序列化协议,以及在这几部分上的封装,屏蔽底层通信细节和序列化方式差异 (2)服务发布/消费: 服务提供者根据消费者请求消息中的接口名,方法名,参数列表等信息,...

分布式 架构 监控 模块 配置 集群 容器 负载均衡 Registry

MongoDB高可用集群配置的方案

MongoDB高可用集群配置的方案 高可用性即HA(High Availability)指的是通过尽量缩短因日常维护操作(计划)和突发的系统崩溃(非计划)所导致的停机时间,以提高系统和应用的可用性。

架构 MongoDB 服务器 高可用 配置 集群 主机 数据节点 计算机系统 存储

可扩容分布式session方案

分布式session有以下几种方案: 1. 基于nfs(net filesystem)的session共享 将共享服务器目录mount各服务器的本地session目录,session读写受共享服务器io限制,不能满足高并发。

分布式 redis 算法 服务器 域名 性能 高可用 数据库 高并发 集群 容器 单点故障 数据库存储 分布式存储 session

CentOS 7部署Kafka和Kafka集群

注意事项 需要启动多个shell脚本交互客户端进行验证,运行中的客户端不要停止。 准备工作: 安装java并设置java环境变量,在`/etc/profile`中加入 export JAVA_HOME=/usr/java/jdk1.

java 配置 集群 centos Server test zookeeper

zookeeper部署及集群测试

环境 三台测试机 操作系统: centos7 ; hostname: c1 ; ip: 192.168.1.80 操作系统: centos7 ; hostname: c2 ; ip: 192.168.1.81 操作系统: centos7 ; hostname: c3 ; ip: 192.168.1.82 备注 注意要关闭防火墙 查看磁盘状况 为了避免磁盘使用不均而导致系统问题,因而先查看磁盘的分布情况。

java Apache 集群 测试 Server zookeeper

数据库信息 (表名 行数 堆 集群 非聚集)的查询

/************************************************************  * Time: 2010-10-07 13:23:32  * 找出有索引的表信息(表名行数堆集群非聚集)  ********************************...

数据库 集群 索引 type

292
GO