1. 云栖社区>
  2. 全部标签>
  3. #cluster#
cluster

#cluster#

已有0人关注此标签

内容分类:
博客 | 问答 | 视频 |

《Spark核心技术与高级应用》——3.3节独立应用程序编程

本节书摘来自华章社区《Spark核心技术与高级应用》一书中的第3章,第3.3节独立应用程序编程,作者于俊 向海 代其锋 马海平,更多章节内容可以访问云栖社区“华章社区”公众号查看 3.3 独立应用程序编程 不同于使用Spark Shell自动初始化SparkContext的例子,独立应用程序需要初始化一个SparkContext作为程序的一部分,然后将一个包含应用程序信息的SparkConf对象传递给SparkContext构造函数。

python Apache 数据流 cluster 集群 spark scala class 编程

《深入理解Spark:核心思想与源码分析》——2.4节Spark基本架构

本节书摘来自华章社区《深入理解Spark:核心思想与源码分析》一书中的第2章,第2.4节Spark基本架构,作者耿嘉安,更多章节内容可以访问云栖社区“华章社区”公众号查看 2.4 Spark基本架构 从集群部署的角度来看,Spark集群由以下部分组成: Cluster Manager:Spark的集群管理器,主要负责资源的分配与管理。

云栖社区 架构 源码 cluster 集群 同步 spark Driver

《构建高可用VMware vSphere 5.X虚拟化架构》——2.3 vCenter Server 5.1介绍

另外,根据作者最近一年实践经验,vCenter Single Sign On的稳定性并不好,但作为VMware vSphere虚拟化架构的一个组件,必须安装vCenter Single Sign On才能安装vCenter Server。

云栖社区 安全 架构 服务器 高可用 cluster Server 安全机制 single

如何查看和停止Linux启动的服务

1. 查看Linux启动的服务 chkconfig --list 查询出所有当前运行的服务 chkconfig --list atd  查询atd服务的当前状态 2.停止所有服务并且在下次系统启动时不再启动,如下所示: chkconfig --levels 12345 NetworkManager off 如果想查看当前处于运行状态的服务,用如下语句过滤即可 chkconfig

linux 服务器 防火墙 日志 cluster 集群 同步 NFS 路由器

linux高级技巧:集群的搭建

 集群(cluster)技术是一种较新的技术,通过集群技术,可以在付出较低成本的情况下获得在性能、可靠性、灵活性方面的相对较高的收益,其任务调度则是集群系统中的核心技术。 1.集群的简介: 集群(cluster)技术是一种较新的技术,通过集群技术,可以在付出较低成本的情况下获得在性能、可靠性、灵活性方面的相对较高的收益,其任务调度则是集群系统中的核心技术。 如果一个

linux 性能 Apache 高可用 yum cluster 集群 RedHat

阿里数据库内核月报:2016年05月

阿里数据库内核月报:2016年05月

架构 PostgreSQL MongoDB mysql innodb 加密 日志 cluster Sqlserver tokudb 数据库内核月报

阿里云前端周刊 - 第 10 期

## 推荐 ### 1. Node.js v8.0 新特性一览 http://mp.weixin.qq.com/s/RiSJzkOUdXWJBY6iI_863Q Node.js 于 5 月 30 号在其官方博客上发布了 Node.js v8.0.0。这一版本将成为当前的长期维护版本,从 2017 年 10 月开始到 2019 年 12 月 31 号。而 Node.js v6.

编程语言 前端与交互设计 架构 javascript 阿里云 HTTPS 阿里技术协会 http 模块 events js cluster 用户体验 浏览器 node

深入浅出 spring-data-elasticsearch 之 ElasticSearch 架构初探(一)

本文目录一、Elasticsearch 基本术语1.1 文档(Document)、索引(Index)、类型(Type)文档三要素1.2 集群(Cluster)、节点(Node)、分片(Shard)分布式三要素二、Elasticsearch 工作原理2.1 文档存储的路由2.2 如何健康检查2.3 如何水平扩容三、小结一、Elasticsearch 基本术语1.1 文档(Document)、索引(Index)、类型(Type)文档三要素文档(Document)文档,在面向对象观念就是一个对象。

分布式 架构 cluster 集群 索引 Elasticsearch index type 存储

springcloud(一):大话Spring Cloud

研究了一段时间spring boot了准备向spirng cloud进发,公司架构和项目也全面拥抱了Spring Cloud。在使用了一段时间后发现Spring Cloud从技术架构上降低了对大型系统构建的要求,使我们以非常低的成本(技术或者硬件)搭建一套高效、分布式、容错的平台,但Spring Cloud也不是没有缺点,小型独立的项目不适合使用,另外对分布式事物的支持暂时也

分布式 安全 架构 Cloud spring 配置 cluster 集群 微服务 云平台 zookeeper

springcloud(五):熔断监控Hystrix Dashboard和Turbine

Hystrix-dashboard是一款针对Hystrix进行实时监控的工具,通过Hystrix Dashboard我们可以在直观地看到各Hystrix Command的请求响应时间, 请求成功率等数据。但是只使用Hystrix Dashboard的话, 你只能看到单个应用内的服务信息, 这明显不够. 我们需要一个工具能让我们汇总系统内多个服务的数据并显示到Hystrix D

监控 Cloud http 配置 cluster 集群 string stream class

《MySQL DBA修炼之道》——1.2MySQL 的基础架构和版本

本节书摘来自华章出版社《MySQL DBA修炼之道》一书中的第1章,第1.2节,作者:陈晓勇,更多章节内容可以访问云栖社区“华章计算机”公众号查看。 第1章 理解MySQL 1.2MySQL 的基础架构和版本 1.2.1 软件架构中数据库的定位 数据库一般位于整个软件架构的后端,而不直接服务于用户,数据的展示、应用逻辑的处理都是由其他层次的程序来实现的。

架构 服务器 mysql 线程 软件架构 数据库 cluster 集群 DBA 存储过程 存储

Storm入门之第三章拓扑

本文翻译自《Getting Started With Storm》  译者:吴京润   编辑:方腾飞 在这一章,你将学到如何在同一个Storm拓扑结构内的不同组件之间传递元组,以及如何向一个运行中的Storm集群发布一个拓扑。

storm 服务器 函数 数据流 cluster 集群 string void input

配置高可用的Hadoop平台

配置高可用的Hadoop平台 1.概述   在Hadoop2.x之后的版本,提出了解决单点问题的方案--HA(High Available 高可用)。这篇博客阐述如何搭建高可用的HDFS和YARN,执行步骤如下: 创建hadoop用户 安装JDK 配置hosts 安装SSH 关闭防

服务器 hdfs hadoop 防火墙 高可用 配置 cluster Server zookeeper Mapreduce utf-8

MariaDB Galera Cluster 部署

MariaDB作为Mysql的一个分支,在开源项目中已经广泛使用,例如大热的openstack,所以,为了保证服务的高可用性,同时提高系统的负载能力,集群部署是必不可少的。 MariaDB Galera Cluster 介绍 MariaDB Galera Cluster 是开源的 MariaDB同步多主机集群。

mysql 防火墙 LOG 数据库 配置 cluster 集群 测试 node 同步 Mariadb 数据同步 database

Redis集群技术及Codis实践

Redis集群技术及Codis实践 前言 本文主要讨论Redis集群相关技术及新发展,关于Redis运维等内容,以后另开主题讨论。 本文重点推荐Codis——豌豆荚开源的Redis分布式中间件(该项目于4个月前在GitHub开源,目前star已超过2100)。

分布式 redis 服务器 性能 cluster 集群 中间件 测试 Server

Apache Storm 官方文档 —— 本地模式

本地模式是一种在本地进程中模拟 Storm 集群的工作模式,对于开发和测试拓扑很有帮助。在本地模式下运行拓扑与在集群模式下运行拓扑的方式很相似。 创建一个进程内的“集群”只需要使用 LocalCluster 类即可,例如: import backtype.storm.LocalCluster; LocalCluster cluster = new LocalCluster(); 随后,你就可以使用 LocalCluster 中的 submitTopology 方法来提交拓扑了。

storm 线程 Apache 配置 cluster 集群 测试 编程

Apache Storm 官方文档 —— 分布式 RPC

分布式 RPC(DRPC)的设计目标是充分利用 Storm 的计算能力实现高密度的并行实时计算。Storm 接收若干个函数参数作为输入流,然后通过 DRPC 输出这些函数调用的结果。严格来说,DRPC 并不能算作是 Storm 的一个特性,因为它只是一种基于 Storm 原语 (Stream、Spout、Bolt、Topology) 实现的计算模式。

RPC 分布式 storm 服务器 函数 Apache 配置 cluster 集群 Server string

《Redis官方教程》Redis集群规范(一)

Redis集群规范 欢迎来到Redis集群规范。在这里你可以找到有关Redis的算法和设计的基本原理。这篇文章是一项正在进行的工作,因为它是不断地与Redis的实际实现同步。   主要属性和设计原理 Redis的集群目标   Redis集群是一个分布式的实现,具有以下目标,按设计的重要性排序: 高性能,并且多达1000个节点的线性可扩展性。

redis 配置 cluster 集群 Ping

使用 Ganglia 对 Linux 网格和集群服务器进行实时监控

从系统管理员接手服务器和主机管理以来,像应用监控这样的工具就成了他们的好帮手。其中比较有名的有 Nagios、 Zabbix、 Icinga 和 Centreon。以上这些是重量级的监控工具,让一个新手管理员来设置,并使用其中的高级特性是有些困难的。

linux 监控 服务器 ubuntu Apache web 配置 cluster 集群 主机 监控工具

如何在 Ubuntu 16.04 中安装 Ceph 存储集群

Ceph 是一个高性能、可靠、可扩展的开源存储平台。它是一个自由的分布式存储系统,提供了对象、块和文件级存储的接口,并可以不受单点故障的影响而运行。 在这个教程中,我将指导你在 Ubuntu 16.04 服务器上安装建立一个 Ceph 集群。

监控 服务器 ubuntu 防火墙 配置 cluster 集群 SSH 分区表 磁盘 存储

7
GO