1. 云栖社区>
  2. 全部标签>
  3. #集群#
集群

#集群#

已有8人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

Java客户端访问HBase集群解决方案(优化)

测试环境:Idea+Windows10 准备工作:    、打开本地 C:\Windows\System32\drivers\etc(系统默认)下名为hosts的系统文件,如果提示当前用户没有权限打开文件;第一种方法是...

java hbase hadoop Apache 集群 解决方案 string static test

Unsupervised clustering reveals new prostate cancer subtypes

摘要 背景:前列腺癌是男性中第二常见的癌症。发展基于基因的分类方法是迫切的要求。我们的目标是建立基因分型。 方法:我们使用了四个前列腺癌数据集。癌症基因组图谱(TCGA)RNA-Seq数据用于训练分类器。

集群

社交网络分析(Social Network Analysis in Python)①

今天的网络是我们日常生活的一部分。 让我们学习如何使用网络在Python中可视化和理解社交网络 网络无处不在,道路网络,社交媒体上的朋友和关注者网络以及办公室同事网络。

python 函数 集群 network

使用Airflow来调度Data Lake Analytics的任务

今天我们来介绍一下使用Airflow来调度 DataLakeAnalytics(后面简称DLA)的任务执行。DLA作为一个数据湖的解决方案,客户有每天周期性的调度一些任务从DLA查询数据回流到业务系统的需求。

mysql ECS 数据库 配置 集群 Bash DataLakeAnalytics DLA

阿里P8架构师带你玩转数据库 “读写分离”

想用数据库“读写分离” 请先明白“读写分离”解决什么问题 有一些技术同学可能对于“读写分离”了解不多,认为数据库的负载问题都可以使用“读写分离”来解决。 这其实是一个非常大的误区,我们要用“读写分离”,首先应该明白“读写分离”是用来解决什么样的问题的,而不是仅仅会用这个技术。

云栖社区 编程语言 架构 java 性能 高可用 数据库 互联网 高并发 集群 同步 解决方案

Redis 5.0 正式发布!一网打尽所有新特性!

作为一统缓存江山的redis,正式发布了5.0稳定版(stable),激不激动,开不开森?Github链接:https://github.com/antirez/redis/releases/tag/5.0.0 ,让我们一起看看它带来了哪些振奋人心的新特性: 官方列举特性如下: Redis开源社区版新特性 下面我们对一些重要特性进行更深入的了解。

云栖社区 编程语言 深度学习 分布式 redis 架构 java 模块 高可用 源码 高并发 集群 容器 脚本 数据类型

Istio流量管理实践之(1): 通过Istio规则来实现TCP入口流量路由的统一管理

本文通过一个示例来讲述如何通过一个简单且标准的Istio规则来控制TCP入口流量的路由,从而实现TCP入口流量路由的统一管理。

配置 镜像 集群 微服务 容器 负载均衡 高可用架构 基础中间件 解决方案/技术支持

使用 minikube 启动 rook 集群

rook.io   今天我想谈一下 rook 这个项目,我目前工作的方向是分布式存储,这个领域里 Ceph 是接近于标准级别的解决方案了,而 Rook 就是 Ceph 来应对 cloud native 这个大趋势,给出的答案。

Shadowsocks 集群 解决方案 google

如何在 Kubernetes 环境中搭建 MySQL (一):简介

MySQL in Kubernetes   最近因为工作上的需求,搭建了一套部署在 Kubernetes 环境中的 MySQL,可能听起来就是让 MySQL 的 docker image 跑在 Kubernetes 里,应该没什么难度,可实...

native docker 服务器 mysql Cloud 高可用 数据库 软件设计 集群 微服务 容器 云服务 分布式存储 存储

配置 Ceph 内外网分离

luminous.jpg 1. 为什么要做内外网分离   先明确一下这么做的必要性。Ceph 的客户端,如 RADOSGW,RBD 等,会直接和 OSD 互联,以上传和下载数据,这部分是直接提供对外下载上传能力的;Ceph 一个基本功能是提供数据的冗余备份,OSD 负责数据的备份,跨主机间的数据备份当然要占用带宽,而且这部分带宽是无益于 Ceph 集群的吞吐量的。

服务器 防火墙 性能 配置 集群 主机 带宽 input

如何在 Kubernetes 环境中搭建 MySQL (二):在 cloud native 环境下配置 MySQL 的几个关键点

MySQL   MySQL 在 Kubernetes 环境中运行这件事情本身并不困难,最简单的方式就是找到 MySQL 的 Docker image,跑起来就行了,但是要做到生产环境可用,还是有几个问题要解决,所以本文不对整个流程做详细的描述,而是把重点放在几个难点上。

native mysql Cloud 高可用 配置 集群 同步 metadata service 存储

如何在 Kubernetes 环境中搭建 MySQL(三):使用 PVC 挂接 RBD

MySQL in Kubernetes MySQL 中的数据是关键信息,是有状态的,不可能随着 MySQL pod 的销毁而被销毁,所以数据必须要外接到一个可靠的存储系统中,目前已经有了 Ceph 系统,所以这里就只考虑如何将 Ceph 作为外部存储的情况,毕竟没有条件去尝试其他存储方案。

mysql 镜像 集群 Image volume metadata 存储

如何在 Kubernetes 环境中搭建 MySQL(四):使用 StorageClass 挂接 RBD

MySQL + Kubernetes 1. 简介 在系列文章的第三篇中,讲到了如何使用 PV 和 PVC 挂载 RBD 上建立好的块存储镜像,但这还是不足以满足 cloud native 环境下的需求,试想如果部署一个应用,需要申请十个 R...

mysql 配置 镜像 集群 Image Create metadata 存储

如何从 Ceph (Luminous) 集群中安全移除 OSD

OSD.png 工作中需要从 Ceph 的集群中移除一台存储服务器,挪作他用。Ceph 存储空间即使在移除该存储服务器后依旧够用,所以操作是可行的,但集群已经运行了很长时间,每个服务器上都存储了很多数据,在数据无损的情况下移除,看起来也不简单。

安全 服务器 集群 数据迁移 update 存储

如何在单节点 Ceph 中配置多数据副本

crush.png 在服务器资源不足,或者测试环境下,Ceph 通常只有一个节点,就算有多个服务器组成集群,往往存储服务器也往往只有一台,Ceph 的默认配置下,只能设置单数据备份,也就是说数据只存了一份,如果磁盘坏了,数据就丢了。

服务器 配置 cluster 集群 node type 存储

Ceph RGW bucket 自动分片介绍和存在的问题

resharding 工作中存储集群使用了 Ceph 技术,所用的是版本是 Luminous 12.2.4,因为刚刚上手 Ceph,不少概念和问题也都是头一次听说,比如这次的自动分片(auto resharding)。

性能 配置 集群 对象存储 索引 file 存储

在Play with Kubernetes平台上以测试驱动的方式部署Istio

Kubernetes and Istio 翻译一篇 Istio 部署教程,原文链接:test-drive-your-first-istio-deployment-using-play-with-kubernetes-platform-cloud-computing 作为一名全栈开发,假如最近花了不少时间开发应用,肯定已经理解了微服务架构下要面临的一系列全新挑战。

分布式 安全 架构 docker 配置 集群 微服务 测试 Image 负载均衡 脚本 service github

Linux 远程挂载 Ceph RBD 磁盘

block storage RBD 是 Ceph 的块存储方案,最近需要在一台 Linux 服务器上挂载 Ceph 镜像,做法和 Kubernetes 挂 RBD 很像,但部分操作由于 Kubernetes 在镜像中已经固化了,所以将这次完全自己控制的步骤记录下来,加深对 Ceph 挂载的理解。

linux 服务器 镜像 集群 kernel 分布式存储 磁盘 存储

CephFS 使用

Ceph 之前介绍了 RBD 的使用方法,有了 RBD,远程磁盘挂载的问题就解决了,但 RBD 的问题是不能多个主机共享一个磁盘,如果有一份数据很多客户端都要读写该怎么办呢?这时 CephFS 作为文件系统存储解决方案就派上用场了。

集群 test Create metadata 存储 数据存储

566
GO