1. 云栖社区>
  2. 全部标签>
  3. #分布式计算#
分布式计算

#分布式计算#

已有0人关注此标签

内容分类:
博客 | 问答 | 视频 |

《Scala机器学习》一一1.5 使用Scala和Spark的Notebook工作

本节书摘来自华章出版社《Scala机器学习》一 书中的第1章,第1.5节,作者:[美] 亚历克斯·科兹洛夫(Alex Kozlov)著 ,更多章节内容可以访问云栖社区“华章计算机”公众号查看。

分布式 HTTPS Apache http Image spark scala DataFrame 分布式计算

《Hadoop实战第2版》——1.8节本章小结

本节书摘来自华章社区《Hadoop实战第2版》一书中的第1章,第1.8节本章小结,作者:陆嘉恒,更多章节内容可以访问云栖社区“华章社区”公众号查看

分布式 安全 架构 hbase hdfs hadoop 数据仓库 集群 分布式计算 分布式文件系统 并行计算 Hive 权限管理 分布式系统 分布式数据库

《Hadoop实战第2版》——1.3节Hadoop体系结构

本节书摘来自华章社区《Hadoop实战第2版》一书中的第1章,第1.3节Hadoop体系结构,作者:陆嘉恒,更多章节内容可以访问云栖社区“华章社区”公众号查看

分布式 监控 hdfs hadoop 配置 集群 分布式计算 分布式文件系统 分布式系统 分布式存储 Mapreduce 存储

《Hadoop实战第2版》——1.1节什么是Hadoop

本节书摘来自华章社区《Hadoop实战第2版》一书中的第1章,第1.1节什么是Hadoop,作者:陆嘉恒,更多章节内容可以访问云栖社区“华章社区”公众号查看

分布式 hdfs hadoop Apache 数据处理 互联网 集群 分布式计算 分布式文件系统 云平台 分布式系统 Mapreduce 存储 海量数据

TiDB 原理与实战

本篇文章出自七牛云和 PingCAP 联合主办的架构师实践日上,来自 PingCAP 的开发工程师李霞分享的《 TiDB 原理与实战》的演讲,介绍了目前分布式数据库行业的现状,分享了 TiDB 作为新型分布式关系型数据库所能解决的痛点问题,并且讲解了 TiDB 的一些实现原理。

分布式 算法 HTTPS SQL 集群 测试 Server 分布式计算 分布式数据库 TiDB

【对标TensorFlow】阿里公开内部超大规模分布式机器学习平台

近年来,随着“大”数据及“大”模型的出现,学术界和工业界对分布式机器学习算法引起了广泛关注。针对这一刚需,阿里集团和蚂蚁金服设计了自己的分布式平台——鲲鹏。鲲鹏结合了分布式系统及并行优化算法,解决了大规模机器学习算法带来的一系列问题,不仅囊括了数据/模型并行、负载平衡、模型同步、稀疏表示、工业容错等特性,而且还提供了封闭好的、宜于调用的 API 供普通的机器学习者开发分布式算法,降低使用成本并提升效率。

分布式 架构 算法 HTTPS 阿里巴巴 Image spark 分布式计算

大数据和云计算是何关系?

关于大数据和云计算的关系,人们通常会有误解,而且也会把它们混起来说。做一个直白解释就是:云计算是硬件资源的虚拟化;大数据是海量数据的高效处理。 虽然上面的一句话解释不是非常的贴切,但是可以帮助你简单理解二者的区别。

大数据 架构 数据处理 数据库 数据分析 分布式计算 并行计算 存储 数据存储 海量数据

雾计算是炒作吗?

2011年,思科首创了“雾计算”的概念。根据Cisco对于“雾计算”的定义,“雾计算”是一种分布式计算基础设施,可将计算能力和数据分析应用扩展至网络“边缘”,它使客户能够在本地分析和管理数据,从而通过联接获得即时的见解。

服务器 数据分析 分布式计算 物联网 数据节点 数据中心

视频大数据助力智慧城市全面升级

一、什么是视频大数据? 基于这个问题,我们可以从几个方面来理解。首先,大家都知道,大数据有“4V”特征:Volume(数据规模)、Variety(数据类型)、Velocity(处理速度)、Value(数据价值)。

大数据 互联网 数据分析 分布式计算 海量数据 关联分析 数据应用

视频大数据助力智慧城市全面升级

摘要:随着智慧城市建设的不断深入,城市数据呈爆炸式增长,我们有理由相信,我们正在从信息化时代向数据化时代演进,“一切以数据说话”,这句话将逐渐深入人心并变为现实。城市数据中,视频数据占据80%以上,是体量最大的一类数据,然而当前我们对视频数据的利用度并不高。

大数据 互联网 数据分析 分布式计算 海量数据 关联分析 数据应用

如何搭建大规模机器学习平台?以阿里和蚂蚁的多个实际场景为例

近年来,随着“大”数据及“大”模型的出现,学术界和工业界对分布式机器学习算法引起了广泛关注。针对这一刚需,本论文设计了一个独一无二的分布式平台——鲲鹏。它无缝的结合了分布式系统及并行优化算法,解决了大规模机器学习算法带来的一系列问题。

分布式 架构 算法 HTTPS 阿里巴巴 Image spark 分布式计算

云计算发展备受瞩目的五大方向

自2006年3月亚马逊(Amazon)推出弹性计算云服务起,云计算就引起了业内外人士广泛关注。在这将近八年的时间里,其作为一个新的技术趋势已经得到了快速的发展。2015年,互联网、金融、制造、物流等行业内企业根据自身实际情况积极投入云计算,云计算商业模式正式开启。

大数据 数据安全 弹性计算 分布式计算 云服务 私有云

Java 老矣,尚能饭否?

22 岁,对于一个技术人来说可谓正当壮年。但对于一门编程语言来说,情况可能又有不同。各类编程语言横空出世,纷战不休,然而 TIOBE 的语言排行榜上,Java 却露出了明显的颓势。这个老牌的语言,未来会是怎样? 1写在前面 从 1995 年第一个版本发布到现在,Java 语言已经在跌宕起伏中走过了 22 年,最新的 Java 版本也已经迭代到 Java 9。

编程语言 java 服务器 Oracle 线程 互联网 微服务 多线程 分布式计算 应用服务器 Servlet

Gartner云端盘点,浅谈2017IaaS魔力象限

IaaS市场发展迅速,2016年,其市场规模增长一度达到38.4%以上,各式厂商服务应运而生。近日,著名研究机构Gartner针对IaaS全球厂商进行了详细的分析调查,公布了2017年的Gartner IaaS(基础服务即服务)领域的魔力象限排行,为我们呈现一份IaaS市场的英雄排名帖。

阿里云 用户体验 IaaS 分布式计算 云市场 云服务 云平台 分布式存储

Hadoop/Spark生态圈里的新气象

令人惊讶的是,Hadoop在短短一年的时间里被重新定义。让我们看看这个火爆生态圈的所有主要部分,以及它们各自具有的意义。   对于Hadoop你需要了解的最重要的事情就是 ,它不再是原来的Hadoop。

大数据 java hbase hadoop SQL 集群 spark 解决方案 分布式计算 分布式文件系统 Hive Mapreduce kylin 流数据

大讲台浅谈什么是Hadoop及如何学习Hadoop

首先hadoop实现了一个分布式文件系统(HadoopDistributedFileSystem),简称HDFS。HDFS有高容错性的特点,并且设计用来部署在低廉的(low-cost)硬件上;而且它提供高吞吐量(highthroughput)来访问应用程序的数据,适合那些有着超大数据集(largedataset)的应用程序。

分布式 大数据 架构 hdfs hadoop 数据仓库 分布式计算 分布式文件系统 分布式系统 Mapreduce 存储 海量数据

阿里云为欧洲企业提供计算产品 海外战略持续推进

当地时间6月15日,阿里云在巴黎VivaTech科技展上宣布大数据计算产品“MaxCompute”将于年内在欧洲市场开服,该技术涵盖处理分析、机器学习等一系列完善的数据智能服务。这也是国内类似技术的首次出海,以满足当地众多企业日益增长的数字化转型需求。

深度学习 大数据 安全 飞天 阿里云 人工智能 数据仓库 集群 分布式计算 数据中心 MaxCompute

中澳专家联合研发支持智能电网的数据中心

悉尼11月30日电,悉尼大学30日发布消息说,澳大利亚云计算专家、悉尼大学工程和信息技术学部艾伯特˙佐马亚教授将和天津大学合作,以建立更多可持续发展的数据中心。 天津大学已正式授予佐马亚教授荣誉教授称号,他将与天津大学教育部智能电网重点实验室的研究员开展可再生能源的可持续计算方面的研究工作。

分布式 分布式计算 高性能 数据中心

阿里云MaxCompute入欧 方便欧洲企业挖掘自身价值

当地时间6月15日,阿里云在巴黎VivaTech科技展上宣布大数据计算产品“MaxCompute”将于年内在欧洲市场开服,该技术涵盖处理分析、机器学习等一系列完善的数据智能服务。这也是国内类似技术的首次出海,以满足当地众多企业日益增长的数字化转型需求。

深度学习 大数据 安全 飞天 阿里云 人工智能 数据仓库 排序 分布式计算 华大基因 MaxCompute

存储IO加强型实例I1+D1 ——为极致存储性能要求场景而生

企业客户广泛使用数据库、分布式缓存、ELK(Elasticsearch、Logstash和Kibana)日志分析和大数据等系统,对小IO随机读写IOPS和延时,以及大IO存储吞吐Throughput等提出了严格的要求。

分布式 大数据 架构 阿里云 性能 ECS 数据库 基础设施 电商 按量付费 云盘 分布式计算 容灾 存储 云攻略

13
GO