1. 阿里云>
  2. 云栖社区>
  3. 主题地图>
  4. Y>
  5. 云存储 hadoop

当前主题:云存储 hadoop

云存储 hadoop相关的博客

查看更多 写博客

30分钟全方位了解阿里云Elasticsearch(附公开课完整视频)

摘要: 阿里云Elasticsearch提供100%兼容开源Elasticsearch的功能,以及Security、Machine Learning、Graph、APM等商业功能,致力于数据分析、数据搜索等场景服务。与开源社区背后商业公司Elastic战略合

阅读全文

大数据的主要作用是什么?

大数据这个词相信大家已经很熟悉了,每天接触手机都会接触到,但是我们感觉不到,可是大数据究竟是什么东西呢?是用来做什么的?目前有哪些应用呢? 大数据的概念? 渗透在每一个行业和业务领域的数据。通过人们对这些海量数据的挖掘和运用,产生出一波新的生产率增长和消费者

阅读全文

云数据仓库MaxCompute最佳实践之数据上云 | 2019大数据技术公开课第五季

2019年9月17日,TPC官宣Alibaba Cloud MaxCompute 认证结果。同月26日,杭州云栖大会阿里巴巴宣布了这一成绩,飞天大数据平台计算引擎MaxCompute成全球首个TPCx-BB认证的公共云产品,是除Hive、Spark,TPCx

阅读全文

从 Storm 到 Flink,汽车之家基于 Flink 的实时 SQL 平台设计思路与实践

作者:王刚、刘首维 在 2019 年之前,之家的大部分实时业务都是运行在 Storm 之上的。Storm 作为早期主流的实时计算引擎,凭借简单的 Spout 和 Bolt 编程模型以及集群本身的稳定性,俘获了大批用户。下图是实时计算团队 Storm 平台页面

阅读全文

云栖干货回顾 | 行业顶级NoSQL成员坐阵,NoSQL数据库专场重点解析!

NoSQL数据库作为数据库市场最重要的组成之一,它的一举一动都影响着成千上万的企业。本专场邀请了行业顶级的NoSQL核心成员与大家共同展望NoSQL数据库的未来,**阿里巴巴、MongoDB、Redisson、斗鱼等**公司的技术大咖与大家共同分享了阿里云N

阅读全文

Kubernetes+Docker+Istio 容器云实践

随着社会的进步与技术的发展,人们对资源的高效利用有了更为迫切的需求。近年来,互联网、移动互联网的高速发展与成熟,大应用的微服务化也引起了企业的热情关注,而基于Kubernetes+Docker的容器云方案也随之进入了大众的视野。开普勒云是一个基于Kubern

阅读全文

一文读懂分布式架构知识体系(内含超全核心知识大图)

作者 | 晓土  阿里巴巴高级工程师 姊妹篇阅读推荐:**《**云原生时代,分布式系统设计必备知识图谱(内含22个知识点)**》** 导读:本文力求从分布式基础理论、架构设计模式、工程应用、部署运维、业界方案这几大方面,介绍基于 MSA(微服务架构)的分布式

阅读全文

Dremio对国产数据库的支持使用

一.国产数据库调研 Ⅰ).达梦数据库 达梦数据库管理系统是达梦公司推出的具有完全自主知识产权的高性能数据库管理系统,简称DM。达梦数据库管理系统的最新版本是8.1.0版本,简称DM8。 DM8吸收借鉴当前先进新技术思想与主流数据库产品的优点,融合了分布式、弹

阅读全文

云存储 hadoop相关问答

查看更多 提问题

Flink 1.5.4没有在Kubernetes中注册Google云端存储(GCS)文件系统,尽管它在docker容器中有效

我试图启动一个flink-jobmanager坚持其在GCS状态,所以我加了high-availability.storageDir: gs://BUCKET/ha一行到我flink-conf.yaml和我建立我的Dockerfile描述这里 这是我

阅读全文

OrcTableSource是否支持S3文件系统?

我使用OrcTableSource从云对象存储(IBM COS)获取Orc文件时遇到了一些麻烦,代码片段如下所示: OrcTableSource soORCTableSource = OrcTableSource.builder() // path to

阅读全文

阿里云服务器之前做免密钥报错

执行命令:]$ ssh-keygen -t dsa ssh-copy-id -i .ssh/id_dsa.pub hadoop@172.16.25.83 报错信息如下: Bad port 'umask 077; test -d ~/.ssh || mk

阅读全文

E-MapReduce是否支持以现有Mongodb分片集群数据库做数据源?

我们现在用Hadoop的MapReduce来分析数据,以mongodb为输入的数据源,分析后再存储在mongodb中,能否在几乎不改动程序的情况下用阿里云的这个E-MapReduce?阿里云的E-MapReduce支持这种方式么?还是需要将数据源拿过来另做处理

阅读全文

企业大数据平台仓库架构建设思路【精品问答集锦】

本期请来了阿里云高级技术专家李金波(介然)直播分享企业大数据平台仓库架构建设思路 直播简介 随着互联网规模不断的扩大,数据也在爆炸式地增长,各种结构化、半结构化、非结构化数据的产生,越来越多的企业开始在大数据平台下进行数据处理。作为大数据应用的基础-数

阅读全文

云计算与大数据处理

首先,云计算是提取大数据的前提。   信息社会,数据量在不断增长,技术在不断进步,大部分企业都能通过大数据获得额外利益。在海量数据的前提下,如果提取、处理和利用数据的成本超过了数据价值本身,那么有价值相当于没价值。来自公有云、私有云以及混合云之上的强大的云计

阅读全文

MongoDB

简介编辑 MongoDB[1] 是一个基于分布式文件存储的数据库。由C++语言编写。旨在为WEB应用提供可扩展的高性能数据存储解决方案。 mongoDB mongoDB MongoDB[2] 是一个介于关系数据库和非关系数据库之间的产品,是非关系数

阅读全文