1. 阿里云>
  2. 云栖社区>
  3. 主题地图>
  4. D>
  5. 大数据与存储

当前主题:大数据与存储

大数据与存储相关的博客

查看更多 写博客

数据中台之结构化大数据存储设计

前言 任何应用系统都离不开对数据的处理,数据也是驱动业务创新以及向智能化发展最核心的东西。这也是为何目前大多数企业都在构建数据中台的原因,数据处理的技术已经是核心竞争力。在一个完备的技术架构中,通常也会由应用系统以及数据系统构成。应用系统负责处理业务逻辑,而

阅读全文

Dremio架构分析

一.Dremio架构 Dremio是基于Apache calcite、Apache arrow和Apache parquet3个开源框架构建,结构其核心引擎Sabot,形成这款DaaS(Data-as-a-Service)数据即服务平台;整体体验风格与其公司

阅读全文

阿里云文件存储极速型NAS正式上线商用,打造百微秒级稳定时延的共享文件存储

4月15日,阿里云文件存储极速型NAS正式上线商业化,针对共享文件存储在海量小文件场景下的性能短板进行了深度优化,大幅度降低了小文件读写的IO响应时延,提升性能。 据介绍,极速型NAS主要在高性能WEB应用/网站、DevOPS的CI/CD开发测试和持续集成环

阅读全文

银行业大数据量清单报表案例

银行数据查询业务中,经常会碰到数据量很大的清单报表。由于用户输入的查询条件可能很宽泛,因此会从数据库中查出几百上千万甚至过亿行的记录,比如银行流水记录;为了避免内存溢出,一般都会使用关系型数据库的分页机制来做,但结果往往也不尽人意;有些情况下甚至底层采用了非

阅读全文

阿里云正式发布小程序Serverless 为用户提供一套代码多端使用

8月14日,阿里云宣布正式推出小程序Serverless,阿里云小程序Serverless提供包括云函数、数据存储、文件存储等一整套后端服务开发套件,以及集成了经济体业务能力API的业务套件。开发者通过API方式即可获取云函数、数据存储、文件存储等IaaS层

阅读全文

当我们谈论企业级存储市场时,我们谈论(做)了什么

一、 什么是APSARA Block Storage APSARA Block Storage是阿里云弹性计算块存储团队推出的一款企业级分布式块存储产品,为企业级市场头部客户量身打造,构建高性能、弹性、可靠的大规模横向扩展云存储服务平台。可对接多种类型的计算

阅读全文

利用云存储网关和混合云备份服务备份OSS数据

随着数据上云大潮愈演愈烈,越来越多的客户使用阿里云对象存储服务做为其在云上的数据存储仓库。阿里云OSS可以提供海量的存储空间,具有稳定可靠的特点,从而受到客户的广泛认可。为了确保数据的万无一失,防止一些人为的操作失误,很多客户都有强烈的需求能够对OSS Bu

阅读全文

AnalyticDB for MySQL:PB级云数仓核心技术和场景解析

2019阿里云峰会·上海开发者大会于7月24日盛大开幕,本次峰会与未来世界的开发者们分享开源大数据、IT基础设施云化、数据库、云原生、物联网等领域的技术干货,共同探讨前沿科技趋势。本文整理自数据库专场中阿里云智能高级技术专家南仙的精彩演讲,本文为分享了阿里云

阅读全文

大数据与存储相关问答

查看更多 提问题

广州供卵试管包成功多少钱137.1033.6767

讓 66 平安健康顺利的來到這美麗新世界。[給你小心心] 更謝謝66拔拔主動進產房的全程陪伴[愛你][愛你][愛你]讓我不那麼緊張[允悲]而這些天也睡眠不足的親力親為貼心照顧著我們母子[米奇比心] 我永遠記得當你下跪求婚、互換婚戒的那一刻[男孩儿][女孩儿

阅读全文

如何将本地的csv文件用PAI的“读数据表”打开

已经将csv放到了oss中 后面,组件“读数据表”中的“项目名”,“表名”怎么弄? 使用组件“读取文件数据”看似可以直接打开OSS里面的文件,但是**无法与其他的组件进行链接**。 在百度上看到了相关方案,但是,是从头到尾用tensorflo

阅读全文

【精品问答合集】Hbase热门问答

hbase 大量写入很慢 https://yq.aliyun.com/ask/50074 发现hbase文件大规模的丢失了 https://yq.aliyun.com/ask/46584 hbase启动脚本start-hbase的疑问 htt

阅读全文

sqlserver中一个出现死锁的原因

测试代码如下,经典的问题,不存在则更新,不存在则插入,这里简化一下,不存在则插入 从另外一个角度来看,这里的目的为了知道死锁的原因,不是让告诉在code字段上加个唯一索引避免死锁,绕过这个问题本身。 表结构 ![image](https://yqfi

阅读全文

【Mysql求助】select count(1) 不能查询到一张表的总数

求助:公司里面有一张表,数据量大概有二千四百多万行,10G左右,有建多个索引。 但是使用下面这条语句一直查询不到数据,查了1000多秒,,凸(艹皿艹 ) -- 查询总数 select count(1) FROM table; 请问一下有没有遇到过这种情

阅读全文

Phoenix关联查询性能上和Mysql差距大吗?

phoenix关联查询性能上和Mysql差距大吗?

阅读全文

Spark SQL连RDS出现“Invalid authorization specification, message from server: ip not in whitelist”

Spark SQL连RDS出现“Invalid authorization specification, message from server: ip not in whitelist”

阅读全文

MongoDB内存占用的情况?

lz现在想用MongoDB2.6作为数据存储,在虚拟机看了下MongoDB和mysql内存占用,MongoDB默认情况比mysql占用能小5M左右,但不知道数据量与io大的时候,是否还这样,各位能否给点建议 本问题及下方已被采纳的回答均来自云栖社区【Re

阅读全文