1. 云栖社区>
  2. 全部标签>
  3. #数据管理#
数据管理

#数据管理#

已有4人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

数据湖 VS 数据仓库之争?阿里提出大数据架构新概念:湖仓一体

随着近几年数据湖概念的兴起,业界对于数据仓库和数据湖的对比甚至争论就一直不断。有人说数据湖是下一代大数据平台,各大云厂商也在纷纷的提出自己的数据湖解决方案,一些云数仓产品也增加了和数据湖联动的特性。但是数据仓库和数据湖的区别到底是什么,是技术路线之争?是数据管理方式之争?二者是水火不容还是其实可以和谐共存,甚至互为补充?本文作者来自阿里巴巴计算平台部门,深度参与阿里巴巴大数据/数据中台领域建设,将从历史的角度对数据湖和数据仓库的来龙去脉进行深入剖析,来阐述两者融合演进的新方向——湖仓一体,并就基于阿里云MaxCompute/EMR DataLake的湖仓一体方案做一介绍。

大数据 架构 hadoop 性能 数据库 数据仓库 集群 Image 存储 数据管理 MaxCompute

【数据湖开发治理篇】——数据湖开发治理平台DataWorks

数据湖的定义: wikipedia中对于数据湖的定义是:“A data lake is a system or repository of data stored in its natural/raw format, usually object blobs or files.

大数据 PostgreSQL Image 数据迁移 存储 数据管理 MaxCompute AnalyticDB

数据湖元数据服务的实现和挑战

大数据引擎的现状 在大数据计算和存储领域,因不同业务场景、不同数据规模,诞生了很多适合处理不同需求的各类大数据引擎,比如计算引擎类有数据分析引擎Hive、交互式分析引擎Presto、迭代计算引擎spark以及流处理引擎Flink等,存储类有日志存储系统的SLS、分布式文件系统HDFS等,这些引擎和...

大数据 模块 开源大数据 分布式文件系统 插件 存储 数据管理

云上网站经典架构

阿里云最佳实践频道:【点击查看更多上云最佳实践】这里有丰富的企业上云最佳实践,从典型场景入门,提供一系列项目实践方案,降低企业上云门槛的同时满足您的需求! 场景描述 在创业型公司或阿米巴模式经营的公司,新项目发布初期存在较大的不确定性,既要考虑项目未来的扩展性,又要衡量项目的运营成本。

架构 云服务器 负载均衡 aliyun 云数据库 对象存储 运营 数据管理

有赞大数据平台安全建设实践

一、概述 在大数据平台建设初期,安全也许并不是被重点关注的一环。大数据平台的定位主要是服务数据开发人员,提高数据开发效率,提供便捷的开发流程,有效支持数仓建设。大数据平台的用户都是公司内部人员。数据本身的安全性已经由公司层面的网络及物理机房的隔离来得到保证。

大数据 安全 配置 权限管理 plugin 数据管理

阿里云云原生数据湖分析DLA重磅发布-数据湖管理,助力企业一站式管理OSS数据湖存储数据

数据湖当前在国内外是比较热的方案,MarketsandMarkets市场调研显示预计数据湖市场规模在2024年会从2019年的79亿美金增长到201美金。一些企业已经构建了自己的云原生数据湖方案,有效解决了业务痛点;还有很多企业在构建或者计划构建自己的数据湖。

OSS 数据库 数据仓库 控制台 spark aliyun database 存储 数据管理

城市CIO必须在新冠时期加强数据工作

2019冠狀病毒病(COVID-19) 突然出现在我们所有的社区里,也迫使当地政府和城市首席信息官(CIO)以有意义的方式做出响应。

大数据 数据管理

DataQuotient 画像分析应用场景有哪些?

DataQuotient 画像分析可以应用于各个行业,丰富的功能特性可以满足您不同的场景需求。本文以精准营销场景为例为您介绍DataQuotient 画像分析在实际场景中的应用。

同步 aliyun 报表 数据管理 大数据分析 画像分析

黑天鹅频现,数据灾备如何为智能时代保驾护航

最近一年来,突如其来的灾害与疫情,真切考验了大企业在危急时刻的灾备意识与能力。

大数据 数据备份 数据管理

AI热潮下,董事会和CEO必须能够全面洞悉AI

AI已经成为我们日常生活的一部分,这一点你无法否认。几乎来自所有不同行业的财富1000强企业领导者,都在积极开展AI计划。

算法 风险管理 数据管理

进击的 Flink:网易云音乐实时数仓建设实践

如何基于 Flink 的新 API 升级实时数仓架构?

架构 SQL 中间件 数据中心 存储 数据管理

云原生应用程序和数据需要确保安全

将数据作为云原生应用程序的一部分进行管理非常困难。对于许多企业而言,当前冠状病毒疫情带来的压力加剧了他们在软件开发方面所面临的挑战。数字化转型已从一种增长战略变成了一种生存之道。在线商务几乎在一夜之间得到爆炸式增长,达到了只有在假日期间才会出现的水平。

安全 数据库 基础设施 集群 微服务 容器 Cassandra 云平台 数据库设计 数据管理

高通公司总裁安蒙:5G+AI开启智能互联未来

今日,2020世界人工智能大会(WAIC)云端峰会正式开幕,高通公司总裁安蒙(Cristiano Amon)在产业发展全体会议上发表了主题为“5G+AI开启智能互联未来”的演讲。

安全 数据管理 海量数据

我国主导的两项大数据国际标准即将正式发布

2020年6月22日-7月3日,国际电信联盟第十六研究组(简称ITU-T SG16)召开全体会议,来自中国、美国、德国、日本、韩国、巴西、瑞士、加拿大、英国等国家和世界卫生组织等国际组织的代表参加了此次为期一周的在线会议。

大数据 性能 资产管理 基础设施 数据安全 Framework 数据管理 数据应用

数据管理 DMS数据追踪图文详解!

数据追踪功能可以快速按需找到目标时间段内的相关更新,并生成逆向回滚语句。本文介绍数据追踪功能与操作说明。

安全 mysql 数据库 工单 aliyun 脚本 html 数据管理

87
GO