1. 阿里云>
  2. 云栖社区>
  3. 主题地图>
  4. S>
  5. 数据系统

当前主题:数据系统

数据系统相关的博客

数据中台的存储系统和计算平台枚举

作者:向师富 转自:阿里巴巴数据中台官网 https://dp.alibaba.com采集&传输层 Sqoop Hadoop、关系型数据库之间传输数据的工具。传输时,会启动多个MR作业并发的传输数据 DataX 阿里巴巴开源的数据同步工具,用来在各种异构数据

阅读全文

数据上云,应该选择全量抽取还是增量抽取?

作者:向师富 转自:阿里巴巴数据中台官网https://dp.alibaba.com概述 数据抽取是指从源数据抽取所需要的数据, 是构建数据中台的第一步。 数据源一般是关系型数据库,近几年,随着移动互联网的蓬勃发展,出现了其他类型的数据源,典型的如网站浏览日

阅读全文

NoSql数据库

随着互联网web2.0网站的兴起,非关系型的数据库现在成了一个极其热门的新领域,非关系数据库产品的发展非常迅速。而传统的关系数据库在应付web2.0网站,特别是超大规模和高并发的SNS类型的web2.0纯动态网站已经显得力不从心,暴露了很多难以克服的问题,如

阅读全文

连接Oracle数据库的工具, 有哪些?

Oracle全称 Oracle Database 是甲骨文公司的一款关系型数据库管理系统,他在数据库领域是处于领先的地位的产品,可以说Oracle数据库系统是目前世界上流行的关系型数据库管理系统,系统的可移植性好,使用方便,功能强,适用于各类大,中,小环境,

阅读全文

昨天,这项阿里技术再获世界级科技大奖!

第六届世界互联网大会来了!千年水乡古镇乌镇又一次吸引了全世界的目光。 昨天,阿里云自研数据库POLARDB 在会上当选世界互联网领先科技成果。POLARDB解决了企业在云时代的数据库难题,帮助企业在数小时内完成上云,解决数字化转型的关键问题。 世界互联网领先

阅读全文

带你读《企业数据湖》之二:数据湖概念概览

第2章数据湖概念概览 数据湖概念的诞生,源自企业面临的一些挑战,如数据应该以何种方式处理和存储。最开始,企业对种类庞杂的应用程序的管理都经历了一个比较自然的演化周期。最开始的时候,每个应用程序会产生、存储大量数据,而这些数据并不能被其他应用程序使用,这种状况

阅读全文

如何建设数据安全体系?

数据安全是实现隐私保护的最重要手段之一。数据安全并不是一个独立的要素,而是需要连同网络安全、系统安全、业务安全等多种因素,只有全部都做好了,才能最终达到数据安全的效果。 随着AI、DT时代的来临,传统企业越来越重视数据,并逐步的开始对内部数据的进行互联,其核

阅读全文

息息相关的两大体系:数据中台与业务系统

作者:品鉴 [ 更多内容详见数据中台官网 https://dp.alibaba.com ] 数据中台对外输出的表现形式多种多样,最普遍的做法是BI分析,其次是与业务中台形成一套有机的整体,对业务产生真正的价值。 数据中台的BI呈现 数据中台是以OneMode

阅读全文

大数据的分析工具有哪些?

大数据分析处理的工具 大数据就是在各种类型的数据中快速获得有有效 有价值的信息的技术,大数据领域现今已经出现大量的 便于操作的新型技术,他们会是大数据采集,处理,存储和信息展现的最有效的工具。 1.大数据接入 大数据接入 已有数据接入,实时数据接入,消息记录

阅读全文

数据中台构建产品Dataphin到底能支持哪些数据源?

作者:王腾 [ 更多内容详见数据中台官网 https://dp.alibaba.com ] 业务数据存储是业务系统最基本的构成,构建数据中台,就是要将这些数据集中起来放到一个有更强算力的地方集中处理,所以对于数据集成的能力是构建数据中台最基本要求; 从存储的

阅读全文

详解阿里云数据中台,一篇文章全面了解大数据“网红”

作者:谭虎、陈晓勇 [ 更多内容详见数据中台官网 https://dp.alibaba.com ] 一直想写一篇关于数据中台正面文章,现在有闲时做些总结,想充分诠释一下DT内部人如何看待数据中台。 数据中台的概念是最早由阿里巴巴首次提出,是为了应对内部众多业

阅读全文

阿里云服务器如何选择操作系统?

阿里云ECS服务器操作系统如何选择?笔者分享阿里云操作系统选择说明及选择方法: 如何选择服务器操作系统? 购买ECS云服务器选择操作系统是很重要的步骤,那么如何选择?哪个操作系统好?我们先了解一下阿里云的操作系统,服务器操作系统主要分为两类,即Windows

阅读全文

「数据治理那点事」系列之四 | 书同文车同轨:数据治理之数据标准管理

这篇文章主要从数据治理中的重要基础内容:**数据标准**入手,从以下几个角度展开具体讲解: 对数据标准的认识误区 数据标准的定义 企业如何制定数据标准 数据标准化过程中出现难题的原因以及解决方案 一、大数据治理标准体系 根据全国信息技术标准化技术委员会大数据

阅读全文

开发大数据的正确姿势--交互式分析

在大数据技术领域里,用户通常希望获得高可靠、低延时的数据服务,来满足简单或者复杂的查询场景。本文整理自2019年云栖大会大数据技术专场交互式分析团队的精彩演讲,为您深度揭秘交互式分析的核心技术以及应用场景,打开开发大数据的正确姿势! 本文内容整理自云栖大会演

阅读全文

它是真实的“盗梦空间”?在这里,一切都可能是数据

阿里妹导读:位于杭州阿里巴巴西溪园区旁边的大型商场“亲橙里”2018年正式开业。和传统的线下综合型商场不同的是,亲橙里从规划之初就定位为数字化商场,通过植入自研的IBOS平台完成建筑内的所有子系统的接入,而让建筑和建筑内的设备、空间、人的“在线”是我们数字化

阅读全文

JindoFS解析 - 云上大数据高性能数据湖存储方案

作者:殳鑫鑫,花名辰石,阿里巴巴计算平台事业部EMR团队技术专家,目前从事大数据存储以及Spark相关方面的工作。 2019 年云栖大会上,EMR Jindo 的技术存储分离方案得到很大的关注,视频直达链接【云上大数据的一种高性能数据湖存储方案】【EMR打造

阅读全文

结构化大数据分析平台设计

前言  任何线上系统都离不开数据,有些数据是业务系统自身需要的,例如系统的账号,密码,页面展示的内容等。有些数据是业务系统或者用户实时产生的,例如业务系统的日志,用户浏览访问的记录,系统的购买订单,支付信息,会员的个人资料等。大多数企业对内,对外有很多这样的

阅读全文

数据库OceanBase创始人阳振坤:通关TPC-C到底有多难?

自从蚂蚁金服自研数据库OceanBase获得TPC-C测试第一名后,引起了行业内外大量关注,我们衷心的感谢大家对OceanBase的支持与厚爱,也虚心听取外界的意见和建议。为了让大家更好的了解测试的技术细节,我们特意邀请了OceanBase的核心研发人员对本

阅读全文

OPC 与工业自动化

  OPC代表OLE(对象链接和嵌入)过程控制。OPC是最流行的数据连接标准,用于在控制器,设备,应用程序和其他基于服务器的系统之间进行通信,而无需进入数据传输的自定义驱动程序。 工厂自动化系统或过程由来自不同供应商或供应商的不同协议的不同控制器和设备组成。

阅读全文

阿里巴巴飞天大数据架构体系与Hadoop生态系统

很多人问阿里的飞天大数据平台、云梯2、MaxCompute、实时计算到底是什么,和自建Hadoop平台有什么区别。 先说Hadoop 什么是Hadoop? Hadoop是一个开源、高可靠、可扩展的分布式大数据计算框架系统,主要用来解决海量数据的存储、分析、分

阅读全文

7443