新一代企业级大数据应用方案

简介: 本文的整理自2017云栖大会-成都峰会上阿里云资深专家张辉的分享讲义,讲义主要由大数据时代大数据方案的三个思考引出大数据时代企业数据应用架构:由数据模型层到计算模型层到接口层。随后介绍了OLT—新一代数据模型的共建共享、权限、质量评估等内容,它场景化的计算模型拥有多种引擎,在企业级数据应用方案中能做到风险预警,统一用户OLT模型等作用。

摘要:本文的整理自2017云栖大会-成都峰会上阿里云资深专家张辉的分享讲义,讲义主要由大数据时代大数据方案的三个思考引出大数据时代企业数据应用架构:由数据模型层到计算模型层到接口层。随后介绍了OLT—新一代数据模型的共建共享、权限、质量评估等内容,它场景化的计算模型拥有多种引擎,在企业级数据应用方案中能做到风险预警,统一用户OLT模型等作用。

在2017云栖大会-成都峰会上,阿里云资深专家张辉做了题为《新一代企业级大数据应用方案》的分享。当下是否还需要一个复杂的EDW?数据系统的目标用户是谁?让数据适应计算能力还是计算适应场景?传统的架构有着层次结构清楚,但不简洁、上层应用业务人员理解不了、技术人员维护成本高,大量数据冗余等大量问题。业务人员离数据越来越远。而OTL在解决上述问题的同时还能结合分析结构与交互式分析应用框架,快速搭建基于明细数据,让业务人员能够进行灵活筛选、钻取、联动式的分析研判产品。

b77d485d74b93bd513da0e48bc4a0afb1803dd93

02b318d5bd97cde8af96e966dbe578fae055c5af

493d2fd8910e626a4daf283fef0e265e48d1120f

8bf9de49f88a366ecaadb7d8c17952b11757a4ec

0acedbbc53e0ecf97253d415d42ae26983e42894

4309be826a5b0c194ec385afd54faaae40c84abf

7535b5471744e90d07d513be8555a09fd39c8918

c034d742e6fc8151614769e62eb298c03b1bd9dd

513968f624dcddf8ccd4dca91d92981a1312fbaf

5e5184861ec7fb7c9321079d36971dc646f79142

71bdf20932337568731e584c81c335c2dbb87520

4511963f243916600c59b9dae2a3b319391fc1f7

565d8b9ced9c77af9c041fd73246a752de6f6cb9

358f03662d31d09012930fabac42fe37242555d3

a864516c84b501e77bd1989773c4837d80f66e21

355e996095d7363ad7c9ab8936a72f2f95107316

9e57021e9e8512a3eb7472c9d54ea7e7e49ab971

212ae7d0d09f139620c91aa3b48bedab0a93531e

d8059075291b759b6376e1e8b27b8d994f2860da

a39ae515f65283f7ab18f1319fcb8887371c8087

81e48fef52b72b4f5ff6c64fb9b6545484abe941

7532850362585a788432dd18a924314486364cb8

b1b7bc3a2963fcff2bf1c39b4b77a47c6350a50a

f9cf008b4b2bc80903594c49e963099424b03ccb

cebab486ec54e924aaf37cc54a3391d5d8c977fc

d7a3a58c732cc392fa4ad89104cbf95d1f7bd687

14313dba1f720c000dbdbde7daae88052d2b5aad

a5f67df8df6b95ac6290748e977ae00f5ab3dcb4

9be59f0289fa2a176442ade2ea4f3fd447a9179f

ba7fd993bae23a09039a60529caedb2c1c858667

9981272ef5b8dae9d09a284bc87d476a515d9548


相关实践学习
简单用户画像分析
本场景主要介绍基于海量日志数据进行简单用户画像分析为背景,如何通过使用DataWorks完成数据采集 、加工数据、配置数据质量监控和数据可视化展现等任务。
SaaS 模式云数据仓库必修课
本课程由阿里云开发者社区和阿里云大数据团队共同出品,是SaaS模式云原生数据仓库领导者MaxCompute核心课程。本课程由阿里云资深产品和技术专家们从概念到方法,从场景到实践,体系化的将阿里巴巴飞天大数据平台10多年的经过验证的方法与实践深入浅出的讲给开发者们。帮助大数据开发者快速了解并掌握SaaS模式的云原生的数据仓库,助力开发者学习了解先进的技术栈,并能在实际业务中敏捷的进行大数据分析,赋能企业业务。 通过本课程可以了解SaaS模式云原生数据仓库领导者MaxCompute核心功能及典型适用场景,可应用MaxCompute实现数仓搭建,快速进行大数据分析。适合大数据工程师、大数据分析师 大量数据需要处理、存储和管理,需要搭建数据仓库?学它! 没有足够人员和经验来运维大数据平台,不想自建IDC买机器,需要免运维的大数据平台?会SQL就等于会大数据?学它! 想知道大数据用得对不对,想用更少的钱得到持续演进的数仓能力?获得极致弹性的计算资源和更好的性能,以及持续保护数据安全的生产环境?学它! 想要获得灵活的分析能力,快速洞察数据规律特征?想要兼得数据湖的灵活性与数据仓库的成长性?学它! 出品人:阿里云大数据产品及研发团队专家 产品 MaxCompute 官网 https://www.aliyun.com/product/odps 
相关文章
|
18天前
|
存储 消息中间件 监控
【Flume】Flume在大数据分析领域的应用
【4月更文挑战第4天】【Flume】Flume在大数据分析领域的应用
|
1月前
|
Cloud Native 数据处理 云计算
探索云原生技术在大数据分析中的应用
随着云计算技术的不断发展,云原生架构作为一种全新的软件开发和部署模式,正逐渐引起企业的广泛关注。本文将探讨云原生技术在大数据分析领域的应用,介绍其优势与挑战,并探讨如何利用云原生技术提升大数据分析的效率和可靠性。
|
1月前
|
存储 消息中间件 大数据
Go语言在大数据处理中的实际应用与案例分析
【2月更文挑战第22天】本文深入探讨了Go语言在大数据处理中的实际应用,通过案例分析展示了Go语言在处理大数据时的优势和实践效果。文章首先介绍了大数据处理的挑战与需求,然后详细分析了Go语言在大数据处理中的适用性和核心技术,最后通过具体案例展示了Go语言在大数据处理中的实际应用。
|
28天前
|
数据采集 分布式计算 大数据
Java语言在大数据处理中的应用
传统的大数据处理往往依赖于庞大的数据中心和高性能的服务器,然而随着大数据时代的到来,Java作为一种强大的编程语言正在被广泛应用于大数据处理领域。本文将探讨Java语言在大数据处理中的优势和应用,以及其在分布式计算、数据处理和系统集成等方面的重要作用。
|
20天前
|
NoSQL 大数据 数据挖掘
现代数据库技术与大数据应用
随着信息时代的到来,数据量呈指数级增长,对数据库技术提出了前所未有的挑战。本文将介绍现代数据库技术在处理大数据应用中的重要性,并探讨了一些流行的数据库解决方案及其在实际应用中的优势。
|
25天前
|
机器学习/深度学习 人工智能 数据可视化
基于Python的数据可视化技术在大数据分析中的应用
传统的大数据分析往往注重数据处理和计算,然而数据可视化作为一种重要的技术手段,在大数据分析中扮演着至关重要的角色。本文将介绍如何利用Python语言中丰富的数据可视化工具,结合大数据分析,实现更直观、高效的数据展示与分析。
|
1月前
|
存储 NoSQL 大数据
新型数据库技术在大数据分析中的应用与优势探究
随着大数据时代的到来,传统数据库技术已经无法满足海量数据处理的需求。本文将探讨新型数据库技术在大数据分析中的应用情况及其所带来的优势,为读者解析数据库领域的最新发展趋势。
|
2月前
|
分布式计算 DataWorks IDE
MaxCompute数据问题之忽略脏数据如何解决
MaxCompute数据包含存储在MaxCompute服务中的表、分区以及其他数据结构;本合集将提供MaxCompute数据的管理和优化指南,以及数据操作中的常见问题和解决策略。
47 0
|
2月前
|
SQL 存储 分布式计算
MaxCompute问题之下载数据如何解决
MaxCompute数据包含存储在MaxCompute服务中的表、分区以及其他数据结构;本合集将提供MaxCompute数据的管理和优化指南,以及数据操作中的常见问题和解决策略。
38 0
|
2月前
|
分布式计算 关系型数据库 MySQL
MaxCompute问题之数据归属分区如何解决
MaxCompute数据包含存储在MaxCompute服务中的表、分区以及其他数据结构;本合集将提供MaxCompute数据的管理和优化指南,以及数据操作中的常见问题和解决策略。
35 0