更多精彩内容参见云栖社区大数据频道https://yq.aliyun.com/big-data；此外，通过Maxcompute及其配套产品，低廉的大数据分析仅需几步，详情访问https://www.aliyun.com/product/odps。
本讲义出自Sim Simeonov在Spark Summit East 2017上的演讲，主要介绍了Spark工作中的三个防弹原则以及他们的系统原则和设计模式。这三个原则分别是：幂等性、行级结构化日志以及不变的查询结构。
【Spark Summit East 2017】Bulletproof Jobs：大规模Spark处理模式
2017-02-18
1649
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《
阿里云开发者社区用户服务协议》和
《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写
侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介：
本讲义出自Sim Simeonov在Spark Summit East 2017上的演讲，主要介绍了Spark工作中的三个防弹原则以及他们的系统原则和设计模式。这三个原则分别是：幂等性、行级结构化日志以及不变的查询结构。
目录
相关文章
|
4月前
|
分布式计算
监控
Java
|
2月前
|
分布式计算
资源调度
监控
Spark学习--1、Spark入门（Spark概述、Spark部署、Local模式、Standalone模式、Yarn模式）（一）
Spark学习--1、Spark入门（Spark概述、Spark部署、Local模式、Standalone模式、Yarn模式）（一）
90
1
1
|
6月前
|
SQL
分布式计算
资源调度
分享一个 hive on spark 模式下使用 HikariCP 数据库连接池造成的资源泄露问题
分享一个 hive on spark 模式下使用 HikariCP 数据库连接池造成的资源泄露问题
72
0
0
|
6月前
|
分布式计算
资源调度
Kubernetes
|
6月前
|
分布式计算
资源调度
Hadoop
|
7月前
|
分布式计算
资源调度
监控
|
7月前
|
分布式计算
资源调度
Java
|
8月前
|
存储
分布式计算
资源调度
Spark学习--1、Spark入门（Spark概述、Spark部署、Local模式、Standalone模式、Yarn模式）（二）
Spark学习--1、Spark入门（Spark概述、Spark部署、Local模式、Standalone模式、Yarn模式）（二）
169
0
0
|
8月前
|
SQL
分布式计算
资源调度
Spark学习--1、Spark入门（Spark概述、Spark部署、Local模式、Standalone模式、Yarn模式）（一）
Spark学习--1、Spark入门（Spark概述、Spark部署、Local模式、Standalone模式、Yarn模式）（一）
211
0
0
|
9月前
|
分布式计算
Ubuntu
算法
热门文章
最新文章
1
【Flink】Flink跟Spark Streaming的区别？
2
大数据技术与Python：结合Spark和Hadoop进行分布式计算
3
Paimon与Spark
4
bigdata-36-Spark转换算子与动作算子
5
图解大数据 | 使用Spark分析新冠肺炎疫情数据@综合案例
6
Spark 源码分析 -- BlockStore
7
BR-MLP基于spark+Hadoop分布式数据挖掘解决方案功能剖析
8
地铁译：Spark for python developers --- 搭建Spark虚拟环境3
9
Spark中分布式使用HanLP（1.7.0)分词示例
10
Spark RDD类源码阅读
1
Spark【环境搭建 01】spark-3.0.0-without 单机版（安装+配置+测试案例）
5
2
【Flink】Flink跟Spark Streaming的区别？
34
3
大数据技术与Python：结合Spark和Hadoop进行分布式计算
28
4
Paimon与Spark
25
5
bigdata-36-Spark转换算子与动作算子
4
6
Paimon 与 Spark 的集成（二）：查询优化
117489
7
阿里云 EMR Serverless Spark 版免费邀测中
392
8
Spark学习---SparkSQL（概述、编程、数据的加载和保存、自定义UDFA、项目实战）
82
9
安装Spark
34
10
Spark环境搭建与使用
36