1. 云栖社区首页>
  2. 视频>
  3. 第四章 大数据平台的集群管理

第四章 大数据平台的集群管理

1225 人浏览
收藏 取消收藏

第四章 大数据平台的集群管理

大数据 阿里云 公开课 集群 产品学习 开发技术 云栖直播 云大学 云计算入门

第一节 背景介绍 (04:00)


第二节 ODPS概述 (05:00)


第三节 分布式文件系统回顾 (04:00)


第四节 跨IDC集群规划形式 (10:00)


第五节 集群数据复制 (05:00)


第六节 跨IDC集群规划案例——ODPS (04:00)


第七节 ODPS总体架构 (03:00)


第八节 ODPS任务调度 (06:40)


第九节 ODPS接入层与服务层 (06:40)


第十节 ODPS作业调度与执行 (16:00)


第十一节 ODPS相关讨论 (15:00)


第十二节 未来挑战 (02:30)

主讲人介绍

黄东平

先后就职于微软、腾讯和阿里。在微软期间参与搜索引擎必应的开发工作。在腾讯基础架构部期间,参与rpc框架poppy的研发,并带队完成了调度系统tborg2.0的开发工作。于2012年加入阿里云飞天团队任架构师,主导完成了基础库stone开发,调度系统执行服务器tubo的开发。如今在数据事业部odps团队,做机群管控和机器学习平台DT PAI的研发工作。

视频介绍

本章针对阿里大数据管理平台ODPS进行讲解,首先对ODPS在整体系统平台中的位置和主要功能进行阐述,并说明ODPS演化和发展历程,之后针对ODPS总体架构和主要功能进行讲解,使学生了解ODPS的主要运作机制