备案控制台
探索云世界
开发者社区 大数据与机器学习 开源大数据平台 E-MapReduce 文章 正文

钉钉群直播【Migration to Apache Spark】

2019-05-27 1516
版权
版权声明：
本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《 阿里云开发者社区用户服务协议》和 《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写 侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
简介： Spark因其统一引擎、性能、易用性等特点备受青睐，将大数据处理引擎迁移到Spark已经成为一种趋势(比如将Hive迁移到SparkSQL)，很多大公司也正在实践。 本次分享将围绕Hive迁移到SparkSQL进行展开，内容包括介绍大公司迁移流程、遇到的问题以及对Spark做的一些反馈优化。

直播回看点我

本周三19:00 钉钉群技术分享直播

题目:Migration to Apache Spark

摘要:Spark因其统一引擎、性能、易用性等特点备受青睐，将大数据处理引擎迁移到Spark已经成为一种趋势(比如将Hive迁移到SparkSQL)，很多大公司也正在实践。

本次分享将围绕Hive迁移到SparkSQL进行展开，内容包括介绍大公司迁移流程、遇到的问题以及对Spark做的一些反馈优化。

_Spark_AI_Migration_to_Apache_Spark_

文章标签：
开源大数据平台 E-MapReduce
应用服务中间件
Apache
大数据
分布式计算
Spark
相关实践学习
数据湖构建DLF快速入门
本教程通过使⽤数据湖构建DLF产品对于淘宝用户行为样例数据的分析，介绍数据湖构建DLF产品的数据发现和数据探索功能。
快速掌握阿里云 E-MapReduce
E-MapReduce 是构建于阿里云 ECS 弹性虚拟机之上，利用开源大数据生态系统，包括 Hadoop、Spark、HBase，为用户提供集群、作业、数据等管理的一站式大数据处理分析服务。 本课程主要介绍阿里云 E-MapReduce 的使用方法。
开源大数据EMR
目录
相关文章
扬流
|
分布式计算 大数据 Apache
直播预约｜Apache Spark + DolphinScheduler Meetup 1月11日正式上线
洞悉 Spark 任务调度新能力｜Apache Spark + DolphinScheduler Meetup 将于 1 月 11 日在线上举办
扬流
188 1
直播预约｜Apache Spark + DolphinScheduler Meetup 1月11日正式上线
阿里云服务支持
|
机器人 大数据
E-MapReduce工作流配置钉钉群告警
E-MapReduce工作流配置钉钉群告警
阿里云服务支持
135 0
E-MapReduce工作流配置钉钉群告警
baphsqca3imha
|
消息中间件 负载均衡 安全
钉钉 IM 的 RocketMQ 应用实践 | 学习笔记
快速学习钉钉 IM 的 RocketMQ 应用实践
baphsqca3imha
209 0
钉钉 IM 的 RocketMQ 应用实践 | 学习笔记
开发者小助手
|
消息中间件 负载均衡 安全
钉钉 IM 的 RocketMQ 应用实践
最近几年，钉钉迅速成为一款国民级应用。IM作为钉钉最核心的功能，每天需要支持海量企业用户的沟通，同时还通过 PaaS 形式为淘宝、高德等 App 提供基础的即时通讯能力，是日均千亿级消息量的 IM 平台。
开发者小助手
473 1
钉钉 IM 的 RocketMQ 应用实践
1670371368751139
|
人工智能 运维 监控
DingTalk「开发者说」第6期 边聊边做场景群
DingTalk「开发者说」是钉钉开发者最新上线的开发者栏目，联合阿里云ACE团队，分享钉应用开发解决方案、技术更新、实战技巧，致力于成为钉钉与开发者的桥梁与纽带，让更多的钉钉开发者传播技术、提升技能、分享观点。在数字化变革的时代，“云钉一体”“钉钉全面开放”战略之后，希望钉钉技术可以持续激发开发者的创造力，为组织数字化赋能。 本篇介绍了场景群的概念，钉钉群聊会话开放的核心能力和应用，以及场景群实践。
1670371368751139
843 0
DingTalk「开发者说」第6期 边聊边做场景群
bf52l2twypwcm
|
OLAP API Apache
今日直播 | Apache Hudi x Apache Pulsar Meetup线上专场如期而至 「内附干货PPT下载渠道」
Apache Hudi 与 Apache Pulsar 联合 Meetup 线上专场开启直播，你准备好了吗？
bf52l2twypwcm
399 0
今日直播 | Apache Hudi x Apache Pulsar Meetup线上专场如期而至 「内附干货PPT下载渠道」
阿里云实时计算Flink
|
机器学习/深度学习 人工智能 Kubernetes
重磅发布！Flink Forward Asia 2020 在线峰会预约开启！
作为大数据领域的顶级盛会之一，Flink Forward 持续关注数据与算力的核心价值。12月13-15日，Flink Forward Asia 2020 在线峰会如约而至，全球 38+ 一线厂商，近 70+ 优质议题，即将重磅开启！
阿里云实时计算Flink
20772 0
重磅发布！Flink Forward Asia 2020 在线峰会预约开启！
廖鹏勇
|
存储 弹性计算 安全
Day.06案例分享--钉钉
ECS七天训练营
廖鹏勇
297 0
来自星星的铭铭
|
存储 编解码 安全
案例分享--钉钉
案例分享--钉钉
来自星星的铭铭
909 0
案例分享--钉钉
逆光海
|
弹性计算 监控 关系型数据库
day6--钉钉案例分享
钉钉的数据放置在阿里的云的ecs上
逆光海
372 0
大数据与机器学习

开源大数据平台 E-MapReduce

热门文章

最新文章

  • 1
    阿里封神谈hadoop生态学习之路
  • 2
    Spark in action on Kubernetes - Playground搭建与架构浅析
  • 3
    梨视频：基于阿里云E-MapReduce搭建视频推荐系统的实践
  • 4
    基于Alluxio系统的Spark DataFrame高效存储管理技术
  • 5
    漫谈分布式计算框架
  • 6
    5W1H(六何分析法)全景洞察大数据
  • 7
    助力云上开源生态 - 阿里云开源大数据平台的发展
  • 8
    Apache Spark 3.0 将内置支持 GPU 调度
  • 9
    Flume NG 简介及配置实战
  • 10
    YARN中的CPU资源隔离-CGroups
  • 1
    基于阿里云向量检索 Milvus 版与 PAI 搭建高效的检索增强生成（RAG）系统
    71
  • 2
    通过阿里云向量检索 Milvus 版和通义千问快速构建基于专属知识库的问答系统
    230
  • 3
    EMR Notebook 开启公测，提供交互式数据分析平台
    144
  • 4
    Apache Hadoop入门指南：搭建分布式大数据处理平台
    53
  • 5
    阿里云向量检索 Milvus 版开启公测，助力企业打造高质量 AI 服务
    399
  • 6
    Paimon 与 Spark 的集成（二）：查询优化
    117487
  • 7
    阿里云 EMR Serverless Spark 版免费邀测中
    392
  • 8
    实用工具推荐：适用于 TypeScript 网络爬取的常用爬虫框架与库
    194
  • 9
    1688API接口推荐：1688口令转换真实链接接口
    12
  • 10
    1688API接口推荐：1688按图搜索拍立淘数据接口
    288

    • 相关课程

    更多
  • Apache Flink 入门到实战 - Flink开源社区出品
  • Apache RocketMQ：如何从互联网时代演进到云
  • Apache Flink 入门
  • 大数据实时计算框架Spark快速入门
  • 大数据实战项目：反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第一阶段
  • 大数据实战项目 - 反爬虫系统（Lua+Spark+Redis+Hadoop框架搭建）第七阶段

    • 相关电子书

    更多
  • Apache Doris 精选用户案例集
  • Apache Flink在爱奇艺的应用实践
  • 钉钉连接平台速成手册

    • 相关实验场景

    更多
  • 钉钉群中如何接收IoT温控器数据告警通知
  • 星轨-钉钉APP分发实训

    • 推荐镜像

    更多
  • apache
  • packman
  • CPAN
    • 下一篇
    部署LAMP环境（Alibaba Cloud Linux 3）