发布时间：2020-06-16 14:10:50 浏览：1218 回帖 ：0
SparkSQL多年来的性能优化集中在Optimizer和Runtime两个领域。前者的目的是为了获得最优的执行计划，后者的目的是针对既定的计划尽可能执行的更快。
发布时间：2020-06-16 13:46:48 浏览：1058 回帖 ：0
7月4日-5日，Apache Spark中国技术交流社区举办首次SPARK + AI SUMMIT 2020 中文精华版线上峰会，在北美summit结束第一时间为国内开发者奉上一场技术盛筵。本次活动由...
发布时间：2020-06-12 17:14:49 浏览：478 回帖 ：0
本文主要介绍了Optimus项目，作为一个Spark的第三方库，Optimus基于PySpark，为用户提供了一套完整的数据质量探查和数据清理工具集，接口参考Pandas设计，易用且强大，非常适合大规...
发布时间：2020-06-11 22:15:59 浏览：304 回帖 ：0
6月14日，大数据+AI Meetup 在线直播！Apache Flink Committer，阿里巴巴技术专家辛庸将现场分享《Delta Lake 如何帮助云用户解决数据实时入库问题》，还有快手春...
发布时间：2020-06-09 17:16:08 浏览：409 回帖 ：0
本次分享主要介绍数据读写在计算存储分离的场景下所面临的常见问题以及相关的优化手段，并结合应用场景介绍对数据缓存加速的相关技术和策略。
发布时间：2020-06-09 14:49:17 浏览：291 回帖 ：0
本文中，我们将介绍 Spark 的一个新的数据源，Spark-TFRecord。Spark-TFRecord 的目的是提供在Spark中对原生的 TensorFlow 格式进行完全支持。本项目的目的是...
发布时间：2020-06-08 20:48:53 浏览：271 回帖 ：0
Delta Lake 进行数据删除或更新操作时实际上只是对被删除数据文件做了一个 remove 标记，在进行 vacuum 前并不会进行物理删除，因此一些例如在 web 上获取元数据或进行部分数据展示...
发布时间：2020-06-04 17:36:51 浏览：442 回帖 ：0
6月14日，阿里巴巴计算平台事业部与阿里云开发者社区共同举办的大数据+AI Meetup 系列第一季即将重磅开启，此次 Meetup 邀请了来自阿里巴巴、Databricks、快手、网易云音乐的7位...
发布时间：2020-06-04 16:47:23 浏览：317 回帖 ：0
2020年 6月4日，首届 Apache Spark AI智能诊断大赛在天池官网上线。Spark “数字人体” AI挑战赛——脊柱疾病智能诊断大赛，聚焦医疗领域应用，召集全球开发者利用人工智能技术探索...
发布时间：2020-05-14 12:32:58 浏览：308 回帖 ：0
北美 Spark + AI Summit 2020 盛会在即，Apache Spark 中国技术交流社区在此诚邀各位，代表国内开发者选择您最希望听到的主题，届时社区将联合国内顶尖技术专家一一展开中文形...
发布时间：2020-05-21 19:52:19 浏览：879 回帖 ：0
首届 Apache Spark AI智能诊断大赛由阿里云、Intel、Databricks 共同举办。**Spark“数字人体”AI挑战赛——脊柱疾病智能诊断大赛**，聚焦医疗领域的应用，面向全社会开...
发布时间：2020-05-19 15:39:09 浏览：455 回帖 ：0
Apache Zeppelin 是一个交互式的大数据开发Notebook，从一开始就是为Spark定制的。Zeppelin Notebook的开发环境与传统IDE开发环境相比有几大优势：不需要编译Ja...
发布时间：2020-05-20 13:34:26 浏览：613 回帖 ：0
Spark SQL为了更好的性能，在读写Hive metastore parquet格式的表时，会默认使用自己的Parquet SerDe，而不是采用Hive的SerDe进行序列化和反序列化
发布时间：2020-05-19 15:39:09 浏览：455 回帖 ：0
Apache Zeppelin 是一个交互式的大数据开发Notebook，从一开始就是为Spark定制的。Zeppelin Notebook的开发环境与传统IDE开发环境相比有几大优势：不需要编译Ja...
发布时间：2020-05-18 22:10:33 浏览：516 回帖 ：0
物化视图作为一种预计算的优化方式，广泛应用于传统数据库中，如Oracle，MSSQL Server等。随着大数据技术的普及，各类数仓及查询引擎在业务中扮演着越来越重要的数据分析角色，而物化视图作为数据...
发布时间：2020-05-14 12:52:36 浏览：702 回帖 ：0
为了帮助客户更加高效地使用大数据产品，发挥数据价值，现计算平台招募大数据及AI产品解决方案架构师，欢迎在北京、杭州的同学加入我们！
发布时间：2020-05-14 12:32:58 浏览：308 回帖 ：0
北美 Spark + AI Summit 2020 盛会在即，Apache Spark 中国技术交流社区在此诚邀各位，代表国内开发者选择您最希望听到的主题，届时社区将联合国内顶尖技术专家一一展开中文形...
发布时间：2020-05-12 11:02:43 浏览：348 回帖 ：0
近年来，由于对通用人工智能研究的潜在价值，训练AI玩游戏一直是一个火热的研究领域。FIFA实时视频游戏场景复杂，需要结合图像，强化学习等多种不同的AI技术，同时也要求agents响应有实时性，因此是一...
发布时间：2020-05-11 12:01:56 浏览：634 回帖 ：0
在 2019 年的打榜测试中，我们基于 Spark SQL Catalyst Optimizer 开发的 RuntimeFilter 优化 对于 10TB 数据 99 query 的整体性能达到 35...
发布时间：2020-05-07 16:37:34 浏览：580 回帖 ：0
本次直播主要介绍如何利用FUSE的POSIX文件系统接口，像本地磁盘一样轻松使用大数据存储系统, 为云上AI场景提供了高效的数据访问手段。
bananad
conanma
游客tq5bu55wlivms
1779899517550594
游客ofpphqt3bxc2s
茕茕孑立
