1. 云栖社区>
  2. 全部标签>
  3. #scala#
scala

#scala#

已有1人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

Spark On MaxCompute访问Phonix

如何使用Spark On MaxCompute连接Phonix,将Hbase的数据写入到MaxCompute的对应表中,这个目前没有对应的案例,为了满足用户的需求。本文通过使用Spark连接Phonix访问Hbase的数据写入MaxCompute该方案实践得出该方案的可行。

hbase hadoop Apache 配置 odps 测试 Maven spark scala aliyun scope MaxCompute

Scala语言入门三(集合)

Scala集合的概念和使用

java scala 索引 string list unit 数组

Scala语言入门二(对象)

讲述Scala中的面向对象相关知识点

面向对象 scala string class unit

Scala语言的入门

Scala语言的初识

编程语言 java 面向对象编程 scala string class 数据类型

RedMonk 2020 年 Q3 编程语言排行:Rust 首次进入前 20

云栖号资讯:【点击查看更多行业资讯】在这里您可以找到不同行业的第一手的上云资讯,还在等什么,快来! 知名软件行业分析公司 RedMonk 发布了 2020 年 6 月(Q3 季度)编程语言排行榜。

编程语言 python 算法 java javascript c++ shell 排序 scala 脚本 c# objective-c ruby swift github

Flink 1.11 新特性之 SQL Hive Streaming 简单示例

Flink 1.11 的 Hive Streaming 功能大大提高了 Hive 数仓的实时性,对 ETL 作业非常有利,同时还能够满足流式持续查询的需求,具有一定的灵活性。

SQL Json Apache scala string Hive schema

Apache Spark 3.0 中的向量化 IO

在 Apache Spark 3.0 中,SparkR 中引入了一种新的向量化(vectorized)实现,它利用 Apache Arrow 直接在 JVM 和 R 之间交换数据,且(反)序列化成本非常小

分布式 jvm 函数 性能 SQL Apache 测试 Image spark scala 开源大数据 DataFrame API 数据类型

好程序员大数据培训分享spark之Scala

  好程序员大数据培训分享spark之Scala,基本语法:变量,变量的定义:不可变:val a = 2 或者 val a : Int = 2 (指定了数据类型) lazy val a : Int =2 可变:var a = 2 或者 var a : Int = 2(指定了数据类型) def a = 2 定义变量不能1.

大数据 程序员 函数 spark scala string 表达式 培训 数据类型 数组 位运算 好程序员 大数据培训

Flink 1.10 SQL、HiveCatalog 与事件时间整合示例

Flink 1.10 与 1.9 相比又是个创新版本,在我们感兴趣的很多方面都有改进,特别是 Flink SQL。本文用根据埋点日志计算 PV、UV 的简单示例来体验 Flink 1.10 的两个重要新特性.

大数据 函数 SQL Apache 数据处理 scala string Hive schema 流计算 flink 实时计算

OSS数据湖实践——EMR + Flink + OSS案例

构建基于OSS数据源的EMR大数据计算环境,使用Flink大数据计算引擎,实现简单的大数据分析案例。

OSS hadoop Apache 集群 云存储 spark scala API string EMR 大数据分析

SparkSQL与Hive metastore Parquet转换

Spark SQL为了更好的性能,在读写Hive metastore parquet格式的表时,会默认使用自己的Parquet SerDe,而不是采用Hive的SerDe进行序列化和反序列化

java hadoop SQL Apache spark scala 开源大数据 Hive schema 数据类型

广播变量(Broadcast)-及生命周期

1 Spark中广播变量概念广播变量是spark中共享变量的其中一种。它可以让程序高效的向所有工作节点发送一个只读的值,以供一个或多个spark操作使用。 2 广播变量使用示例下面是一段简单的计算逻辑,对比了不使用广播变量和使用广播变量的两种方式: val pws = Map("Apache Spark" -> "http://spark.

Apache spark scala

通过阶乘的例子,练习在JavaScript, Scala和ABAP里实现尾递归(Tail Recursion)

Before we start to research tail recursion, let’s first have a look at the normal recursion. A simple factorial implementation by recursion: function...

java javascript Image scala type 阶乘 尾递归 abap 尾递归优化 tailrecursion recursion

Java单元测试之 Apache Kafka Test

对于程序员是否有必要编写test case,何时编写依然存在很多争议,各种互斥的方法论(SE/AM/XP/TDD),以及不同的开发文化,但是可以确定是编写单元测试用例有助于提高编程能力。

java Apache scala string exception void test scope Create 单元测试

是时候搞一个面向大数据和AI的新编程语言了

数据和 AI 正在成为很多公司的重要资产。

编程语言 python 大数据 算法 java SQL spark scala 插件 存储

Spark DataFrame 不是真正的 DataFrame

最早的 "DataFrame" ,来源于贝尔实验室开发的 S 语言。R 语言,作为 S 语言的开源版本,于 2000 年发布了第一个稳定版本,并且实现了 dataframe。pandas 于 2009 年被开发,Python 中于是也有了 DataFrame 的概念。

python SQL Apache spark scala PyOdps DataFrame pandas Mars

Nacos SDK for Scala 发布

脱胎于历经阿里巴巴10年生产验证的内部产品,支持具有数百万服务的大规模场景,Nacos作为高性能的动态服务发现、配置管理和服务管理平台从2018年开源以来,版本迭代速度很快,已经发布到1.2.1,已支持企业使用Nacos生产高可用。

云栖社区 分布式 java sdk spring 配置 微服务 scala Akka

每当我想放弃 Scala,我就写写 Python 和 Java

我的一位朋友最近在推特上表示:公众对 Scala 编程语言的兴趣似乎已经趋于稳定或减弱,这与我的感受一致。这篇博文将会讨论为什么会发生这种情况,并且聊聊 Scala 现在的地位以及 Scala 社区的未来。

编程语言 python 大数据 架构 java 函数 Apache spark scala 编程

56
GO