1. 阿里云>
  2. 云栖社区>
  3. 主题地图>
  4. R>
  5. rpc模式

当前主题:rpc模式

从开发到生产上线,如何确定集群规划大小?

翻译|毛家琦校对|秦江杰 在 Flink 社区中,最常被问到的问题之一是:在从开发到生产上线的过程中如何确定集群的大小。这个问题的标准答案显然是“视情况而定”,但这并非一个有用的答案。本文概述了一系列的相关问题,通过回答这些问题,或许你能得出一些数字作为指导

阅读全文

面对业务增长,Uber是如何扩展HDFS文件系统的

3年前,Uber采用了Hadoop作为大数据分析的存储(HDFS)和计算(YARN)基础设施。借助于这套系统,Uber的服务能力得到了增强,用户体验也得到了提升。 Uber将基于Hadoop的批量和流式分析应用在了广泛的场景中,例如反作弊、机器学习和ETA计

阅读全文

最全的微服务知识科普

作者 | 董鹏  阿里巴巴技术专家 微服务 好处:实现跨团队的解耦,实现更高的并发(目前单机只能实现 c10k)不用再拷贝代码,基础服务可以公用,更好的支持服务治理,能够更好的兼容云计算平台。 RPC rpc:像调用本地方法一样调用远程函数; 客户端:一般利

阅读全文

阿里开发者工具盘点:用它!让开发事半功倍

一、镜像站 稳定高速种类全 镜像站对开中国开发者来说可谓必备利器,受国际网络出口带宽的影响,大多数开源软件官网的速度慢,稳定性不足。作为国内最富盛名的镜像站之一,阿里巴巴镜像站利用其在云服务上的优势,提供快速、稳定的镜像分发服务。目前主要包括OPSX,NPM

阅读全文

来!PyFlink 作业的多种部署模式

关于 PyFlink 的博客我们曾介绍过 PyFlink 的功能开发,比如,如何使用各种算子(Join/Window/AGG etc.),如何使用各种 Connector(Kafka, CSV, Socket etc.),还有一些实际的案例。这些都停留在开发

阅读全文

阿里开发者工具盘点:用它!让开发事半功倍

阿里妹导读:工欲善其事,必先利其器。从人工到自动化,从重复到创新,信息技术不断演进,开发者工具也在发展。开发效率低下往往是忽略了工具的使用,正确地使用开发者工具,可以让开发效率获得倍速提升。 阿里巴巴将自身在业务场景下的技术沉淀,通过开源、云上实现或工具等形

阅读全文

小米流式平台架构演进与实践

作者:夏军@小米 小米业务线众多,从信息流,电商,广告到金融等覆盖了众多领域,小米流式平台为小米集团各业务提供一体化的流式数据解决方案,主要包括数据采集,数据集成和流式计算三个模块。目前每天数据量达到 1.2 万亿条,实时同步任务 1.5 万,实时计算的数据

阅读全文

消息系统端到端Exactly-Once支持

在消息系统中,消息的生成和消费通常支持三种模式: at-most-once,at-least-once 和 exactly-once。 这几种模式的区别主要在于当系统发生错误的时候,系统表现何种行为。前两种模式,非常容易理解,出错后不处理或者不停重试直到成功

阅读全文

rpc模式相关问答

查看更多 提问题

flink在执行job时checkpoint报错

Flink版本是1.8 standardalone cluster模式 3台机器 执行的时候一直出hdfs权限错误,查看了hdfs目录权限好像是没问题 ```text AsynchronousException{java.lang.Excepti

阅读全文

Flink on Yarn启动的TaskManager只有一个

Flink On Yarn 模式,单个任务提交的时候,任务提交成功了,但是我的TaskManager只启动了一个,其他的TaskManager都没启动起来,当然资源也没法用,这是为什么啊??? 我的启动命令是这样的:flink -m yarn-cluster

阅读全文

Java开发者你们在哪里,社区请Java专家团来答疑解惑了

[<p style="text-align:center">![600_300](https://yqfile.alicdn.com/966bd386f66b9570b0919deb560419782d0c6840.jpeg)</p>](https://yq.

阅读全文

【Java学习全家桶】1460道Java热门问题,阿里百位技术专家答疑解惑

阿里极客公益活动: 或许你挑灯夜战只为一道难题 或许你百思不解只求一个答案 或许你绞尽脑汁只因一种未知 那么他们来了,阿里系技术专家来云栖问答为你解答技术难题了 他们用户自己手中的技术来帮助用户成长 本次活动特邀百位阿里技术

阅读全文

Apache Flink Kubernetes Job Arguments

我正在尝试使用Kubernetes设置一个集群(Apache Flink 1.6.1),并在我运行作业时遇到以下错误: 2018-10-09 14:29:43.212 [main] INFO org.apache.flink.runtime.entry

阅读全文

Flink on Yarn 出现 Container Removed 问题

甭管什么任务,有的单机跑一个月都很稳定的任务,Yarn模式下只要运行几分钟或者十几分钟就会出现: ``` org.apache.flink.util.FlinkException: The assigned slot container_154080340

阅读全文