1. 阿里云>
  2. 云栖社区>
  3. 主题地图>
  4. K>
  5. kafka mq

当前主题:kafka mq

基于 RocketMQ 的同城双活架构在美菜网的挑战与实践

本文整理自李样兵在北京站 RocketMQ meetup分享美菜网使用 RocketMQ 过程中的一些心得和经验,偏重于实践。 嘉宾李样兵,现就职于美菜网基础服务平台组,负责 MQ ,配置中心和任务调度等基础组件开发工作。 今天主要从三个方面进行分享: 美菜

阅读全文

工作几年只会增删改查怎么了,大神们都是从第一行代码开始的

昨晚12点,Mike收到了一位童鞋私信,大家聊到了许久。 经过交流,了解到他大学学的是计算机系,毕业之后进入外包公司,目前已工作两年了,工作内容主要是增删改查,每天有做不完的项目,经常需要加班,就这样日复一日地重复地造着轮子。 最近得到了一个互联网公司的面试

阅读全文

Apache Flink 在同程艺龙实时计算平台的研发与应用实践

本文主要介绍 Apache Flink 在同程艺龙的应用实践,从当前同程艺龙实时计算平台现状、建设过程、易用性提升、稳定性优化四方面分享了同城艺龙实时计算平台的建设经验,供大家参考。 1.背景介绍 在 2015 年初,为了能够采集到用户在 PC,APP 等平

阅读全文

3年Java开发6个点搞定高并发系统面试疑惑

前言 其实所谓的高并发,如果你要理解这个问题呢,其实就得从高并发的根源出发,为啥会有高并发?为啥高并发就很牛逼? 说的浅显一点,很简单,就是因为刚开始系统都是连接数据库的,但是要知道数据库支撑到每秒并发两三千的时候,基本就快完了。所以才有说,很多公司,刚开始

阅读全文

springboot之rabbit - producer的confirm和consumer的ack模式

本篇和大家分享的是关于rabbit的生产和消费方的一些实用的操作;正如文章标题,主要内容如producer的confirm和consumer的ack,这两者使用的模式都是用来保证数据完整性,**防止数据丢失**。 producer的confirm模式 con

阅读全文

spring-boot-plus1.2.0-RELEASE发布-快速打包-极速部署-在线演示

spring-boot-plus 一套集成spring boot常用开发组件的后台快速开发脚手架 Purpose 每个人都可以独立、快速、高效地开发项目! Everyone can develop projects independently, quickl

阅读全文

一道真实的面试题 | 如何保证消息队列的高可用

5万人关注的大数据成神之路,不来了解一下吗?5万人关注的大数据成神之路,真的不来了解一下吗?5万人关注的大数据成神之路,确定真的不来了解一下吗? 欢迎您关注《大数据成神之路》 面试题:如何保证消息队列的高可用? 面试官心理分析 如果你的简历里写了MQ,如果有

阅读全文

[Spring cloud 一步步实现广告系统] 16. 增量投送到kafka

实现增量数据索引 上一节中,我们为实现增量索引的加载做了充足的准备,使用到mysql-binlog-connector-java 开源组件来实现MySQL 的binlog监听,关于binlog的相关知识,大家可以自行网络查阅。或者可以mailto:magic

阅读全文

kafka mq相关问答

查看更多 提问题

flink可以监听kafka, mq等。可以监听文件,或者zookeeper嘛?如果有新的消息,flink要可以读取到。

转自钉钉群21789141:flink可以监听kafka, mq等。可以监听文件,或者zookeeper嘛?如果有新的消息,flink要可以读取到。

阅读全文

[@徐雷frank][¥20]Kafka优势

近来,许多人开始使用Kafka,相较于其他MQ,Kafka的优势主要体现在哪些方面?

阅读全文

如何区分消息队列kafka和消息队列MQ的使用场景

什么样的场景更适合消息队列MQ,什么场景更适合消息队列kafka

阅读全文

[@项籍][¥20]springboot连接canal,启动监听; 当主库数据库日志变化太快,就无法同步了

rch; 目前没有用mq或kafka,不知道在什么地方用合适; 现在的问题,如果主库跑定时任务,涉及到一个大表1亿数据量的变化; 会产生大量的binlog日志; 这时候监听就反应不过来了;详细请见图片; 目前是监听收到binlog日志后;只处理需要更新到

阅读全文

阿里MQ怎么解决固定ip访问带来的单服务器带宽问题

请问阿里MQ的http方式是如何解决通过固定url访问产生的带宽瓶颈的?固定url是对应的一台服务器吗,如果是一台服务器,那应该会有带宽的瓶颈吧,是否用到了硬件负载? 我看kafka可以配置多个ip地址进行消息写入,不清楚MQ的处理逻辑。

阅读全文

zipkin调用链追踪问题

hi,大佬 有两个问题请教 1、如spring cloud sleuth官方设计,可以对,rest,异步消息队列kafka,mq发送的消息等发起追踪。所以这里就有个问题,我们的应用设计会一直通过kafka发送hystrix性能数据到hystrix dash

阅读全文