与kafka相关精彩内容-云栖社区-阿里云

: #kafka#

已有2人关注此标签

内容分类：: 博客 | 问答 | 视频 | 资料 |

Apache Kafka常用命令

作者: 北斗云 2567人浏览

1.查看topic详细信息 ./kafka-topics.sh -zookeeper ip:port -describe -topic topicname kafka/bin/kafka-topics.

Json IP Consumer Create zookeeper kafka 命令

Apache Drill 常用Plugins配置

作者: 北斗云 227人浏览

1.kafka { "type":"kafka", "kafkaConsumerProps":{ "bootstrap.servers":"hostname1:9092,hostname2:9092,hostname3:9092", "group.

云栖社区 mysql hbase hdfs Apache 配置 drill JDBC Driver Hive type kafka OpenTSDB kudu

Kafka 原理和实战

作者: 2020Labs 4769人浏览

本文从Kafka的基本概念、特点、部署和配置、监控和管理等方面阐述 Kafka 的实践过程。

消息队列日志 LOG 高可用配置集群同步 Server 脚本 Consumer 分布式存储 kafka

Apache Carbondata接入Kafka实时流数据

作者: 北斗云 154人浏览

1.导入carbondata依赖的jar包将apache-carbondata-1.5.3-bin-spark2.3.2-hadoop2.7.2.jar导入$SPARKHOME/jars;或将apache-carbondata-1.

SQL Apache 配置 spark string stream Create timestamp source 数据存储 kafka 流数据 carbondata

Apache NiFi之Kafka流数据到HBase

作者: 北斗云 314人浏览

一.说明在大数据平台的业务场景中，处理实时kafka数据流数据，以成为必要的能力；此篇将尝试通过Apache NiFi来接入Kafka数据然后处理后存储之HBase 二.开拔 Ⅰ).配置ConsumeKafka_0_10 测试使用了kafka0.

大数据 hbase Apache 数据流配置表空间 zookeeper kafka 流数据 NiFi

大数据平台常用组件

作者: 北斗云 274人浏览

BigData-Alpha-0.1.0 备注：未增加zookeeper、Doris、CarbonData 部分归类模糊仅供参考

redis hbase hadoop zabbix spark zookeeper kafka ELK phoenix flink ClickHouse

一.简述 Apache Druid已有的扩展模块很多包括：HDFS存储使用的druid-hdfs-storage，Kafka数据接入使用的druid-kafka-indexing-service，将MySQL做为元数据库使用的mysql-metadata-storage，数据排重使用的druid-datasketches；但有时这些也无法满足我们实际应用场景下的特殊需求，那么必要的二次开发增加自定义的模块就成了必然。

Json Apache 模块配置 class html input Druid kafka 自定义解析器

空学Kafka之一

作者: renchie 2633人浏览

> 搞了好多年的RPC框架有点疲了，最近在换到中间件的另一个方向MQ，准备做些kafka上阿里云的商业化工作，趁着热乎劲整理下kafka的知识，主要内容是阅读Kafka的作者之一Neha的书：The Definitive Guide的记录，加入一些其他参考。 >先说下Kafka名称来历， Kafka作者之一Jay是这么解释的：“我想既然 Kafka 是为了写数据而产生的，那么用作家的名字来命

性能日志阿里技术协会配置集群同步索引 Consumer 磁盘存储 kafka

Apache Druid接入Kafka实时流数据

作者: 北斗云 224人浏览

一.任务配置文件使用类型为kafka { "type": "kafka", "dataSchema": { "dimensionsSpec": {... ...}, "transformSpec":{.

Json Apache 配置表达式 type Druid kafka 流数据

空学Kafka之二

作者: renchie 511人浏览

> 继续上一篇 (空学Kafka之一)[https://www.atatech.org/articles/145913] ## 构建数据通道 ### 考量点及时性，可靠性，吞吐量，安全性（通道安全，审计等），数据格式的上线兼容，ETL or ELT，统一还是专属（比如GoldenGate是oracle私有的，有很强的耦合性），优先选择Kafka Connect ###

架构阿里技术协会镜像集群 Image 数据中心 kafka

继续南山聊代码！Apache Kafka × Apache Flink Meetup · 深圳站

作者: Ververica 643人浏览

8 月 31 日，Apache Flink Meetup 深圳站来啦，继续南山聊代码！本次 Meetup 由 Apache Flink（以下简称 Flink）与 Apache Kafka 联合举办，邀请到来自 Confluent 、中国农业银行、虎牙直播、数见科技以及阿里巴巴等五位技术专家为大家呈现 Kafka 与 Flink 的技术盛宴。

大数据架构引擎技术 SQL Apache 消息中间件 Image 流计算 kafka 大数据分析推荐系统实时计算 ApacheFlink