- 文章目录 概述部署信息配置信息验证 概述 对于kafka来说,一个单独的broker意味着kafka集群中只有一个节点。要想增加kafka集群中的节点数量,只需要多启动几个brok... 文章目录 概述部署信息配置信息验证 概述 对于kafka来说,一个单独的broker意味着kafka集群中只有一个节点。要想增加kafka集群中的节点数量,只需要多启动几个brok...
- 文章目录 Github地址二进制安装包下载3.0.0.2 及之后3.0.0.2 之前 Require安装启动配置 Github地址 https://github.com/yah... 文章目录 Github地址二进制安装包下载3.0.0.2 及之后3.0.0.2 之前 Require安装启动配置 Github地址 https://github.com/yah...
- 文章目录 Pre服务器环境OPAdd Cluster修改设置 使用 Pre 如果你该配置,监控偏多 ,推荐使用 雅虎开源的 Kafka Manager , 现在叫 CMAK ... 文章目录 Pre服务器环境OPAdd Cluster修改设置 使用 Pre 如果你该配置,监控偏多 ,推荐使用 雅虎开源的 Kafka Manager , 现在叫 CMAK ...
- 文章目录 规范概述 实现标准: AMQP VS JMS 基础模型 点对点 发布订阅 Kafka 的消费模... 文章目录 规范概述 实现标准: AMQP VS JMS 基础模型 点对点 发布订阅 Kafka 的消费模...
- 文章目录 概述AckMode源码解读自动提交设置手工提交设置 最佳实践 概述 Apache Kafka-消息丢失分析 及 ACK机制探究 我们这里配了个manual, 为... 文章目录 概述AckMode源码解读自动提交设置手工提交设置 最佳实践 概述 Apache Kafka-消息丢失分析 及 ACK机制探究 我们这里配了个manual, 为...
- 文章目录 概述 磁盘顺序读写 批量操作优化 Sendfile 零拷贝 MMAP 技术 小结 概述 Kafka 所实现的高性能不需要太高配置的... 文章目录 概述 磁盘顺序读写 批量操作优化 Sendfile 零拷贝 MMAP 技术 小结 概述 Kafka 所实现的高性能不需要太高配置的...
- 文章目录 概述Spring-kafka生产者源码流程Spring-kafka消费者源码流程(`@EnableKafka`和`@KafkaListener` )FlowKafkaListenerAn... 文章目录 概述Spring-kafka生产者源码流程Spring-kafka消费者源码流程(`@EnableKafka`和`@KafkaListener` )FlowKafkaListenerAn...
- 文章目录 PreQuestionAnswer扩展知识 Pre #kafka spring.kafka.bootstrap-servers=10.11.114.247:9092 s... 文章目录 PreQuestionAnswer扩展知识 Pre #kafka spring.kafka.bootstrap-servers=10.11.114.247:9092 s...
- 快速开始教程:http://kafka.apache.org/quickstart 单节点服务 1、下载解压: http://mirrors.tuna.tsinghua.edu.cn/apache/kafka/2.2.1/kafka_2.11-2.2.1.tgz 2、启动服务 需要先启动ZooKeeper服务 $ zkServer.sh start # 如果没... 快速开始教程:http://kafka.apache.org/quickstart 单节点服务 1、下载解压: http://mirrors.tuna.tsinghua.edu.cn/apache/kafka/2.2.1/kafka_2.11-2.2.1.tgz 2、启动服务 需要先启动ZooKeeper服务 $ zkServer.sh start # 如果没...
- pykafka https://pypi.org/project/pykafka/ http://github.com/Parsely/pykafka/ https://pykafka.readthedocs.io/ kafka-python https://pypi.org/project/kafka-python/ https://github.com/dpkp/... pykafka https://pypi.org/project/pykafka/ http://github.com/Parsely/pykafka/ https://pykafka.readthedocs.io/ kafka-python https://pypi.org/project/kafka-python/ https://github.com/dpkp/...
- 文章目录 场景 消费形式 kafka基础架构 Record 、Topic、Broker、leader、follower 分区&日志 生产者与消费者 写入和读出的性能 Kafka环境搭建 & Topic管理: kafka和zookeeper之间的关系 1. broker 2. consumer 单机模式 集群... 文章目录 场景 消费形式 kafka基础架构 Record 、Topic、Broker、leader、follower 分区&日志 生产者与消费者 写入和读出的性能 Kafka环境搭建 & Topic管理: kafka和zookeeper之间的关系 1. broker 2. consumer 单机模式 集群...
- 文章目录 消息队列概述 分类 消息系统的适用场景 消息队列对比 RabbitMQ Redis ZeroMQ ActiveMQ Kafka介绍 概述 使用场景 Messaging Website activity tracking Metric Log Aggregation 特点 安装 基本指令 ... 文章目录 消息队列概述 分类 消息系统的适用场景 消息队列对比 RabbitMQ Redis ZeroMQ ActiveMQ Kafka介绍 概述 使用场景 Messaging Website activity tracking Metric Log Aggregation 特点 安装 基本指令 ...
- Apache Kafka 的流行并未退缩。如果有的话,它的采用率是有目共睹的。从视觉上看,以下是过去六年中全球 Kafka 的谷歌搜索趋势: image.png 在书名中使用“有效”一词通常是为各自领域中最权威的文本保留的。例如,Scott Meyers 的Effective C++或Josh Bloch 的Effective Java。它们是绝对的精华。 那么,... Apache Kafka 的流行并未退缩。如果有的话,它的采用率是有目共睹的。从视觉上看,以下是过去六年中全球 Kafka 的谷歌搜索趋势: image.png 在书名中使用“有效”一词通常是为各自领域中最权威的文本保留的。例如,Scott Meyers 的Effective C++或Josh Bloch 的Effective Java。它们是绝对的精华。 那么,...
- 发送消息的流程 Producer根据指定的partition方法(round-robin、hash等),将消息发布到指定topic的partition里面kafka集群接收到Producer发过来的消息后,将其持久化到硬盘,并保留消息指定时长(可配置),而不关注消息是否被消费Consumer从kafka集群pull数据,并控制获取消息的offset 1 同步发送模式... 发送消息的流程 Producer根据指定的partition方法(round-robin、hash等),将消息发布到指定topic的partition里面kafka集群接收到Producer发过来的消息后,将其持久化到硬盘,并保留消息指定时长(可配置),而不关注消息是否被消费Consumer从kafka集群pull数据,并控制获取消息的offset 1 同步发送模式...
- 1 大数据常用的选主机制 Leader选举算法非常多,大数据领域常用的有以下两种: 1.1 Zab(zookeeper使用) Zab协议有四个阶段 Leader electionDiscovery (E#epoch establish)Synchronization (5X#sync with followers)Broadcast 比如3个节点选举leade... 1 大数据常用的选主机制 Leader选举算法非常多,大数据领域常用的有以下两种: 1.1 Zab(zookeeper使用) Zab协议有四个阶段 Leader electionDiscovery (E#epoch establish)Synchronization (5X#sync with followers)Broadcast 比如3个节点选举leade...
上滑加载中
推荐直播
-
HDC深度解读系列 - Serverless与MCP融合创新,构建AI应用全新智能中枢
2025/08/20 周三 16:30-18:00
张昆鹏 HCDG北京核心组代表
HDC2025期间,华为云展示了Serverless与MCP融合创新的解决方案,本期访谈直播,由华为云开发者专家(HCDE)兼华为云开发者社区组织HCDG北京核心组代表张鹏先生主持,华为云PaaS服务产品部 Serverless总监Ewen为大家深度解读华为云Serverless与MCP如何融合构建AI应用全新智能中枢
回顾中 -
苏州工业园区“华为云杯”2025人工智能应用创新大赛赛中直播
2025/08/21 周四 16:00-17:00
Vz 华为云AIoT技术布道师
本期直播将与您一起探讨如何基于华为云IoT平台全场景云服务,结合AI、鸿蒙、大数据等技术,打造有创新性,有竞争力的方案和产品。
即将直播
热门标签