首页
博客
源码
资源
博客
源码
写文章
发布博客
发布资源
登录
X
kafka
相关资讯
热门
最新
后端
01-01 08:00
后端
Kafka源码分析14-如何处理响应消息
Kafka源码分析14-如何处理响应消息,本文分析Producer如何响应消息,NetworkClient的poll():publicListpoll(longtimeout,longnow){/***在这个方法里面有涉及到kafka的网络的方法,但是*目前我们还没有给大家讲kafka的网络,所以我们分析的时候*暂时不用分析得特别的详细,我们大概知道是如何获取到元数据*即可。等我们分析完了kafk
86
后端
01-01 08:00
后端
Kafka 3.0重磅发布,都更新了些啥?
Kafka 3.0重磅发布,都更新了些啥?,【编者的话】ApacheKafka是一个分布式开源流平台,被广泛应用于各大互联网公司。Kafka设计之初被用于消息队列,自2011年由LinkedIn开源以来,Kafka迅速从消息队列演变为成熟的事件流处理平台。Kafka具有四个核心API,借助这些API,Kafka可以用于以下两大类应用:建立实时流数据管道,可靠地进行数据传输,在系统或应用程序之间获取
86
后端
01-01 08:00
后端
Kafka源码分析10-Producer终于和broker建立连接了
Kafka源码分析10-Producer终于和broker建立连接了,从Kafka源码分析9-若网络没建立好会发送消息吗中得知,如果网络没有建立完成,是不会发送消息的。本文就讲解producer与broker是如何建立连接的,直接看sender线程的步骤八:{//省略。。/***步骤八:*真正执行网络操作的都是这个NetWorkClient这个组件*包括:发送请求,接受响应(处理响应)*///我们
85
后端
01-01 08:00
后端
Kafka 分区介绍
Kafka 分区介绍,Kafka分区关于Kafka分区每一个分区都是一个有序、不可变的消息序列,后续新来的消息会源源不断、持续追加到分区的后面,这相当于一种结构化的提交日志(类似于Git的提交日志)分区中的每一条消息都会被分配一个连续的id值(即offset),该值用于唯一标识分区中的每一条消息。分区中的消息是存储到日志中的,而且同一个分区中的消息数据是按照发送顺序严格有序的。分区在逻辑上对应的日
84
后端
01-01 08:00
后端
kafka核心原理,藏在这 16 张图里
讲一讲分中间件 问题 什么是分布式消息中间件? 消息中间件的作用是什么? 消息中间件的使用场景是什么? 消息中间件选型? 分布式消息是一种通信机制,和 RPC、HTTP、RMI 等不一样,消息中间件...
83
百科问答
01-01 08:00
百科问答
Kafka Producer端核心参数
Kafka Producer端核心参数 生产端核心参数 1. acks 参数说明:这是一个非常重要的参数,表示指定分区中成功写入消息的副本数量,这是Kafka生产端消息的持久性(durability)保证。只有当leader确认已成功写入消息的副本数后,才会给Producer发送响应,此时消息才可以认为“已提交”。该参数影响着消息的可靠性以及生产端的吞吐量,并且两者往往相向而驰,通常消息可靠性
83
后端
01-01 08:00
后端
kafka 基础知识大全
本文包括kafka的定义、安装、启动、架构、工作流程、原理、生产者、消费者、分区、ISR节点、HW、分区分配策略、offset、高效读写机制。 1. Kafka 概述 1.1 定义 Kakfa 是一...
82
后端
01-01 08:00
后端
Kafka源码分析11-Producer终于发送请求了
Kafka源码分析11-Producer终于发送请求了,上篇文章Kafka源码分析10-Producer终于和broker建立连接了Producer和broker建立网络连接了,本文分析Producer发送网络请求。看看Sender线程run方法,主要分析步骤五、七、八。{/***步骤五:**我们有可能要发送的partition有很多个,*很有可能有一些partition的leaderpartit
81
后端
01-01 08:00
后端
Kafka成长记4:Producer 元数据拉取源码原理(下)
Kafka成长记4:Producer 元数据拉取源码原理(下),上一节结尾,我们总结道:初始化KafkaProducer时并没有去拉取元数据,但是创建了Selector组件,启动了Sender线程,select阻塞等待请求响应。由于还没有发送任何请求,所以初始化时并没有去真正拉取元数据。真正拉取元数据是在第一次send方法调用时,会唤醒唤醒Selector之前阻塞的select(),进入第二次wh
81
代码人生
01-01 08:00
代码人生
kafka架构和原理,sql是什么
kafka架构和原理,sql是什么,TDSQL团队在开发分布式事务型数据库的过程中,除了考虑分布式事务处理技术(ACID实现的所有技术)外,还深入探索了测试验证、体系结构扩展、模块解耦等各种关键问题。新硬件和AI等技术,在云环境下,如何影响着数据库的架构?能否解除各模块之间的耦合以降低研发复杂度,同时缩短研发人才的培养周期?新硬件和AI等技术,从架构上深深地影响了传统的数据库,这表现在如何融合这些
78
«
1
2
3
4
5
6
7
8
9
10
11
»