首页
博客
源码
资源
博客
源码
写文章
发布博客
发布资源
登录
X
kafka
相关资讯
热门
最新
代码人生
01-01 08:00
代码人生
kafka使用kerberos协议踩坑实录(kerberos协议的缺点)
kafka使用kerberos协议踩坑实录(kerberos协议的缺点),1,安装kdcdockerrun-d-p88:88/udp-p749:749/udpbeargiles/kdc-sandbox生成keytab参考:https://registry.hub.docker.com/r/beargiles/kdc-sandbox复制代码2,配置kafka服务启用kerberos认证config/
1112
百科问答
01-01 08:00
百科问答
kafka应用实例(kafka简单的入门案例)
kafka应用实例(kafka简单的入门案例)kafka快速实战与基本原理详解背景Kafka是最初由Linkedin公司开发,是一个分布式、支持分区的(partition)、多副本的(replica),基于zookeeper协 调的分布式消息系统,它的最大的特性就是可以实时地处理大量数据以满足各种需求场景:比如基于hadoop的批处理系统 统、低延迟的实时系统、Storm/Spark流式处理引擎,web/nginx日志、访问日志,消息服务等等
665
后端
01-01 08:00
后端
kafka全面认知
什么是Kafka[#---kafka] Kafka的应用场景[#kafka-----] Kafka的架构[#kafka---]名词解释[#----] Java中使用kafka进行通信[#java--...
559
代码人生
01-01 08:00
代码人生
Kafka生产者分区策略(kafka分区的作用)
Kafka生产者分区策略(kafka分区的作用),前言查阅了一些资料和看了许多网上的文章,总觉得没有把Kafka生产者分区策略给讲明白,本篇将围绕以下问题步步深入来对文章进行展开。为什么需要生产者分区策略生产者分区策略有哪些不同分区策略有哪些优点和缺点如何进行自定义分区策略一、生产者发送消息流程说明(1)新建ProducerRecord对象,包含目标主题和要发送的内容,也可以指定键或分区;(2)发
477
代码人生
01-01 08:00
代码人生
kafka单排日记——zookeeper安装
kafka单排日记——zookeeper安装,前言公司的产品用kafka用的非常多,那没啥好说的了,学吧。一天学一点。套路相较于es又有所变化,es只要用的熟练,原理往后面放。kafka不行,对kafka原理的理解直接影响你的使用和对这个软件的想象力。所以,咱们的流程变为:软件安装-原理理解-框架整合-问题解决以及持续提升。那么这一篇,没啥好说的,就是狂安装软件了。为了接近正式的使用场景,直接装z
294
代码人生
01-01 08:00
代码人生
kafka-topics.sh脚本详解
kafka-topics.sh脚本详解,通过脚本进行主题的管理,包括:创建主题、查看主题、修改主题、删除主题等操作。内部是靠kafka.admin.TopicCommand接收参数运行。[xuhaixing@xhx151~]$kafka-topics.sh--helpThistoolhelpstocreate,delete,describe,orchangeatopic.OptionDescrip
286
代码人生
01-01 08:00
代码人生
kafka如何保证有序性(kafka如何保证数据一致性)
kafka如何保证有序性(kafka如何保证数据一致性),kafka中的每个partition中的消息在写入时都是有序的,而且单独一个partition只能由一个消费者去消费,可以在里面保证消息的顺序性。但是分区之间的消息是不保证有序的。Kafka保证一个Partition内的消息的有序性Kafka分布式的单位是partition,同一个partition用一个writeaheadlog组织,所以
273
后端
01-01 08:00
后端
Kafka通过Flume传输数据到HBase
Kafka通过Flume传输数据到HBase,1.概述对于数据的转发,Kafka是一个不错的选择。Kafka能够装载数据到消息队列,然后等待其他业务场景去消费这些数据,Kafka的应用接口API非常的丰富,支持各种存储介质,例如HDFS、HBase等。如果不想使用KafkaAPI编写代码去消费KafkaTopic,也是有组件可以去集成消费的。下面笔者将为大家介绍如何使用Flume快速消费Kafka
249
后端
01-01 08:00
后端
Kafka Connect 实战 ---- 入门
前提 首先你需要了解MQ / Kafka相关的知识 本文目标 了解 Kafka Connect 基本概念与功能 什么是Kafka Connect Kafka Connect 是一款可扩展并且可靠地在...
244
代码人生
01-01 08:00
代码人生
Kafka基础(四):Kafka API 实战
Kafka基础(四):Kafka API 实战 1 环境准备 1)启动 zk 和 kafka 集群,在 kafka 集群中打开一个消费者 [atguigu@hadoop102 kafka]$ bin/kafka-console-consumer.sh --zookeeper hadoop102:2181 --topic first 2)导入 pom 依赖 <dependencies&g
243
«
1
2
3
4
5
6
7
8
9
10
11
»