【SpringBoot】整合Kafka集群-创新互联
学习笔记
二、maven引入
名称栏目:【SpringBoot】整合Kafka集群-创新互联
当前URL:http://scgulin.cn/article/dgphdo.html
- 一、环境
- 二、maven引入
- 三、application配置
- 四、SpringBoot-生产者
- 五、SpringBoot-消费者
- 六、SpringBoot-主题分区
使用Kafka3.0.0
master | slave1 | slave2 | |
---|---|---|---|
ip | 193.168.3.34 | 193.168.3.35 | 193.168.3.36 |
org.springframework.boot spring-boot-starter-web org.projectlombok lombok org.springframework.kafka spring-kafka
三、application配置spring:
kafka:
bootstrap-servers: 192.168.3.34:9092,192.168.3.35:9092,192.168.3.36:9092 # 指定 kafka 的地址
producer: #生产者
retries: 0 #重复次数 ,失败不重发
batch-size: 16384 #每次批量发送消息的数量
buffer-memory: 33554432 #缓存大小达到buffer.memory就发送数据
acks: 1 # 0=生产者将不会等待来自服务器的任何确认 1=leader会将记录写入其本地日志,但无需等待所有副本服务器的完全确认即可做出回应 -1 =leader将等待完整的同步副本集以确认记录
key-serializer: org.apache.kafka.common.serialization.StringSerializer #指定 key 的序列化器
value-serializer: org.apache.kafka.common.serialization.StringSerializer #指定 value 的序列化器
consumer:
group-id: nacl #指定消费者组的 group_id
auto-offset-reset: earliest #latest 最新的位置 , earliest最早的位置
auto-commit-interval: 100 #自动提交offset频率 100毫秒
key-deserializer: org.apache.kafka.common.serialization.StringDeserializer #指定 key 的反序列化器
value-deserializer: org.apache.kafka.common.serialization.StringDeserializer #指定 value 的反序列化器
listener:
concurrency: 3 #3个并行监听
四、SpringBoot-生产者import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.kafka.core.KafkaTemplate;
import org.springframework.web.bind.annotation.RequestMapping;
import org.springframework.web.bind.annotation.RestController;
import javax.annotation.Resource;
@CrossOrigin
@RestController
public class ProducerController {// Kafka 模板用来向 kafka 发送数据
@Resource
private KafkaTemplatekafkaTemplate;
@RequestMapping("/kf")
public String data() {kafkaTemplate.send("first", "hello");
return "ok";
}
}
五、SpringBoot-消费者import org.springframework.context.annotation.Configuration;
import org.springframework.kafka.annotation.KafkaListener;
@Configuration
public class KafkaConsumer {// 指定要监听的 topic
@KafkaListener(topics = "first")
public void consumeTopic(String msg) {// 参数: 收到的 value
System.out.println("收到的信息: " + msg);
}
}
六、SpringBoot-主题分区import org.apache.kafka.clients.admin.NewTopic;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
@Configuration
public class KafkaTopic {@Bean
public NewTopic batchTopic() {//项目启动时,自动创建topic,指定分区和副本数量
return new NewTopic("first", 3, (short) 1);
}
}
你是否还在寻找稳定的海外服务器提供商?创新互联www.cdcxhl.cn海外机房具备T级流量清洗系统配攻击溯源,准确流量调度确保服务器高可用性,企业级服务器适合批量采购,新人活动首月15元起,快前往官网查看详情吧
名称栏目:【SpringBoot】整合Kafka集群-创新互联
当前URL:http://scgulin.cn/article/dgphdo.html