消息 拷贝 状态kafka
使用Netty框架完成客户端和服务端收发Protobuf消息
前言 本周继续学习尼恩编著的《Netty、Redis、ZooKeeper高并发实战》，一些资源也贴在这里，自己以后想看还可以找到，这个是在博客园的一个入口https://www.cnblogs.com/crazymakercircle/p/9904544.html。 这周主要学习了Netty客户端和 ......
java——spring boot集成kafka——消费端代码实现
public class MyConsumer { private final static String TOPIC_NAME = "my-replicated-topic"; private final static String CONSUMER_GROUP_NAME = "testGroup ......
java——spring boot集成kafka——生产者端ack的设置
在同步发消息的场景下：生产者发动broker上后，ack会有 3 种不同的选择： （ 1 ）acks=0： 表示producer不需要等待任何broker确认收到消息的回复，就可以继续发送下一条消息。性能最高，但是最容易丢消息。 （ 2 ）acks=1： 至少要等待leader已经成功将数据写入本地 ......
java——spring boot集成kafka——java代码实现
引入依赖： <dependency> <groupId>org.apache.kafka</groupId> <artifactId>kafka-clients</artifactId> <version>2.4.1</version> </dependency> 1 ......
java——spring boot集成kafka——集群分区消费策略
图中Kafka集群有两个broker，每个broker中有多个partition。 ⼀个partition只能被⼀个消费组⾥的某⼀个消费者消费，从⽽保证消费顺序。 Kafka只在partition的范围内保证消息消费的局部顺序性，不能在同⼀个topic中的多个partition中保证总的消费顺序性。 ......
java——spring boot集成kafka——broker、主题、分区、副本——概念理解
一、代理商Broker 在之前我们已经为大家介绍了生产者向消息队列中投递消息，消费者从消息队列中拉取数据。 在kafka消息队列中有一个非常重要的概念就是代理Broker，大家可以想象生活中的商品代理商是做什么的？进货、存货、销货。 kafka的代理Broker也承担着同样的作用：接收消息、保存消息 ......
状态观测器（一）
非常激动，看到了王佬这几篇关于观测器的学习笔记，故打算研读一下，并作记录，以便日后查看和理解 1、基于状态空间方程描述系统特性 $$ \dot{x}=Ax+Bu $$ 其中A作为系统矩阵，可从系统的微分方程得到，（似乎可通过高阶函数逼近，也就是实验辨识法测得），B作为控制矩阵，其参数由系统的输入与状 ......
vue状态管理
Vuex 基本使用 store/index.js import { createStore } from "vuex"; const store = createStore({ state: () => ({ counter:0 }) }) export default store App.vue ......
C++ 直接初始化和拷贝初始化
首先我们介绍直接初始化：编译器使用普通的函数匹配来选择与我们提供的参数最匹配的构造函数。文字描述可能会让你们云里雾里，那我们直接看代码： //先设计这样的一个类 class A{ public: A(){ cout << "A()" << endl; } A(int a){ cout << "A(i ......
python 使用 kafka
python 使用 kafka 说明：关于 kafka 的启动与安装，命令行的使用，此处不做过多的解释，本篇文章主要描述 kafka 在 python 中的使用； 1. python 使用 kafka 生产者 **说明：**python 在操作 kafka 写入数据的时候，分为发送往已经存在的主题或 ......
java——spring boot集成kafka——单播与多播消息的实现
单播消息的实现： 单播消息：⼀个消费组⾥ 只会有⼀个消费者能消费到某⼀个topic中的消息。于是可以创建多个消费者，这些消费者在同⼀个消费组中。 创建一个消费者，此消费者属于消费组testGroup，获取borker为：10.31.167.10:9092中 主题为test的消息； ./kafka-c ......
wsl 中 docker-compose 搭建 kafka 集群出现的外部访问错误
在 wsl 中用 docker-compose 搭建了一台 zookeeper + 三台 broker 的 kafka 集群，使用的镜像是 bitnami/kafka，在按照镜像文档运行容器后，发现运行在宿主机里的客户端程序无法正确的推送/消费消息，研究后发现镜像文档只适用于客户端程序和 kafka ......
java——spring boot集成kafka——单节点示例
首先安装一个zk。然后再安装kafka： 执⾏以下命令创建名为“test”的topic，这个topic只有⼀个partition，并且备份因⼦也设置为1： 然后在kafka节点下，执行如下命令： ./kafka-topics.sh --create --zookeeper 172.16.253.35 ......
Kafka快速使用与详解
一、Kafka简介 1. 概念 Kafka是一个分布式的、基于发布/订阅的消息队列，最初由LinkedIn开发，并于2011年成为Apache项目的一部分。Kafka具有高吞吐量、可扩展性、持久性和容错性等特性，被广泛应用于大数据领域，如数据采集、数据传输、数据处理等场景。 Kafka主要由以下三个 ......
kratos中使用kafka不同group消费同一个topic的坑
参考项目地址 https://gitee.com/huoyingwhw/kratos_kafka.git 现象 像上图那样写的话，项目启动后，往topic中放入数据，只有article_group2会消费数据！ 原因 ～～～ ......
返回值优化-消除拷贝
我们使用gcc编译器，C++11, 《c++核心指南》的一个条款：“For “out” output values, prefer return values to output parameters”：在函数输出数值时，尽量使用返回值而非输出参数。 我们之前的做法应该是函数参数里面使用指针或者引用 ......
如何保障消息中间件100%消息投递成功？如何保证消息幂等性？
我们应该都听说够消息中间件MQ，如：RabbitMQ，RocketMQ，Kafka等。引入中间件的好处可以起到抗高并发，削峰，业务解耦的作用。 如图： （1）订单服务投递消息给MQ中间件 （2）物流服务监听MQ中间件消息，从而进行消费 如何保障订单服务把消息成功投递给MQ中间件，以RabbitMQ举 ......
Kafka消费者
消费者读取消息。在其他基于发布与订阅的消息系统中，消费者可能被称为订阅者 或 读者。
消费者订阅一个或多个主题，并按照消息生成的顺序读取它们。消费者通过检查消息的偏移量来区分已经读取过的消息。 ......
C++中的移动构造函数和拷贝构造函数的区别
拷贝构造函数 拷贝构造函数用于从一个已存在的对象创建一个新的对象，即复制构造函数。它通常有一个类对象作为参数，返回一个新的对象，该对象与原始对象具有相同的值。如果一个类没有定义拷贝构造函数，则编译器会生成一个默认的拷贝构造函数，它将逐个复制所有非静态成员。如果一个类具有指针或引用成员，则需要自己编写 ......
构建一个flink程序,从kafka读取然后写入MYSQL
最近flink已经变得比较流行了，所以大家要了解flink并且使用flink。现在最流行的实时计算应该就是flink了，它具有了流计算和批处理功能。它可以处理有界数据和无界数据，也就是可以处理永远生产的数据。具体的细节我们不讨论，我们直接搭建一个flink功能。总体的思路是source -> tra ......