1，问题描述 最近在 Intellij IDEA 上安装了个 Big Data Tools 大数据插件，当连接服务器上的 HDFS 时报如下错误： IllegalStateException: HADOOP_HOME is not defined. On Windows you should have the HADOOP_HOME environment variable defined......
Kafka 本身使用了很多手段来保证高性能，包括零拷贝、page cache（页缓存）、顺序读写、分区分段与索引、批量处理、压缩。其中零拷贝和顺序读写最重要。下面我将分别进行介绍。 一、零拷贝技术 1，什么是零拷贝？ （1）零拷贝（zero copy）是中间件广泛使用的一个技术......
在高并发场景下要解决消息重复发送或者重复消费问题，思路基本上一致，就是把消费者设计成幂等的。也就是说，同一个消息，不管消费多少次，系统状态都是一样的。本文我将详细讲解如何实现一个强大的高并发幂等方案。 一、基本概念介绍 1，重复消费的原因......
六月头条：C++ 历史上首次超越 C 语言 C++ 在本月成为 TIOBE 榜单新晋第二名。最初，C++ 被誉为是 C 语言的更优且面向对象的版本，它自诞生以来历经 39 年首次在受欢迎程度上超过了 C 语言。C++ 在 TIOBE 指数中从未达到如此高的排名......
1，问题描述 （1）我们知道 Switch pro（NS pro）手柄是可以通过蓝牙连接到电脑的，如果 PC 游戏对 Switch pro 进行适配了话那么便可以直接使用。 （2）此外 Steam 本身支持 Switch 手柄，我们也可以通过 Steam 可以添加外部游戏，两个功能结合起来就能用......
消息回查机制依赖于消息队列的支持，目前 RocketMQ 是支持的，但是不幸的是 Kafka 和 RabbitMQ 都不支持。本文将讲解怎么在 Kafka 的基础上实现消息回查。 1，什么是消息回查机制？ （1）所谓的消息回查机制是指消息队列允许你在发送消息的时候......
有时因为本地机器的配置原因，或者一些项目（如大数据、人工智能）的特殊需求要求我们要进行远程云端开发。Visual Studio Code（VSCode）远程开发插件使得在服务器上进行开发变得轻松而高效。本教程介绍如何在 VSCode 中设置远程开发环境，实现远程编辑服务器文件和执行命令的功能......
一、基本介绍 1，什么是消息积压？ 消息积压是指消息生产速率大于消费速率，所以消息会在 broker 上存放着。消息积压可能会导致消息要等很久才会被消费，这对于一些业务来说损害很大。特别是一些对消息消费时效性有要求的业务，几乎不能容忍任何程度的消息积压......
一、基本介绍 1，延迟队列 延迟队列是一种特殊的队列。它里面的每个元素都有一个过期时间： 当元素还没到过期时间的时候，如果我们试图从队列里面获取一个元素，我们会被阻塞。 当有元素过期的时候，我们就会拿到这个过期的元素。也可以这样想，我们拿到的永远是最先过期的那个元素......
在消息队列里面，有序消息是指消费者消费某个 topic 消息的顺序，和生产者生产消息的顺序一模一样，它也叫做顺序消息。我在之前的文章中提到 Kafka 并不能保证不同分区之间的顺序。也就是说，如果业务上有先后顺序的消息被发送到不同的分区上，那么我们难以确定哪一个消息会先被消费......