聊聊 Pulsar: 在 Linux 环境上搭建 Pulsar

老周聊架构

共 1520字,需浏览 4分钟

 ·

2022-02-20 09:46


一、环境准备

1.1 Java 环境为前提

1.1.1 上传 jdk-8u261-linux-x64.rpm 到服务器并安装

# 安装命令
rpm -ivh jdk-8u261-linux-x64.rpm 


00d1e3d17e83237b2e53e49a11bcfd1e.webp

1.1.2 配置环境变量

# 编辑配置文件,jdk的bin目录到/etc/profile文件,对所有用户的shell有效
vim /etc/profile
# 生效
source /etc/profile


45f2f720cc976d942427b84f0dd2f712.webp
export JAVA_HOME=/usr/java/jdk1.8.0_261-amd64
export PATH=$PATH:$JAVA_HOME/bin


6600f023b387a777279160bc66200851.webp
# 验证
java -version


850f53d76d3de9a532f97df5080747ac.webp
至此,jdk 安装成功。

1.2 Pulsar 的安装与配置

1.2.1 上传 apache-pulsar-2.9.1-bin.tar.gz 到服务器并解压

tar -zxf apache-pulsar-2.9.1-bin.tar.gz -C /opt 

1.2.2 启动单机模式 Pulsar

./pulsar standalone


81a5af651a75427514b209f6ed14bfa1.webp
直接回车走起,然后出现以下报错:
a790d30f5d4db348d1efa7a7d3e79127.webp
很明显,没有足够的内存。

free -m 命令查了下,可用内存还有 957 M,怎么就说内存不够了呢?

55fdcf1512a2d631f0b352d85c92bca9.webp
查了下文档,原来默认需要 2G 的 JVM 内存。
09719a3a09f2f16cdb3f8cb5f2af882b.webp
那我就调整下 pulsar 的默认配置,把默认的 2g 调整成 512m。
vim conf/pulsar_env.sh

PULSAR_MEM=${PULSAR_MEM:-"-Xms512m -Xmx512m -XX:MaxDirectMemorySize=512m"}

source conf/pulsar_env.sh

然后继续启动 pulsar ./pulsar standalone

fb48a2fac4b1d1c2604ba6fa7f3abfb4.webp
说我 zookeeper 有启动 2181 端口了。

是的,我的云主机是启动了一个 zookeeper。那我把我自己的启动的 zookeeper 停掉。

进到你安装 zookeeper 的目录中,执行以下停止的命令即可。

./zkServer.sh stop


ca10c821480b07fc828176d8190dfcf3.webp
再次启动 pulsar ./pulsar standalone
4be17b26154508005645dc319ea48c75.webp
如果能看到以上日志,说明 pulsar 启动成功了!

启动后,会一直卡主前台进程,如果需要关闭 pulsar,直接 ctrl+c 即可。

二、生产与消费

2.1 模拟开启消费者监听数据

./pulsar-client consume my-topic -s "first-subscription"


36c160f92c09dd7be970a66f15550c39.webp

2.2 模拟开启生产者生产数据

./pulsar-client produce my-topic --messages "hello-pulsar"


e9986f0478ec45495639e60cc5f7313c.webp

2.3 消费者成功接收消息

6beb1c67cd110e06ce1897dba910bfca.webp

三、小结

Pulsar 的给我的感觉就是开箱即用,Pulsar 还帮我们内置了 zookeeper,我们至此都没有安装 zookeeper,期间我还停掉了自己的 zookeeper,这也正说明了 Pulsar 内置了 zookeeper,与我自己的 zookeeper 端口发生了冲突。

通过 jps 命令,也可以发现 Pulsar 帮我们启动了 zookeeper,有 QuorumPeerMain 进程。

0e581f50a65894ee6c01cf76ccb51bf1.webp
Pulsar 与 Kafka 的单机模式搭建,一对比,毫无疑问,Pulsar 好简洁啊,Kafka 与 Zookeeper 一堆繁琐参数的配置。

好了,下一篇我们来搭建 Pulsar 的分布式建集群环境。我们下期再见~



欢迎大家关注我的公众号【老周聊架构】,Java后端主流技术栈的原理、源码分析、架构以及各种互联网高并发、高性能、高可用的解决方案。

浏览 57
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报
评论
图片
表情
推荐
点赞
评论
收藏
分享

手机扫一扫分享

分享
举报