千家信息网

Kafka如何安装、配置及基础使用

发表于:2025-02-07 作者:千家信息网编辑
千家信息网最后更新 2025年02月07日,这篇文章主要介绍了Kafka如何安装、配置及基础使用,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。11. Kafka此主题介绍Kafk
千家信息网最后更新 2025年02月07日Kafka如何安装、配置及基础使用

这篇文章主要介绍了Kafka如何安装、配置及基础使用,具有一定借鉴价值,感兴趣的朋友可以参考下,希望大家阅读完这篇文章之后大有收获,下面让小编带着大家一起了解一下。

11. Kafka

此主题介绍Kafka的安装、配置及基础使用。

Kafka基本信息

官网:http://kafka.apache.org/

11.1. 环境准备

# 切换到工作空间cd /opt/workspaces# 创建Kafka数据目录mkdir data/kafka# 创建Kafka日志目录mkdir logs/kafka

11.2. 安装

wget http://mirrors.cnnic.cn/apache/kafka/0.8.2.2/kafka_2.10-0.8.2.2.tgztar -zxf kafka_2.10-0.8.2.2.tgzrm -rf kafka_2.10-0.8.2.2.tgzmv kafka_2.10-0.8.2.2 ./frameworks/kafka

11.3. 配置(伪分布式)

vi ./frameworks/kafka/config/server.properties

# 设置如下参数:broker.id=0port=9092# 对外主机名advertised.host.name=# 数据目录log.dirs=/opt/workspaces/data/kafka# 连接ZKzookeeper.connect=localhost:2181

当您有多块网卡或使用特殊的网络设置导致Kafka启动时使用的IP与对外暴露的IP不同时需要指定advertised.host.name为您期望使用的外网IP

log.dirs的解释为A comma seperated list of directories under which to store log files,这里所谓的日志文件指的是Kafka的消息持久化文件,并不是一般意义的运行日志

vi ./frameworks/kafka/config/log4j.properties

# 设置日志目录kafka.logs.dir=/opt/workspaces/logs/kafka

11.4. 启动与停止

nohup ./frameworks/kafka/bin/kafka-server-start.sh ./frameworks/kafka/config/server.properties >/dev/null 2>&1 &

11.5. 测试

./frameworks/kafka/bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic test./frameworks/kafka/bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test> This is a message> This is another message# 在另个窗口输入./frameworks/kafka/bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic test --from-beginning> This is a message> This is another message

感谢你能够认真阅读完这篇文章,希望小编分享的"Kafka如何安装、配置及基础使用"这篇文章对大家有帮助,同时也希望大家多多支持,关注行业资讯频道,更多相关知识等着你来学习!

0