Kafka 1.0.0的安装使用以及命令是什么
发表于:2025-02-05 作者:千家信息网编辑
千家信息网最后更新 2025年02月05日,这篇文章将为大家详细讲解有关Kafka 1.0.0的安装使用以及命令是什么,文章内容质量较高,因此小编分享给大家做个参考,希望大家阅读完这篇文章后对相关知识有一定的了解。0.三台机器 data133,
千家信息网最后更新 2025年02月05日Kafka 1.0.0的安装使用以及命令是什么
这篇文章将为大家详细讲解有关Kafka 1.0.0的安装使用以及命令是什么,文章内容质量较高,因此小编分享给大家做个参考,希望大家阅读完这篇文章后对相关知识有一定的了解。
0.三台机器 data133,data135,data1361.修改配置文件 server.properties broker.id=1 #全局唯一 log.dirs=/data/kafka/log #kafka存放数据的目录 zookeeper.connect=data135:2181,data133:2181,data136:2181 port=9092 host.name=data136 然后分发到另两台机器 data133:broker.id=2 host.name=data133 data135:broker.id=2 host.name=data135 2.后台2.后台启动kafka server bin目录下 nohup ./kafka-server-start.sh ../config/server.properties &3.创建topic ./kafka-topics.sh --create --topic "test1" --partitions 5 --replication-factor 1 --zookeeper data1334.通过shell脚本生产消费 生产:./kafka-console-producer.sh -topic test --broker-list data133:9092,data135:9092,data136:9092 消费:./kafka-console-consumer.sh --topic test --from-beginning --bootstrap-server data133:90925.显示所有的topic ./kafka-topics.sh --list --zookeeper bigdata03 ---------------------------------------------------------------flume整合kafka,flume的配置文件 kafka-dest.conf# Name the components on this agenta1.sources=sr1a1.channels=ch2a1.sinks=si1# Describe/configure the sourcea1.sources.sr1.type=execa1.sources.sr1.command=tail -F /home/ch.loga1.sources.sr1.batchSize=50# Describe the sinka1.sinks.si1.type=org.apache.flume.sink.kafka.KafkaSinka1.sinks.si1.kafka.bootstrap.servers=bigdata01:9092,bigdata02:9092,bigdata03:9092a1.sinks.si1.kafka.topic=test7a1.sinks.si1.flumeBatchSize=100a1.sinks.si1.kafka.producer.acks=1a1.sinks.si1.kafka.producer.partitioner.class=org.apache.kafka.clients.producer.internals.DefaultPartitioner# Use a channel which buffers events in memorya1.channels.ch2.type = memorya1.channels.ch2.capacity = 1000000a1.channels.ch2.transactionCapacity = 1000a1.sources.sr1.channels=ch2a1.sinks.si1.channel=ch2#the command to start a agent#bin/flume-ng agent -n a1 -c conf -f conf/fkafka-dest.conf
关于Kafka 1.0.0的安装使用以及命令是什么就分享到这里了,希望以上内容可以对大家有一定的帮助,可以学到更多知识。如果觉得文章不错,可以把它分享出去让更多的人看到。
命令
内容
后台
文件
文章
更多
机器
目录
知识
篇文章
消费
生产
配置
不错
全局
数据
脚本
质量
三台
参考
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
sqlite数据库 打开
linux服务器有什么用
服务器管理员密码过期怎么办
数据库格式设计方法的题
在关系数据库中集合运算有哪些
win系统dns服务器未响应
上海数据网络技术服务一体化
最新网络安全问题案例
计算机一级网络安全考点
学计算机网络技术咋专升本
软件开发商可以下架软件吗
南昌软件开发微信群
软件开发相关公司有哪些
广东照片人脸识别软件开发
软件开发培训直播
pgsql 分布式数据库
五华区智能化软件开发市场价
网络安全保卫部门的职能
买服务器挂骰
如何实现vb对数据库的访问
网络安全不信谣怎么办
花生壳怎么连内网数据库
dsp类软件开发是什么
网络技术挑战赛c4
数据库和数据仓库的技术
代理服务器地址日本
网络安全研判分析
网络安全设备摆放
服务器维保月度总结
数据库程序设计有什么用