Kafka 1.0.0的安装使用以及命令是什么
发表于:2024-11-19 作者:千家信息网编辑
千家信息网最后更新 2024年11月19日,这篇文章将为大家详细讲解有关Kafka 1.0.0的安装使用以及命令是什么,文章内容质量较高,因此小编分享给大家做个参考,希望大家阅读完这篇文章后对相关知识有一定的了解。0.三台机器 data133,
千家信息网最后更新 2024年11月19日Kafka 1.0.0的安装使用以及命令是什么
这篇文章将为大家详细讲解有关Kafka 1.0.0的安装使用以及命令是什么,文章内容质量较高,因此小编分享给大家做个参考,希望大家阅读完这篇文章后对相关知识有一定的了解。
0.三台机器 data133,data135,data1361.修改配置文件 server.properties broker.id=1 #全局唯一 log.dirs=/data/kafka/log #kafka存放数据的目录 zookeeper.connect=data135:2181,data133:2181,data136:2181 port=9092 host.name=data136 然后分发到另两台机器 data133:broker.id=2 host.name=data133 data135:broker.id=2 host.name=data135 2.后台2.后台启动kafka server bin目录下 nohup ./kafka-server-start.sh ../config/server.properties &3.创建topic ./kafka-topics.sh --create --topic "test1" --partitions 5 --replication-factor 1 --zookeeper data1334.通过shell脚本生产消费 生产:./kafka-console-producer.sh -topic test --broker-list data133:9092,data135:9092,data136:9092 消费:./kafka-console-consumer.sh --topic test --from-beginning --bootstrap-server data133:90925.显示所有的topic ./kafka-topics.sh --list --zookeeper bigdata03 ---------------------------------------------------------------flume整合kafka,flume的配置文件 kafka-dest.conf# Name the components on this agenta1.sources=sr1a1.channels=ch2a1.sinks=si1# Describe/configure the sourcea1.sources.sr1.type=execa1.sources.sr1.command=tail -F /home/ch.loga1.sources.sr1.batchSize=50# Describe the sinka1.sinks.si1.type=org.apache.flume.sink.kafka.KafkaSinka1.sinks.si1.kafka.bootstrap.servers=bigdata01:9092,bigdata02:9092,bigdata03:9092a1.sinks.si1.kafka.topic=test7a1.sinks.si1.flumeBatchSize=100a1.sinks.si1.kafka.producer.acks=1a1.sinks.si1.kafka.producer.partitioner.class=org.apache.kafka.clients.producer.internals.DefaultPartitioner# Use a channel which buffers events in memorya1.channels.ch2.type = memorya1.channels.ch2.capacity = 1000000a1.channels.ch2.transactionCapacity = 1000a1.sources.sr1.channels=ch2a1.sinks.si1.channel=ch2#the command to start a agent#bin/flume-ng agent -n a1 -c conf -f conf/fkafka-dest.conf
关于Kafka 1.0.0的安装使用以及命令是什么就分享到这里了,希望以上内容可以对大家有一定的帮助,可以学到更多知识。如果觉得文章不错,可以把它分享出去让更多的人看到。
命令
内容
后台
文件
文章
更多
机器
目录
知识
篇文章
消费
生产
配置
不错
全局
数据
脚本
质量
三台
参考
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
福清京东方招聘软件开发
爬虫怎么存储到数据库
主流数据库管理系统的特点
网络技术人员的劣势
服务器证书未通过验证
软件开发发展史
鹤壁华宇网络技术
软件开发工具中的src文件
物联网软件开发招聘
关于网络安全法的演讲稿
家用服务器组建
甲方不懂软件开发说改就改
幼儿网络安全主题绘画简单
战地1进入服务器很慢
由于数据库错误无法打开文件
沈阳软件开发公司排名
数据库为只读
单人生存测试服务器
计算机网络技术pdf书籍
mssql服务器端安装程序
服务器2000兆一个月多少钱
从事软件开发工程师的工作经验
计算机三级试卷网络技术
怎么从数据库中查自己的论文
湖南服务器回收企业
统计系统网络安全管理制度
软件开发师答案
平乐县软件开发
怎么看数据库用的端口号
互联网医疗it科技