Kafka 1.0.0的安装使用以及命令是什么
发表于:2024-11-20 作者:千家信息网编辑
千家信息网最后更新 2024年11月20日,这篇文章将为大家详细讲解有关Kafka 1.0.0的安装使用以及命令是什么,文章内容质量较高,因此小编分享给大家做个参考,希望大家阅读完这篇文章后对相关知识有一定的了解。0.三台机器 data133,
千家信息网最后更新 2024年11月20日Kafka 1.0.0的安装使用以及命令是什么
这篇文章将为大家详细讲解有关Kafka 1.0.0的安装使用以及命令是什么,文章内容质量较高,因此小编分享给大家做个参考,希望大家阅读完这篇文章后对相关知识有一定的了解。
0.三台机器 data133,data135,data1361.修改配置文件 server.properties broker.id=1 #全局唯一 log.dirs=/data/kafka/log #kafka存放数据的目录 zookeeper.connect=data135:2181,data133:2181,data136:2181 port=9092 host.name=data136 然后分发到另两台机器 data133:broker.id=2 host.name=data133 data135:broker.id=2 host.name=data135 2.后台2.后台启动kafka server bin目录下 nohup ./kafka-server-start.sh ../config/server.properties &3.创建topic ./kafka-topics.sh --create --topic "test1" --partitions 5 --replication-factor 1 --zookeeper data1334.通过shell脚本生产消费 生产:./kafka-console-producer.sh -topic test --broker-list data133:9092,data135:9092,data136:9092 消费:./kafka-console-consumer.sh --topic test --from-beginning --bootstrap-server data133:90925.显示所有的topic ./kafka-topics.sh --list --zookeeper bigdata03 ---------------------------------------------------------------flume整合kafka,flume的配置文件 kafka-dest.conf# Name the components on this agenta1.sources=sr1a1.channels=ch2a1.sinks=si1# Describe/configure the sourcea1.sources.sr1.type=execa1.sources.sr1.command=tail -F /home/ch.loga1.sources.sr1.batchSize=50# Describe the sinka1.sinks.si1.type=org.apache.flume.sink.kafka.KafkaSinka1.sinks.si1.kafka.bootstrap.servers=bigdata01:9092,bigdata02:9092,bigdata03:9092a1.sinks.si1.kafka.topic=test7a1.sinks.si1.flumeBatchSize=100a1.sinks.si1.kafka.producer.acks=1a1.sinks.si1.kafka.producer.partitioner.class=org.apache.kafka.clients.producer.internals.DefaultPartitioner# Use a channel which buffers events in memorya1.channels.ch2.type = memorya1.channels.ch2.capacity = 1000000a1.channels.ch2.transactionCapacity = 1000a1.sources.sr1.channels=ch2a1.sinks.si1.channel=ch2#the command to start a agent#bin/flume-ng agent -n a1 -c conf -f conf/fkafka-dest.conf
关于Kafka 1.0.0的安装使用以及命令是什么就分享到这里了,希望以上内容可以对大家有一定的帮助,可以学到更多知识。如果觉得文章不错,可以把它分享出去让更多的人看到。
命令
内容
后台
文件
文章
更多
机器
目录
知识
篇文章
消费
生产
配置
不错
全局
数据
脚本
质量
三台
参考
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
成都工控上位机软件开发
广播电视网络安全责任书
世界技能大赛商务软件开发
溧水区网络技术服务信息推荐
青海省委网络安全和信息化
华亮软件开发有限公司
华为 网络技术工程师工资
云服务器核心怎么选
日历hgp怎么用服务器连接主板
国家网络安全检测与防护技术
学数据库该学什么数据库软件
python操作oracle数据库
互联网教育高科技企业
北京聚优创互联网科技
景德镇豪麦网络技术
敏捷软件开发 java版
各个网络安全公司的贡献
sqlite 数据库恢复
服务器安装iptables
软件开发企业男女最佳比例
关闭服务器管理器提醒
手机插件软件开发公司
为什么要有mysql数据库
苏州android软件开发流程
网络安全产品展板布置
参考消息图文数据库
本地服务器就是物理服务器吗
数据库防火墙有纯软件形式吗
网络安全客户端 断网 一会
土地数据库包括什么意思