千家信息网

CDH如何集成kafka

发表于:2024-10-15 作者:千家信息网编辑
千家信息网最后更新 2024年10月15日,这篇文章给大家分享的是有关CDH如何集成kafka的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。添加kafka (所有程序包都是放在cm主机上面)1.下载kafka包htt
千家信息网最后更新 2024年10月15日CDH如何集成kafka

这篇文章给大家分享的是有关CDH如何集成kafka的内容。小编觉得挺实用的,因此分享给大家做个参考,一起跟随小编过来看看吧。

添加kafka (所有程序包都是放在cm主机上面)

1.下载kafka包http://archive.cloudera.com/kafka/parcels/latest/

把包放到parcel-repo 目录

2.下载csd包http://archive.cloudera.com/csds/kafka/

放到csd目录

3.分配kafka包并激活

注意:如果进度卡在"已解压",直接返回重新进来就会看到"激活"

4添加kafka角色

默认选项即可

安装后启动报错Java heap space (如下图)

需要修改Java内存,默认50M,这点很奇怪,安装过程中没提示让设置内存,结果执行完安装后无法启动

进入kafka选"配置",

找到Java Heap Size 改为1G(根据服务器配置改参数)

最后保存,控制台重启kafka就可以了。

感谢各位的阅读!关于"CDH如何集成kafka"这篇文章就分享到这里了,希望以上内容可以对大家有一定的帮助,让大家可以学到更多知识,如果觉得文章不错,可以把它分享出去让更多的人看到吧!

0