千家信息网

flink 扩容

发表于:2024-11-17 作者:千家信息网编辑
千家信息网最后更新 2024年11月17日,因需要,再扩3台flink, 遇到各种报错,折腾了3个小时,最终找到了一种简单可行的方式,该方式,需要清空checkpoint, 暂时没有找到更好的方案。rm -rf /tmprm -rf /data
千家信息网最后更新 2024年11月17日flink 扩容

因需要,再扩3台flink, 遇到各种报错,折腾了3个小时,最终找到了一种简单可行的方式,该方式,需要清空checkpoint, 暂时没有找到更好的方案。

rm -rf /tmp
rm -rf /data/hadoop/* (checkpoint存储的位置)
hadoop namenode -format(所有结点)
start-dfs.sh
start-yarn.sh
start-zookeeper-quorum.sh(6台都配置, 否则启动的时候报错,例如
server.1=flink1:2888:3888
server.2=flink2:2888:3888
server.3=flink3:2888:3888
server.4=flink4:2888:3888
server.5=flink5:2888:3888
server.6=flink6:2888:3888

0