Flink Connect怎么使用
发表于:2025-01-26 作者:千家信息网编辑
千家信息网最后更新 2025年01月26日,这篇文章主要介绍"Flink Connect怎么使用",在日常操作中,相信很多人在Flink Connect怎么使用问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答"Fli
千家信息网最后更新 2025年01月26日Flink Connect怎么使用
这篇文章主要介绍"Flink Connect怎么使用",在日常操作中,相信很多人在Flink Connect怎么使用问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答"Flink Connect怎么使用"的疑惑有所帮助!接下来,请跟着小编一起来学习吧!
Connect算子:功能与union类似,将两个流(union支持两个或以上)合并为一个流,但区别在于connect不要求数据类型一致
示例环境
java.version: 1.8.xflink.version: 1.11.1
示例数据源 (项目码云下载)
Flink 系例 之 搭建开发环境与数据
Connect.java
import com.flink.examples.DataSource;import org.apache.flink.api.java.tuple.Tuple3;import org.apache.flink.api.java.tuple.Tuple4;import org.apache.flink.streaming.api.datastream.DataStream;import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment;import org.apache.flink.streaming.api.functions.co.CoMapFunction;import java.util.Arrays;import java.util.List;/** * @Description Connect算子:功能与union类似,将两个流(union支持两个或以上)合并为一个流,但区别在于connect不要求数据类型一致 */public class Connect { /** * 将两个不区分数据类型的数据流合并成一个数据流,并打印 * @param args * @throws Exception */ public static void main(String[] args) throws Exception { final StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment(); env.setParallelism(1); List> tuple3List = DataSource.getTuple3ToList(); //dataStream 1 DataStream > dataStream1 = env.fromCollection(tuple3List); //dataStream 2 DataStream > dataStream2 = env.fromCollection(Arrays.asList( new Tuple3<>("医生", "上海", 2), new Tuple3<>("老师", "北京", 4), new Tuple3<>("工人", "广州", 9) )); //合关两个数据流 DataStream > dataStream = dataStream1.connect(dataStream2) .map(new CoMapFunction , Tuple3 , Tuple4 >() { //表示dataStream1的流输入 @Override public Tuple4 map1(Tuple3 value) throws Exception { return Tuple4.of(value.f0, value.f1, value.f2, "用户"); } //表示dataStream2的流输入 @Override public Tuple4 map2(Tuple3 value) throws Exception { return Tuple4.of(value.f0, value.f1, value.f2, "职业"); } }); //打印 dataStream.print(); env.execute("flink Split job"); }}
打印结果
(张三,man,20,用户)(李四,girl,24,用户)(王五,man,29,用户)(刘六,girl,32,用户)(伍七,girl,18,用户)(吴八,man,30,用户)(医生,上海,2,职业)(老师,北京,4,职业)(工人,广州,9,职业)
到此,关于"Flink Connect怎么使用"的学习就结束了,希望能够解决大家的疑惑。理论与实践的搭配能更好的帮助大家学习,快去试试吧!若想继续学习更多相关知识,请继续关注网站,小编会继续努力为大家带来更多实用的文章!
数据
用户
两个
职业
学习
数据流
类型
一致
功能
医生
工人
更多
环境
示例
算子
老师
上海
北京
广州
帮助
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
access数据库设计五个步骤
核心交换机和服务器
生产安全和网络安全
2020辽宁省校园网络安全
南八道网络技术是做什么
洛阳哪里学计算机网络技术教程
常见网关服务器
济南中科院软件开发工作累吗
安徽数据库外泌体哪家好
局 网络安全责任制度
软件开发合同需要注意什么
4g网络技术服务商
公司用的数据库是哪个版本
高唐县网络安全和信息化中心
工业控制网络技术招新秋
中信银行软件开发面试题
数据库硬件工程师面试
顺义区运营网络技术信息推荐
网络安全反诈骗的句子有哪些
正数网络技术有限公司待遇
数据库的网址
数据库一次增加一行数据库
租借互联网服务器运营
工信部的网络安全示范补贴
爱立信 软件开发
如果没有卫星还可以使用服务器吗
服务器备份软件哪个好
天津廊坊金蝶网络技术
使用云服务器直播
不动产数据库标准保密