Flink Connect怎么使用
发表于:2024-11-27 作者:千家信息网编辑
千家信息网最后更新 2024年11月27日,这篇文章主要介绍"Flink Connect怎么使用",在日常操作中,相信很多人在Flink Connect怎么使用问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答"Fli
千家信息网最后更新 2024年11月27日Flink Connect怎么使用
这篇文章主要介绍"Flink Connect怎么使用",在日常操作中,相信很多人在Flink Connect怎么使用问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答"Flink Connect怎么使用"的疑惑有所帮助!接下来,请跟着小编一起来学习吧!
Connect算子:功能与union类似,将两个流(union支持两个或以上)合并为一个流,但区别在于connect不要求数据类型一致
示例环境
java.version: 1.8.xflink.version: 1.11.1
示例数据源 (项目码云下载)
Flink 系例 之 搭建开发环境与数据
Connect.java
import com.flink.examples.DataSource;import org.apache.flink.api.java.tuple.Tuple3;import org.apache.flink.api.java.tuple.Tuple4;import org.apache.flink.streaming.api.datastream.DataStream;import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment;import org.apache.flink.streaming.api.functions.co.CoMapFunction;import java.util.Arrays;import java.util.List;/** * @Description Connect算子:功能与union类似,将两个流(union支持两个或以上)合并为一个流,但区别在于connect不要求数据类型一致 */public class Connect { /** * 将两个不区分数据类型的数据流合并成一个数据流,并打印 * @param args * @throws Exception */ public static void main(String[] args) throws Exception { final StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment(); env.setParallelism(1); List> tuple3List = DataSource.getTuple3ToList(); //dataStream 1 DataStream > dataStream1 = env.fromCollection(tuple3List); //dataStream 2 DataStream > dataStream2 = env.fromCollection(Arrays.asList( new Tuple3<>("医生", "上海", 2), new Tuple3<>("老师", "北京", 4), new Tuple3<>("工人", "广州", 9) )); //合关两个数据流 DataStream > dataStream = dataStream1.connect(dataStream2) .map(new CoMapFunction , Tuple3 , Tuple4 >() { //表示dataStream1的流输入 @Override public Tuple4 map1(Tuple3 value) throws Exception { return Tuple4.of(value.f0, value.f1, value.f2, "用户"); } //表示dataStream2的流输入 @Override public Tuple4 map2(Tuple3 value) throws Exception { return Tuple4.of(value.f0, value.f1, value.f2, "职业"); } }); //打印 dataStream.print(); env.execute("flink Split job"); }}
打印结果
(张三,man,20,用户)(李四,girl,24,用户)(王五,man,29,用户)(刘六,girl,32,用户)(伍七,girl,18,用户)(吴八,man,30,用户)(医生,上海,2,职业)(老师,北京,4,职业)(工人,广州,9,职业)
到此,关于"Flink Connect怎么使用"的学习就结束了,希望能够解决大家的疑惑。理论与实践的搭配能更好的帮助大家学习,快去试试吧!若想继续学习更多相关知识,请继续关注网站,小编会继续努力为大家带来更多实用的文章!
数据
用户
两个
职业
学习
数据流
类型
一致
功能
医生
工人
更多
环境
示例
算子
老师
上海
北京
广州
帮助
数据库的安全要保护哪些东西
数据库安全各自的含义是什么
生产安全数据库录入
数据库的安全性及管理
数据库安全策略包含哪些
海淀数据库安全审计系统
建立农村房屋安全信息数据库
易用的数据库客户端支持安全管理
连接数据库失败ssl安全错误
数据库的锁怎样保障安全
实时数据库方案
四川专业的网络安全机构收费标准
管理工具 双击 服务器
阿里云服务器安全产品防火墙
三国志幻想大陆服务器y服和s服
南充软件开发行业标准
物联网平台云服务器系统区别
Amd cpu服务器
十堰哪里有软件开发方案
app软件开发品控
幸福东北网络安全宣传活动
山东正中计算网络技术
多服务器架设手机版
电子邮件系统网络安全存在问题
深圳软件开发大学有哪些
黄浦区手机软件开发定做价格
开启数据库root远程访问权限
逍遥安卓 代理服务器
权威域名服务器 思科
江苏发展网络技术咨询产品
int函数取整数据库
数据库完整性课程论文
修改数据库原有字段长度
c 应用软件开发面试题
bgp路由采集网络安全
网络安全的限制
深圳市微商网络技术有限公司
民政厅网络安全
嘉定区综合软件开发服务是什么
国家网络安全监督管理中心