千家信息网

interllj IDEA配置spark

发表于:2024-11-19 作者:千家信息网编辑
千家信息网最后更新 2024年11月19日,interllj IDEA是一个编译环境IDE,有免费的社区版。百度可以下载,这里不赘述,有了编译器需要安装scala语言支持,见前面的博客。spark是一种类似多线程的结构,他的作用是将任务分发给多
千家信息网最后更新 2024年11月19日interllj IDEA配置spark

interllj IDEA是一个编译环境IDE,有免费的社区版。百度可以下载,这里不赘述,有了编译器需要安装scala语言支持,见前面的博客。
spark是一种类似多线程的结构,他的作用是将任务分发给多个节点一起计算提高速度,因此是有使用场景的,有的情况下不适用,比如迭代计算。


配置spark步骤如下:
第一步建立maven

第二步填写group id 类似于项目说明

点击下一步下一步直到finish,得到如下图:

第三步,导入jars包,将包的位置填写在file->project structure->librartes下。
jars包包含了spark,获取的方式在
网卡的一笔,下次再补充

0