互联网科技列表
-
第17课：Spark Streaming资源动态申请和动态控制消费速率原理剖析
本期内容：Spark Streaming资源动态分配Spark Streaming动态控制消费速率为什么需要动态？Spark默认情况下粗粒度的，先分配好资源再计算。而Spark Streaming有高
2022-06-03 资源 动态 运行 调整 控制 分配 速率 消费 不断 定时器 数据 时候 速度 参数 峰值 情况 时间 处理 配置 原理 -
Scala编程之闭包(closure)
一、概念闭包:我们把一个函数与其相关引用环境(变量)组合成一个整体叫做闭包概念晦涩难懂，下面我们用一个例子说明二、小例子def minusxy(x:Int) = (y:Int)=>x-yval f=m
2022-06-03 闭包 函数 文件 文件名 变量 后缀 整体 例子 传统 对象 就是 方法 概念 环境 晦涩 上边 分割线 功能 好处 字段 -
LoadRunner参数设置
hi，baby~i am back！ 在上一篇博文中，我大概写了一下登录脚本的录制，没有给出源代码。但实际上，只要你认真按顺序看下去，每一部分拼接起来，就已经是完整的代码部分了
2022-06-03 参数 数据 迭代 选择 组合 用户 盒子 名字 脚本 登录 同时 名称 多个 实际 手动 数据表 时间 环境 表格 顺序 -
Hadoop2.6.0学习笔记（八）Hadoop启动脚本介绍
鲁春利的工作笔记，谁说程序员不能有文艺范？sbin/start-all.shsbin/start-dfs.shsbin/start-yarn.shsbin/hadoop-daemon.shsbin/h
2022-06-03 笔记 文艺 程序 程序员 工作 脚本 学习 -
MapReduce提交到Yarn上大体执行流程
启动申请提交一个job(wordcount.jar和程序中的配置参数和数据切片规划文件)运行进程为runjarResouceManager 会在一台节点NodeManager上先启动客户提交的word
2022-06-03 进程 任务 主管 运行 参数 客户 数据 文件 程序 节点 规则 规划 配置 流程 -
层次图和HIPO图---描绘软件结构的图形工具
层次图和HIPO图层次图用来描述软件的层次结构。虽然层次图的形式和描绘数据结构的层次方框图相同，但是表现的内容却完全不同。层次图中的一个矩形框代表一个模块，方框间的连线表示调用关系而不像层次方框图那样
2022-06-03 模块 层次 图中 处理 数据 方框 软件 阶段 设计 输入 输出 工具 结构 下图 代表 例子 信息 功能 正文 符号 -
大数据平台一键安装OS【搭建脚本篇】
定制化大数据平台一键安装OS大数据平台一键安装OS系列大数据平台一键安装OS【定制化OS镜像制作】搭建脚本篇脚本命名随便，只要能看懂就行镜像包说明os1.1.iso 用于安装服务端和客户端操作系统hd
2022-06-03 配置 服务 地址 密码 运行 脚本 文件 输入 平台 主机 系统 更新 客户 一键 客户端 选择 数据 用户 节点 分析 -
数据中台技术的利与弊
伴随信息时代的发展，新技术、新框架、新语言层出不穷，解决问题的技术视角其实从来没有改变。所有应用都需要和存储系统相关联，无论存储是 SQL 还是 NOSQL 的。业务系统和数据库遵循不同的开发规范，为
2022-06-03 数据 开发 服务 应用 结构 系统 存储 体系 体系结构 架构 程序 应用程序 框架 设计 业务 人员 多个 应用开发 数据库 方式 -
spark之master与worker通信模型讲解
通信模型架构图master 端代码import akka.actor.{Actor, ActorSystem, Props}import com.typesafe.config.ConfigFacto
2022-06-03 端口 配置 属性 封装 代码 分支 文件 架构 消息 线程 模型 通信 信息 去向 对象 工作 -
hadoop的安装与配置
Hadoop版本Hadoop 有两个主要版本，Hadoop 1.x.y 和 Hadoop 2.x.y 系列.1.x.y大数公司已经更新Hadoop 2.x 版本，本教程均可适用.基本环境:Centos
2022-06-03 配置 教程 版本 环境 目录 文件 本本 移动 验证 两个 主机 公司 地址 大数 官方 建议 文档 机主 格式 状态 -
webdriver打开失败方法---chrome与chromedrvier版本对应关系
在运行selenium脚本时，有时突然会碰到提示webdriver打开失败，这个时候极大可能是Chrome浏览器更新了，与你之前的chromedriver版本出现不兼容，导致selenium调用不了谷
2022-06-03 版本 时候 浏览器 升级 浏览 更多 脚本 学习 提示 更新 运行 方法 -
学大数据需要什么编程基础？大数据学习步骤是什么？
学大数据需要什么编程基础？大数据学习步骤是什么？ 大数据是什么? 有很多朋友问过我，大数据到底是什么？一句话来…学大数据需要什么编程基础？大数据学习步骤是什么？学大数据需要什么编程基础？大数据学习步骤
2022-06-03 数据 学习 框架 时候 处理 查询 基础 就是 实时 数据库 存储 工作 步骤 资源 命令 技术 海量 生态 调度 编程 -
Docker镜像导致centos-root根分区容量爆满
当虚拟机服务器运行Docker久了后，发现Docker的文件越来越大，某天发现此台机上的数据库访问不了了，再重启数据库等日志，提示空间不足，查看磁盘空间：root分区满载啊，前段时间还有不少空间的，查
2022-06-03 磁盘 空间 命令 文件 分组 镜像 容器 硬盘 内容 区位 大小 情况 数据 数据库 系统 结果 要么 越来越 逻辑 越来 -
Apache Beam程序向导4
Apache Beam程序向导4今天在集群上实验Beam On Spark的时候，遇到一个坑爹的问题，这个问题总结起来是一个java.lang.NoClassDefFoundError错误，具体错误如
2022-06-03 运行 成功 错误 集群 接下来 时候 版本 节点 问题 代码 方式 脚本 路径 提示 测试 编译 调度 向导 程序 合适 -
DataFrame和Series的排序
更多大数据分析、建模等内容请关注公众号《bigdatamodeling》################################### 排序 #########################
2022-06-03 排序 方法 索引 对象 列索 公众 内容 数据 数据分析 更多 分析 -
学大数据的实训项目，符合这三个要求的才是有用的
俗话说得好实践出真知，在学习大数据开发时同样也是如此，那么大家知道学习大数据开发实训项目为何如此重要吗？接下来就来为大家简单的介绍一下吧。求职角度、企业招聘要求企业的最终目的都是盈利，所以都会选择价值
2022-06-03 数据 学习 学生 项目 企业 用户 系统 重要 物品 开发 推荐 产品 广告 流量 经验 能力 工作 招聘 最高 价值 -
Git工程开发实践（七）——GitLab服务搭建
Git工程开发实践（七）--GitLab服务搭建操作系统：RHEL 7.3 WorkStation一、GitLab简介1、GitLab简介GitLab是一个利用Ruby on Rails开发的开源版本
2022-06-03 服务 命令 配置 文件 服务器 管理 代码 版本 系统 托管 仓库 信息 数据 用户 控制 工程 开发 公钥 功能 参数 -
Java面试中常问的Spring方面问题
Spring Framework 现在几乎已成为 Java Web 开发的标配框架。那么，作为 Java 程序员，你对 Spring 的主要技术点又掌握了多少呢？不妨用本文的问题来检测一下。1、一般问
2022-06-03 配置 注解 装配 容器 应用 支持 方法 对象 程序 属性 数据 应用程序 管理 类型 框架 文件 组件 实例 方式 不同 -
致5年经验的IT人：从现在起，决定你未来高度的将不再是你的技术能力
你眼中的世界，一定是你心中想当然的世界。通过别人的眼睛看世界，才能够突破自己的思维模式，前几天和朋友见面，聊起华为年初清理34岁以上职员及大龄程序员的话题，一致认为：技术人员一定不要因为工作忙、圈子窄
2022-06-03 技术 数据 架构 专场 出品人 能力 问题 世界 人员 思维 总监 应用 移动 不断 业务 电商 发展 变化 服务 场景 -
jmeter学习指南之HTTP请求中自动重定向和跟随重定向的区别
视频地址：http://edu.51cto.com/lecturer/4626073.html一、自动重定向和跟随重定向大家有没有注意到，在JMeter HTTP请求中，有一个 跟随重定向 和 自动重
2022-06-03 信息 情况 方式 页面 两个 作用 地址 实际 指向 状态 结果 视频 这是 逻辑 控制 学习指南 指南 学习