互联网科技列表
-
大数据之搭建HDP环境，以三个节点为例（上——部署主节点以及服务）
（一）实验环境l 实验介质CentOS-7-x86_64-Everything-1708.isojdk-8u144-linux-x64.tar.gzambari-2.6.0.0-centos7.
2022-06-03 配置 数据 服务 密码 数据库 用户 节点 目录 环境 文件 面的 命令 集群 登录 输入 主机 一致 成功 两个 信息 -
好程序员大数据学习路线分享spark之Scala
好程序员大数据学习路线分享spark之Scala，基本语法：变量变量的定义：不可变：val a = 2 或者 val a : Int = 2 (指定了数据类型) lazy val a : Int =2
2022-06-03 类型 方法 函数 变量 数据 两个 参数 哥哥 弟弟 括号 操作符 结果 循环 运算 只有 子类 开头 数组 方式 条件 -
Hadoop运维记录系列（二十四）
从这篇开始记录一下集群迁移的事情早先因为机房没地方，就已经开始规划集群搬机房的事情，最近终于开始动手了，我会把这次不停机迁移的过程遇到的主要问题和矛盾以及各种解决方法记录下来。集群规模说大不大，几百台
2022-06-03 机房 集群 问题 机器 内存 参数 带宽 调整 之间 事情 同事 方式 机架 网卡 测试 编译 划算 矛盾 粗暴 一行 -
java线程同步-synchronized
synchronized:同步（锁），可以修饰代码块和方法，被修饰的代码块和方法一旦被某个线程访问，则直接锁住，其他的线程将无法访问非静态方法的同步锁对象是this静态方法的锁同步对象是当前类的字节码
2022-06-03 同步 对象 方法 代码 线程 票数 静态 卖票 字节 案例 火车 火车站 售票 测试 -
软件工程讲义 0 微博上的软件工程
有舌尖上的美味, 也有微博上的软工。舌尖上的美味各有千秋, 而微博上对软工的抱怨都是相似的。下面是我在新浪微博收集到大学生对软件工程教学的反馈 （欢迎投稿 @程序员邹欣）:师生关系（不限于软件工程）教
2022-06-03 工程 软件 软件工程 美味 舌尖 相似 各有千秋 大学 大学生 完了 师生 教学 教材 程序 程序员 老师 新浪 作业 实践 投稿 -
第94课：SparkStreaming 实现广告计费系统中在线黑名单过滤实战
本期课程内容：在线黑名单过滤实现解析SparkStreaming实现在线黑名单过滤广告计费系统，是电商必不可少的一个功能点。为了防止恶意的广告点击(假设商户A和B同时在某电商做了广告，A和B为竞争对手
2022-06-03 黑名单 黑名 广告 数据 程序 运行 内容 系统 在线 有效 元素 集群 计费系统 名称 时候 结果 配置 复杂 业务 信息 -
好程序员web前端学习路线分享AJAX状态码ajax.status及封装
好程序员web前端学习路线分享AJAX状态码ajax.status及封装，AJAX状态码说明1**：请求收到，继续处理2**：操作成功收到，分析、接受3**：完成此请求必须进一步处理4**：请求包含一
2022-06-03 服务 服务器 资源 用户 字段 客户 错误 状态 文件 版本 处理 地址 代理 支持 过载 封装 有效 成功 信息 关口 -
elasticsearch2.4.2安装(1)
1. 解压elasticsearch.2.4.2；3个节点2. 修改config/elasticsearch.yml(注意要顶格写，冒号后面要加一个空格)NIE-00: 192.168.1.100a)
2022-06-03 集群 配置 节点 两个 冒号 前提 控制台 浏览器 空格 还是 控制 浏览 输出 -
软件开发的准备工作及详细步骤
一、开发流程图为使流程更清晰，本图省略了各环节的评审，如有更好的表现形式，欢迎提出建议。二、过程产物及要求本表主要列出开发阶段需要输出的过程产物，包括产物名称、成果描述、负责人及备注，即谁、在什么时间
2022-06-03 项目 测试 工程 产品 工程师 阶段 经理 设计 需求 开发 界面 业务 团队 流程 过程 输出 产物 内容 结果 评审 -
Hive Sum MAX MIN聚合函数
数据准备cookie1,2015-04-10,1cookie1,2015-04-11,5cookie1,2015-04-12,7cookie1,2015-04-13,3cookie1,2015-04-
2022-06-03 分组 起点 函数 关键 数据 解释 关键字 含义 子句 数据库 终点 结果 面的 准备 -
python生成随机数
更多大数据分析、建模等内容请关注公众号《bigdatamodeling》在实现算法时经常会用到随机数，有时会忘记各种随机数的生成方法，这里对Python中的随机数生成方法进行汇总，以供以后查阅。imp
2022-06-03 生成 标量 随机数 区间 数值 数组 方法 正态分布 开区 离散 选择 之间 代表 作用 元素 公众 内容 常会 数据 数据分析 -
ZooKeeper 快速搭建与体验
Apache ZooKeeper 是一个面向分布式应用程序的高性能协调服务器, 至于它的具体介绍像能提供命名和配置管理、同步和组服务等, 请自个 Google. 虽然对 ZooKeeper 早有耳闻,
2022-06-03 服务 实例 环境 系统 集群 项目 应用 测试 不同 著名 三个 中用 主机 全文 分布式 动态 变量 命令 多个 实际 -
使用Grpc+maven定义接口、发布服务、调用服务
项目使用maven构建，执行mvn compile 命令后，proto文件自动生成java文件，这个功能需要依赖相关编译插件。一、pom.xml配置 4.0.0 com.test.grpcTest
2022-06-03 服务 客户 客户端 文件 参数 服务器 编译 代码 路径 接口 存根 对象 端口 节点 项目 生成 通信 文档 方法 日志 -
既然喜欢就要认真对待
一个多月前，我正处于职业的迷茫期，我对工作提不起兴趣，不知道真正想要的是什么。我想要过得好一点，所以一直这样下去是不行的，应该做点改变。 于是，我从最喜欢的事情入手，从书中去寻找
2022-06-03 数据 技术 数据分析 分析 专业 兴趣 效果 时间 机会 行业 速度 不行 果断 耐心 迷茫 接下来 一味 不好 不断 专业人才 -
参数使用小技巧
在报表开发过程中，我们经常会用参数对数据进行过滤查询，具体的实现方式通常是在sql语句中where部分定义好针对哪个字段进行过滤，之后参数模板将不同的值传递给这个字段进行数据查询，返回不同的结果集供报
2022-06-03 参数 数据 查询 技巧 字段 数据表 语句 不同 报表 应用 动态 模板 两个 名称 就是 效果 方式 标识 标识符 知识 -
8.30 总结(vim find bash基础 特殊权限位 磁盘管理基础）
1、总结文本编辑工具vim的使用方法；vim是一种可视化的编辑器有三种模式：编辑模式、插入模式、末行模式；（使用vim打开文件时默认是处于编辑模式）模式间的转换：编辑模式à插入模式i 在光标所在处插入
2022-06-03 文件 模式 权限 光标 用户 字符 所在 变量 之间 内容 目录 单词 进程 命令 系统 移动 配置 交互式 硬盘 普通 -
好程序员大数据学习路线之hive表的查询
好程序员大数据学习路线之hive表的查询1.join 查询1、永远是小结果集驱动大结果集(小表驱动大表，小表放在左表)。 2、尽量不要使用join，但是join是难以避免的。left join 、 l
2022-06-03 查询 数据 结果 学生 排序 成绩 语句 字段 标识 驱动 内存 函数 右边 多个 时候 支持 考试 升序 子句 效果 -
spark 表关联
发现用spark写表join比flink 简单很多，至少schema 可以省了，下面是一个例子public static void main(String[] args) {
2022-06-03 例子 现用 关联 -
一台电脑多开网页显示不同IP地址方法
现在很多需要自己的电脑打开每个浏览器显示的IP的地址不一样，突破IP限制后去访问别的网址，上页游等等的技术。这个方法真的是傻瓜式的操作，不需要你去电脑上设置什么东西，直接使用软件一键连接即可，非常方便
2022-06-03 软件 选择 电脑 地址 浏览器 浏览 突破 限制 方法 网页 成功 东西 傻瓜 兔子 动态 图片 城市 工作室 技术 效果 -
G7在实时计算的探索与实践
作者: 张皓G7业务快览G7主要通过在货车上的传感器感知车辆的轨迹、油耗、点熄火、载重、温度等数据，将车辆、司机、车队、货主连接到一起，优化货物运输的时效、安全、成本等痛点问题。整个数据是通过车载的传
2022-06-03 数据 实时 业务 算子 平台 开发 报警 任务 疲劳 场景 监控 程序 资源 处理 事件 功能 时间 车辆 管理 延迟