互联网科技列表
-
大数据环境搭建-之-hadoop 2.x分布式部署-集群配置
1、 下载hadoop 并解压2、为 hadoop 文件分配角色chown -R hadoop:hadoop hadoop组名:角色名 文件名3、ls -l 查看详细信息 角色分配是否成功4、创建ha
2022-06-03 文件 目录 角色 分配 配置 成功 用户 环境 信息 变量 地址 文件名 权限 格式 进程 验证 分布式 数据 集群 -
Windows系统下如何安装Python以及对应pygame、matplotlib
最近,准备学习Python这门编程语言。与其他语言一致,开始就要安装好编译环境和一些必须的工具。下面是我在初次安装Python环境时的一些经验和体会。一, 准备好软件资源1, 下载Python文件ht
2022-06-03 运行 版本 工具 指令 装好 地址 文件 环境 语言 资源 准备 一致 命令 对话框 快捷键 格式 界面 经验 编程语言 路径 -
阿里重磅开源 Blink:为什么我们等了这么久?
今年,实时流计算技术开始步入主流,各大厂都在不遗余力地试用新的流计算框架,实时流计算引擎和 API 诸如 Spark Streaming、Kafka Streaming、Beam 和 Flink 持续
2022-06-03 阿里 社区 实时 场景 巴巴 阿里巴巴 版本 数据 技术 用户 业务 方面 应用 代码 引擎 项目 学习 支持 生态 领域 -
KMP 算法的应用(二十七)
我们在上节博客中讲到了 KMP 算法的具体实现,那么我们本节就来看看 KMP 算法的应用。问题:如何在目标字符串中查找是否存在指定的子串?我们来看看字符串类中的新功能,如下图所示1、子串查找(KMP
2022-06-03 字符 字符串 结果 测试 代码 源码 运行 算法 位置 函数 应用 减法 博客 效果 目标 长度 保证 下标 中将 也就是 -
Hadoop之HDFS的HA与QJM
本文主要介绍HDFS HA特性,以及如何使用QJM(Quorum Journal Manager)特性实现HDFS HA。一、背景HDFS集群中只有一个Namenode,这就会引入单点问题;即如果Na
2022-06-03 配置 集群 运行 状态 指令 机器 进程 数据 两个 参数 地址 特性 节点 不同 只有 同时 多数派 手动 故障 文件 -
Hadoop节点上负载过高的问题分析
最近发现我们的hadoop集群的客户端机器负载经常飙到几百,导致机器反应很慢, 客户反应无法提交job,或者job跑的很慢。针对这种情况通常有几个解决方案,一个是增加客户端机器数量,把他们做到一个po
2022-06-03 内存 情况 程序 功能 机器 客户 应用 场景 客户端 应用程序 系统 大部分 物理 碎片 反应 问题 分析 不同 不对 寻常 -
HTML5接入与OC交互
////屏幕#define SHENGHUO_WIDTH ([UIScreen mainScreen].bounds.size.width)#define SHENGHUO_HEIGHT ([UISc
2022-06-03 导航 接入 屏幕 属性 方法 状态 顶部 中设 提示 测试 登录 -
spark2.x由浅入深深到底系列六之RDD api reduceByKey与foldByKey对比
学习spark任何知识点之前,最好先正确理解spark,可以参考:正确理解spark一、序言对于key-value类型RDD的两个api, reduceByKey与foldByKey,我们往往只是简单
2022-06-03 对象 两个 应用 类型 会创 原理 场景 方面 时候 参考 不同 相同 频繁 一致 必要 接下来 不够 只是 就是 序言 -
数据处理流程
流程图解析典型的BI系统体流程如下:由于是处理海量数据,流程中各环节所使用的技术则跟传统BI完全不同,后续课程都会一一讲解:1) 数据采集:定制开发采集程序,或使用开源框架FLUME2) 数据预处理:
2022-06-03 数据 流程 定制开发 技术 程序 开发 产品 工具 处理 不同 仓库 传统 典型 数据采集 架构 框架 流程图 海量 环节 生态 -
系统架构演变
传统架构分布式架构按照功能把系统划分为多个独立的模块,各个模块之前配合才能完成业务逻辑,叫分布式。多个系统之前相互协作完成业务流程,系统之间要进行相互通信。SOA面向服务的架构,把工程分为表现层和服务
2022-06-03 服务 架构 系统 业务 分布式 逻辑 多个 方法 模块 网络 通信 操作系统 业务流程 中表 之间 传统 功能 只需 工程 框架 -
python笔记-循环
条件判断与缩进,注意冒号加次数限制#猜数字lucky_num = 19input_num = -1#次数限制count = 0#while lucky_num!=input_num and count
2022-06-03 次数 限制 循环 冒号 数字 条件 注释 语言 笔记 -
vim打开多个文件方式及操作
一.vim启动及打开文件1.1不加任何参数,启动vim,显示版本号,及其他一些帮助信息;#vim1.2选项中可以打开指定到多少行,打开多个文件#vim [option] file....#vim +
2022-06-03 文件 命令 位置 光标 多个 简写 重要 以中 信息 冒号 参数 及其他 括号 格式 水平 版本 第一次 切换 定位 帮助 -
运营团队说产品做的烂,技术人员能力太差的前因后果?
在公司经营不善,或者运营KPI不达标的时候,我们经常会听到运营团队说:"不是我们运营能力不行,是这个产品做的太烂,技术人员能力太差,做了这么个鬼东西,你让我们怎么运营,这神仙过来都没得救。"事实真的是
2022-06-03 运营 产品 人员 能力 项目 团队 时候 阶段 技术 公司 常会 评审 不行 实用 事与愿违 业务 东西 事实 代码 偏差 -
springboot读取配置文件的三种方式
方式一:@Configuration//@PropertySource("classpath:jdbc.properties")//@PropertySource("classpath:config/
2022-06-03 文件 配置 方式 信息 名字 路径 参数 多个 数组 支持 测试 位置 写法 名称 扩展名 方法 是在 根目录 目录 逗号 -
selenium调用IE浏览器报错
开始学习写第一个自动化脚步时,调用IE浏览器运行报错,如下图原因:本地IE使用的是IE9,win7上的IE7及以上版本必须在IE internet选项的安全页,4个区域的的启用保护模式必须一致(要么全
2022-06-03 一致 模式 保护 安全 区域 要么 浏览器 浏览 原因 官方 文档 方案 版本 脚步 解决方案 学习 自动化 运行 -
零基础大数据学习框架
大数据开发最核心的课程就是Hadoop框架,几乎可以说Hadoop就是大数据开发。这个框架就类似于Java应用开发的SSH/SSM框架,都是Apache基金会或者其他Java开源社区团体的能人牛人开发
2022-06-03 数据 开发 学习 框架 分布式 处理 系统 编程 语言 数据库 文件 应用 基础 就是 实时 工具 平台 技术 数据挖掘 核心 -
Lintcode15 Permutations solution 题解
【题目描述】Given a list of numbers, return all possible permutations.Notice:You can assume that there is
2022-06-03 元素 数组 题目 复杂 复杂度 数字 时间 答案 链接 问题 递归 下标 想法 类型 节点 分析 解答 题解 -
TTCN手动测试总结
1、AT命令AT + CFUN 开机 关机命令AT + CGACT PPT激活 Plesiochronous Path Termination -- 准同步通道终端AT + CGATTAT + CGD
2022-06-03 手动 命令 电脑 测试 终端 方法 运行 可以通过 常用 情况 手册 手机 手机号 指示 按键 模式 激活 端口 笔记 笔记本 -
bigdata - zookeeper笔记(一)
zookeeper的定义zookeeper是分布式应用程序的高性能协调服务,顾名思义,zookeeper用来保存分布式应用程序的多个节点之间的状态、配置等信息,以确保分布式程序的正确、高速运行。zoo
2022-06-03 节点 数据 集群 机器 选举 配置 状态 服务 信息 订阅 事务 时钟 逻辑 服务器 投票 文件 订阅者 监听 分布式 局部 -
接口测试是什么&接口测试文档规范
以下内容选自《大话软件测试-性能、自动化、安全及团队管理》接口测试是什么?接口测试怎么做?这样的问题几乎每天都会被问到几十次,可见很多朋友对于接口测试并不是十分了解,而接口测试又是现在互联网产品测试中
2022-06-03 接口 测试 文档 参数 通俗 时候 服务器 本质 格式 服务 解释 公司 内容 地址 实际 工具 方式 用户 用户名 章节