互联网科技列表
-
Kafka笔记整理（二）：Kafka Java API使用
[TOC]下面的测试代码使用的都是下面的topic：$ kafka-topics.sh --describe hadoop --zookeeper uplooking01:2181,uplooking
2022-06-03 代码 配置 数据 消费者 消费 参数 文件 终端 输出 就是 程序 测试 生产 生产者 类型 姑娘 两个 序列 杨柳 格式 -
Beam 超实用examples之Pi值计算
Beam Pi值计算Beam刚刚开源不是很久，快2个月了。目前的版本是0.5.0版本。官方的源码中提供了4个examples.无奈这四个案例都只是WordCount的四种不同的实现。作为一个从Spar
2022-06-03 试验 代码 概率 次数 就是 数据 正方 正方形 迭代 也就是 名称 杯子 案例 版本 理论 笔者 资源 先来 应用 不同 -
hadoop MR 统计分析日志脚本一例
#! /bin/sh#############################split today and yesterdayfor i in $(seq 10)doecho " " >> /u1/
2022-06-03 统计 命令 更多 规则 需求 面的 开发 日志 统计分析 脚本 分析 -
移动app测试方案及流程&测试点归纳
移动app测试方案及流程1.首先是测试 资源确认及准备（1）产品需求文档，产品原型图 ，接口说明文档及设计文档应该齐全（2）测试设备及测试工具 的准备：IOS和android的不同年版本的真机，以及测
2022-06-03 测试 功能 产品 软件 运行 客户 文档 版本 不同 兼容性 功能测试 性能 数据 移动 内存 客户端 时间 过程 切换 升级 -
0014-Hive中的Timestamp类型日期与Impala中显示不一致分析
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。1.问题描述Hive表中存储的Timestamp类型的字段显示日期与Impala中查询出来的日期不一致。2.问题复现1.创建一个简单的测试
2022-06-03 时间 时区 查询 问题 一致 日期 函数 存储 温馨 图片 手机 数据 格式 高清 无码 参考 提示 测试 类型 分析 -
Hadoop 系列（一）—— 分布式文件系统 HDFS
一、介绍HDFS （Hadoop Distributed File System）是 Hadoop 下的分布式文件系统，具有高容错、高吞吐量等特性，可以部署在低成本的硬件上。二、HDFS 设计原理2.
2022-06-03 数据 文件 副本 机架 存储 支持 系统 原理 空间 因子 多个 故障 服务 客户 服务器 策略 容错 选择 位置 吞吐量 -
集算器实现外部数据并行计算
文本并行SPL可将文本文件按体积大致分为N段，只读取其中一段。比如cardInfo.txt存储着一千万条人口信息，将其分为十份，取第二份，代码可以写作：AB1=file("d:\\temp\\
2022-06-03 数据 线程 性能 代码 区间 任务 范围 类型 字段 语句 函数 数据库 时间 结果 存储 情况 索引 明显 例子 文件 -
web app 、native app、hybrid app比较
app的分类大致可以分为这3种：native app（原生app）web apphybrid app（混合app）Native App 指的是移动端的原生应用,对于 Android 是 apk，对于
2022-06-03 开发 页面 浏览器 网页 应用 浏览 移动 用户 端的 系统 速度 不同 操作系统 原因 格式 硬件 程序 网络 体验 优异 -
webbench压力测试工具
webbench由Lionbridge公司开发，主要测试每秒钟请求数和每秒钟数据传输量，同时支持静态、动态、SSL部署简单，静动态均可测试。适用于小型网站压力测试。最多可以模拟3万个并发连接去测试网站
2022-06-03 测试 压力 动态 文件 目录 网站 错误 工具 测试工具 普通 公司 参数 同时 感觉 数据 数据传输 时间 示例 系统 结果 -
记载我的spark源码阅读火花
记载我的spark源码阅读火花知识点：1、seq:列表，适合存有序重复数据，进行快速插入/删除元素等场景,Set是集合，适合存无序非重复数据，进行快速查找海量元素等场景memoryKeys = Seq
2022-06-03 函数 类型 作用 元素 参数 变量 场景 括号 数据 末尾 生成 私有 配置 源码 火花 生产方式 名称 地方 奇葩 好处 -
hadoop安装遇到的问题
1、启动yarn时报Error: JAVA_HOME is not set and could not be found.修改/etc/hadoop/hadoop-env.sh中设JAVA_HOME，
2022-06-03 问题 信息 原因 版本 目录 一致 操作系统 前缀 参数 只需 命令 文件 方法 时候 时报 系统 路径 错误 中设 配置 -
一篇文章告诉你大数据应该怎么学
最近不少网友向我咨询如何学习大数据技术？大数据怎么入门？怎么做大数据分析？数据科学需要学习那些技术？大数据的应用前景等等问题。由于大数据技术涉及内容太庞杂，大数据应用领域广泛，而且各领域和方向采用的关
2022-06-03 数据 技术 学习 分析 机器 智能 科学 应用 问题 模型 领域 基础 核心 关键 目标 系统 决策 处理 管理 数据挖掘 -
flink伪分布式搭建及其本地idea测flink连接
下载安装flink：上传压缩包：flink-1.7.2-bin-scala_2.12.tgz解压：tar -zxvf /flink-1.7.2-bin-scala_2.12.tgz -C ../hon
2022-06-03 节点 集群 配置 目录 监听 代码 文件 主机 任务 命令 控制台 方式 环境 程序 页面 控制 测试 统计 观察 输入 -
hive的数据类型
1.基本数据类型因为hive也是java语言编写的，所以他的基本数据类型和java的大致相同：2.基本数据类型（1）array(数组)特点：个数可以不相同，但是类型相同例：以family表（name
2022-06-03 类型 相同 查询 数据 语句 个数 特点 对象 数组 格式 不同 属性 语言 -
app渲染性能专项测试之Hierarchy Viewer
这块真机使用比较复杂，待后面专项测试轮廓测试出来后再来补充。可以参考：http://www.jianshu.com/p/e9e05ce5b0c9http://blog.csdn.net/autumn_
2022-06-03 测试 专项 复杂 轮廓 参考 性能 -
2分钟了解docker
环境问题的罗列测试环境的管理一直是测试人员关注的焦点之一，非独立的测试环境造成对测试的一系列困扰，当团队过多时测试环境的资源开销也会带来诸多成本，这些问题包括：1.数据独立：测试人员之间数据的干扰；2
2022-06-03 测试 环境 开发 人员 数据 问题 成本 代码 镜像 独立 配置 不同 一致 仓库 场景 开销 文件 资源 服务 管理 -
接口自动化测试之PHPUnit-框架代码编写2
接着上篇文章继续代码的讲解，上次的代码中引入了require.php，这个玩意是干啥的呢，今天我们就来说下require.php内容如下 2022-06-03 文件 代码 内容 配置 测试 就是 数据 文章 封装 选择 着急 上篇 之所以 只需 可以通过 地方 方式 方法 格式 玩意
-
numpy_ndarry的创建及数据类型
ndarray 多维数组（N Dimension Array）NumPy数组是一个多维的数组对象（矩阵），称为ndarray，具有矢量算数运算能力和复杂的广播能力，并具有执行速度快和节省空间的特点注意
2022-06-03 数组 数据 类型 大小 维度 序列 代码 示例 结果 运行 个数 多维 元素 属性 二维 生成 区间 参数 对象 浮点 -
解决FastJson 1.2.39的bug
1、日期转换默认格式覆盖注解格式的bug；com.alibaba.fastjson.serializer.JSONSerializer#writeWithFormat修改后的代码：public fin
2022-06-03 代码 格式 字段 日期 时候 毛病 注解 排序 -
归并排序和快速排序（三十二）
上节我们学习了冒泡排序和希尔排序，本节我们继续学习归并排序和快速排序。1、归并排序：将两个或两个以上的有序序列合并成一个新的有序序列。如下那么既然有 2 路归并，便会有多路归并。将 3 个有序序列归并
2022-06-03 排序 序列 元素 有序 两个 基准 结果 复杂 参数 复杂度 情况 数据 学习 运行 代码 时间 源码 示例 空间 面的