互联网科技列表
-
spark-sql 自定义函数
（1）自定义UDFobject SparkSqlTest { def main(args: Array[String]): Unit = { //屏蔽多余的日志 Lo
2022-06-03 类型 数据 方法 结果 输出 入口 对象 日志 编程 输入 函数 一致 例子 参数 多个 就是 新传 确定性 缓冲区 过程 -
apache的GenericObjectPool对象池使用经历！
今天，对照晚上的kafka+Spark streaming+Redis实时数据分析系统实战（https://www.iteblog.com/archives/1378主要目的是整合kafka和Spar
2022-06-03 对象 实例 信息 函数 线程 问题 分析 果断 不时之需 没什么 中央 办法 动作 可以通过 后台 周期 周期性 实战 实时 容器 -
Package should contain a content type part [M1.13]
异常信息：org.apache.poi.openxml4j.exceptions.InvalidFormatException: Package should contain a content ty
2022-06-03 格式 支持 不同 信息 原因 文件 方法 -
【软件测试】学会这些测试方法，成功晋升产品经理不是梦
测试工程师做了一段时间之后，很多人都有自己的打算，有的人准备从事其他的方面，有的人准备继续强化自己，做一个精英测试工程师，本文就提供给大家另外一个选择，从测试工程师转职产品经理，对于现在是测试工程师的
2022-06-03 测试 产品 经理 不同 工程 工程师 缓存 账号 设计 密码 资料 链接 人员 就是 情况 数据 时间 流程 环境 准备 -
广告策划也能用上Axure RP快速原型设计工具？
大部分人开始写第一句文案是从Word开始的，接着还会进阶到使用PPT，甚至使用AI。但是，今天小编要分享的这款工具并非Word/PPT/AI，而是一款快速原型设计工具--Axure RP，它可以协助一
2022-06-03 文案 设计 策划 工具 设计师 产品 思维 时候 广告 文档 传统 内容 只有 平面 效果 文字 有时候 策划人 菜单 视觉 -
利用HttpRequester进行接口测试
介绍httprequester是火狐下面的一个插件，非常轻量级，用来进行不太复杂的接口测试还是很有用处的。至于ta的安装也比较简答，先安装好火狐浏览器然后再安装插件即可，不会的自行google吧接口信
2022-06-03 接口 测试 信息 参数 插件 火狐 类型 还是 复杂 上图 名称 地址 按钮 数据 方式 格式 示例 支持 选择 不用 -
你真的了解软件测试行业吗？
很多人懵懵懂懂进入了软件测试行业，有些人做的开开心心，事业发展顺顺利利，有些人不断地换工作，每次工作都不开心，不知道是自己怎么了，还是周围怎么了。在不断地换工作过程中，你有考虑过自己是否适合这个行业吗
2022-06-03 测试 软件 行业 软件测试 职业 素养 工作 不断 利益 专业 人员 公共利益 客户 技术 重要 个人 团队 标准 能力 学习 -
LInux6虚拟机安装GreenPlum
一、环境准备1、安装VMware软件，然后在VMware里安装三台Linux虚拟机(我使用的是redhat)2、设置虚拟机主机名ip内存硬盘mdw192.168.10.20500M8Gsdw1192.
2022-06-03 主机 文件 三台 数据 节点 信息 数据库 内容 命令 环境 用户 参数 工具 目录 硬盘 测试 配置 成功 密码 系统 -
使用CXF创建Webservice服务端
1，添加依赖 org.apache.cxf cxf-spring-boot-starter-jaxws 3.2.72，定义webservice的接口package com.ultra
2022-06-03 接口 全称 名称 备注 所在 斜线 注解 类名 配置 服务 -
2、Hdfs架构设计与原理详解
@[TOC]1.Hadoop架构Hadoop由三个模块组成：分布式存储HDFS、分布式计算MapReduce、资源调度引擎Yarn2.HDFS体系架构2.1NameNode NameNode负责：
2022-06-03 数据 文件 信息 客户 客户端 系统 存储 机器 节点 内存 方式 过程 进程 运行 均衡 周期 机制 状态 集群 工作 -
利用sqoop导入数据到mysql出错怎么解决
下面讲讲关于利用sqoop导入数据到mysql出错怎么解决，文字的奥妙在于贴近主题相关。所以，闲话就不谈了，我们直接看下文吧，相信看完利用sqoop导入数据到mysql出错怎么解决这篇文章你一定会有所
2022-06-03 数据 命令 方法 数据库 文本 格式 输入 成功 下文 主题 内容 原因 原因分析 地方 奥妙 文字 更多 板块 第一次 篇文章 -
微服务是什么？有什么优缺点？
这篇文章的知识点包括：微服务的概念、微服务的优缺点、微服务的架构以及微服务的使用示例，阅读完整文相信大家对微服务会有一定的认识。什么是微服务微服务 (Microservices) 是一种软件架构风格，
2022-06-03 服务 功能 应用 架构 程序 应用程序 独立 业务 事件 数据 开发 不同 代码 人员 系统 分布式 问题 处理 运行 通信 -
Hbase给初学者的“下马威”
自从成为架构师（）之后，李大胖的学习动力似乎少了一些，尤其是今年（当然也有一些客观因素）。临近岁末，内心着实有些惭愧，决定学习一把大数据。跟随一下业界前沿（其实已经不是前沿了），梦想着有一天能够拥有拥
2022-06-03 如图 问题 文件 日志 目录 就是 命令 错误 集群 配置 关键 关键词 官方 数据 文档 程序 还是 噩梦 实际 中设 -
Flink实现Kafka到Mysql的Exactly-Once
一、背景最近项目中使用Flink消费kafka消息，并将消费的消息存储到mysql中，看似一个很简单的需求，在网上也有很多flink消费kafka的例子，但看了一圈也没看到能解决重复消费的问题的文章，
2022-06-03 数据 消费 消息 成功 数据库 事物 时间 检查点 检查 例子 手动 数字 方法 时候 上一 处理 事件 代码 就是 日志 -
大数据面试常见问题解答
大数据（big data），一般来说是指无法在可承受的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合。本文汇总了大数据面试中常见的问题及解答方案，供大家参考：1、Spark能否取代Hadoop
2022-06-03 文件 数据 内存 支持 方案 次数 排序 还是 频率 处理 生态 最大 大小 整数 系统 不同 框架 原因 就是 方法 -
Elasticsearch Aggregation 笔记
Aggregation 概述Aggregation 可以和普通查询结果并存，一个查询结果中也允许包含多个不相关的Aggregation. 如果只关心聚合结果而不关心查询结果的话会把SearchSour
2022-06-03 条件 结果 类型 函数 属性 指标 部分 多个 结构 交易 查询 名字 就是 路径 两个 字段 节点 金额 兄弟 只有 -
python 编码问题
编译一个Python程序的时候，一直出现"Non-ASCII character 'xe5' in file"报错问题出现问题的原因：Python默认是以ASCII作为编码方式的，如果在自己的Pyth
2022-06-03 问题 UTF-8 编码 不行 一行 代码 办法 原因 实际 实际上 开头 文件 文档 方式 时候 格式 源文件 源码 程序 英语系 -
5月13日，The First day
今天是参与培训的第一天，实话今天并没有讲什么特别的课程，主要就是一个开始。上午是开班典礼，首先是整个培训学校的简介，这里我就不说了，各位需要了解的朋友请百度吧，上面也有详细的介绍。然后是师资的介绍，这
2022-06-03 时间 朋友 培训 重要 就是 课程 资料 还是 学习 厉害 大跌眼镜 接下来 专业 人才 典礼 单片机 地方 培训学校 多年 学员 -
大数据到底能做什么？需要学习哪些知识？
相信很多大数据的初学者或者想转行大数据开发的朋友最关注的问题就是大数据开发到底可以做什么。什么是大数据？"大数据"这个词频繁的出现在媒体是2007年之后的事了。尽管已经过去了10多年的时间，但是大家对
2022-06-03 数据 特征 分析 学习 体量 方面 机器 明显 医疗 大数 就是 意义 行业 开发 犯罪 管理 零售 适时 频繁 混为一谈 -
Apache Arrow官方文档-内存结构
定义/术语 由于不同的项目使用不同的词语描述各种概念，所以这里有一个小小的术语表来帮助消除歧义。数组：已知长度具有相同类型的值序列。槽或数组槽：一些特定数据类型的数组中的单个逻辑值连续的内存区域：给
2022-06-03 数组 类型 字节 联合 结构 内存 长度 布局 数据 位图 物理 存储 缓冲 不同 缓冲区 字典 字段 示例 索引 偏移