互联网科技列表
-
Hadoop2.6.0学习笔记(三)Hadoop序列化
鲁春利的工作笔记,谁说程序员不能有文艺范?序列化和反序列化在分布式数据处理中,主要应用于进程建通信和永久存储两个领域。序列化(serialization)就是结构化的数据转换为字节流以便在网络上传输或
2022-06-03 序列 接口 数据 两个 引擎 搜索引擎 搜索 方法 程序 站点 类型 结构 网站 过程 统计 原始 安全 代码 信息 内存 -
Flink在美团的实践与应用
作者: 刘迪珊本文整理自8月11日在北京举行的Flink Meetup,分享嘉宾刘迪珊(2015年加入美团数据平台。致力于打造高效、易用的实时计算平台,探索不同场景下实时应用的企业级解决方案及统⼀化服
2022-06-03 实时 数据 就是 作业 业务 问题 处理 场景 平台 指标 状态 日志 比如说 系统 开发 应用 不同 管理 统一 时候 -
超大数据下大批量随机键值的查询优化方案
一、问题描述键值查询是很常见的查询场景,在数据表上建有索引后,即使表中数据记录数巨大(几亿甚至几十亿行),用键值查询出单条记录也会很快,因为建立索引后的复杂度只有 logN(以 2 为底)次, 10
2022-06-03 数据 文件 字段 索引 查询 游标 序列 函数 线程 有序 代码 结果 参数 方法 结构 情况 方式 多个 数据结构 类型 -
光模块接口类型大盘点
今天来讲一讲光模块接口类型光模块是可以发射和接收模拟信号的光学器件。电信号通过光模块的发射端后转化为光信号,再经过接收端将光信号转化为电信号以此实现光电转换。要想让他们实现信息交换,需要将两个光模块连
2022-06-03 模块 接口 信号 连接器 类型 光纤 双绞线 电信 电信号 传输 发射 两个 信息 光学 光电 光纤跳线 器件 方式 环境 跳线 -
Thrift 资源清理代码剖析
void TSocket::close() {if (socket_ != -1) {#ifdef _WIN32shutdown(socket_, SD_BOTH);::closesocket(soc
2022-06-03 套接字 客户 客户端 代码 资源 剖析 -
Web服务的性能测试
引言1. 尝试去理解是把更多的努力放在测试上还是在生产中更快的解决问题,权衡两者。2. 一个失败的测试不会直接影响到用户,但是一旦产品开始工作,便开始影响。测试应该一直将终端用户的视角铭记于心,去保证
2022-06-03 测试 服务 性能 软件 用户 验收 版本 现实 产品 公司 方法 标准 影响 通信 有效 过时 因素 场景 技术 数据 -
什么时候触发GC
Young GC----针对年轻代当Eden区满了的时候,会触发Young GCFull GC----针对整个堆1. 在发生Young GC的时候,虚拟机会检测之前每次晋升到老年代的平均大小是否大于年
2022-06-03 空间 对象 年代 配置 时候 参数 过程 很大 内存 垃圾 情况 是在 模式 碎片 问题 剩余 年轻 也就是 免费赠送 同时 -
三、hive--jdbc的使用
一、jdbc连接mysql代码示例public class TestConnector { final static String USER = "root"; final static
2022-06-03 代码 数据 对象 版本 示例 这是 驱动 成功 名字 姓名 字段 字符 字符串 数据库 方法 类型 结果 中新 代理 -
免费资源 | ActiveReports 报表控件发布多平台 Demo 代码集合
近期,ActiveReports 产品开发组的小伙伴针对大家比较关注的报表功能、常见问题、经典实现,特意准备了一个Demo代码集合,涉及WinFormss \ ASP.NET \ MVC 多个技术平台
2022-06-03 报表 框架 数据 按钮 数据源 参数 区域 模式 代码 动态 功能 工具 平台 不同 工具栏 开发 页面 控件 用户 项目 -
R语言读取大数据
普通情况下使用scan读取数据x <- scan("D:\\test.txt")按列读入,指定数据类型x <- scan("test2dat.txt", what=list("",0,0)) #读取
2022-06-03 数据 参考 文件 普通 写法 名字 字符 情况 数值 方法 类型 表头 逗号 别为 提示 语言 -
环境变量path配置不起作用
java环境变量配置容易出现的问题:配置但是我在path中绝对路径没有问题(如:path:D:\Java\jdk1.7.0_45\bin),但换成相对路径就没有效果(%JAVA_HOME%), 原因是
2022-06-03 变量 配置 路径 问题 环境 原因 效果 系统 要是 如图 作用 -
手动添加新用户hive ,基本组为hive(5000).附加组mygroup
先添加一个组,nano /etc/group,切换最后一行,添加hive:x:5000: mygroup后面用户区加上hive添加用户 nano /etc/passwd 加上 hive:x:5000:
2022-06-03 用户 一行 密码 精度 计算器 切换 生成 登录 输入 手动 附加 -
好程序员大数据学习路线分享Scala系列之集合操作函数
好程序员大数据学习路线继续为大家分享Scala系列之集合操作函数4.6 集合的重要函数4.6.1sum/max/min/count在序列中查找最大或最小值是一个极常见的需求,如下:val number
2022-06-03 函数 元素 数据 方法 最大 最小 例子 功能 奇数 序列 需求 工作 程序 程序员 路线 学习 不同 复杂 强大 重要 -
Redis学习笔记(一):Redis常用数据类型之string、hash和list的命令
微信公众号redis是日常开发中最常的非关系型数据库,可以说只要是个项目基本都会使用到。常用来做数据缓存、分布式锁等等。redis的基本安装内容就不说了(在之前的博客搭建系列里面有提到redis的安装
2022-06-03 数据 存储 元素 类型 命令 序列 内存 字符 字符串 常用 整数 方式 有效 时间 项目 对象 成功 优点 信息 右侧 -
loadrunner脚本日志自动开启
需求:由于脚本数量大,如果全部开启日志需要很长时间,因为一些日志需要开启,一些日志不需要开启,经过查询函数(lr_set_debug_message());具体实现:在run-time setting
2022-06-03 日志 脚本 函数 参数 数量 逗号 需求 长时 提示 查询 -
Golddata如何采集需要登录/会话的数据?
概要本文将介绍使用GoldData半自动登录功能,来采集需要登录网站的数据。GoldData半自动登录功能,就是指通过脚本来执行登录,如果需要验证码或者其它内容需要人工输入时,可以通过收发邮件来执行登
2022-06-03 登录 输入 页面 数据 邮件 规则 脚本 管理 内容 网站 验证 程序 接下来 例子 单词 状态 站点 检查 复杂 人工 -
选择排序和插入排序(三十)
今天我们来看下排序,那么什么是排序呢?排序是计算机内部经常进行的一种操作,其目的是将一组"无序"的数据元素调整为"有序"的数据元素。那么排序的数学定义时什么呢?如下下来我们来看一个概念:排序的稳定性。
2022-06-03 排序 元素 关键 关键字 选择 数据 方法 结果 面的 代码 时间 示例 复杂 最小 有序 位置 对象 性能 稳定性 空间 -
spring4.0 之 @Configuration注解
@Configuration注解与spring-*.xml达到的目的是一样的。@Configuration是为了完全的取消xml配置文件而改用注解。下面将对其进行对比说明:beans的加载方式spri
2022-06-03 配置 注解 方式 将对 数据 数据库 文件 目的 参考 监控 -
JUnit框架学习----基于webdriver自动化测试脚本的完成
想完成一些脚本,来自动跑一些application的注册、文件上传的脚本。所以粗略学习一下JUnit1)直接新建一个JUnit case限时:@Test(timeout=200) timeout属性
2022-06-03 方法 测试 两个 对象 脚本 结果 资源 学习 实用 粗略 一次性 功能 单位 周期 地方 实例 属性 常用 开销 数据 -
大数据波分传输工程方案设计主要细节
大数据波分传输工程方案设计主要细节大数据时代已经有好几年了,波分传输被越来越多的人使用,甚至一些骨干网传输都已经离不开波分传输了。用的人多,规范也就很多,因此一些工程上的设计也困扰着越来越多的人,今天
2022-06-03 传输 业务 数据 光纤 工程 还是 中继 中继站 放大器 站点 设备 链路 实测 选型 方案 设计 不同 上下 分系统 容量